Apple desenvolve recursos de reconhecimento na tela para Siri

Apple desenvolve recursos de reconhecimento na tela para Siri

Novidades no iOS 18.2 Beta 2: recursos e melhorias da Siri

O lançamento do iOS 18.2 beta 2 começou na segunda-feira para desenvolvedores, introduzindo uma série de recursos interessantes com o objetivo de aprimorar a experiência do usuário. Notavelmente, esta atualização inclui a integração do ChatGPT no aplicativo Configurações, uma nova opção “Criar imagem” no Notes, uma funcionalidade Find My atualizada e emblemas de notificação atualizados no aplicativo Mail, entre outras melhorias. Uma versão estável desta atualização deve estar disponível no mês que vem.

Novos recursos de percepção contextual da Siri

Além do conjunto de recursos mais amplo, o iOS 18.2 beta está abrindo caminho para avanços significativos na funcionalidade da Siri. A Apple está atualmente desenvolvendo um recurso sofisticado que aprimora a percepção contextual da Siri, como parte de seu conjunto Apple Intelligence. Novas APIs foram fornecidas aos desenvolvedores, permitindo que a Siri acesse o conteúdo na tela de seus aplicativos.

Como a Siri pode interagir com o conteúdo na tela

De acordo com a documentação da Apple , quando os usuários perguntam sobre o conteúdo na tela ou buscam executar uma ação relacionada a ele, a Siri e a Apple Intelligence estão equipadas para recuperar esse conteúdo para fornecer respostas apropriadas. Por exemplo, se um usuário estiver visualizando um documento, ele pode simplesmente perguntar: “Ei, Siri, sobre o que é esse documento?” e ​​receber um resumo detalhado.

Integrando ChatGPT com Siri

A atualização beta em andamento do iOS 18.2 também apresenta integração aprimorada do ChatGPT com a Siri, o que permite que os usuários perguntem sobre vários formatos, como imagens, vídeos, PDFs e apresentações. Por exemplo, ao perguntar à Siri “Sobre o que é este documento?”, a Siri pode capturar as informações por meio de uma captura de tela, passá-la para o ChatGPT e fornecer ao usuário os detalhes necessários.

Características distintivas: ChatGPT vs. Consciência na tela

No entanto, conforme destacado pelo MacRumors , é crucial observar que a integração com o ChatGPT não equivale aos recursos completos de reconhecimento na tela descritos na documentação da Apple. Esse recurso foi projetado para que a Siri processe, analise e interaja de forma abrangente com o conteúdo visível na tela. Por exemplo, um usuário que recebe uma mensagem de texto com um número de telefone pode pedir à Siri para adicionar esse número diretamente aos seus contatos.

Disponibilidade e Perspectivas Futuras

Curiosamente, o recurso avançado de reconhecimento na tela ainda não está incluído no atual iOS 18.2 beta 2. Atualmente, o ChatGPT está limitado ao acesso a capturas de tela, sugerindo que uma experiência Siri mais integrada pode chegar com atualizações futuras, possivelmente não aparecendo até o ano que vem.

Para mais informações e imagens, visite a fonte original aqui .

Deixe um comentário

O seu endereço de e-mail não será publicado. Campos obrigatórios são marcados com *