Controle de Apps pelo Gemini: O Futuro da IA do Google

O Google está desenvolvendo um recurso chamado automação de tela, identificado internamente como “Bonobo”, que permitirá que a IA Gemini “veja” o que está na tela do celular e interaja com a interface do app em tempo real. Isso permitirá que o Gemini execute ações passo a passo conforme o objetivo definido pelo usuário, como realizar solicitações de carros de transporte, pedidos de comida e compras online de forma autônoma.

Com o controle de apps pelo Gemini, o usuário poderá acompanhar as ações realizadas pela IA em áreas como “Minhas Compras” ou “Meus Pedidos”. No entanto, é importante notar que o próprio Google deixa claro que é necessário supervisionar constantemente as ações automatizadas, pois o Gemini pode cometer erros e a empresa não se responsabiliza por eles.

Segurança e Privacidade

A automação de tela com Gemini também levanta questões sobre segurança e privacidade. Caso a opção “Manter Atividade” esteja ativada, capturas de tela das interações do Gemini com os aplicativos podem ser enviadas para revisores humanos treinados do Google, com o objetivo de melhorar o serviço. Além disso, a empresa recomenda que a automação não seja utilizada para inserir senhas, dados de login, informações bancárias ou lidar com situações de emergência.

O usuário também poderá interromper a automação a qualquer momento e assumir o controle manual do dispositivo. Além disso, quem preferir pode continuar usando o Gemini apenas por meio de apps conectados.

O que é o Projeto Astra?

O Projeto Astra é a iniciativa do Google para desenvolver um assistente de IA universal, multimodal e agêntico, que consegue ir além das respostas em texto e agir de forma proativa para ajudar o usuário no dia a dia. O Astra fará com que o Gemini entenda contextos em tempo real, incluindo o que aparece na tela do celular ou na câmera, e tome decisões para executar tarefas.

Algumas das principais características do controle de apps pelo Gemini incluem:

• Automação de tela: o Gemini pode “ver” o que está na tela do celular e interagir com a interface do app em tempo real.
• Execução de ações: o Gemini pode realizar solicitações de carros de transporte, pedidos de comida e compras online de forma autônoma.
• Supervisão: é necessário supervisionar constantemente as ações automatizadas, pois o Gemini pode cometer erros.
• Segurança e privacidade: a automação de tela com Gemini levanta questões sobre segurança e privacidade.

Este conteúdo pode conter links de compra.

Fonte: link