Função secreta fará teclado do Android entender língua de sinais
O Google está preparando uma nova função de acessibilidade para o Gboard, teclado virtual do Android, chamado Sign-to-Text (Sinal-para-Texto). Essa função foi encontrada em uma versão beta do aplicativo e deve usar a câmera do celular para interpretar gestos da língua de sinais em tempo real, transformando os movimentos em texto escrito.
A novidade segue em desenvolvimento interno e foi encontrada na versão beta 17.8.3.939743344-beta-arm64-v8a do Gboard por meio de uma análise no código do aplicativo. O recurso deve dividir o processamento entre o celular e a nuvem usando inteligência artificial, onde o smartphone fará a leitura do vídeo e enviará apenas os dados dos movimentos para a IA do Google.
A tecnologia por trás do recurso é o SignGemma, modelo de IA desenvolvido pelo Google DeepMind para interpretar sinais e apresentado pela empresa no ano passado. Além disso, os códigos encontrados também indicam que o sistema poderá orientar o usuário durante a captura, com avisos sobre pouca iluminação ou baixa visibilidade da câmera.
Algumas das principais características do Sign-to-Text incluem:
- Interpretação de gestos da língua de sinais em tempo real;
- Transformação dos movimentos em texto escrito;
- Divisão do processamento entre o celular e a nuvem usando inteligência artificial;
- Orientação do usuário durante a captura, com avisos sobre pouca iluminação ou baixa visibilidade da câmera.
Ainda não está confirmado quais línguas de sinais serão compatíveis no lançamento, mas a expectativa é que a Língua de Sinais Americana (ASL) seja uma das primeiras opções. No entanto, não há informações sobre suporte para variantes regionais, como a Língua de Sinais Britânica (BSL) ou outras línguas usadas em diferentes países.
Até o momento, o Google não divulgou uma previsão para liberar o Sign-to-Text no Gboard. A descoberta aconteceu por meio de uma APK Teardown, uma técnica que analisa o código de versões de teste de aplicativos para encontrar referências a funções que ainda não foram anunciadas.
Este conteúdo pode conter links de compra.
Fonte: link