O Google está desenvolvendo uma nova função de acessibilidade para o Gboard, o teclado virtual do Android. Essa novidade, chamada Sign-to-Text (Sinal-para-Texto), foi descoberta em uma versão beta do aplicativo e promete usar a câmera do celular para identificar gestos da língua de sinais em tempo real, convertendo-os em texto escrito.
A ferramenta foi identificada na versão beta 17.8.3.939743344-beta-arm64-v8a do Gboard, por meio de uma análise de código. O recurso deve utilizar inteligência artificial e dividir o processamento entre o celular e a nuvem. Assim, o smartphone realizará a leitura do vídeo e enviará apenas os dados do movimento, sem compartilhar as imagens completas do usuário.
A tecnologia por trás do Sign-to-Text é o SignGemma, um modelo de IA desenvolvido pelo Google DeepMind, que foi apresentado no ano passado e é capaz de interpretar sinais. Além disso, os códigos encontrados indicam que o sistema poderá fornecer orientações ao usuário durante a captura, alertando sobre condições de pouca iluminação ou baixa visibilidade da câmera.
Ainda não há confirmação sobre quais línguas de sinais serão compatíveis com o lançamento. A expectativa é que a Língua de Sinais Americana (ASL) esteja entre as primeiras opções, mas informações sobre suporte a variantes regionais, como a Língua de Sinais Britânica (BSL) ou outras línguas utilizadas em diferentes países, ainda não foram divulgadas.
Até o momento, o Google não anunciou uma previsão para a liberação do Sign-to-Text no Gboard. A descoberta foi feita através de uma técnica chamada APK Teardown, que analisa o código de versões de teste de aplicativos para identificar referências a funções ainda não anunciadas.
Esse tipo de análise pode revelar recursos em desenvolvimento, incluindo textos, imagens e trechos de código relacionados a ferramentas futuras. Contudo, a presença desses elementos no aplicativo não garante que a função será lançada oficialmente ou que chegará ao público da mesma forma que foi encontrada na versão beta.
Se você se interessou por essa novidade, talvez também queira conferir 8 recursos do Gboard que você precisa conhecer.
