Pesquisadores na Coreia do Sul desenvolveram um sistema sofisticado que usa sete anéis inteligentes para ler gestos manuais e traduzi-los em texto na linguagem de sinais americana e na linguagem de sinais internacional. O objetivo é facilitar a comunicação entre signatários e não signatários, sem a necessidade de um intérprete humano separado.
De acordo com o estudoNum relatório publicado sexta-feira na revista Science Advances, o sistema reconheceu de forma confiável 100 palavras ASL e ISL num teste. Também funcionou bem com usuários que nunca tinham visto o sistema antes e não exigiu recalibração para cada pessoa. Quando o sistema detecta palavras em ordem, ele pode produzir traduções de frases desiguais sem treinamento gramatical adicional.
ASL e ISL são linguagens cotidianas mais de 72 milhões Ele era surdo e com deficiência auditiva. Mas a maioria das pessoas que ouvem não conhece nenhuma palavra nessas línguas ou não tem um conhecimento básico. Essa lacuna torna certas tarefas, como fazer um pedido em um restaurante ou pedir ajuda, muito mais difíceis.
Conceito de como os anéis funcionam no mundo.
Os intérpretes de protótipos de linguagem existentes muitas vezes dependem de luvas grossas que podem distrair ou dificultar o movimento natural das mãos ou mascarar o desconforto que define a adaptação real das palavras. As tecnologias baseadas em câmeras podem funcionar bem em ambientes controlados, mas muitas vezes são limitadas a locais onde uma câmera pode ser instalada com uma linha de visão clara, escreveram os pesquisadores.
Para resolver esses problemas, os pesquisadores projetaram anéis de detecção para cada dedo que podem capturar um movimento e uma posição específicos do dedo enquanto a mão de entrada se move naturalmente. Os anéis também podem detectar sinais que envolvem movimento, como as palavras “dança” e “voar” e “sol” e sinais que ainda estão retidos, como “eu” e “você”.
“Esses desenvolvimentos sugerem que (os dispositivos podem implementar) sistemas de transporte público sem barreiras para usuários invisíveis e interfaces sem ajuda todos os dias”, escreveram os autores no estudo.
Os autores são afiliados à Universidade Yonsei, à Universidade Hankuk de Estudos Estrangeiros e ao Instituto Coreano de Ciência e Tecnologia, entre outros. Embora a tecnologia ainda seja experimental, os autores escreveram que a tecnologia tem potencial para aliviar problemas de comunicação. O sistema subjacente também poderia ser usado para controlar compras para outros sistemas, como realidade virtual ou aumentada.
“A tradução de linguagem de sinais, anel, tipo, sem fio e arquitetura modular (intérprete de linguagem de sinais tipo anel conectado sem fio) também pode ser estendida a outras aplicações orientadas por gestos, como controle de realidade virtual ou aumentada, interfaces de máquinas sem toque ou a reabilitação de grandes sistemas onde o rastreamento preciso do movimento da mão é essencial”, escreveram eles.
