Crédito:Paul Brennan / domínio público
O reconhecimento por máquina de linguagens de sinais está nos planos graças ao trabalho de uma equipe na Índia que está usando um controlador de identificação de movimento Microsoft Kinect. Escrevendo no International Journal of Computational Vision and Robotics, a equipe explica como seu sistema usa apenas 11 das 20 juntas monitoradas por um Kinect e pode extrair recursos novos por quadro, com base em distâncias, ângulos, e velocidade envolvendo as articulações da parte superior do corpo. A equipe relata como o algoritmo reconhece 35 gestos de sinais indianos em tempo real com quase 90 por cento de precisão.
Jayesh Gangrade e Jyoti Bharti do Instituto Nacional de Tecnologia Maunala Azad, em Bhopal, Índia, explicar quantas pessoas com um déficit auditivo significativo utilizam a comunicação baseada em gestos, movimentos de mão, e a orientação junto com a expressão facial são usadas dinamicamente para transmitir o significado de uma forma tão matizada e expressiva quanto qualquer outro dialeto de linguagem. O desenvolvimento de uma tecnologia que também pudesse ser competente em línguas de sinais daria àqueles que contam com essa forma de comunicação uma nova abordagem para interagir com máquinas e computadores. Câmera, luvas digitais, e outros gadgets foram investigados anteriormente neste contexto. Contudo, o potencial de um controlador de videogame barato, como o Kinect, que pode rastrear os movimentos do corpo pode facilitar isso rapidamente.
A equipe aponta que sua abordagem não requer marcadores nem roupas especiais com objetos de rastreamento, como era necessário com alguns dos esforços anteriores nesta área. "Experimentamos um conjunto mínimo de recursos para distinguir entre os sinais fornecidos com precisões práticas, ", escreve a equipe. Eles agora estão testando o sensor Kinect v2, que é mais preciso e pode levar a pesquisa para mais perto de seu objetivo final.