p Pesquisadores do Instituto de Pesquisa em Eletrônica e Telecomunicações (ETRI) na Coréia do Sul desenvolveram recentemente um modelo de rede neural que pode gerar sequências de gestos de fala conjunta. O modelo deles, treinado em 52 horas de palestras TED, produziu com sucesso gestos semelhantes aos humanos que combinavam com o conteúdo da fala. p "Os dispositivos inteligentes com os quais interagimos evoluíram de computadores pessoais para telefones celulares e alto-falantes inteligentes, "Youngwoo Yoon, um dos pesquisadores que realizou o estudo, disse TechXplore. “Achamos que os robôs sociais podem ser a próxima plataforma de interação. O movimento físico é uma das principais diferenças entre os robôs sociais e outros dispositivos inteligentes, abrindo novas possibilidades para emular comportamentos humanos ou animais, o que pode aumentar a intimidade. "

p Os gestos de co-voz podem melhorar muito a qualidade das interações entre humanos e robôs sociais. A maioria dos robôs existentes produz gestos usando métodos de associação de gestos de fala baseados em regras. Contudo, essas técnicas requerem esforços consideráveis, uma vez que se baseiam na experiência e no conhecimento humanos.

p "Queríamos gerar comportamentos sociais naturais e humanos, especialmente gestos com as mãos enquanto fala, "Yoon disse." Observar os outros é uma maneira muito natural de aprender um novo comportamento, então, propusemos um modelo de geração de gestos baseado em aprendizagem que foi treinado em um conjunto de dados de palestras TED. "

p O modelo idealizado por Yoon e seus colegas foi treinado em um conjunto de dados contendo 52 horas de imagens de vídeo das palestras do TED. Após o treinamento, o modelo pode gerar sequências de gestos semelhantes aos humanos e poses da parte superior do corpo para corresponder ao texto da fala escrita.

p "Projetar os comportamentos sociais dos robôs é difícil e demorado porque temos que considerar os contextos, Naturalidade, a estética do movimento, o espaço de controle dos robôs, e uma série de outros fatores, "Yoon explicou." Estudos recentes de aprendizado de ponta a ponta lançaram luz sobre o potencial das inteligências artificiais para gerar tais comportamentos complexos. Depois de ver aplicações de sucesso em direção autônoma e geração de movimento facial, decidimos aplicar o aprendizado de ponta a ponta à geração de gestos de fala conjunta. "

p O modelo de rede neural desenvolvido por Yoon e seus colegas gerou com sucesso vários tipos de gestos, incluindo icônico, metafórico, dêitico, e gestos de batida. Além disso, era capaz de gerar sequências contínuas de gestos para textos de fala de qualquer comprimento.

p Os pesquisadores descobriram que seu método superou os métodos básicos na criação de gestos que se assemelham aos de humanos. Em uma avaliação subjetiva, 46 pessoas recrutadas no Amazon Mechanical Turk sentiram que os gestos gerados por ele eram semelhantes aos humanos e correspondiam intimamente ao conteúdo da fala.

p "Descobrimos que os robôs podem aprender habilidades sociais, "Yoon disse." Para a geração de gestos em co-fala, o modelo treinado no conjunto de dados em grande escala é geral o suficiente, para que o robô possa fazer gestos parecidos com os humanos para qualquer fala. Achamos que esta abordagem pode ser aplicada a outras habilidades sociais, e também para personagens de videogames e mundos de realidade virtual. "

p O estudo realizado por Yoon e seus colegas destacou o potencial da aprendizagem ponta a ponta para a geração de gestos de fala conjunta. No futuro, pode ser usado para aprimorar as interações entre humanos e robôs e também pode inspirar pesquisas semelhantes, já que o conjunto de dados das palestras TED que eles usaram está disponível ao público. Os pesquisadores agora planejam levar seu estudo um passo à frente, gerando gestos personalizados para diferentes robôs.

p "Os robôs podem ter sua própria personalidade, como pessoas, "Yoon disse." Um método de geração de gestos personalizados pode garantir que diferentes robôs se expressem com diferentes estilos de gestos, de acordo com sua persona. " p © 2018 Science X Network