p No diagrama acima, o lado esquerdo mostra a posição e direção do movimento dos quatro pontos rastreados no estudo. As sombras perto da sobrancelha / maxilar / nariz indicam movimento. À direita está um resumo visual dos diferentes recursos extraídos dos quatro pontos-chave rastreados. POI =Posição de interesse. Crédito:Universidade do Kansas
p Mesmo que eles não sejam necessários para fazer os sons específicos, partes do rosto dos falantes do mandarim - suas sobrancelhas e lábios - imitam o tom crescente e decrescente que distingue uma palavra escrita exatamente igual da outra. p Em outras palavras, as sobrancelhas dos alto-falantes seguem os sons que sua garganta está fazendo.
p Esta é a conclusão de um novo estudo co-escrito por Allard Jongman e Joan Sereno, Professores de linguística da Universidade de Kansas.
p Eles dizem que isso implica na necessidade de estudar se esses movimentos faciais sutis ajudam os ouvintes a perceber o que os falantes estão tentando transmitir.
p Junto com os colegas universitários canadenses Saurabh Garg, Ghassan Hamarneh e Yue Wang, Jongman e Sereno escreveram "A análise da visão por computador revela que os movimentos faciais feitos durante a produção do tom do mandarim se alinham com as trajetórias do tom" na edição de outubro do jornal
Comunicação por Fala .
p Dizem que é a primeira vez que a associação desses movimentos faciais com o tom vocal é identificada e quantificada.
p Em uma entrevista recente, Jongman deu o exemplo da palavra chinesa que seria foneticamente soletrada "ma" em inglês. Como acontece com muitos, se não a maioria, Palavras em mandarim, pode ser pronunciado de uma das quatro maneiras:nível, Aumentar, mergulhando ou caindo. Dependendo, então, após a entonação, a palavra pode significar "mãe, "" cânhamo, "" cavalo "ou" ralhar ".
p "Você tem que entender isso direito, "Jongman disse." Caso contrário, você está chamando sua mãe de cavalo. "
p "Existem muitos idiomas que têm esses tipos de tom associados a palavras diferentes, "Disse Sereno.
p "A maioria dos falantes no mundo são falantes de línguas tonais, "Jongman disse." E tudo isso vem de variações na taxa de vibração das pregas vocais. "
p Apontando para sua garganta, Jongman disse, "Em tom alto, as pregas vocais aqui estão vibrando em um ritmo muito rápido. E quando você tem um tom baixo, eles vibram muito mais lentamente. Então, tudo vem da ação aqui embaixo. "
p "Tecnicamente, "Sereno disse, apontando para o rosto dela, "não deveria haver nada aqui que diferencie 'ma' com um tom alto de 'ma' com um tom decrescente."
p E ainda, o estudo deles descobriu, há. As estruturas faciais das pessoas imitam as entonações de subida / descida que aplicam às palavras.
p "Algumas dessas associações entre movimento facial e entonação ou tom foram provisoriamente estabelecidas, "Jongman disse." Demos um passo adiante e dissemos:"OK, vamos olhar sistematicamente para isso. ""
p Os pesquisadores gravaram os rostos dos falantes de chinês enquanto falavam, em seguida, submeteu os arquivos à análise por computador para determinar a relação entre a entonação e o movimento facial. Jongman disse que é uma grande melhoria em relação aos métodos anteriores.
p "No passado, " ele disse, "as pessoas usaram o que é chamado de análise opto-track. Você cola alguns sensores emissores de luz no rosto, e então você rastreia o movimento desses sensores. E às vezes você até cola coisas nos lábios. Então você está sentado lá com esses sensores, e você é solicitado a falar. Quero dizer, quão natural é isso? Isso limita o que as pessoas fariam em circunstâncias normais. Número dois, você tem que ter uma ideia preconcebida de quais serão as regiões importantes na face, porque você não pode fazer uma leitura de nada que não tenha colocado um sensor.
p "Essa é uma grande vantagem de nossa abordagem. Definimos esses dois recursos agora. Mas se mais tarde algum outro grupo descobrir que o lóbulo da sua orelha é realmente importante, podemos voltar às nossas gravações e analisar isso. "
p Agora que eles provaram que os rostos dos falantes de mandarim acompanham sua entonação, Jongman e Sereno disseram que o próximo passo será determinar até que ponto essas dicas visuais ajudam o ouvinte - seu "significado linguístico".
p "Vamos gerar um rosto por computador e, em seguida, manipular os recursos que acabamos de encontrar para ver se isso faz diferença, "Jongman disse." Os ouvintes respondem a isso? "
p Assim como as pessoas com deficiência auditiva podem aprender a ler os lábios, as pessoas podem se beneficiar das dicas faciais mais sutis, o novo estudo descobriu.
p "Se você é deficiente auditivo, e podemos talvez exagerar um pouco algumas dessas pistas ou ensinar as pessoas a exagerá-las, ou também no aprendizado de línguas fazer isso, isso pode ajudar muito, "Jongman disse.
p Sereno disse que pode imaginar um cenário em que um aluno de uma língua é ajudado ao observar as pistas faciais de falantes nativos.
p "A manipulação visual pode ajudar a identificar isso, "ela disse." Então, quando eles entrarem em uma situação natural, quando talvez haja menos exagero dessas pistas, eles ainda são capazes de identificá-los muito melhor. "