Dissertação

Synthesizing Signing Avatars from Annotated Language Corpus EVALUATED

Ao longo do tempo tem crescido o interesse em avatares gestuantes. O anonimato e flexibilidade devolvidas na criação destas animações é um forte factor para este crescimento. Contudo a animação destes agentes virtuais pode ser uma tarefa complexa para utilizadores não especialistas na área de animação. Nesta dissertação, apresentamos uma ferramenta para linguistas com a qual pretendemos alavancar o seu conhecimento no domínio em conjunto com o seu corpus anotado para a animação de avatares gestuantes. Este corpus contém descrição detalhada de gestos em língua gestual Portuguesa através de símbolos, mais especificamente HamNoSys. Contudo, HamNoSys não é legível por um computador, o que requer a conversão para a sua componente XML correspondente, SiGML, que vai ser usada no processo de animação. Apesar de a nossa ferramenta ter sido desenvolvida no âmbito de língua gestual Portuguesa, pode ser usada com qualquer outra língua gestual. Realizámos um estudo com sete pessoas que usam língua gestual Portuguesa para avaliar o desempenho da nossa ferramenta. Os resultados mostraram que animação sintéctica de avatares gestuantes ainda é bastante robótica e pouco natural, o que leva a dificuldades na compreensão do conteúdo gestuado. Para além disso, a correcta velocidade e o uso de expressões faciais influencia a compreensão destes agentes virtuais. Por fim, descrevemos as nossas conquistas, as limitações da nossa ferramenta e sugestões para trabalho futuro.
Avatares gestuantes, HamNoSys; SiGML, Línguas gestuais, Animação sintética

junho 19, 2020, 9:0

Publicação

Obra sujeita a Direitos de Autor

Orientação

ORIENTADOR

Hugo Miguel Aleixo Albuquerque Nicolau

Departamento de Engenharia Informática (DEI)

Professor Auxiliar

ORIENTADOR

Maria Luísa Torres Ribeiro Marques da Silva Coheur

Departamento de Engenharia Informática (DEI)

Professor Associado