talnarchives

Une archive numérique francophone des articles de recherche en Traitement Automatique de la Langue.

Vizart3D : Retour Articulatoire Visuel pour l’Aide à la Prononciation

Thomas Hueber, Atef Ben-Youssef, Pierre Badin, Gérard Bailly, Frédéric Eliséi

Résumé : L’objectif du système Vizart3D est de fournir à un locuteur, en temps réel, et de façon automatique, un retour visuel sur ses propres mouvements articulatoires. Les applications principales de ce système sont l’aide à l’apprentissage des langues étrangères et la rééducation orthophonique (correction phonétique). Le système Vizart3D est basé sur la tête parlante 3D développée au GIPSA-lab, qui laisse apparaître, en plus des lèvres, les articulateurs de la parole normalement cachés (comme la langue). Cette tête parlante est animée automatiquement à partir du signal audio de parole, à l’aide de techniques de conversion de voix et de régression acoustico-articulatoire par GMM.

Abstract : We describe a system of visual articulatory feedback, which aims to provide any speaker with a real feedback on his/her own articulation. Application areas are computerassisted pronunciation training (phonetic correction) for second-language learning and speech rehabilitation. This system, named Vizartd3D, is based on the 3D augmented talking head developed at GIPSA-lab, which is able to display all speech articulators including usually hidden ones like the tongue. In our approach, the talking head is animated automatically from the audio speech signal, using GMM-based voice conversion and acoustic-to-articulatory regression.

Mots clés : retour visuel, aide à la prononciation, GMM, temps réel, tête parlante

Keywords : visual feedback, pronunciation training, GMM, real-time, talking head