Titre : Clones parlants 3D video-realistes : application à l'analyse de messages audiovisuels

auteur(s) : M. Odisio, F. Elisei, G. Bailly, P. Badin

Laboratoire(s) : Institut de la communication parlee (ICP)

Résumé :

Cet article présente un paradigme de modélisation linéaire 3D pour le visage, qui capture l'activité de parole d'une personne donnée, avec seulement 6 paramètres. Construit par analyse statistique de données réelles collectées sur le visage du locuteur cible, un tel modèle capture la spécificité de son articulation. Pour la synthèse, un mélange de textures permet de reproduire de manière vidéo-réaliste la présence ou l'apparition de détails fins, comme les plis faciaux. Pour estimer automatiquement les mouvements faciaux à partir d'images d'un locuteur, son clone est utilisé dans une boucle d'analyse par la synthèse. Nous présentons une évaluation de ce paradigme d'analyse et son application dans des conditions de type téléconférence virtuelle.

Liste de mots-clefs :

Tête parlante, suivi automatique de modèle articulé, codage de la parole audiovisuelle