Recherche Avancée

Thèse soutenue

Conception et évaluation d'un système de suivi automatique des gestes labiaux en parole

FR
Auteur / Autrice : Lionel Reveret
Direction : Jean-Marc Dolmazon
Type : Thèse de doctorat
Discipline(s) : Microélectronique
Date : Soutenance en 1999
Etablissement(s) : Grenoble INPG

Résumé

FR

Cette these presente un systeme de suivi automatique des gestes labiaux a partir d'une sequence video d'un locuteur. Le systeme combine une analyse ascendante et descendante de la forme des levres. Une premiere etape d'analyse chromatique, basee sur un apprentissage statistique, fournit une image en niveaux de gris ou le contraste entre levres et peau est rehausse. Parallelement, un modele lineaire 3d des gestes labiaux est appris pour un locuteur a partir de formes cles phonetiquement pertinentes. Le modele est alors synthetise et projete sur l'image imposant a priori les caracteristiques de la forme des levres. Il est adapte sur l'image rehaussee des levres par optimisation de ses parametres de controle. Ce systeme combine ainsi de maniere hybride la precision de l'analyse chromatique et la robustesse imposee par le modele. Ce systeme est evalue sous divers aspects : ses capacites a s'adapter a la morphologie labiale et aux strategies articulatoire de plusieurs locuteurs, la qualite des mesures geometriques delivrees et sa rapidite d'analyse. Le systeme complet a ete implante et teste en langage c sur une station de travail monoprocesseur. L'execution est evaluee en nombre d'instructions a partir du code machine genere par le compilateur du systeme de la station. Ces resultats ont permis d'identifier les zones critiques de traitement pour lesquels des optimisations sont proposees. Compte tenu de ces optimisations, il apparait que la cadence de 50 images par seconde est alors accessible sans avoir recours a une implantation materielle specialisee.