Extraction semi-automatique des mouvements du tractus vocal à partir de données sinaradiographiques

Semi-automatic extraction of vocal tract movements from cineradiographic data

• Auteur / Autrice : Julie Fontecave Jallon
• Direction : Frédéric Berthommier, Gang Feng
• Type : Thèse de doctorat
• Discipline(s) : Signal, image, parole, télécoms
• Date : Soutenance en 2006
• Etablissement(s) : Grenoble INPG

Mots clés

Mots clés contrôlés

Formants (phonétique)

Vélums

Lèvres de la bouche

Parole

Cinéradiographie

Mots clés libres

Extraction de contours

Mouvements du conduit vocal

Langue

Relation articulo-acoustique

Résumé

Nous proposons une technique pour faciliter l'extraction des contours du conduit vocal à partir de séquences cinéradiographiques de locuteurs. La méthode combine l'expertise humaine pour marquer manuellement un petit nombre d'images clefs et un traitement automatique de l'information vidéo (coefficient DCT basses fréquences des images). Nous estimons l'erreur de marquage. Pour chaque séquence les articulateurs (langue, lèvre, vélum,. . . ) sont traités indépendemment. Puis les contours obtenus sont combinés pour reconstruire le conduit vocal complet en mouvement. A partir de ces données, nous conduisons une analyse des relations articulatori-acoustiques basée sur deux approches concurrentes : un modèle associatif et un modèle acoustique. Ce dernier utilise les fonctions d'aire déterminées à partir d'une grille et mène à la synthèse de parole. Nous évaluons d'un point de vue phonétique la validité des contours extraits et des formants estimés

We propose a technique for facilitating the extraction of vocal tract contours from complete sequences of large existing cineradiographic databases. The method combines the human expertise required for marking a small number of key images and the automatic processing of the video data (low frequency DCT components of the image). We estimate the marking error. For each sequence, the articulators (tongue, velum, lips, etc. ) are processed independently. The acquired contours are then combined to reconstruct the movements of the entire vocal tract. Using these data, we carry out an analysis of articulatory-acoustic relationships, based on two competing approaches: an associatice model and an acoustic one. The latter uses the area functions calculated using a grid and leads to speech synthesis. We phonetically evaluated the validity of the extracted contours and the estimated formants