Des références dans le dialogue homme-machine multimodal. Une approche adaptée du formalisme des graphes conceptuels

• Auteur / Autrice : Frédéric Azémard
• Direction : Jean-Pierre Macchion
• Type : Thèse de doctorat
• Discipline(s) : Informatique
• Date : Soutenance en 1995
• Etablissement(s) : Toulouse 3

Mots clés

Mots clés contrôlés

Systèmes homme-machine

Théorie des graphes

Modèles mathématiques

Énonciation (linguistique)

Résumé

Le travail, situe dans le domaine des interfaces homme-ordinateur, porte sur le developpement de l'aspect comprehension a l'intersection de quatre axes de recherche: le dialogue, le langage naturel, la multimodalite et les representations cognitives. Comprendre consiste a construire et completer la representation d'un enonce. Cette derniere est un graphe dit de comprehension, dont la forme s'inspire des graphes conceptuel de sowa. L'etude, limitee au dialogue oriente par l'action, a pour cadre experimental la realisation d'une interface multimodale associant langage et graphisme. Une premiere contribution, engageant l'aspect multimodal, montre que la fusion des evenements doit etre realisee pendant l'interpretation, a partir d'une representation conceptuelle, et sur les bases d'indices linguistiques. Puis, concernant le langage et les representations cognitives, une seconde contribution consiste en une adaptation de la theorie des graphes conceptuels. Aux mots du langage sont associees des formes stables par categories syntaxiques. Le graphe de comprehension est ensuite le resultat de l'enrichissement de la representation conceptuelle du verbe de l'enonce. L'elaboration de ce graphe s'opere au sein d'un analyseur syntaxico-semantique grace a l'operation de jointure. Cette operation est dirigee par la syntaxe et repose sur des traitements generalises qui portent sur la forme des graphes et non sur leur contenu. Lorsqu'une jointure est irrealisable, le dialogue est relance sur la base de diagnostics d'echecs. Enfin, la derniere contribution est un processus d'interpretation qui s'appuie sur un ensemble de mecanismes participant a la resolution d'ambiguites referentielles. Il se distingue des methodes existantes car la recherche des referents a plusieurs orientations en fonction des marqueurs linguistiques et selon les habitudes referentielles observees chez l'utilisateur