Thèse soutenue

Conception et réalisation d'une interface de dialogue personne-machine multimodale
FR  |  
EN
Accès à la thèse
Auteur / Autrice : Marie-Luce Bourguet
Direction : Jean Caelen
Type : Thèse de doctorat
Discipline(s) : Signal, image, parole
Date : Soutenance en 1992
Etablissement(s) : Grenoble INPG
Partenaire(s) de recherche : Laboratoire : Institut de la communication parlée (Grenoble1983-2007)

Résumé

FR

En meme temps qu'augmente la complexite des systemes informatises, une croissance comparable des capacites d'echange entre ces systemes et leurs utilisateurs doit s'operer. L'exploration de voies nouvelles doit etre entreprise pour faciliter la communication entre l'homme et l'ordinateur, la communication multimodale, qui donne le cadre de notre etude, est l'une d'entre elles. Idealement un systeme multimodal doit permettre a l'usager d'utiliser le ou les modes d'interaction les plus avantageux et les mieux adaptes a ses preferences, a son degre d'habilete et a la nature de la tache a accomplir. Pour cela, un systeme multimodal doit disposer des connaissances propres a chaque modalite de communication et pouvoir faire le lien entre les informations qui contribuent au sens d'un message. En effet, resoudre un probleme de communication multimodale ne consiste pas en la simple juxtaposition des differentes modalites mais plutot en leur cooperation au cours d'un meme echange avec la machine. Des l'instant ou un systeme a pour mission d'accepter les modalites naturelles de la communication, il est necessaire d'identifier le langage employe par l'utilisateur et de determiner les conditions qui le conduisent au choix d'une combinaison de modalites particulieres. Pour cela nous avons choisi d'adopter une approche experimentale en limitant notre champ d'etude a l'association de la parole avec des gestes de designation en entree d'un systeme graphique. A travers la conception et la realisation de deux interfaces de dialogue multimodales, nous exposons plus particulierement les problemes de la co-reference entre les modes, du parallelisme des media, de la fusion des informations et du controle d'un dialogue multimodal dans le cadre d'une application determinee