Mise en oeuvre et évaluation d'interactions multimodales orientées communication appliquées au déplacement d'objets graphiques 3D

• Auteur / Autrice : Charles Henri Alexandre Tison
• Direction : Noëlle Carbonell, Dominique L. Scapin
• Type : Thèse de doctorat
• Discipline(s) : Informatique
• Date : Soutenance en 2004
• Etablissement(s) : Nancy 1
• Partenaire(s) de recherche : Autre partenaire : Université Henri Poincaré Nancy 1. Faculté des sciences et techniques

Mots clés

Mots clés contrôlés

Systèmes homme-machine

Réalité augmentée

Réalité virtuelle

Résumé

L'expérience décrite dans cette thèse adresse l'applicabilité d'une combinaison de modalités pour l'interaction avec les objets 3D d'un environnement virtuel afin de leur appliquer des repositionnements géométriques. L'approche '' top-down '' adoptée s'inspire des modalités observables au sein des expressions de commande d'utilisateurs au cours d'activités '' d'inspection de prototype '' du domaine de la conception vestimentaire. A partir d'un ensemble sélectionné de tâches, l'examen de combinaisons tâches vs modalités d'entrée permet d'établir des scénarios d'expressions de commande homogènes. La définition de profils de dispositifs conduit ensuite à la construction d'un système interactif sur lequel tester ces affectations de modalités avec des utilisateurs lors d'une expérience de type '' Magicien d'Oz ''. L'étude de la variabilité d'expression permet alors de poser les bases d'une grammaire d'interaction. Les résultats obtenus semblent confirmer la pertinence de ce style d'interaction.

The experiment described in this thesis concerns the applicability of a modalities combination in order to relocate 3D objects in a virtual reactive environment. The adopted ''top-down'' approach is initiated through the observation of command expressions modalities that take place during ''prototype inspection'' activities in the field of cloth design. A selection of a reduced set of user tasks, (3D objects relocation), helps investigate tasks vs input modalities combinations in order to determine an homogeneous set of low level interaction scenarios. The profile definition of relevant devices brings to build, afterwards, a minimal interactive system organised so as to test, with users, the relevancy of such a task modality allocation through an adapted version of an experiment known as ''Wizard of Oz''. An evaluation of speech variability helps simultaneously to precise the grammar to implement. The results seem to confirm the relevancy of such an interaction style.