Fusion multimodale pour les systèmes d’interaction

Multimodal fusion for Interaction Systems

• Auteur / Autrice : Ahmad Wehbi
• Direction : Amar Ramdane-Cherif, Roch H. Glitho
• Type : Thèse de doctorat
• Discipline(s) : Informatique
• Date : Soutenance en 2013
• Etablissement(s) : Versailles-St Quentin en Yvelines en cotutelle avec Université du Québec. École de technologie supérieure

Mots clés

Mots clés contrôlés

Mathématiques -- Aspect cognitif

Ontologies (informatique)

Interaction humain-machine

Mots clés libres

Réseau de Pétri

Résumé

Les chercheurs en informatique et en génie informatique consacrent une partie importante de leurs efforts sur la communication et l'interaction entre l'homme et la machine. En effet, avec l'avènement du traitement multimodal et du multimédia en temps réel, l'ordinateur n'est plus considéré seulement comme un outil de calcul, mais comme une machine de traitement, de communication, de collection et de contrôle, une machine qui accompagne, aide et favorise de nombreuses activités dans la vie quotidienne. Notre projet de recherche permettra une meilleure compréhension de la fusion et de l'interaction multimodale, par la construction d'un moteur de fusion en utilisant des technologies de Web sémantique. L'objectif est de développer un système expert pour l'interaction multimodale personne-machine qui mènera à la conception d'un outil de surveillance pour personnes âgées, afin de leurs assurer une aide et une confiance en soi, à domicile comme à l'extérieur.

Researchers in computer science and computer engineering devote now a significant part of their efforts in communication and interaction between human and machine. Indeed, with the advent of real-time multimodal and multimedia processing, computer is no longer seen only as a calculation tool, but as a machine of communication processing, collection and control, a machine that accompanies, assists or promotes many activities in daily life. This research will allow a better understanding of the multimodal fusion and interaction, by the construction of a fusion engine using technologies of semantic web domain. The aim is to develop an expert system for multimodal human-machine interaction that will lead to design a monitoring tool for seniors and handicaps to ensure their support and confidence, at home or outside.