Vers une instrumentation collaborative et contextualisée dans des environnements pervasifs et ubiquitaires

Toward collaborative and contextualized online instrumentation in pervasive and ubiquitous environments

• Auteur / Autrice : Benjamin Jailly
• Direction : Jacques Fayolle, Marius Preda
• Type : Thèse de doctorat
• Discipline(s) : Informatique
• Date : Soutenance le 22/03/2013
• Etablissement(s) : Saint-Etienne
• Ecole(s) doctorale(s) : École doctorale Sciences Ingénierie Santé (Saint-Etienne)
• Partenaire(s) de recherche : Laboratoire : Laboratoire Telecom Claude Chappe
• Jury : Président / Présidente : Alain Mille
• Jury : Examinateurs / Examinatrices : Marius Preda, Christophe Gravier, Giovanni Cordara, Jean-Claude Dufourd, Serge Garlatti

Mots clés

Mots clés contrôlés

Traitement d'images -- Techniques numériques

Formation en ligne

Web sémantique

Mots clés libres

Ingénierie en ligne

Apprentissage en ligne

Multimédia

Web sémantique

Collaboration

Maintenance industrielle

Online engineering

E-Learning

Multimedia

Semantic web

Rules engines

Collaboration

Industrial maintenance

Résumé

Le principal objectif de cette thèse est de contrôler des objets à deux dimensions dans des scènes distantes, en utilisant des flux multimédia interactifs et contextualisés. Pour le cas d’usage de ces travaux, ces objets sont des instruments de mesures de physique. Une caméra IP est placée devant l’instrument à contrôler. Le flux généré est décodé. L’instrument est reconnu par des méthodes de traitement d’images basées sur les points caractéristiques locaux. Un flux multimédia interactif basé sur le standard « MPEG-4 binary format » construit et envoyé aux utilisateurs distants. Pour supporter la collaboration, nous proposons un mécanisme de notifications ainsi que des outils de communication pour reproduire la « sensation de groupe ». Cela permet aux utilisateurs d’appréhender les interactions entre eux. Cette approche nous a conduit à enrichir le standard MPEG-BIFS avec le protocole websocket. L’utilisation du web sémantique nous permet d’encoder des séquences d’interaction prévues avec l’instrument. Le système permet également de proposer l’adaptation à la volée du flux multimédia. L’implémentation d’un prototype est illustré dans la contribution à deux projets open source : Ocelot (http://ocelot.ow2.org) et GPAC (http://gpac.wp.institut-telecom.fr)

The main objective of this thesis is to propose the control of 2D object in a remote scene, using a contextualized, collaborative and interactive multimedia. The 2D objects are mainly electronic devices. For the use case in this work, an IP camera is placed in front of the device to control. The generated stream is decoded. The front of the device is identified using image-processing techniques based on natural feature points. Then, an interactive multimedia based on the MPEG-4 binary format for scenes standard is built and broadcasted to the remote users. In order to handle collaboration, we propose a notification mechanism and communication tools to reproduce the “group awareness”, which allows users to apprehend interactions between them. This approach leads us to enrich the MPEG-4 BIFS with the websocket protocol. The use of the semantic web allows us to encode expected sequences of use of the interactive multimedia. Eventually the system provides on the fly interaction adaptations to the end-user. The implementation of a proof of concept is illustrated in contributions to two open source projects : Ocelot (http://ocelot.ow2.org) and GPAC (http://gpac.wp.institut-telecom.fr)