Clones 3D pour communication audio et vidéo

• Auteur / Autrice : Frédéric Elisei
• Direction : Jacques Lemordant
• Type : Thèse de doctorat
• Discipline(s) : Informatique
• Date : Soutenance en 1999
• Etablissement(s) : Grenoble 1
• Partenaire(s) de recherche : Laboratoire : Laboratoire d’informatique graphique, vision et robotique (Grenoble1995-2007)
• Jury : Président / Présidente : Claude Puech
• Jury : Examinateurs / Examinatrices : Olivier Avaro, André Gilloire
• Jury : Rapporteurs / Rapporteuses : Bernard Péroche, Peter Sander

Mots clés

Mots clés libres

Sciences et techniques

Informatique, automatique théorique, systèmes

Chimie

Chimie organique

Infographie

Vidéoconférence

Téléconférence

Animation par ordinateur

Faciès

Réalité virtuelle

Image tridimensionnelle

Clone

Snhc

Computer graphics

Videoconference

Teleconference

Computer animation

Facies

Virtual reality

Tridimensional image

Clone

Résumé

Pour la téléconférence, on peut remplacer l'image des correspondants distants par des modèles 3D animés de leurs visages. En plus de taux de compression avantageux, cette approche offre les libertés du virtuel : on peut par exemple composer à l'écran l'impression d'un lieu unique, virtuel, où débattent les représentants 3D. Cette thèse présente un algorithme de rendu spécifique, applicable à des clones 3D photo-réalistes de visages. En restreignant les angles de vue autorisés, il permet un rendu simple et rapide, même avec des ordinateurs peu puissants ou sur des machines virtuelles. On propose aussi une architecture de régie automatique, reliée à des caméras virtuelles qui réagissent aux interventions des participants et en proposent une image synthétique. En alternant plusieurs vues (éventuellement partielles) de la scène, on autorise plus de participants simultanés, sans compromettre la qualité de l'image proposée ni l'intelligibilité du débat restitué. Automatique, cette approche libère l'utilisateur du système, qui peut se concentrer sur un débat rendu plus attractif, à la fois comme spectateur et comme participant. Enfin, on introduit une solution hybride (3D et vidéo) pour animer les clones des visages. En incrustant à la surface d'un clone statique l'image des yeux, des sourcils et de la bouche vues par une caméra, on laisse aux spectateurs la responsabilité d'interpréter les expressions originales, dans toute leur dimension vidéo (forte résolution spatiale et temporelle). Cette thèse rend aussi compte de la réalisation d'un prototype de communication qui intègre les éléments précédents. À cette occasion, l'utilisation d'un environnement sonore qui intègre les interventions distantes et leur localisation (dans ou hors de l'image) est discutée, avec plusieurs expérimentations sur l'association entre l'image et le son spatialisé. Temps-réel, le prototype permet de juger de la qualité de la communication sonore et de l'apport de l'empathie visuelle