Contributions à la synthèse de nouvelles vues à partir de photographies

Contributions to the novel view synthesis from photographs

• Auteur / Autrice : Frédéric Abad
• Direction : Olivier Faugeras
• Type : Thèse de doctorat
• Discipline(s) : Informatique
• Date : Soutenance en 2003
• Etablissement(s) : Nice
• Ecole(s) doctorale(s) : École doctorale Sciences et technologies de l'information et de la communication (Nice ; 1992-....)

Mots clés

Mots clés contrôlés

Infographie

Vision par ordinateur

Résumé

Nous nous sommes intéressés à la synthèse de nouvelles vues réalistes d'une scène décrite par un ensemble restreint de photographies, ce qui nous a conduit au développement d'une chaîne de traitement complète et originale. Cette chaîne de traitement a été construite autour d'un moteur de rendu appliquant la technique du ''placage de texture dépendant du point de vue'' à une représentation géométrique simple de la scène décomposée en couches, le réalisme des images synthétisées étant alors maximal malgré la simplicité des données utilisées. Ensuite nous avons étudié la correction de certaines erreurs de rendu dues au placage de texture et avons proposé une procédure géométriquement valide pour supprimer les erreurs dites de ''ghosting''. Enfin nous avons cherché à estimer automatiquement les masques binaires associés aux couches 3D de la scène grâce à une nouvelle approche de segmentation par ''graph-cut'' faisant entre autre appel à une certaine connaissance géométrique (planar-key).

We were interested in the synthesis of realistic novel views of a scene described by a limited number of photographs. This lead us to design a complete and genuine processing pipeline. This pipeline is based on a rendering engine applying the 'view-dependent texture mapping' technique to a simple geometric representation of a scene decomposed into layers. The realism of the generated images is consequently optimal despite the simplicity of the input data. We also studied the correction of some rendering errors caused by texture mapping and we suggested a geometrically valid procedure to correct the so-called 'ghosting artefacts'. Finally we investigated the automatic estimation of the binary masks associated with the 3D layers of the scene and we designed a new segmentation approach using 'graph-cuts' and, among others, a particular geometric knowledge (planar-key).