Repenser le storyboard en tant qu’acte de coopération et de co-création entre l’artiste et le numérique dans le cadre de la réalisation de films d’animation 3D

Rethinking storyboarding as an act of cooperation and co-creation between the artist and the digital tools in the context of 3D animation filmmaking

• Auteur / Autrice : Sophia Mouajjah
• Direction : Cédric Plessiet
• Type : Thèse de doctorat
• Discipline(s) : Images numériques
• Date : Soutenance le 15/11/2023
• Etablissement(s) : Paris 8
• Ecole(s) doctorale(s) : École doctorale Esthétique, sciences et technologie des arts (Saint-Denis, Seine-Saint-Denis)
• Partenaire(s) de recherche : Laboratoire : Université de Paris VIII. Laboratoire Arts des images et art contemporain. EPHA
• Jury : Président / Présidente : Axel Buendia
• Jury : Examinateurs / Examinatrices : Imad Saleh, Jean-Jacques Bourdin
• Jury : Rapporteurs / Rapporteuses : Réjane Hamus-Vallée, Carole Hoffmann

Mots clés

Mots clés contrôlés

Conception assistée par ordinateur

Films d'animation

Scénarimages

Systèmes homme-machine

Interfaces utilisateur (informatique)

Mots clés libres

Estimation de poses 3D basée sur l’esquisse

Interface gestuelle

Systèmes interactifs

Informatique graphique

Storyboard

Prévisualisation

Sketch-based 3D pose estimation

Gestural interface

Interactive systems

Computer graphics

Storyboard

Previsualization

Résumé

Le storyboard est une phase d’idéation ayant pour rôle principal d’ébaucher un projet de film en développant la narration de manière visuelle. Aujourd’hui, il est majoritairement réalisé en dessin sur un support à deux dimensions. Or, dans le contexte de la réalisation de films d’animation 3D, celui-ci ne permet pas de donner à voir le projet de façon fidèle en raison des différences entre les deux médias. Actuellement, le prototypage narratif avec les techniques de création 3D demeure complexe et est réservé à des utilisateurs experts. Cette thèse, menée sous convention CIFRE au studio Superprod, vise à réenvisager la manière de créer des storyboards en rapprochant les artistes du médium 3D, tout en préservant la part naturelle et organique de leur geste artistique. Nous effectuons une analyse historique de l’évolution des métiers de storyboarder, layout artist et previs artist conjointement aux avancées technologiques. Ensuite, nous relevons les principales recherches existantes visant à créer des storyboards dans un contexte hybride 2D/3D. En dernière partie, nous décrivons notre système Sketch Posing dont le rôle est d’assister les storyboarders dans un processus de co-création augmentée. Il exploite des principes du dessin traditionnel pour analyser les tracés réalisés par les artistes afin d’en estimer une pose 3D et de placer le personnage dans son environnement. Pour répondre aux besoins des storyboarders, nos algorithmes obéissent à certaines contraintes: un fonctionnement monoculaire, en temps réel et automatique basé intégralement sur l’esquisse 2D. Nous terminons notre recherche en présentant l’intégration de Sketch Posing au sein de l’entreprise.

Storyboard is an ideation stage, whose main purpose is to draft a movie project by developing visual storytelling. Nowadays, storyboards are mostly built by drawing on a two-dimensional medium. However, in the context of 3D computer animation, differences between the two media make it hard to visualize the project accurately. Currently, narrative prototyping using 3D technologies remains cumbersome and is restricted to expert users only. This thesis, carried out under a CIFRE agreement with Superprod studio, aims to rethink the way storyboards are created by bringing artists closer to the 3D medium, while preserving the natural and organic nature of their artistic gesture. We carry out an historical analysis of the evolution of the storyboarder, layout artist and previs artist professions in conjunction with the technological advances. We then review the main existing research that aims to create storyboards in a 2D/3D hybrid context. In the last section, we describe our Sketch Posing system, whose goal is to assist the storyboarders in an augmented cocreative process. It provides three tools that leverage some traditional drawing principles to analyze the strokes and graphic clues created by artists, in order to estimate a 3D pose and place the character in its environment. To meet the needs of the storyboarders, our algorithms respect some constraints : providing a monocular, real-time and automatic interaction that is entirely based on 2D sketches. We conclude our research by describing how we initiated the integration of Sketch Posing within the company.