Les agents virtuels expressifs et leur impact sur l'induction de l'empathie chez l'utilisateur : application au domaine de la formation médicale.

Expressive virtual agents and their impact on the user empathy induction : application to the medical training field.

• Auteur / Autrice : Anne-Sophie Milcent
• Direction : Simon Richir, Abdelmajid Kadri, Erik Geslin
• Type : Thèse de doctorat
• Discipline(s) : Génie industriel (AM)
• Date : Soutenance le 15/06/2020
• Etablissement(s) : Paris, HESAM
• Ecole(s) doctorale(s) : École doctorale Sciences des métiers de l'ingénieur (Paris)
• Partenaire(s) de recherche : Laboratoire : Laboratoire LAMPA (Laboratoire Arts et Métiers ParisTech d’Angers)
• Partenaire(s) de recherche : établissement de préparation de la thèse : École nationale supérieure d'arts et métiers (1780-....)
• Jury : Président / Présidente : Catherine Pelachaud
• Jury : Examinateurs / Examinatrices : Simon Richir, Abdelmajid Kadri, Erik Geslin, Magalie Ochs, Jean-Claude Martin
• Jury : Rapporteur / Rapporteuse : Magalie Ochs, Jean-Claude Martin

Mots clés

Mots clés contrôlés

Empathie

Systèmes homme-machine

Reconnaissance automatique des émotions

Mots clés libres

Agent virtuel

Expressivité

Empathie

Réalisme

Émotions

Santé

Virtual agent

Expressiveness

Empathy

Realism

Emotions

Health

Résumé

Les travaux de cette thèse de doctorat portent sur les agents virtuels expressifs et leur impact sur l'induction d'empathie chez l'utilisateur. L'évolution des techniques de l’informatique graphique permet aujourd’hui de créer des agents virtuels réalistes au niveau visuel et comportemental. L'expressivité des agents est un enjeu important pour les interactions homme-machine. Cependant, il est encore peu fréquent que les agents virtuels soient dotés d'expressions faciales, limitant alors leur possibilité d'induire de l'empathie chez l'utilisateur. Nos travaux font suite aux perspectives de recherche concernant la retranscription des émotions sur un agent virtuel, et contribuent à étendre les connaissances concernant les interactions avec les agents, notamment l'impact de leur expressivité sur la mise en place d'une situation empathique. Pour mener à bien ces travaux, nous avons conduit deux expérimentations. Notre première expérimentation porte sur la reconnaissance des émotions de base sur un agent virtuel conçu à partir de techniques de modélisation avancée. Cette étude a également permis d'évaluer la pertinence de facteurs d'expressivité humaine sur l'agent, notamment les rides d'expression et la variation de la taille pupillaire en fonction de l'état émotionnel, pour faciliter la perception des émotions de celui-ci. Notre seconde expérimentation porte sur l'impact de l'expressivité faciale de l'agent virtuel sur l'empathie de l'utilisateur. Dépendants du contexte, les résultats démontrent que la prise de perspective de l'utilisateur, composante cognitive de l'empathie, est plus importante lorsque l'agent virtuel réaliste possède des expressions faciales. Enfin, nous avons étudié l'impact de l'expressivité des agents sur l'engagement et la présence sociale de l'utilisateur. Cette étude ouvre des perspectives concernant une potentielle corrélation entre les notions d'empathie, de présence sociale et d'engagement.

Pedagogical agents, non-player characters, virtual advisors or assistants, virtual agents are more and more present in our daily life. Some attract our attention, seem to show us interest, to be able to communicate and to express their emotional states. These agents have been the subject of numerous investigations in various fields of research such as computerscience, psychology or cognitive sciences. The work of this PhD thesis focuses on the expressive virtual agents and their impact on the user empathy induction. The evolution of computer graphics techniques now makes it possible to create virtual agents that are visually and behaviorally realistic. The expressiveness of agents is an important issue for human-computer interactions. However, it is still rare for virtual agents to be equipped with facial expressions, thus limiting their ability toinduce empathy in the user.Our work follows up on the perspectives opened by researchers in the field concerning the transcription of emotions on a virtual agent, and contributes to extend the knowledge concerning interactions with agents, in particular the impact of their expressiveness on the implementation of an empathetic situation. To carry out this work, we conducted two experiments. The first one deals with the recognition of basic emotions on a virtual agent designed using advanced modeling techniques. This study also allowed us to evaluate the relevance of human expressiveness factors on the agent, notably the presence of expression wrinkles and the variation of pupil size according to the emotional state, to facilitate the perception of the agent’s emotions. Our second experiment focuses on the impact of the virtual agent’s facial expressiveness on the user’s empathy. Depending on the context, the results show that user’s perspective taking, the cognitive component of empathy, is greater when the realistic virtual agent presents emotional facial expressions compared to an agent who has no facial expressions. Finally, we studied the impact of the agents’ expressiveness on the user’s engagementand social presence. This study opens perspectives on a potential correlation between the notions of empathy, social presence and engagement.