Un modèle d'assistant de leader virtuel humanoïde pour un soignant en milieu éloigné et isolé

Modelling a humanoid virtual leader assistant for a remote and isolated caregivers

• Auteur / Autrice : Aryana Zaleh Collins Jackson
• Direction : Pierre de Loor
• Type : Thèse de doctorat
• Discipline(s) : Informatique
• Date : Soutenance le 19/09/2022
• Etablissement(s) : École nationale d'ingénieurs de Brest
• Ecole(s) doctorale(s) : École doctorale Mathématiques et sciences et technologies de l'information et de la communication (Rennes)
• Partenaire(s) de recherche : Laboratoire : Laboratoire en sciences et techniques de l'information, de la communication et de la connaissance - Lab-STICC - Laboratoire des sciences et techniques de l'information- de la communication et de la connaissance : UMR6285
• Jury : Président / Présidente : Catherine Pelachaud
• Jury : Examinateurs / Examinatrices : Pierre de Loor, Catherine Pelachaud, Alexandre Pauchet, Domitile Lourdeaux, Brian Ravenet, Ronan Querrec, Elisabetta Bevacqua
• Jury : Rapporteurs / Rapporteuses : Alexandre Pauchet

Mots clés

Mots clés libres

Agents conversationnels animés

Comportement verbal et non verbal

Procédures et assistances médicales

Leadership situationnel

Embolied conversational agents

Verbal and noverbal behavior

Medical procedures and assistance

Sutuationel leadership

Résumé

Lors d'une urgence médicale en un lieu isolé tel que Mars dans lequel un soignant est séparé des experts médicaux par l'espace et le temps, un assistant virtuel est nécessaire afin de guider avec succès les soignants expérimentés et inexpérimentés tout au long de la procédure médicale. Une procédure réussie implique l'amélioration de la santé du patient et le maintien d'une relation de confiance entre le soignant et l'assistant virtuel. Afin de gérer la relation entre l'assistant et le soignant, nous proposons un ECA dont le fonctionnement s'appuie sur la théorie de leadership situationnel. Cet agent doit être en mesure d'adopter un comportement multimodal intégrant des expressions verbales adéquates ainsi qu'un comportement non verbal associé. Pour cela, nous créons et annotons un ensemble de données de discours de leaders médicaux et analysons cet ensemble afin d'extraire une série de règles linguistiques pour le discours dédié au leadership situationnel. Ces règles sont ensuite validées par l'expérimentation. Nous proposons également un modèle pour analyser le comportement du soignant pendant la procédure, déterminer le style de leadership de l'agent le plus approprié en fonction du comportement du soignant et de l'état du patient et générer un comportement d'agent approprié pour faire progresser la procédure et maintenir une relation de confiance avec le soignant.

In a medical emergency on an isolated point such as Mars in which a caregiver is separated from medical experts by time ans space, a virtual assistant is necessary in order to guide both experienced and inexperienced carevigers through the medical procedure successfully. A successful procedure involves improvement of the patient's health and maintenance of a trusting relationship betwenn the careviger and the virtual assistant. In order to manage the relationship between the assistant and the careviger, we propose an ECA that employs situational leadership. We identify multimodal behavior, both nonverbal behavior and speech, that an agent should employ. We created an annotate a dataset of medical leader speech and analyze it with statistical analysis and k-means clustering, resulting a series of linguistic rules for speech in situationnal leadership that are then validated through experimentation. We also propose an agent system for analysing caregiver behavior during the procedure, determining the most appropriate agent leadership style based on careviger behavior and the patient state, and generating appropriate agent behavior to progress the procedure and maintain a trusting relationship with the caregiver.