Le sourire dans les transitions thématiques : analyse multimodale d'interactions conversationnelles en fonction de la relation des interactants

Smiling in thematic transitions : multimodal analysis of conversational interactions depending on the relationship of the interactants

• Auteur / Autrice : Mary Amoyal
• Direction : Laurent Prévot, Béatrice Priego-Valverde
• Type : Thèse de doctorat
• Discipline(s) : Sciences du langage
• Date : Soutenance le 21/06/2022
• Etablissement(s) : Aix-Marseille
• Ecole(s) doctorale(s) : École doctorale Cognition, Langage et Education (Aix-en-Provence ; 2000-....)
• Partenaire(s) de recherche : Laboratoire : Laboratoire Parole et langage (Aix-en-Provence, Bouches-du-Rhône ; 1976-...)
• Jury : Président / Présidente : Gaëlle Ferré
• Jury : Examinateurs / Examinatrices : Geert Brône
• Jury : Rapporteur / Rapporteuse : Salvatore Attardo, Véronique Traverso

Mots clés

Mots clés contrôlés

Reconnaissance automatique des émotions

Multimodalité (linguistique)

Expression du visage

Analyse de la conversation

Aspect psychologique

Sourire

Mots clés libres

Conversation

Multimodalité

Collaboration

Sourire

Transition

Relation

Conversation

Multimodality

Collaboration

Smile

Transition

Relationship

Résumé

Cette thèse porte sur les sourires dans les transitions thématiques de conversations. Ces moments charnières impliquent la collaboration des participants : nous avons étudié les sourires comme ressources de cette collaboration. Nous avons également étudié l'effet de la relation des interactants sur cette collaboration. 40 interactions issues de deux corpus CHEESE ! et PACO ont été étudiées. Dans le premier corpus, les participants se connaissent, tandis que dans le second, ils se rencontrent pour la première fois le jour de l'enregistrement. Les sourires des interactants ont été annotés selon le SIS. Grâce à l'outil de détection automatique de sourire SMAD, développé pour les besoins de cette thèse, nous avons effectué une analyse fine du déploiement des trois intensités de sourire. Nos analyses ont consisté à articuler deux approches complémentaires : celles de l'Analyse Conversationnelle et de la Linguistique Interactionnelle via des analyses séquentielles ainsi que l'approche de la Linguistique de Corpus qui a consisté à interroger quantitativement nos données. Cette méthodologie nous a permis d'identifier trois résultats principaux. (1) Les phases de transitions sont caractérisées par des processus spécifiques, dont certains sont invariants quelle que soit la relation entre les participants. (2) Lorsque le locuteur initie un nouveau thème, une suppression du sourire est plus fréquemment observée. (3) Lorsque l'interlocuteur accepte la proposition thématique, il est plus enclin à augmenter l'intensité de son sourire. Cette thèse montre que le sourire est une ressource mobilisée par les interactants lorsqu'ils effectuent des transitions thématiques.

This thesis focuses on smiles in thematic transitions of conversations. These moments of negotiation between two themes involve the the participants' collaboration. We have studied the role of smiles as ressources of this collaboration. Smiles are very frequent facial expressions but have not been studied in their relation to the organization of the interaction. In parallel, we studied the effect of the interactants' relationship on this collaboration. To explore these issues, 40 interactions from two corpora CHEESE! and PACO were studied. In the first corpus, the participants know each other, while in the second they met for the first time on the recording day. Smiles of the interactants were annotated according to the SIS. Thanks to the automatic smile detection tool SMAD, developed for the purpose of this thesis, we conducted a fine-grained analysis of the deployment of the three smile intensities. Our analyses consisted in articulating two complementary approaches: those of Conversational Analysis and Interactional Linguistics via sequential analyses as well as the approach of Corpus Linguistics which consisted in quantitatively interrogating our data. This methodology allowed us to identify three main results. (1) The phases of transitions are characterized by specific processes, some of which are invariant regardless of the participants' relationship. (2) When the speaker initiates a new topic, a suppression of the smile is more frequently observed. (3) When the addressee accepts the thematic proposal, he is more inclined to increase his smile intensity. This thesis shows that the smile is a resource mobilized by the interactants when they make thematic transitions.