Procédés mnémotechniques visuels et techniques oculométriques

Visual mnemonics and eye-tracking techniques

• Auteur / Autrice : Mayu Ikeda
• Direction : Francois Jouen, Stavros Lazaris
• Type : Projet de thèse
• Discipline(s) : Psychologie cognitive
• Date : Inscription en doctorat le 31/08/2022
• Etablissement(s) : Université Paris sciences et lettres
• Ecole(s) doctorale(s) : École doctorale de l'École pratique des hautes études (Paris)
• Partenaire(s) de recherche : Laboratoire : Cognitions humaine et artificielle
• Partenaire(s) de recherche : établissement opérateur d'inscription : École pratique des hautes études (Paris ; 1868-....)

Mots clés

Mots clés libres

Raisonnement visuo spatial

Compréhension

Oculométrie

Texte

Image

Didactique

Visio spatial reasoning

Understanding

Eye-tracking

Text

Image

Didactics

Résumé

L'objectif de la thèse de doctorat est d'étudier le processus de lecture et de compréhension d'un document associant un texte et son illustration, mettant en relation le contenu d'éléments textuels au contenu iconographique de l'illustration. Dans le cadre des Humanités Numériques, les travaux à mener dans le cadre de la thèse sont dans la continuité des études portant à la fois sur la conception de textes didactiques au moyen âge (Stavros Lazaris, UMR 7044 - Étude des civilisations de l'Antiquité) et sur les processus de lecture et de compréhension de textes et d'images (François Jouen et Charles Tijus, EA 4004 Cognitions Humaine et Artificielle). Utilisant l'oculométrie cognitive pour étudier l'aisance de la capture visuelle et la qualité de l'intégration des contenus textuels et imagés, la recherche concerne les effets didactiques des paradigmes de disposition d'un texte et d'une ou plusieurs images associées à des fins déclaratives (savoir) ou procédurales (savoir-faire) ; l'image pouvant être de nature diverse (tableau, schéma, graphique, figure, illustration …). L'étude de la construction de la compréhension texte-image sera menée en variant différents facteurs pour en étudier les effets principaux et d'interaction : disposition spatiale du texte et de I'image, concrétude et congruence des expressions verbales et imagées, familiarité des représentations conceptuelles. Les recherches princeps indiquent une corrélation entre le degré de compréhension du texte, celui de l'illustration et le nombre de saccades entre mots du texte et le contenu de l'image. Il s'ensuit que cette relation sera vérifiée plus finement pour vérifier à quel point le nombre et l'amplitude des saccades oculaires sont prédicteurs du degré de compréhension de l'information cible. L'objectif final vise à la fois une meilleure compréhension de l'histoire des textes didactiques et une meilleure compréhension des processus de traitement cognitif des textes imagés.

The objective of the doctoral thesis is to study the process of reading and understanding of a document associating a text and its illustration, putting in relation the content of textual elements to the iconographic content of the illustration. Within the framework of the Digital Humanities, the work to be carried out in the framework of the thesis is in the continuity of the studies concerning both the conception of didactic texts in the Middle Ages (Stavros Lazaris, UMR 7044 - Study of the civilizations of Antiquity) and the processes of reading and comprehension of texts and images (François Jouen and Charles Tijus, EA 4004 Human and Artificial Cognitions). Using cognitive eye-tracking to study the ease of visual capture and the quality of integration of textual and pictorial contents, the research concerns the didactic effects of the paradigms of arrangement of a text and one or more images associated with declarative (knowledge) or procedural (know-how) purposes; the image can be of various kinds (table, diagram, graph, figure, illustration ...). The study of the construction of text-image comprehension will be carried out by varying different factors in order to study the main and interaction effects: spatial arrangement of the text and the image, concreteness and congruence of verbal and pictorial expressions, familiarity of conceptual representations. The main research indicates a correlation between the degree of comprehension of the text, that of the illustration and the number of saccades between words in the text and the content of the image. It follows that this relationship will be tested in more detail to see to what extent the number and amplitude of eye saccades are predictive of the degree of comprehension of the target information. The ultimate goal is both a better understanding of the history of instructional texts and a better understanding of the cognitive processing of pictorial texts.