Méthodologie de l'analyse des données expérimentales : Etude de la pratique des tests statistiques chez les chercheures en psychologie, approche normative, prescriptive et descriptive

Methodology of the analysis of experimental data : a study of the use of significance tests by psychologists, from normative, prescriptive, and descriptive approaches

• Auteur / Autrice : Jacques Poitevineau
• Direction : Bruno Lecoutre
• Type : Thèse de doctorat
• Discipline(s) : Psychologie
• Date : Soutenance en 1998
• Etablissement(s) : Rouen

Mots clés

Mots clés contrôlés

Statistique bayésienne

Psychologie

Tests d'hypothèses (statistique)

Psychologie expérimentale

Psychologie -- Méthodologie

Résumé

La thèse présentée est celle de l'inadaptation à la recherche expérimentale de la pratique du test de signification par les chercheurs en psychologie. La question de cette inadaptation est abordée selon trois approches, normative, prescriptive et descriptive qui constituent les trois parties de la thèse. La première partie est consacrée à l'étude, d'un point de vue méthodologique, de la norme statistique constituée par les théories du test statistique de Fisher et de Neyman et Pearson. Les principales caractéristiques de ces deux théories sont rappelées puis les nombreuses critiques dont les tests continuent d'être l'objet sont examinées, ainsi que les abus d'utilisation et des raisons possibles de la persistance de l'usage des tests et des abus. La deuxième partie aborde la question de la pertinence des prescriptions. Parmi les principales solutions de rechange aux tests qui sont passées brièvement en revue, seules les méthodes d'intervalle de confiance et les méthodes bayésiennes paraissent devoir s'imposer comme véritables ''challengers'' des tests traditionnels. De l'analyse de six des manuels d'inférence statistique à l'usage des psychologues parmi les plus connus, il ressort que les théories des tests statistiques y sont rarement rapportées fidèlement et qu'ils contiennent déjà des abus d'interprétation, particulièrement dans les exemples présentés. La troisième partie est consacrée aux attitudes des chercheurs en psychologie à l'égard des tests de signification. Des réanalyses statistiques de résultats déjà publiés ainsi qu'une réanalyse que nous avons menée au moyen d'outils fiducio-bayésiens sont présentées. Nous relatons aussi des expériences menées auprès de chercheurs, dont deux expériences que nous avons réalisées. Nous concluons à une pratique inadaptée au plan méthodologique, mais socialement adaptée, d'un outil inadéquat dont le mode d'emploi est trompeur. Nous évoquons aussi le probable changement d'attitude des psychologues vis-a-vis du test de signification, en conséquence de prochaines recommandations de l’American Psychological Association, et les possibilités d'une plus grande utilisation de l'analyse bayésienne qui en découlent.

The thesis presented is that the current use of significance tests by psychologists is unsuited for experimental research. This question is examined through three approaches, normative, prescriptive and descriptive, which constitute the three parts of the dissertation. The first part is devoted, from a methodological viewpoint, to the study of the theories of statistical test developed by fisher and by neyman and pearson, and which now constitute the statistical norm. The main features of these theories are first described, then the numerous criticisms which are still directed at the statistical tests are examined. Misuses of tests are also examined, as well as possible reasons for the continued use of these tests. The second part deals with the pertinence of the prescriptions. Among the main alternatives to the tests reviewed, only confidence interval methods and bayesian methods seem to be potential challengers to the traditional tests. From the analysis of six popular textbooks of statistical inference designed for psychologists, it appears that the theories of statistical test are rarely accurately reported and that those textbooks contain some misuses, particularly among the examples used. The third part is devoted to the attitudes of psychologists toward significance tests. Some statistical re-analyses of published results are presented, as long as a re-analysis we performed using standard bayesian tools. Some experiments involving researchers as subjects are also reported, including the two we realized for this thesis. We conclude that the use of significance tests by psychologists is a socially adapted but methodologically unsuited use of an inadequate tool promoted through misleading guide-lines of standard textbooks. We also mention a probable change in psychologists' attitude toward significance tests, as a consequence of recommendations from the American Psychological Association that are likely to appear in the near future, and the possibility that bayesian analysis will become more and more used.