Studies on the gesture-sound relationship in musical performance

• Auteur / Autrice : Baptiste Caramiaux
• Direction : Carlos Agón
• Type : Thèse de doctorat
• Discipline(s) : Acoustique, traitement du signal et informatique appliqués à la musique
• Date : Soutenance en 2011
• Etablissement(s) : Paris 6

Mots clés

Mots clés contrôlés

Informatique musicale

Expériences

Perception auditive

Modèles mathématiques

Instruments de musique -- Propriétés acoustiques

Évaluation

Instruments de musique électroniques

Résumé

Cette thèse présente plusieurs travaux autour de l'étude des relations entre geste et son ayant pour vocation l'aide à la conception d'instruments pour la performance musicale. L'objectif est de mieux comprendre comment les gestes peuvent être associés au son afin de créer des instruments de musique numériques et expressifs. Initiée par une étude exploratoire scellant les objectifs et les problématiques abordées, cette thèse s'articule autour de deux grandes thématiques : la réponse gestuelle à l'écoute d'un son et la modélisation du geste à des fins d'analyse et d'applications. Dans la première thématique nous proposons des études expérimentales montrant les stratégies cognitives des participants dans l'exercice d'associer un geste à un son écouté. Nous montrons que ces stratégies sont liées à l'identification de la source. Dans la deuxième thématique, nous abordons les problèmes de modélisation des structures temporelles dans le geste musical. Nous présentons un premier modèle permettant le suivi et la reconnaissance en temps réel des profils temporels des paramètres du geste. Motivés par les aspects structurels de la musique, nous montrons la pertinence de l'utilisation d'un modèle pour la segmentation et l'analyse syntaxique du geste. Ainsi, nous abordons l'analyse gestuelle d'un point de vue signal et symbolique. Enfin, une implémentation concrète des questions de recherche est présentée sous la forme d'applications des différentes contributions théoriques. Précisément, les applications sont : un système de sélection de son par le geste; et un système de synthèse du son basée sur un suivi morphologique.