Analyse de la qualité vocale appliquée à la parole expressive

Nicolas Sturmel

Thèse Année : 2011

Voice quality analysis applied to expressive speech

Analyse de la qualité vocale appliquée à la parole expressive

(1)

Nicolas Sturmel

Fonction : Auteur

Laboratoire d'Informatique pour la Mécanique et les Sciences de l'Ingénieur

Résumé

Analysis of speech signals is a good way of understanding how the voice is produced, but it is also important as a way of describing new parameters in order to define the perception of voice quality. This study focuses on expressive speech, where voice quality varies a lot and is explicitly linked to the expressivity or intention of the speaker. In order to define those links, one has to be able to estimate a high number of parameters of the speech production model, but also be able to decompose the speech signal into each parts that contributes to this model. The work presented in this thesis addresses the segmentation of speech signals, their decomposition and the estimation of the voice production model parameters. At first, multi-scale analysis of speech signals is studied. Using the LoMA method that traces lines across scales from one maximum to the other on the time domain response of a wavelet filter bank, it is possible to detect a number of features on voiced speech, namely : the glottal closing instants, the energy associated to each glottal cycle, the open quotient (by estimating the time delay of the first harmonic). This method is then tested on both synthetic and real speech. Secondly, harmonic plus noise decomposition of speech signals is studied. An existing method (PAPD standing for Periodic/Aperiodic Decomposition) is modified to dynamically adapt the analysis window length to the fundamental frequency (F0) of the signal. The new method is then tested on synthetic speech where the sensibility to the estimation error on F0 is also discussed. Decomposition on real speech, along with their audio files, are also discussed. Results shows that this new method provides better quality of decomposition. Thirdly, the problem of source/filter deconvolution is addressed. The ZZT (Zeros of the Z Transform) method is compared to classical methods based on linear prediction. ZZT is then used for the estimation of the glottal flow parameters with a simple but robust method based on the joint estimation of both the open quotient and the asymmetry. The later method is then combined to the estimation of the open quotient using wavelet analysis. Finally, the three estimation methods developed in this thesis are used to analyze a large number of files from a database presenting different speaking styles. Results are discussed in order to characterize the link between style, model parameters and voice quality. We especially notice the neat appearance of speaking style groups

L’analyse des signaux de parole permet de comprendre le fonctionnement de l’appareil vocal, mais aussi de décrire de nouveaux paramètres permettant de qualifier et quantifier la perception de la voix. Dans le cas de la parole expressive, l'intérêt se porte sur des variations importantes de qualité vocales et sur leurs liens avec l’expressivité et l’intention du sujet. Afin de décrire ces liens, il convient de pouvoir estimer les paramètres du modèle de production mais aussi de décomposer le signal vocal en chacune des parties qui contribuent à ce modèle. Le travail réalisé au cours de cette thèse s’axe donc autour de la segmentation et la décomposition des signaux vocaux et de l’estimation des paramètres du modèle de production vocale : Tout d’abord, la décomposition multi-échelles des signaux vocaux est abordée. En reprenant la méthode LoMA qui trace des lignes suivant les amplitudes maximum sur les réponses temporelles au banc de filtre en ondelettes, il est possible d’y détecter un certain nombre de caractéristiques du signal vocal : les instants de fermeture glottique, l’énergie associée à chaque cycle ainsi que sa distribution spectrale, le quotient ouvert du cycle glottique (par l’observation du retard de phase du premier harmonique). Cette méthode est ensuite testée sur des signaux synthétiques et réels. Puis, la décomposition harmonique + bruit des signaux vocaux est abordée. Une méthode existante (PAPD - Périodic/APériodic Décomposition) est adaptée aux variations de fréquence fondamentale par le biais de la variation dynamique de la taille de la fenêtre d’analyse et est appelée PAP-A. Cette nouvelle méthode est ensuite testée sur une base de signaux synthétiques. La sensibilité à la précision d’estimation de la fréquence fondamentale est notamment abordée. Les résultats montrent des décompositions de meilleures qualité pour PAP-A par rapport à PAPD. Ensuite, le problème de la déconvolution source/filtre est abordé. La séparation source/filtre par ZZT (zéros de la transformée en Z) est comparée aux méthodes usuelles à base de prédiction linéaire. La ZZT est utilisée pour estimer les paramètres du modèle de la source glottique via une méthode simple mais robuste qui permet une estimation conjointe de deux paramètres du débit glottique : le quotient ouvert et l'asymétrie. La méthode ainsi développée est testée et combinée à l’estimation du quotient ouvert par ondelettes. Finalement, ces trois méthodes d’estimations sont appliquées à un grand nombre de fichiers d’une base de données comportant différents styles d’élocution. Les résultats de cette analyse sont discutés afin de caractériser le lien entre style, valeur des paramètres de la production vocale et qualité vocale. On constate notamment l’émergence très nette de groupes de styles.

Mots clés

Speech analysis Voice quality Wavelets Inverse filtering Lpc Zzt Periodic/aperiodic decomposition Jitter Shimmer LF model Expressive speech Source/filter interactions

Analyse de la parole Qualité vocale Ondelettes Filtrage inverse Lpc Zzt Décomposition périodique/apériodique Jitter Shimmer Modèle LF Parole expressive Interactions source/filtre

Domaines

Musique, musicologie et arts de la scène

Fichier principal

VA2_STURMEL_NICOLAS_02032011.pdf (10.26 Mo)

VA2_STURMEL_NICOLAS_02032011_C202-N-PAP.wav (103.44 Ko)

VA2_STURMEL_NICOLAS_02032011_C202-N-PAPA.wav (103.44 Ko)

VA2_STURMEL_NICOLAS_02032011_C202-V-PAP.wav (103.44 Ko)

VA2_STURMEL_NICOLAS_02032011_C202-V-PAPA.wav (103.44 Ko)

VA2_STURMEL_NICOLAS_02032011_C202.wav (103.44 Ko)

VA2_STURMEL_NICOLAS_02032011_C203-N-PAP.wav (81.67 Ko)

VA2_STURMEL_NICOLAS_02032011_C203-N-PAPA.wav (81.67 Ko)

VA2_STURMEL_NICOLAS_02032011_C203-V-PAP.wav (81.67 Ko)

VA2_STURMEL_NICOLAS_02032011_C203-V-PAPA.wav (81.67 Ko)

VA2_STURMEL_NICOLAS_02032011_C203.wav (81.67 Ko)

VA2_STURMEL_NICOLAS_02032011_LOMA-NORMVoyelle1.wav (207.5 Ko)

VA2_STURMEL_NICOLAS_02032011_LOMA-NORMVoyelle2.wav (206.33 Ko)

VA2_STURMEL_NICOLAS_02032011_LOMA-NORMVoyelle3.wav (203.45 Ko)

VA2_STURMEL_NICOLAS_02032011_LOMA-Voyelle1.wav (214.89 Ko)

VA2_STURMEL_NICOLAS_02032011_LOMA-Voyelle2.wav (214.89 Ko)

VA2_STURMEL_NICOLAS_02032011_LOMA-Voyelle3.wav (234.42 Ko)

VA2_STURMEL_NICOLAS_02032011_M202-N-PAP.wav (506.53 Ko)

VA2_STURMEL_NICOLAS_02032011_M202-N-PAPA.wav (506.53 Ko)

VA2_STURMEL_NICOLAS_02032011_M202-V-PAP.wav (506.53 Ko)

VA2_STURMEL_NICOLAS_02032011_M202-V-PAPA.wav (506.53 Ko)

VA2_STURMEL_NICOLAS_02032011_M202.wav (506.53 Ko)

VA2_STURMEL_NICOLAS_02032011_PAP_Fricative1_NOIS.wav (48.87 Ko)

VA2_STURMEL_NICOLAS_02032011_PAP_Fricative1_ORIG.wav (48.87 Ko)

VA2_STURMEL_NICOLAS_02032011_PAP_Fricative1_PERI.wav (48.87 Ko)

VA2_STURMEL_NICOLAS_02032011_PAP_Voyelle1_NOIS.wav (175.82 Ko)

VA2_STURMEL_NICOLAS_02032011_PAP_Voyelle1_ORIG.wav (175.82 Ko)

VA2_STURMEL_NICOLAS_02032011_PAP_Voyelle1_PERI.wav (175.82 Ko)

VA2_STURMEL_NICOLAS_02032011_ZZT-C1.wav (68.4 Ko)

VA2_STURMEL_NICOLAS_02032011_ZZT-C3.wav (78.17 Ko)

VA2_STURMEL_NICOLAS_02032011_ZZT-C5.wav (78.17 Ko)

VA2_STURMEL_NICOLAS_02032011_ZZT-M1.wav (24.35 Ko)

Origine : Version validée par le jury (STAR)

Format : Autre

ABES STAR : Contact

https://theses.hal.science/tel-00591638

Soumis le : lundi 9 mai 2011-17:13:39

Dernière modification le : samedi 7 octobre 2023-21:36:20

Archivage à long terme le : mercredi 10 août 2011-02:26:41

Dates et versions

tel-00591638 , version 1 (09-05-2011)

Identifiants

HAL Id : tel-00591638 , version 1

Citer

Nicolas Sturmel. Analyse de la qualité vocale appliquée à la parole expressive. Musique, musicologie et arts de la scène. Université Paris Sud - Paris XI, 2011. Français. ⟨NNT : 2011PA112021⟩. ⟨tel-00591638⟩

Exporter

BibTeX XML-TEI Dublin Core DC Terms EndNote DataCite

Collections

CNRS STAR LIMSI UNIV-PARIS-SACLAY SORBONNE-UNIVERSITE LISN

621 Consultations

1281 Téléchargements

Voice quality analysis applied to expressive speech

Analyse de la qualité vocale appliquée à la parole expressive

Résumé

Mots clés

Domaines

Dates et versions

Identifiants

Citer

Exporter

Collections

Partager