Analyse phonétique de la variation inter-locuteurs au moyen de réseaux de neurones convolutifs : voyelles seules et séquences courtes de parole - HAL Accéder directement au contenu
Communication dans un congrès Année : 2022

Analyse phonétique de la variation inter-locuteurs au moyen de réseaux de neurones convolutifs : voyelles seules et séquences courtes de parole

Résumé

Des réseaux de neurones convolutifs ont été entraînés sur des spectrogrammes de voyelles /Ã/ et de séquences aléatoires de 2 secondes extraites de 44 locuteurs du corpus NCCFr afin d'obtenir une classification de ces derniers. Ces deux modèles présentent une répartition équivalente des locuteurs dans l'espace acoustique, ce qui suggère que la classification a été faite sur des critères indépendants des phonèmes précis extraits. De multiples mesures phonétiques ont été effectuées afin de tester leur corrélation avec les représentations obtenues : la f0 apparait comme le paramètre le plus pertinent, suivie par plusieurs paramètres liés à la qualité de la voix. Des zones d'activation (Grad-CAM : Gradient-weighted Class Activation Mapping) ont été calculées a posteriori afin de montrer les zones spectrales et temporelles utilisées par le réseau. Une analyse quantitative de ces cartes d'activation a donné lieu à des représentations des locuteurs qui ne sont pas corrélées aux mesures phonétiques.
Fichier principal
Vignette du fichier
gendrot_et_al_JEP_2022_final.pdf ( 1 Mo ) Télécharger
Origine : Fichiers produits par l'(les) auteur(s)
Loading...

Dates et versions

halshs-03980356, version 1 (09-02-2023)

Identifiants

  • HAL Id : halshs-03980356 , version 1

Citer

Cédric Gendrot, Emmanuel Ferragne, Anaïs Chanclu. Analyse phonétique de la variation inter-locuteurs au moyen de réseaux de neurones convolutifs : voyelles seules et séquences courtes de parole. Journées d'étude de la parole 2022 (JEP 2022), Jun 2022, Noirmoutier, France. ⟨halshs-03980356⟩
27 Consultations
46 Téléchargements
Dernière date de mise à jour le 27/04/2024
comment ces indicateurs sont-ils produits

Partager

Gmail Facebook Twitter LinkedIn Plus