Audio-Visual Speaker Conversion using Prosody Features - IMAGINE Accéder directement au contenu
Communication Dans Un Congrès Année : 2013

Audio-Visual Speaker Conversion using Prosody Features

Résumé

The article presents a joint audio-video approach towards speaker identity conversion, based on statistical methods originally introduced for voice conversion. Using the experimental data from the 3D BIWI Audiovisual corpus of Affective Communication, mapping functions are built between each two speakers in order to convert speaker-specific features: speech signal and 3D facial expressions. The results obtained by combining audio and visual features are compared to corresponding results from earlier approaches, while outlining the improvements brought by introducing dynamic features and exploiting prosodic features.
L'article présente une approche audio-visuelle pour la conversion de locuteur, basée sur des méthodes statistiques initialement proposées pour la conversion de voix. En utilisant le corpus audiovisuel BIWI 3D, des modèles de conversion entre locuteurs sont calculés séparément pour la voix et les expressions faciales. Les résultats obtenus en combinant les deux modalités sont comparés subjectivement avec d'autres méthodes et démontrent l'importance de la dynamique et de la prosodie.
Fichier principal
Vignette du fichier
avsp2013.pdf (263.53 Ko) Télécharger le fichier
Vignette du fichier
avsp2013.png (123.79 Ko) Télécharger le fichier
Origine : Fichiers produits par l'(les) auteur(s)
Format : Figure, Image
Loading...

Dates et versions

hal-00842928 , version 1 (09-07-2013)

Identifiants

  • HAL Id : hal-00842928 , version 1

Citer

Adela Barbulescu, Thomas Hueber, Gérard Bailly, Rémi Ronfard. Audio-Visual Speaker Conversion using Prosody Features. AVSP 2013 - 12th International Conference on Auditory-Visual Speech Processing, Aug 2013, Annecy, France. pp.11-16. ⟨hal-00842928⟩
738 Consultations
569 Téléchargements

Partager

Gmail Facebook X LinkedIn More