Estimation de l'aire d'ouverture de la bouche à partir d'information acoustique du signal de parole en utilisant des techniques de déconvolution aveugle - Archive ouverte HAL
Communication Dans Un Congrès Année : 2009

Estimation de l'aire d'ouverture de la bouche à partir d'information acoustique du signal de parole en utilisant des techniques de déconvolution aveugle

Résumé

Dans cet article, nous proposons une nouvelle méthode pour l'estimation de l'aire d'ouverture de la bouche à partir d'une séquence vidéo du mouvement des lèvres. Dans cette méthode, nous exploiterons les différents degrés de corrélation entre les enveloppes acoustiques et les mouvements visuels, reporté par Grant et Seitz 2000, pour établir un modèle mathématique d'un système SIMO (Single-Input Multiple-Output), où l'aire d'ouverture de la bouche est le "Single Input" inconnu que nous souhaitons estimer. Les énergies RMS (Root Mean Square) dans les sous-bandes du signal de parole sont les "Multiple Outputs" observables du modèle. Le signal d'entrée inconnu peut être directement estimé en utilisant des techniques existantes de déconvolution aveugle. Les séquences audiovisuelles, utilisées pour les tests d'estimation, ont été enregistrées par une "webcam" ordinaire. La moyenne des coefficients de corrélation qui sont calculés entre les meilleures estimations de l'aire d'ouverture de la bouche et celles mesurées, sur un ensemble de 16 phrases en français, est 0.73.
Fichier principal
Vignette du fichier
do_326.pdf (255.57 Ko) Télécharger le fichier
Origine Fichiers produits par l'(les) auteur(s)
Loading...

Dates et versions

hal-01770975 , version 1 (19-04-2018)

Identifiants

  • HAL Id : hal-01770975 , version 1

Citer

Cong Thanh Do, Abdeldjalil Aissa El Bey, Dominique Pastor, André Goalic. Estimation de l'aire d'ouverture de la bouche à partir d'information acoustique du signal de parole en utilisant des techniques de déconvolution aveugle. GRETSI 2009 : XXIIe Colloque GRETSI, Traitement du Signal et des Images, Sep 2009, Dijon, France. ⟨hal-01770975⟩
125 Consultations
36 Téléchargements

Partager

More