Reconnaissance de Visages Parlants, Application A La Langue Arabe

L'analyse de visages est un sujet de recherche trčs actif puisqu'il concerne de nombreux domaines d'application tels que la sécurité, la robotique (interaction homme machine, expression des émotions), le handicap (communication par le visage),etc. Dans ce cadre de recherches, nous avons mis en place un systčme de reconnaissance de visages parlants visant ŕ améliorer la robustesse du systčme de compréhension et d'interprétation pragmatique de la communication homme machine multimodale CHMM par l'introduction de visčmes. Les signaux étudiés sont des séquences monosyllabiques représentant les 28 phončmes de la langue Arabe. Plusieurs classifieurs ont été utilisés et une évaluation des résultats est proposée. Notre analyse de la fusion sérielle des paramčtres acoustiques, utilise les paramčtres MFCC/PLP et dans le cas du visuels les paramčtres DCT/DWT, on obtient ainsi des vecteurs audiovisuels,ces derniers servent comme vecteurs d'entrée au classifieur neuronal MLP ou RBF pour réaliser la reconnaissance audiovisuelle du locuteur dépendant de syllabes Arabes. Nous avons montré que la modalité visuelle améliore fortement les résultats de la reconnaissance acoustique.