Vous êtes ici : GIPSA-lab > Formation > Thèses soutenues
Chargement
BURGER Thomas

Reconnaissance automatique des gestes de la langue française parlée complétée

 

Directeur de thèse :     Alice CAPLIER

École doctorale : Electronique, electrotechnique, automatique, traitement du signal (eeats)

Spécialité : Signal, image, parole, télécoms

Structure de rattachement : Grenoble-INP

Établissement d'origine : INPG

Financement(s) : CIFRE

 

Date d'entrée en thèse : 01/11/2004

Date de soutenance : 26/10/2007

 

Composition du jury :
James Crowley (président)
Olivier Colot (rapporteur) Jean-Emmanuel Viallet (examinateur)
Alice Caplier (directrice de thèse)
Pascal Perret (co-directeur)

 

Résumé : Le LPC est un complément à la lecture labiale qui facilite la communication des malentendants. Sur le principe, il s''agit d''effectuer des gestes avec une main placée à côté du visage pour désambigüiser le mouvement des lèvres, qui pris isolément est insuffisant à la compréhension parfaite du message. Le projet RNTS TELMA a pour objectif de mettre en place un terminal téléphonique permettant la communication des malentendants en s''appuyant sur le LPC. Parmi les nombreuses fonctionnalités que cela implique, il est nécessaire de pouvoir reconnaître le geste manuel du LPC et de lui associer un sens. L''objet de ce travail est la segmentation vidéo, l''analyse et la reconnaissance des gestes de codeur LPC en situation de communication. Cela fait appel à des techniques de segmentation d'images, de classification, d''interprétation de geste, et de fusion de données. Afin de résoudre ce problème de reconnaissance de gestes, nous avons proposé plusieurs algorithmes originaux, parmi lesquels (1) un algorithme basé sur la persistance rétinienne permettant la catégorisation des images de geste cible et des images de geste de transition, (2) une amélioration des méthodes de multi-classification par SVM ou par classifieurs unaires via la théorie de l''évidence, assortie d''une méthode de conversion des probabilités subjectives en fonction de croyance, et (3) une méthode de décision partielle basée sur la généralisation de la Transformée Pignistique, afin d''autoriser les incertitudes dans l''interprétation de gestes ambigus.


GIPSA-lab, 11 rue des Mathématiques, Grenoble Campus BP46, F-38402 SAINT MARTIN D'HERES CEDEX - 33 (0)4 76 82 71 31