Recherche Avancée

Thèse soutenue

Sign modelling and recognition by decomposition of geometric ''gestems'' : application to french sign language

FR
Auteur / Autrice : Shahram Bahrami
Direction : Jean-Marc Toulotte, Jean-Marc Vannobel
Type : Thèse de doctorat
Discipline(s) : Instrumentation et analyses avancées
Date : Soutenance en 2005
Etablissement(s) : Lille 1

Résumé

FR

Notre étude traite de la reconnaissance de signes de la langue des signes. Pour identifier une séquence gestuelle inconnue, nous défmissons des entités de base auxquelles nous associons des modèles mathématiques. Ensuite, nous recherchons dans un signal gestuel inconnu la présence de ces entités, qui constituent l'énoncé en se combinant suivant une grammaire. Nous étudions la faisabilité d'une reconnaissance de signes à partir d'entités en nombre limité et plus petites que le signe. En particulier, nous privilégions le mouvement de la main pour faire un découpage du signe. Les entités retenues sont des segments de trajectoires sous forme d'arcs de cercles et de droites. Nous avons utilisé le couple caméra-ordinateur pour proposer un système de vision et de prise de décision qui saisit le geste de l'utilisateur et identifie le contenu du message transmis. L'approche de modélisation proposée a été testée dans un cadre probabiliste markovien sur un corpus de signes.