FITG11, 22/10/2011 Durée de vie d'un geste Génération, Reconnaissance  & Consommation Mohamed-Ikbel Boulabiar Telecom Bret...
Introduction Reconnaissance de gestes ? Poursuite de l'interaction « Naturelle »
Introduction Interaction à faible coût PS3 Eye (<40€)
Détection des mains <ul><li>Transformation de l'espace de couleurs </li></ul><ul>BGR </ul><ul>YCrCb </ul>
Détection des mains <ul><li>Extraction des couleurs de la main </li></ul><ul>Y [Cr] [Cb] </ul>
Détection des mains <ul><li>Marquage des blobs L inear-time component-labeling algorithm [Chang et al. 2004]
Suivie des blobs Appearance models for occlusion handling [Senior et al. 2006] Implementation dans « cvblob » [CarneroLiñá...
Détection des mains Blob (id, centre, contour)
Sortie depuis le prétraitement Fingertips Mouvement (id, centre, contour)
Reconnaissance de postures <ul><li>Reconnaissance ? </li><ul><li>Réseaux de neuronnes ?
HMM ?
SVM </li></ul><li>Algorithmes géométriques </li><ul><li>[Rubine 1991]
1$ Gesture [Wobbrock 2007]
Protractor [Li 2010] </li></ul></ul>
Reconnaissance de tracés <ul><li>[Rubine 1991]
1$ Gesture [Wobbrock 2007]
Protractor [Li 2010] </li></ul>
1$ Gesture
Vidéo (or it didn't happen)
Postures + Gestures
Reconnaissance
Travail principal Reconnaissance Génération Routage
Génération du geste
Projet Rev-TV <ul><li>Contrôle et animation d'un Avatar
Réalité augmentée pour Talk-Show </li></ul>
Étude Exploratoire Étude des Talk-Shows <ul><li>Extraction des gestes
Classification en familles
Évaluation des difficultés </li></ul>
Étude Exploratoire
Prochain SlideShare
Chargement dans…5
×

Durée de vie d\'un geste: Génération, Reconnaissance et Consommation

485 vues

Publié le

Forum d\'Interaction Gestuelle et Tactile 2011

0 commentaire
0 j’aime
Statistiques
Remarques
  • Soyez le premier à commenter

  • Soyez le premier à aimer ceci

Aucun téléchargement
Vues
Nombre de vues
485
Sur SlideShare
0
Issues des intégrations
0
Intégrations
15
Actions
Partages
0
Téléchargements
6
Commentaires
0
J’aime
0
Intégrations 0
Aucune incorporation

Aucune remarque pour cette diapositive

Durée de vie d\'un geste: Génération, Reconnaissance et Consommation

  1. 2. FITG11, 22/10/2011 Durée de vie d'un geste Génération, Reconnaissance & Consommation Mohamed-Ikbel Boulabiar Telecom Bretagne – ubuntu [email_address]
  2. 3. Introduction Reconnaissance de gestes ? Poursuite de l'interaction « Naturelle »
  3. 4. Introduction Interaction à faible coût PS3 Eye (<40€)
  4. 5. Détection des mains <ul><li>Transformation de l'espace de couleurs </li></ul><ul>BGR </ul><ul>YCrCb </ul>
  5. 6. Détection des mains <ul><li>Extraction des couleurs de la main </li></ul><ul>Y [Cr] [Cb] </ul>
  6. 7. Détection des mains <ul><li>Marquage des blobs L inear-time component-labeling algorithm [Chang et al. 2004]
  7. 8. Suivie des blobs Appearance models for occlusion handling [Senior et al. 2006] Implementation dans « cvblob » [CarneroLiñán 09] </li></ul>
  8. 9. Détection des mains Blob (id, centre, contour)
  9. 10. Sortie depuis le prétraitement Fingertips Mouvement (id, centre, contour)
  10. 11. Reconnaissance de postures <ul><li>Reconnaissance ? </li><ul><li>Réseaux de neuronnes ?
  11. 12. HMM ?
  12. 13. SVM </li></ul><li>Algorithmes géométriques </li><ul><li>[Rubine 1991]
  13. 14. 1$ Gesture [Wobbrock 2007]
  14. 15. Protractor [Li 2010] </li></ul></ul>
  15. 16. Reconnaissance de tracés <ul><li>[Rubine 1991]
  16. 17. 1$ Gesture [Wobbrock 2007]
  17. 18. Protractor [Li 2010] </li></ul>
  18. 19. 1$ Gesture
  19. 20. Vidéo (or it didn't happen)
  20. 21. Postures + Gestures
  21. 22. Reconnaissance
  22. 23. Travail principal Reconnaissance Génération Routage
  23. 24. Génération du geste
  24. 25. Projet Rev-TV <ul><li>Contrôle et animation d'un Avatar
  25. 26. Réalité augmentée pour Talk-Show </li></ul>
  26. 27. Étude Exploratoire Étude des Talk-Shows <ul><li>Extraction des gestes
  27. 28. Classification en familles
  28. 29. Évaluation des difficultés </li></ul>
  29. 30. Étude Exploratoire
  30. 31. Étude Bibliographique Basé sur Gesture&Thought [McNeill 05] <ul><li>Emblèmes
  31. 32. Gestes involontaires
  32. 33. Gestes co-verbaux
  33. 34. Pantomimes </li></ul>
  34. 35. Étude Bibliographique Basée sur Gesture&Thought [McNeill 05] <ul><li>Emblèmes (Commande)
  35. 36. Gestes involontaires (Animation)
  36. 37. Gestes co-verbaux
  37. 38. Pantomimes </li></ul>
  38. 39. Proposition Proposition l'utilisation de « ishara » pour la représentation graphique CC-BY, https://github.com/boulabiar/ishara
  39. 40. Routage
  40. 41. Routage des événements
  41. 42. Routage des événements
  42. 43. Routage des événements
  43. 44. Routage des événements « Ginn »
  44. 45. Résumé algorithme géométrique « ishara » classification « Ginn » Contrôle système
  45. 46. Conclusion

×