1
FITG11, 22/10/2011Durée de vie dun geste Génération, Reconnaissance               &       Consommation         Mohamed­Ikb...
Introduction     Reconnaissance de gestes ?Poursuite de linteraction « Naturelle »                                        ...
IntroductionInteraction à faible coût   PS3 Eye (<40€)                            4
Détection des mains●   Transformation de lespace de couleurs                       BGR          YCrCb                     ...
Détection des mains●   Extraction des couleurs de la main       Y      [Cr]      [Cb]                                     ...
Détection des mains●    Marquage des blobs      Linear­time component­labeling algorithm         [Chang et al. 2004]●    S...
Détection des mains                    Blob            (id, centre, contour)                                    8
Sortie depuis le prétraitementFingertips                      Mouvement             (id, centre, contour)          9
Reconnaissance de postures●   Reconnaissance ?    ●   Réseaux de neuronnes ?    ●   HMM ?    ●   SVM●   Algorithmes géomét...
Reconnaissance de tracés●    [Rubine 1991]●    1$ Gesture [Wobbrock 2007]●    Protractor [Li 2010]                        ...
1$ Gesture             12
Vidéo(or it didnt happen)                        13
Postures + Gestures                      14
Reconnaissance                 15
Travail principalGénération     Reconnaissance    Routage                                           16
Génération du geste                      17
Projet Rev­TV●    Contrôle et animation dun Avatar●    Réalité augmentée pour Talk­Show                                   ...
Étude Exploratoire                Étude des Talk­Shows●    Extraction des gestes●    Classification en familles●    Évalua...
Étude Exploratoire                     20
Étude Bibliographique    Basé sur Gesture&Thought [McNeill 05]●    Emblèmes●    Gestes involontaires●    Gestes co­verbaux...
Étude BibliographiqueBasée sur Gesture&Thought [McNeill 05]●    Emblèmes (Commande)●    Gestes involontaires (Animation)● ...
PropositionProposition lutilisation de « ishara » pour la          représentation graphique        CC­BY, https://github.c...
Routage          24
Routage des événements                         25
Routage des événements                         26
Routage des événements                         27
Routage des événements« Ginn »                           28
Résumé « ishara »       algorithme    « Ginn »                 géométriqueclassification                  Contrôle        ...
Conclusion             30
Prochain SlideShare
Chargement dans…5
×

Durée de vie d\'un geste: Génération, Reconnaissance et Consommation

858 vues

Publié le

Forum de l\'Interaction Gestuelle et Tactile, Lille 2011

0 commentaire
0 j’aime
Statistiques
Remarques
  • Soyez le premier à commenter

  • Soyez le premier à aimer ceci

Aucun téléchargement
Vues
Nombre de vues
858
Sur SlideShare
0
Issues des intégrations
0
Intégrations
11
Actions
Partages
0
Téléchargements
4
Commentaires
0
J’aime
0
Intégrations 0
Aucune incorporation

Aucune remarque pour cette diapositive

Durée de vie d\'un geste: Génération, Reconnaissance et Consommation

  1. 1. 1
  2. 2. FITG11, 22/10/2011Durée de vie dun geste Génération, Reconnaissance  & Consommation Mohamed­Ikbel Boulabiar Telecom Bretagne – ubuntu boulabiar@gmail.com 2
  3. 3. Introduction Reconnaissance de gestes ?Poursuite de linteraction « Naturelle » 3
  4. 4. IntroductionInteraction à faible coût PS3 Eye (<40€) 4
  5. 5. Détection des mains● Transformation de lespace de couleurs BGR YCrCb 5
  6. 6. Détection des mains● Extraction des couleurs de la main Y [Cr] [Cb] 6
  7. 7. Détection des mains● Marquage des blobs Linear­time component­labeling algorithm [Chang et al. 2004]● Suivie des blobs Appearance models for occlusion handling [Senior et al. 2006] Implementation dans « cvblob » [CarneroLiñán 09] 7
  8. 8. Détection des mains Blob (id, centre, contour) 8
  9. 9. Sortie depuis le prétraitementFingertips Mouvement (id, centre, contour) 9
  10. 10. Reconnaissance de postures● Reconnaissance ? ● Réseaux de neuronnes ? ● HMM ? ● SVM● Algorithmes géométriques ● [Rubine 1991] ● 1$ Gesture [Wobbrock 2007] ● Protractor [Li 2010] 10
  11. 11. Reconnaissance de tracés● [Rubine 1991]● 1$ Gesture [Wobbrock 2007]● Protractor [Li 2010] 11
  12. 12. 1$ Gesture 12
  13. 13. Vidéo(or it didnt happen) 13
  14. 14. Postures + Gestures 14
  15. 15. Reconnaissance 15
  16. 16. Travail principalGénération Reconnaissance Routage 16
  17. 17. Génération du geste 17
  18. 18. Projet Rev­TV● Contrôle et animation dun Avatar● Réalité augmentée pour Talk­Show 18
  19. 19. Étude Exploratoire Étude des Talk­Shows● Extraction des gestes● Classification en familles● Évaluation des difficultés 19
  20. 20. Étude Exploratoire 20
  21. 21. Étude Bibliographique Basé sur Gesture&Thought [McNeill 05]● Emblèmes● Gestes involontaires● Gestes co­verbaux● Pantomimes 21
  22. 22. Étude BibliographiqueBasée sur Gesture&Thought [McNeill 05]● Emblèmes (Commande)● Gestes involontaires (Animation)● Gestes co­verbaux● Pantomimes 22
  23. 23. PropositionProposition lutilisation de « ishara » pour la  représentation graphique CC­BY, https://github.com/boulabiar/ishara 23
  24. 24. Routage 24
  25. 25. Routage des événements 25
  26. 26. Routage des événements 26
  27. 27. Routage des événements 27
  28. 28. Routage des événements« Ginn » 28
  29. 29. Résumé « ishara »  algorithme  « Ginn » géométriqueclassification Contrôle  système 29
  30. 30. Conclusion 30

×