Miroir connecté avec les technologies MS : Windows 10 IoT Core, Cognitives Services, ...

1. Miriot – DevCon #1
Le miroir connecté

5. Cellenza
12
Azure
C#
ALM
SQL Server
Windows Client
1 4

6. Architecture technique
Hardware & Software
Etape #1 : Construction du miroir

7. Pré-requis
Universal App (UWP)
Windows 10 IoT Core
Un écran
Un Raspberry Pi
Un miroir sans tain
Hardware Software

8. Le montage

9. Architecture technique
Les widgets
Etape #2 : Afficher du contenu

10. Widgets
…
Mails
(Office 365)
Horaires train
(SNCF)
Agrégateurd’API
Application UWP

11. Architecture technique
Widgets
Démo

12. Architecture technique
Cognitives Services
Etape #3 : Personnaliser

13. Personnalisation
« Personnaliser le contenu en fonction de la personne en face du miroir »
Solution : Cognitives Services (aka API Oxford)
Hardware : Rajout d’une caméra

14. Cognitives Services
Computer Vision API Face API
Emotion API Video API
« Vision, Speech, Langage »
Speech API
Custom Recognition Intelligent Service Spell Check API LUIS
Speaker Recognition API

15. Architecture

16. Couche de services
Detect(Stream image)
Face[]
Face Detection
Identify(Guid[] faceIds)
IdentifyResult[]
Face Identification
AddPersonFace(Stream image)
TrainPersonGroup
Training

17. Architecture technique
Reconnaissance faciale
Démo

18. Architecture technique
Cognitives Services (bis)
Etape #4 : Interagir

19. Reconnaissance vocale
« Interagir avec le miroir »
Solution : LUIS - Cognitives Services (aka API Oxford)
Language Understanding Intelligent Service
Rajout d’un micro.

20. http://luis.ai

21. Architecture technique
Reconnaissance vocale
Démo

22. Next Steps
 Passer d’un prototype à un « vrai » miroir.
 Rajouter des fonctionnalités …

23. Et Blanche Neige ?
Qui est le plus beau…. ?

24. Merci !