Jean-Sébastien Dupuy (Microsoft) et Jean-Philippe Encausse (VISEO) font un panorama des technologies cognitives du marché et de leurs usages pour améliorer les expériences utilisateur
Conception centrée utilisateur en 14 étapes - NUI Day 2015
Technologies cognitives au service des expériences utilisateurs - NUIDay 2016
1. Technologies Cognitives
au service des
expériences utilisateurs
Jean-Sebastien DUPUY
Evangeliste - MICROSOFT
Jean-Philippe ENCAUSSE
Expert IoT & NUI, VISEO
11. Roll your own with REST APIs
Simple to add: just a few lines of code
required
Integrate into the language and platform
of your choice
Breadth of offerings helps you find the
right API for your app
Built by experts in their field from
Microsoft Research, Bing, and Azure
Machine Learning
Quality documentation, sample code,
and community support
Easy Flexible Tested
GET A
KEY
12.
13. Focus Cognitive Services
Emotion
Speaker
Recognition
Speech
Custom
Recognition
Computer Vision
Face
Video
microsoft.com/cognitive
Linguistic Analysis
Language
Understanding
Bing Spell Check
Entity Linking
Knowledge
Exploration
Academic
Knowledge
Bing
Image Search
Bing
Video Search
Bing
Web Search
WebLM
Text Analytics Recommendations
Bing
Autosuggest
Bing
News Search
Translator
14. Cortana Intelligence Suite
Action
People
Automated
Systems
Apps
Web
Mobile
Bots
Intelligence
Dashboards &
Visualizations
Cortana
Bot
Framework
Cognitive Services
Power BI
Information
Management
Event Hubs
Data Catalog
Data Factory
Machine Learning
and Analytics
HDInsight
(Hadoop and
Spark)
Stream Analytics
Intelligence
Data Lake
Analytics
Machine Learning
Big Data Stores
SQL Data
Warehouse
Data Lake Store
Data
Sources
Apps
Sensors
and
devices
Data
http://www.microsoft.com/en-us/server-cloud/cortana-intelligence-suite
30. Des commandes vocales à l’IA
Customer decision journey
CONSIDER
EVALUATE
BUY
CARE
Acquisition, communiquer
sur un lancement
de produit, tester
l’appétence…
Faire un devis,
faire une recherche
de produit/service/hôtel/train
Se faire conseiller, coacher
Réserver un hôtel ou un vol
Commander un repas
Faire livrer des fleurs …
Donner des informations,
humaniser une FAQ,
Suivi de livraison,
SAV, réclamation
31. Une nouvelle manière de concevoir des services
DE NOUVEAUX MÉTIERS
Interaction & Conversation Designer, « Virtual Assistant » Assistant,
Messaging App API Developers, Semantic Experts, scénaristes,
Chatbotmaster …
UN CYCLE ITERACTIF INFINI
La conception d’un bot ne s’arrête jamais. L’analyse des usages
amène à améliorer en permanence le bot (cas, résultats,
expériences, personnalité…)
PAR QUOI JE COMMENCE ?
# 1 De quelles données ai-je besoin ?
# 2 Comment je les obtiens ?
# 3 Script des conversations
UNE AUTRE FACON DE SYMBOLISER L’ESPRIT D’UNE MARQUE
Personnalité, niveau de langage, style, ton… La façon de
communiquer du bot est représentative de la marque (vs le design
graphique aujourd’hui)
40. MERCI !
Des Questions ?
Jean-Sebastien DUPUY
Evangeliste - MICROSOFT
Jean-Philippe ENCAUSSE
Expert IoT & NUI, VISEO
Notes de l'éditeur
Applications mobiles et sites web – Assistants personnel // Reconnaissance Vocale
Site Web – Scenario de moderation.
Google Home // Amazon Echo
Emergence des bots // 90% du temps passé sur un smartphone aujourd’hui est utilisé pour accéder aux réseaux sociaux et communiquer (IM). Depuis quelques mois l’utilisation des IM est plus importante que les réseaux sociaux.
Data and device price decline
Engaging chat + content + services
5x growth over next 3 years
Young demographic
Higher retention & usage than apps
Opportunity for 1:1 connection
Monthly users of messaging apps surpassed
Social apps a year ago
Why choose these APIs? They work, and it’s easy.
Easy: The APIs are easy to implement because of the simple REST calls. Being REST APIs, there’s a common way to implement and you can get started with all of them for free simply by going to one place, one website, www.microsoft.com/cognitive. (You don’t have to hunt around to different places.)
Flexible: We’ve got a breadth of intelligence and knowledge APIs so developers will be able to find what intelligence feature they need; and importantly, they all work on whatever language, framework, or platform developers choose. So, devs can integrated into their apps—iOS, Android, Windows—using their own tools they know and love (such as python or node.js, etc.).
Tested: Tap into an ever-growing collection of powerful AI algorithms developed by experts. Developers can trust the quality and expertise build into each API by experts in their field from Microsoft’s Research organization, Bing, and Azure machine learning and these capabilities are used across many Microsoft first party products such as Cortana, Bing and Skype.
En fait depuis 50ans les informaticiens rêvent de discuter avec une intelligence artificielle.
Souvenez vous de Wargame dans lequel JOSHUA attaquait les API de l’armée américaine.
C’est la première function du bot, avoir le sens du toucher pour interragir avec le monde physique
Mais pour avoir véritablement un interaction il faut échanger via du texte, ce n’est pas très naturel, ou via de la reconnaissance vocale.
C’est le déclic que j’ai eu en 2012 quand je me suis rendu compte
d’une part que le Kinect était un microphone capable de m’écouter à 10 mètres
Et d’autres part que Windows proposait depuis des années une fonctionnailité de reconnaissance de commandes vocales
Et c’est ainsi qu’est né un petit framework qui s’appel SARAH dont Vincent parlait l’année dernière au NUI Days.
Son objectif est justement d’assembler toutes ces API afin de consolider un cerveau et comprendre comment nous pouvons interragir avec les objets.
Pour faire simple voici une peite demo qui date de 2012
J’ai eu de nombreux retours super intéressants de la communauté.
En faisant disparaitre l’écran l’experience utilsiateur est encore plus importante.
Les enfants sont super réactifs, et plusieurs parents me disent que leurs enfants parlent à SARAH comme à un elfe de maison imaginaire, elle fait partie de la famille !
A l’époque je me souviens d’un camioneur geek qui me racontais embarquer SARAH dans son camion. Il captait les sporadiquement le réseau sur la route et fonctionnait en autonomie.
Sa femme, a moitié sur leton de l’humour était jalousie qu’il parte sur les routes avec SARAH.
Le résultat est fantastique, car la communauté me remonte de nombreuses annecdotes
- Peux-on changer la voix, j’aimerai JARVIS d’IronMan !
Mes enfants parle à SARAH comme à un Elfe de Maison
J’étais chez mes beaux parents et SARAH n’était pas là pour nous réveiller le matin
SARAH fait maintenat partie de la famille, peut-on la connecter au carnet de correspondace, pour qu’elle aide à faire les devoirs, …
Le résultat est fantastique, car la communauté me remonte de nombreuses annecdotes
- Peux-on changer la voix, j’aimerai JARVIS d’IronMan !
Mes enfants parle à SARAH comme à un Elfe de Maison
J’étais chez mes beaux parents et SARAH n’était pas là pour nous réveiller le matin
SARAH fait maintenat partie de la famille, peut-on la connecter au carnet de correspondace, pour qu’elle aide à faire les devoirs, …
Le nom du nom,
SARAH encore une femme ?
Peut-on la renommer en JARVIS ?
Ah mais il faut trouver une voix masculine !
L’apparence est aussi très important, qu’elle soit matérialisé par un objet, ou un écran
Mon point de vu est qu’on perds de l’imaginaire
Enfin le Kinect est une camera 3D ce qui signifie que l’agent peut faire de la reconnaissance Gestuelle, Faciale, le QRCode d’Objets !