LA NÉCESSITÉ EST LA MÈRE DE L'INVENTION : Vers des tests utilisateurs à distance plus riche que jamais

PIERRE-MAJORIQUE LÉGER, Ph.D.
Titulaire de la Chaire de recherche industrielle
CRSNG-Prompt en expérience utilisateur
Co-directeur Tech3Lab, Directeur ERPsim Lab
Agile Tour 2020, 19 Novembre 2020, Montréal
LA NÉCESSITÉ EST LA MÈRE DE L'INVENTION :
Vers des tests
utilisateurs à distance
plus riche que jamais

© Copyright Léger (2020)
Prof. Pierre-Majorique Léger, Ph.D.
TITULAIRE DE LA CHAIRE DE RECHERCHE INDUSTRIELLE CRSNG-PROMPT
EN EXPÉRIENCE UTILISATEUR
DOCTORAT
POST-DOCTORAT
LABORATOIRES ET CHAIRE FINANCEMENT
PROFESSEUR INVITÉ
Lab Serious games to learn
enterprise systems and
business analytics
https://www.researchgate.net/profile/Pierre-Majorique_Leger
Co-directeur Tech3Lab
Directeur ERPsim Lab
pml@hec.ca

Propulsé par

© Copyright Léger (2020)© Copyright Léger (2020)
Propulsé par

RECHERCHE EN EXPÉRIENCE UTILISATEUR :
Des partenaires dans une variété d’industries
ASSURANCES
ALIMENTAIRE
MEDIA
FERROVIAIRE
BANCAIRE
AÉRONAUTIQUE
LOGISTIQUE DIVERTISSEMENT
FINANCIÈRE
partenaire de
PLUSIEURS BOURSES DE RECHERCHE
À TOUS LES NIVEAUX :
chaire_ux.hec.ca
INSCRIVEZ-VOUS COMME
PARTICIPANTS À NOS ÉTUDES :
panel.hec.ca
Organismes subventionnaires :
artenaire de

PLUSIEURS BOURSES DE RECHERCHE
À TOUS LES NIVEAUX :
chaire_ux.hec.ca
INSCRIVEZ-VOUS COMME
PARTICIPANTS À NOS ÉTUDES :
panel.hec.ca
ﬁer partenaire de
Propulsé par : Financement :

Le personnel
scientifique
de la Chaire UX
et du Tech3Lab

École d’été 2020
de la Chaire UX
Lab Serious games to learn
enterprise systems and
business analytics

LA CHAIRE DE RECHERCHE INDUSTRIELLE CRSNG-PROMPT EN EXPÉRIENCE UTILISATEUR
Statistiques 2019-2020
2225participants
46étudiant(e)s
admis(e)s à la M.Sc
en UX à l’automne
2020
21 M.Sc Anglais
25 M.Sc Français
14étudiant(e)s
conférenciers
à l’international
(virtuels et présentiels)
40articles scientifiques
et actes de conférences
(12 acceptés & 28 publiés)
11étudiants diplômés
à la M. Sc.
25présentations à
des conférences
(virtuelles et présentielles)
+3000inscriptions
au MOOC
Cours en ligne UX 101
Introduction à l’expérience
39étudiants
boursiers
BAA: 13 stagiaires
M. Sc.: 15 étudiants
Ph. D.: 7 étudiants
Postdoc: 4 chercheurs
28projets partenaires
et de recherche
fondamentale
62étudiant(e)s au
Tech3Lab en août 2020
BAA: 13 stagiaires
M. Sc.: 30 étudiants
Ph. D.: 15 étudiants
Postdoc: 4 chercheurs

1 2 3 4
Pourquoi
évaluer l’UX ?
Pourquoi
évaluer l’UX avec les
neurosciences ?
Comment
neurosciences
durant la COVID ?
Quelles sont
les opportunités
de cette nouvelle
approche ?
A B
?

Immobilier.ca
Testez-le
svp!

Immobilier.ca

Immobilier.ca
Testez-le
svp!
Facile
à utiliser ?

Immobilier.ca
3 sur 5
Testez-le
svp!
Facile
à utiliser ?

Immobilier.ca
Testez-le
svp!
?
?
?
?
?
?
?
?

1
Pourquoi
évaluer l’UX ?
A B
?
2 3 4
Pourquoi
neurosciences ?
Comment
neurosciences
durant la COVID ?
Quelles sont
les opportunités
de cette nouvelle
approche ?
2
Pourquoi
neurosciences ?

?
Conclusion ?

Immobilier.ca
COGNITION
ATTENTION
ÉMOTIONS
1 gigaoctet/heure
ENCYCLOPEDIA
ENCYCLOPEDIA
ENCYCLOPEDIA
ENCYCLOPEDIA
ENCYCLOPEDIA
ENCYCLOPEDIA
ENCYCLOPEDIA
ENCYCLOPEDIA

COGNITION
ATTENTION
ÉMOTIONS

Tech3Lab
Louis-Collin
Tech3Lab
Côte-Ste-Catherine
Tech3Lab
Beaver Hall (2022)
1 11
3 3
5 5
2 22
4 4
6

INTENSITÉ ÉMOTIONNELLE
Calme Excité

Mesure de l’intensité
émotionnelle Calme Excité

Mesure de l’intensité
émotionnelle
Calme Excité

VALENCE ÉMOTIONNELLE
Malheureux Heureux

Mesure de la
valence émotionnelle Malheureux Heureux

Plaisir
AU 6. Cheek Raiser
Contributes to the emotion
happiness. Orbicularis oculi
(pars orbitalis) is the underlying
facial muscle.
AU 12. Lip Corner Puller
Contributes to the emotion hap-
piness and contempt when the
action appears unilateraly.
Muscular basis: zygomaticus major.
AU 6 - 12
Contributes to happiness. Notice
the wrinkles around the eyes
caused by cheek raising, also know
as the "Duchenne Marker".
+ =

Surprise
AU 1. Inner Brow Raiser
Contributes to the emotions sad-
ness, surprise, and fear, and to the
affective attitude interest. Muscu-
lar basis: frontalis (pars medialis).
AU 2. Outer Brow Raiser
Contributes to the emotions sur-
prise and fear, and to the affective
attitude interest. Frontalis (pars
lateralis) is the underlying facial
muscle.
AU 1 - 2
Contributes to the emotion sur-
prise and can be recognized by a
smooth line formed by the wrinkles
across the forehead.
+ =

NEUTRAL
HAPPY
SAD
DISCUSTED
ANGRY
SURPRISED
SCARED

NEUTRAL
HAPPY
SAD
ANGRY
SURPRISED
SCARED
DISCUSTED

VALENCE
ÉMOTIONNELLENe sais pas
quoi inscrire
dans barre de
recherche
Inscription
adresse
courriel
Ajout de filtres
pour choix
produits Résultats de
Produits
sans photos
Clic sur
“achat”
Inscription
du No de tel.
recherche non
Intensitéémotionnelle
Intensité émotionnelle
Valence émotionnelle
Identification
des points
de friction
par étape

0 100 200 300 400 500 600 700 800 900 1000 1100 1200 1300 1400
Time (sec)
-0,7
-0,6
-0,5
-0,4
-0,3
-0,2
-0,1
0,0
0,1
Activation
Valence
-1,0000
-0,5000
0,0000
0,5000
1,0000
Tâche
Pain Point
Création de compte
Magasinage
Paiement
Sélection du lieu de collecte
Sélection du moment de collecte
Null
1
« Aucun stress pour moi.
J'ai entré ma carte de crédit
et c'était bien. »
VALENCE
ÉMOTIONNELLE

0 200 400 600 800 1000 1200 1400 1600 1800 2000 2200 2400 2600 2800 3000 3200 3400
Time (sec)
-1,0
-0,8
-0,6
-0,4
-0,2
0,0
0,2
0,4
0,6
0,8
1,0
Activation
Valence
-1,000
-0,500
0,000
0,500
1,000
Tâche
Pain Point
Création de compte
Magasinage
Paiement
Sélection du lieu de collecte
Sélection du moment de collecte
Null
1
« La recherche,
ça j’ai aimé ça »
VALENCE
ÉMOTIONNELLE

1
Pourquoi
évaluer l’UX ?
A B
?
2 3 4
Pourquoi
neurosciences ?
Comment
neurosciences
durant la COVID ?
Quelles sont
les opportunités
de cette nouvelle
approches ?
Comment
neurosciences
durant la COVID ?
3

Les paramètres à prioriser dans la solution
CRITÈRES DE SÉLECTION IMPORTANTS :GARDER LE CONCEPT PREMIER DU LABORATOIRE
TEST UTILISATEUR HUMAIN
Affichage du visage du participant
et du modérateur
SYNCHRONISATION DES DONNÉES
Synchronisation de la tâche
avec la caméra du participant
CONTRÔLE
Garder le contrôle sur l’ensemble de l’envi-
ronnement de test
DÉVELOPPEMENT
Avoir une possibilité de développement
MULTIPLATEFORME
Possibilité de faire des tests
sur ordinateur et mobile

Test utilisateur humain
AFFICHAGE DU VISAGE DU PARTICIPANT ET DU MODÉRATEUR
ÉCRAN DE LA PARTICIPANTE MODÉRATEUR PARTICIPANTE

Test utilisateur humain
AFFICHAGE DU VISAGE DU PARTICIPANT ET DU MODÉRATEUR
ÉCRAN DE LA PARTICIPANTE INSTRUCTION PARTICIPANTE

Mesures de l’expérience vécue – Mesures et outils
Nous récupérons le flux vidéo de la caméra du
participant conjointement au flux vidéo de son écran,
enregistrés par Lookback.
Après exportation et analyse des émotions faciales
via Facereader, notre outil de triangulation permet
de synchroniser les émotions avec les différentes
tâches effectuées.
Points de friction
Partage de l’écran du
participant via l’application
Émotions captées en temps réel
à l’aide de la caméra du participant
Aperçu des résultats de valence combinée aux émotions discrètes synchronisée aux tâches réalisées
La valence de l’état
émotionnel
représente le
caractère positif
ou négatif des
émotions vécues.
Elle est obtenue par
la lecture faciale avec
FaceReader, qui varie
de -1 à +1.
J’étais un peu perdu,
c’était difficile de
trouver ce que je
cherchais.
Valence
-
+
Émotions
Négatives:
1
2
3

Trouver les applications logicielles
Développer les protocoles de collecte
Développer les protocoles de recrutement
Former les équipes de collecte
Développer de nouveaux algorithmes d’analyse
Développer les méthodologies de synchronisation
Développer les méthodologies d’analyse

Processus de collecte à distance
LES 4 ÉTAPES IMPORTANTES DE LA COLLECTE DE DONNÉES À DISTANCE
RECRUTEMENT
de participants qualifiés
CONTACT
de pré-validation
COLLECTE
à distance
ANALYSE
détaillée des comportements
Une dizaine de documents dédiés à la collecte à distance ont été développés
1 2 3 4

Préparation - Recrutement
IMPORTANCE DE LA PHASE DE RECRUTEMENT
CRITÈRES SPÉCIFIQUES
liés à l’environnement
Préparation d’étude Tech3Lab
Prérequis de participation
Navigateur internet
Chrome
Peut être téléchargé et installé
à l’aide de ce lien :
https://www.google.com/chrome/
1
Microphone connecté
ou intégré à l’ordinateur
2
Webcam connectée
et intégrée à l'ordinateur
3
4
Espace de travail isolé
(pour réduire le bruit et la présence
d’autres personnes pendant le test)
Une bonne luminosité
(permettant de voir votre visage
lors d’enregistrement vidéo)
Pas de lunettes
Ne pas avoir besoin de lunettes
de vue pour travailler à l’ordinateur
5 6
Accès Wi-Fi
Connectez-vous
sur le réseau 5Ghz de votre Wifi,
si cela est possible.

Premier contact
avec le participant
À faire la veille du test
Vérifier votre WebCam et microphone3
Lire et compléter le formulaire de consentement1
Vérifier votre connection à internet ou au Wi-Fi2
Installer l’extension Lookback Google Chrome4
1. Dans le courriel de confirmation
de participation, ouvrir le PDF
“Formulaire de Consentement”
2. Lire attentivement le document
au complet, et le compléter en
répondant à toutes les questions.
3. Envoyer le formulaire de
consentement complété
à panel.admin@hec.ca
1. Si vous êtes connecté au WIFI,
et que vous avez 2 réseaux
disponibles, sélectionner le 5Ghz.
2. Aller à l'adresse suivante :
http://www.speedtest.netà
et cliquer sur GO
1. Faire un enregistrement vidéo
de 15 sec. dans lequel vous
parlez : https://webcamera.io/fr/
2. Écouter l’enregistrement en vous
assurant que l’image et le son
soient de bonne qualité
3. Valider la qualité du son et
de l'image
1. Ouvrir le navigateur
Google Chrome
2. Installer l'extension Lookback
dans Google Chrome, en cliquant
le lien "Extention LookBack" inclu
dans le courriel de confirmation
3. Accepter l’utilisation de votre
microphone, caméra vidéo, et
du partage d’écran pour participer
3. Vérifier les résultats du test.
Si “Download” et/ou “Upload” est
inférieur à 5 Mbps, contactez les
chercheurs ( panel@hec.ca ).
INSTALL
ACCEPT
2.4Ghz 5Ghz
GO
DOWNLOAD UPLOAD
Mbps Mbps
30.3 10.4
DOWNLOAD UPLOAD
Mbps Mbps
4.7 3.5

Jour de test
1
Accès Wi-Fi
Connectez-vous
À faire 15 min. avant le début du test
Fermer les
fenêtres inutiles
Fermer tous les logiciels et
pages web sur votre ordinateur,
sauf ce qui vous donne
accès à vos courriels
2
Attention aux
informations personnelles
Assurez-vous qu’aucune
information personnelle est visible
sur votre bureau d’ordinateur
(par exemple, photos ou documents)
3
Copier le lien LookBack
Copier et coller le lien LookBack
dans Chrome. Le lien est fourni dans
le courriel de confirmation de votre
participation
4
Set up du test
Cliquer
Débuter la session
Restez sur cette page en attendant l’heure prévue de votre participation.
5
6
Ouverture du test dans LookBack
GET STARTED!
1. Entrer votre prénom seulement
2. Entrer votre adresse courriel
( la même qu’utilisée sur le
Panel HEC )
3. Accepter l’utilisation du microphone
4. Accepter l’utilisation de la caméra
5. Accepter l’utilisation de l’enregis-
trement d’écran
pour débuter le set up du test :

Documents de présentation
LA REPRÉSENTATION ICONOGRAPHIQUE UTILISÉE FAVORISE LA COMPRÉHENSION
SIMPLIFLIÉE POUR LES PARTICIPANTS
1
Accès Wi-Fi
Connectez-vous
À faire 15 min. avant le début du test
Fermer les
fenêtres inutiles
Fermer tous les logiciels et
pages web sur votre ordinateur,
sauf ce qui vous donne
accès à vos courriels
2
Attention aux
informations personnelles
Assurez-vous qu’aucune
information personnelle est visible
sur votre bureau d’ordinateur
(par exemple, photos ou documents)
3
Copier le lien LookBack
Copier et coller le lien LookBack
dans Chrome. Le lien est fourni dans
le courriel de confirmation de votre
participation
4
Set up du test
Cliquer
Débuter la session
Restez sur cette page en attendant l’heure prévue de votre participation.
5
6
Ouverture du test dans LookBack
GET STARTED!
1. Entrer votre prénom seulement
2. Entrer votre adresse courriel
( la même qu’utilisée sur le
Panel HEC )
3. Accepter l’utilisation du microphone
4. Accepter l’utilisation de la caméra
5. Accepter l’utilisation de l’enregis-
trement d’écran
pour débuter le set up du test :
Prérequis de participation
Navigateur internet
Chrome
Peut être téléchargé et installé
à l’aide de ce lien :
https://www.google.com/chrome/
1
Microphone connecté
ou intégré à l’ordinateur
2
Webcam connectée
et intégrée à l'ordinateur
3
4
(pour réduire le bruit et la présence
d’autres personnes pendant le test)
Une bonne luminosité
(permettant de voir votre visage
lors d’enregistrement vidéo)
Pas de lunettes
Ne pas avoir besoin de lunettes
de vue pour travailler à l’ordinateur
5 6
Accès Wi-Fi
Connectez-vous
À faire la veille du test
Vérifier votre WebCam et microphone3
Lire et compléter le formulaire de consentement1
Vérifier votre connection à internet ou au Wi-Fi2
Installer l’extension Lookback Google Chrome4
1. Dans le courriel de confirmation
de participation, ouvrir le PDF
“Formulaire de Consentement”
2. Lire attentivement le document
au complet, et le compléter en
répondant à toutes les questions.
3. Envoyer le formulaire de
consentement complété
à panel.admin@hec.ca
1. Si vous êtes connecté au WIFI,
et que vous avez 2 réseaux
disponibles, sélectionner le 5Ghz.
2. Aller à l'adresse suivante :
http://www.speedtest.netà
et cliquer sur GO
1. Faire un enregistrement vidéo
de 15 sec. dans lequel vous
parlez : https://webcamera.io/fr/
2. Écouter l’enregistrement en vous
assurant que l’image et le son
soient de bonne qualité
3. Valider la qualité du son et
de l'image
1. Ouvrir le navigateur
Google Chrome
2. Installer l'extension Lookback
dans Google Chrome, en cliquant
le lien "Extention LookBack" inclu
dans le courriel de confirmation
3. Accepter l’utilisation de votre
microphone, caméra vidéo, et
du partage d’écran pour participer
3. Vérifier les résultats du test.
Si “Download” et/ou “Upload” est
inférieur à 5 Mbps, contactez les
chercheurs ( panel@hec.ca ).
INSTALL
ACCEPT
2.4Ghz 5Ghz
GO
DOWNLOAD UPLOAD
Mbps Mbps
30.3 10.4
DOWNLOAD UPLOAD
Mbps Mbps
4.7 3.5
Préparation de
votre participation
à une étude
avec le Tech3Lab
Si vous avez de la difficulté avec une des étapes
ci-dessous, s’il vous plaît posez-nous toutes les
questions en répondant au courriel de confirmation
de participation ( panel.admin@hec.ca ).
Merci pour votre participation!
TOUT LE MATÉRIEL PRÉSENTÉ EST DISPONIBLE POUR LES PARTENAIRES DE LA CHAIRE UX
Pour plus d'information sur cette documentation, contacter pml@hec.ca

Procédure de collecte
1 2 3
ACCUEIL COMPLÉTION DE LA TÂCHE
ET QUESTIONNAIRE
ENTREVUE

1
Pourquoi
évaluer l’UX ?
A B
?
2 3 4
Pourquoi
évaluer l’UX avec
neurosciences ?
Comment
évaluer l’UX avec
neurosciences
durant la COVID ?
Quelles sont
les opportunités
de cette nouvelle
approches ?
4
Quelles sont
les opportunités
de cette nouvelle
approches ?

Bluepanel
RECRUTEMENT
DE 20 PERSONNES PAR MOIS
UNE PERSONNE
FAIT 4 TESTS PAR MOIS

Hiver 2021 : de nouvelles opportunités de recherche
ÉVALUATION DE LONGUE DURÉE
Par exemple : Observation du comportement
des employés lors d’une journée face à un outil
ÉVALUATION LONGITUDINALE
Par exemple : Observation de l'habituation d'un
utilisateur en mesurant à plusieurs reprises son
utilisation sur une longue période (e.g. 1 fois par
semaine pendant 1 mois).
Développement des habitudes.
Développement des automaticités

UX & HEC Montréal
UN NOUVEAU PROGRAMME EN LIGNE BILINGUE
MENANT À LA M.SC. UX SUR LA PLATEFORME EDX
DÉBUT : SEPTEMBRE 2020
https://www.edx.org/micromasters/hecmontrealx-ux-design-and-evaluation

LA NÉCESSITÉ EST LA MÈRE DE L'INVENTION : Vers des tests utilisateurs à distance plus riche que jamais

Recommandé

Recommandé

Contenu connexe

Similaire à LA NÉCESSITÉ EST LA MÈRE DE L'INVENTION : Vers des tests utilisateurs à distance plus riche que jamais

Similaire à LA NÉCESSITÉ EST LA MÈRE DE L'INVENTION : Vers des tests utilisateurs à distance plus riche que jamais (20)

Plus de Pierre-Majorique Léger

Plus de Pierre-Majorique Léger (20)

LA NÉCESSITÉ EST LA MÈRE DE L'INVENTION : Vers des tests utilisateurs à distance plus riche que jamais