Poster présenté par le SCD de la Réunion dans le cadre des JABES 2013

1. Retrouvez les pistes bibliographiques, le rapport
final, les infos sur la formation aux tests d’utilisabité
et toutes les données complémentaires à ce poster sur
le blog Assessment Librarian
h t t p : / / a s s e s s m e n t l i b r a r i a n . f r
S ’ I N F O R M E R
Réalisation de l’enquête
Nicolas Alarcon / Gwenaëlle Marchais
Conception du poster
Nicolas Alarcon
Illustrations
Melle Salt
salt-in-my-coffee.blogspot.com
CRÉDITS
Poster présenté dans
le cadre des
Journées ABES 2013
Site web
réalisé avec
lancement
mars 2012
cible
tout public
Site web de BU des plus classiques,
récemment mis en place, l’enquête est
l’occasion de :
• faire le point sur son usage après une
année d’utilisation
• relancer les demandes d’intégration
et d’amélioration auprès du service
informatique
• le rendre plus user-friendly
PRODUIT POURQUOI EUX ?
Résolveur de
liens
réalisé avec
lancement
septembre 2010
cible
étudiants 2e/3e cycle
enseignants-chercheurs
Un résolveur de liens est une application
qui sert d’intermédiaire entre une ressource
(base de données bibliographiques, catalogue) et le
texte intégral du texte qu’elle mentionne.
Outil puissant mais peu connu des usagers,
peu modifié depuis sa mise en production et
ayant besoin d’être adapté à nos publics.
L E S S U S P E C T S
Test d’utilisabilité Stats de fréquentation
Test permettant de mesurer
le niveau de facilité,
d’efficience, d’efficacité et de
satisfaction avec lequel un
utilisateur emploie un produit
pour réaliser une activité
précise
DÉFINITION
Mesures d’audience d’un
site web qui quantifient
la fréquentation à partir
d’indicateurs tels que le
nombre de visiteurs uniques, le
nombre de pages vues, le taux
de rebond, etc.
LOGICIEL
Qualitative
Quantitative MÉTHODE Quantitative
Identifier les problèmes de
navigabilité, d’ergonomie,
de sémantique pouvant
perturber l’expérience de
l’utilisateur
OBJECTIFS
Mesurer les flux de
fréquentation et déterminer
les stratégies de
consultation: d’où viennent-
ils ? que consultent-ils ? où
cliquent-ils ? de quelle page
sortent-ils ?
Méthode peu connue,
demande une certaine
pratique
Disposer d’un outil ad hoc
(screencasting)
Bien connaître le produit
pour formaliser les tests
Recruter les testeurs
(chronophage)
INCONVÉNIENTS
Connaître la méthode de calcul
de chaque indicateur
Interpréter correctement les
indicateurs
Compléter les données
quantitatives par des éléments
qualitatifs
Placer l’usager au cœur du
développement de nos outils
numériques
Richesse des données
qualitatives
Contact direct avec les
utilisateurs
Enrichissement de
l’expérience utilisateur
AVANTAGES
Indicateurs largement répandus
Outil gratuit (et/ou open source)
facile à installer sur un site
Automatisation de la collecte
Automatisation d’une partie
de l’analyse
LES ENQUÊTEURS
ENQUÊTE DE VOISINAGE
L e s i t e w e b d e l a B U e s t
l e 2 e p l u s v i s i t é d e s 2 8
s i t e s d e l ’ U n i v e r s i t é d e L a
R é u n i o n . L o i n d e v a n t l e
3 e m a i s t r è s l o i n d e r r i è r e
l e s i t e d e l ’ U n i v e r s i t é .
LES TÉMOINS
Unique variable discrimante du
groupe de testeurs : le statut.
Composition initiale du groupe :
• 4 étudiants en licence
• 3 en master ou doctorat
• 3 enseignants-chercheurs
• 2 bibliothécaires
12 personnes représentatives
des publics utilisateurs du site
web ou du résolveur de liens.
Au final, 8 personnes, recrutées
par réseau, ont composé le
groupe. La taille de l’échantillon
prévue initialement aurait été
trop large ; la respecter nous
aurait contraint à allonger
considérablement la durée
de l’enquête et à modifier les
méthodes de recrutement.
5 à 8 tests suffisent pour déceler
plus de 80% des problèmes
d’utilisabilité.
idéal réel
L ’ I N V E S T I G A T I O N
⇒⇒ analyse des statistiques de fréquentation du site sur une période de 5 mois (15 octobre 2012 - 15 mars 2013)
⇒⇒ analyse des catégories et des pages les plus et les moins visitées. Mise en parallèle avec la manière dont ces pages
sont structurées, mises à jour
⇒⇒ analyse des parcours d’utilisateurs sur le site
⇒⇒ Sélection des points essentiels des outils à tester durant l’enquête : il n’est pas raisonnable de tout investiguer
⇒⇒ Formulation des objectifs de l’enquête et des scénarios-tests
⇒⇒ Rédaction du pré-questionnaire (11 questions) distribué avant le test, visant à recueillir des infos socio-
démographiques et d’usage sur les testeurs et du post-questionnaire (9 questions) pour enregistrer l’avis à chaud
des testeurs sur le graphisme, la facilité d’utilisation, l’ergonomie des outils
⇒⇒ Choix de l’environnement des tests : lieux, matériels, logiciel
⇒⇒ Contact avec les testeurs, prise de rendez-vous et premières explications sur le but de leur participation
⇒⇒ Transformation des scénarios-tests en 15 exercices (voir «Le tapissage»)
⇒⇒ 8 tests réalisés entre le 13 décembre 2012 et le 26 février 2013. Durée moyenne : 44 minutes
L E T A P I S S A G E
( C o n f r o n t a t i o n s )
#1 Trouver les horaires #6 Réaliser un PEB #11 Trouver une e-revue
#2 Trouver les nouveautés
#7 S’informer sur
l’inscription
#12 Identifier la base d’une e-revue
#3 Suggérer un achat
#8 Trouver le jour de la
navette
#13 Accéder à une revue avec login/
password
#4 Contacter un responsable
#9 Trouver une
formation
#14 Accéder au texte intégral d’un
article depuis une base de données
#5 Trouver une animation
culturelle
#10 S’informer sur la
prolongation
#15 Trouver un article sans texte
intégral depuis une base de données
Résolveur de liensSite web
L E S P R E U V E SLes 5 pages les plus visitées (5% des pages = 60% du trafic) ne sont que des pages intermédiaires, relais
entre la page d’accueil et le véritable but de la visite (catalogue, liste des revues en ligne ou des bases
de données, compte-lecteur).Caractéristiques : temps moyen de visite très court (moins de 50s), un rebond immédiat hors du site et
très majoritairement vers une seule direction (75% à 80% des sorties vers une seule page).Lesplusfaiblesaffluencessurlespagesaccessiblesdepuislapaged’accueils’expliquentgénéralement
par une absence de mise à jour régulière et un problème de structuration (page Offre de formations),
l’absence de service en ligne utile pour l’usager (page Réserver une salle), une identité de page peu
évidente (page Agenda) ou un désintérêt flagrant du public (page Sélection de sites web).
La spirale des disciplines, élément central de la page d’accueil, ne constitue pas un accès pertinent
pour les usagers. L’absence de changement d’état des liens sur la spirale, comme c’est le cas sur les
autres liens de la page d’accueil ou sur un lien hypertexte en général (soulignement, changement de
couleur, passage en gras), induit en erreur et n’invite pas à cliquer dessus.
Le site est bien pourvu en zones de navigation : barre de navigation principale (en haut de page), menu
de navigation contextuel (à gauche) et chemin emprunté. Cependant, les testeurs ont rencontré des
problèmes de repérage sur le site. Lors de la navigation, les zones ne gardent pas la mémoire de notre
position, les catégories et menus ne restent pas en surbrillance. Certains testeurs se sont demandés
s’ils étaient bien sur la page choisie.
En essayant de proposer le plus de choix possibles aux visiteurs (plusieurs formulaires de contacts,
plusieurs chemins pour la même action), le site les plonge dans la perplexité. Certaines pages illustrent
parfaitement la loi de Hick selon laquelle le temps qu’il faut pour prendre une décision est déterminé
par le nombre de choix à disposition.
La liste des résultats du résolveur de lien et la page de présentation des revues électroniques sont
trop denses, saturées de liens. Beaucoup d’informations sont présentées sur un espace réduit et les
enregistrements montrent clairement l’hésitation des testeurs sur l’utilisation des boutons, certains
ayant approximativement la même fonction. La priorité pour le résolveur est donc de simplifier,
hiérarchiser et personnaliser l’interface.
VICES DE
PROCÉDURE
Difficulté à dissocier et isoler les outils testés. Site web, résolveur,
catalogue, bases de données et e-revues sont étroitement liés lors d’une
recherche documentaire; délicat d’évaluer les uns sans évaluer les
autres.
La durée des tests ne peut excéder 1h, maximum pour des testeurs
volontaires bénévoles. Les indices de lassitude et de frustration
apparaissent rapidement après 50 minutes d’exercice.
Les consignes orales et écrites avant le test sont primordiales pour
éviter aux testeurs de se tromper sur le but de l’exercice et fausser le
résultat.
Le recrutement est un processus long et hasardeux. Risques : refus,
défection sans avertissement, annulation de dernière minute,
reprogrammation de rendez-vous.
AFFAIRES À SUIVRE
• améliorer site web et résolveur de liens à partir des résultats
de l’enquête
• réaliser une enquête quantitative et qualitative sur
notre catalogue (Primo) bien plus utilisé et complexe.
La présente enquête n’était qu’un échauffement
• modifier le protocole d’enquête pour multiplier le nombre de
tests d’utilisabilité et réduire leur durée (30 min maximum)
• diversifier, élargir et pérenniser les modes de recrutement des
testeurs
• profiter du regard neuf des nouveaux collègues en
systématisant un test d’utilisabilité sur nos outils
numériques à leur arrivée