SlideShare une entreprise Scribd logo
Des usages de lecture à la
réingénierie des cours
Vers des tableaux de bord auteurs 

sur la plateforme Openclassrooms
Yannick Prié
LS2N UMR 6004 - Université de Nantes
UBL - UTICE - Les learning analytics : quand le big data s'intéresse à l’éducation - 19 janvier 2017
Thèse de Madjid Sadallah (Université de Bejaïa),
co-encadrée par Benoit Encelle (Université de Lyon 1)
Motivation / objectifs
Cours en ligne, usages massifs, adaptation continue.
Objectif : analyser les usages de cours en ligne 

en vue de leur reconception
• fournir aux auteurs de cours en ligne
• un tableau de bord construit à partir des traces de
lecture des apprenants
• pour faciliter la réingénierie de leurs cours
Approche
Plan
• Objectifs et approche
• Contexte applicatif
• Indicateurs de lecture
• Problèmes et propositions de remédiations
• Tableau de bord
• Evaluation
OpenClassrooms s
Première plate-forme européenne d’éducation en ligne
spécialisée dans le numérique.
En chiffres :
Les cours
Cours
Chapitre
(= page web)
Les traces
Utilisateur Cours Chapitre Session Date
c17be14cebaa7c 3522386 3522393 vrq6ph2bfl6urpqkhj98 2016-03-07 11:50:15
edc72bcfd1f9abf 1885491 1886706 o4lrtbc37urgs7g5e5tp 2014-10-31 10:25:15
69ce920cdca876 2766951 2785906 jtu7sm4e7emvhnu9t97 2015-03-14 12:09:58
... … … … ..
.
Plan
• Objectifs et approche
• Contexte applicatif
• Indicateurs de lecture
• Problèmes et propositions de remédiations
• Tableau de bord
• Evaluation
Indicateurs de lecture
Caractérisent la lecture d’un granule
documentaire donné
• intérêt, difficulté, etc.
Calcul de sessions de lecture
Découpent l’activité d’un apprenant en segments significatifs
• lecture du cours estimée continue (Sadallah et al. 2015)
• cf. problème du time-on-task (Kovanovic et al., 2015)
Méthode
1. calcul à partir d’un seuil de temps de lecture maximal pour un chapitre
2. session = séquences de lectures de chapitres < aux seuils
Classes d’indicateurs
Indicateurs de lecture simple : toutes les lectures d’un granule
Indicateurs de relecture : accès secondaires
Indicateurs de navigation : navigation intra-session 

vers / depuis un granule
Indicateurs d’arrêts & de reprises : navigation inter-session 

vers / depuis un granule
Indicateurs de lecture simple
Rendent compte de l'intérêt des chapitres lus
• Taux de visites
• Taux de lecteurs distincts
• Nb sessions contenant le chapitre
• Vitesse moyenne de lecture
• Popularité (agrégé)
Indicateurs de relecture
Lien à la compréhension
Taux de relectures conjointes
• au sein d’une même séance de lecture (difficulté de compréhension ?)
Taux de relectures disjointes
• au sein des séances de lecture distinctes (difficulté de rétention ?)
Taux de relecture global (agrégé)
Indicateurs de navigation
Navigation vers et depuis un chapitre particulier
• Linéarité de lecture
• Linéarité d’arrivée / de départ
• Taux arrivées non linéaires depuis l’avant / l’arrière
• Taux de départs non linéaires vers l’avant / l’arrière
Indicateurs d’arrêt et de reprise
Fin de sessions sur un chapitre
• Fins de session sans reprise (= arrêt définitif)
• Fins de sessions avec reprise linéaire
• Fins de sessions avec reprise non linéaire avant / arrière
• Taux d’arrêts (agrégé)
Plan
• Objectifs et approche
• Contexte applicatif
• Indicateurs de lecture
• Problèmes et propositions de remédiations
• Tableau de bord
• Evaluation
Détection de problèmes
Détection des granules avec des indicateurs outliers
(valeurs remarquables)
• méthode de détection : MAD Median Absolute
Deviation (Leys, 2013)
• exemple : taux lecteur 3 / taux lecteur médian 100
Suggestions de révision
Fonction de
l’indicateur et
des valeurs
remarquables
(trop hautes/trop
basses)
A partir des
actions possibles
de la littérature
Révision de structure
• ajouter / supprimer / déplacer / fusionner / scinder un chapitre
Révision de contenu
• reformuler, expliquer, simplifier, illustrer, corriger, 

mettre à jour, etc
Révision de navigation
• ajouter / modifier / supprimer un lien interne ou externe
Plan
• Objectifs et approche
• Contexte applicatif
• Indicateurs de lecture
• Problèmes et propositions de remédiations
• Tableau de bord
• Evaluation
Tableau de bord
Fonctionnalités
• Indicateurs, problèmes potentiels, suggestions de révision
• Navigation
• Gestion des tâches
CoReaDa : Course Reading Dashboard
Carte de chaleur des indicateurs
Inspecteur de problèmes potentiels
Inspecteur de statistiques
Gestionnaire de tâches
Plan
• Objectifs et approche
• Contexte applicatif
• Indicateurs de lecture
• Problèmes et propositions de remédiations
• Tableau de bord
• Evaluation
Résumé
Evaluer… au niveau théorique
Approche globale
• méthodologie d’assistance à la re-conception de contenus
pédagogiques basée sur les traces
Concepts proposés + manière de les calculer
• notion de sessions de lecture / algorithme de découpage de traces
• classes d’indicateurs et indicateurs pour qualifier la lecture
• problèmes potentiels détectés associés aux indicateurs
• suggestions (révisions) associées aux problèmes détectés
Evaluer… au niveau pratique
Démarche générale de conception
Outil conçu et développé
• utilisabilité
• utilité
• potentielle
• effective
Effet sur l’apprentissage
Effet sur les pratiques
Évaluations réalisées
Qualité de la reconstruction de sessions de lecture,
comparaison avec d’autres méthodes de calcul
• test comparatif
Pertinence / utilité potentielle des classes
d’indicateurs et des indicateurs proposés pour
qualifier la lecture
• interviews / questionnaires (125 auteurs OC)
(Sadallah et al. 2015)
Évaluation en cours
Problèmes potentiels détectés + propositions de révisions associées
• pertinence / complétude (cf. précision / rappel)
Utilisabilité tableau de bord auteurs
• réussite / rapidité pour réaliser un ensemble de tâches
Utilité tableau de bord
• acceptabilité / TAM (Technology Acceptance Model)
• basé sur perception utilité + facilité d’utilisation
Mode d’évaluation,
(pour une dizaine de cours)
1. Questionnaire initial
A. perception de la lecture du cours et des problèmes potentiels
2. Visite guidée du tableau de bord
3. Tâches basiques d’exploration de fonctionnalités
4. Etude des problèmes et suggestions propres au cours de l’auteur
A. évaluation et commentaire des problèmes principaux
B. évaluation et commentaire des suggestions principales
C. recherche libre d’autres problèmes non détectés
5. Questionnaire TAM
6. (interview)
Bilan
Approche complète
• des logs à un outil utilisable
• évaluation en cours
Démarche incrémentale
• différents acteurs : auteurs de cours, chefs de projets,
directeur technique, chercheurs
Vers une intégration dans OC ?
Références
Leys, C., Ley, C., Klein, O., Bernard, P., & Licata, L. (2013). Detecting
outliers: Do not use standard deviation around the mean, use absolute
deviation around the median. Journal of Experimental Social Psychology,
49(4), pp. 764-766.
Kovanović, V., Gašević, D., Dawson, S., Joksimović, S., Baker, R. S., &
Hatala, M. (2015). Penetrating the black box of time-on-task estimation. In
Proceedings of the Fifth International Conference on Learning Analytics
And Knowledge, pp. 184-193.
Sadallah, M., Encelle, B., Maredj, A. E., & Prié, Y. (2015). Towards Reading
Session-Based Indicators in Educational Reading Analytics. In EC-TEL
2015 Design for Teaching and Learning in a Networked World, pp. 297-310.

Contenu connexe

En vedette

El nuevo Servicio Vasco de Empleo. De la Ley 2 de 23 de diciembre de 2009 a l...
El nuevo Servicio Vasco de Empleo. De la Ley 2 de 23 de diciembre de 2009 a l...El nuevo Servicio Vasco de Empleo. De la Ley 2 de 23 de diciembre de 2009 a l...
El nuevo Servicio Vasco de Empleo. De la Ley 2 de 23 de diciembre de 2009 a l...
Universidad Autónoma de Barcelona
 
Prom peru6 spanish.29.15
Prom peru6 spanish.29.15Prom peru6 spanish.29.15
Prom peru6 spanish.29.15
Embajada de EE.UU. en el Perú
 
Refonte Stratégie Marketing - Cosmediet
Refonte Stratégie Marketing - CosmedietRefonte Stratégie Marketing - Cosmediet
Refonte Stratégie Marketing - Cosmediet
Julie Depoisier
 
Comparación normativa 1998 y 2012. Contrato para la formación y el aprendizaje.
Comparación normativa 1998 y 2012. Contrato para la formación y el aprendizaje.Comparación normativa 1998 y 2012. Contrato para la formación y el aprendizaje.
Comparación normativa 1998 y 2012. Contrato para la formación y el aprendizaje.
Universidad Autónoma de Barcelona
 
Les photos du tournage Ensemble, elles'gaz!
Les photos du tournage Ensemble, elles'gaz!Les photos du tournage Ensemble, elles'gaz!
Les photos du tournage Ensemble, elles'gaz!ensemble_elles_gaz
 
Nuevas alternativas de prevención de VIH/SIDA: Antiretrovirales y Prevención
Nuevas alternativas de prevención de VIH/SIDA: Antiretrovirales y PrevenciónNuevas alternativas de prevención de VIH/SIDA: Antiretrovirales y Prevención
Nuevas alternativas de prevención de VIH/SIDA: Antiretrovirales y Prevención
Embajada de EE.UU. en el Perú
 
Administr..
Administr..Administr..
Administr..
memoylamona
 
Perspectiva general de las políticas de seguridad ciudadana en América Latina
Perspectiva general de las políticas de seguridad ciudadana en América LatinaPerspectiva general de las políticas de seguridad ciudadana en América Latina
Perspectiva general de las políticas de seguridad ciudadana en América Latina
Gobernabilidad
 
Discours du Président de la République d’Haiti aux Nations Unies.
Discours du Président de la République d’Haiti aux Nations Unies.Discours du Président de la République d’Haiti aux Nations Unies.
Discours du Président de la République d’Haiti aux Nations Unies.
consulatlHaitiaMontreal
 
Brother's chores
Brother's choresBrother's chores
Brother's chores
jk12269707mhs
 
Análisis del programa electoral del Partido Popular en materia laboral y de e...
Análisis del programa electoral del Partido Popular en materia laboral y de e...Análisis del programa electoral del Partido Popular en materia laboral y de e...
Análisis del programa electoral del Partido Popular en materia laboral y de e...
Universidad Autónoma de Barcelona
 
Musée virtuel - Case studies
Musée virtuel - Case studiesMusée virtuel - Case studies
Musée virtuel - Case studiesNathalie Duplain
 
Managers Studio
Managers StudioManagers Studio
Managers Studio
Marciano
 
Mode Emploi Salle Visio
Mode Emploi Salle VisioMode Emploi Salle Visio
Mode Emploi Salle Visioguest6f4c45
 
Taller cross docking
Taller cross dockingTaller cross docking
Taller cross docking
andres felipe güiza peñaloza
 
Ponència Barcelona. 23.3.2011. CiJ.
Ponència Barcelona. 23.3.2011. CiJ. Ponència Barcelona. 23.3.2011. CiJ.
Ponència Barcelona. 23.3.2011. CiJ.
Universidad Autónoma de Barcelona
 
HIF 2014 Paris - PREDICTIONS IDC 2014 - LES NOUVEAUX FACTEURS DE COMPETITIVIT...
HIF 2014 Paris - PREDICTIONS IDC 2014 - LES NOUVEAUX FACTEURS DE COMPETITIVIT...HIF 2014 Paris - PREDICTIONS IDC 2014 - LES NOUVEAUX FACTEURS DE COMPETITIVIT...
HIF 2014 Paris - PREDICTIONS IDC 2014 - LES NOUVEAUX FACTEURS DE COMPETITIVIT...
Hitachi Data Systems France
 
Mecanismos de contratación estable de trabajadores extranjeros. 12.5.2011.
Mecanismos de contratación estable de trabajadores extranjeros. 12.5.2011.Mecanismos de contratación estable de trabajadores extranjeros. 12.5.2011.
Mecanismos de contratación estable de trabajadores extranjeros. 12.5.2011.
Universidad Autónoma de Barcelona
 

En vedette (19)

El nuevo Servicio Vasco de Empleo. De la Ley 2 de 23 de diciembre de 2009 a l...
El nuevo Servicio Vasco de Empleo. De la Ley 2 de 23 de diciembre de 2009 a l...El nuevo Servicio Vasco de Empleo. De la Ley 2 de 23 de diciembre de 2009 a l...
El nuevo Servicio Vasco de Empleo. De la Ley 2 de 23 de diciembre de 2009 a l...
 
Prom peru6 spanish.29.15
Prom peru6 spanish.29.15Prom peru6 spanish.29.15
Prom peru6 spanish.29.15
 
Refonte Stratégie Marketing - Cosmediet
Refonte Stratégie Marketing - CosmedietRefonte Stratégie Marketing - Cosmediet
Refonte Stratégie Marketing - Cosmediet
 
Comparación normativa 1998 y 2012. Contrato para la formación y el aprendizaje.
Comparación normativa 1998 y 2012. Contrato para la formación y el aprendizaje.Comparación normativa 1998 y 2012. Contrato para la formación y el aprendizaje.
Comparación normativa 1998 y 2012. Contrato para la formación y el aprendizaje.
 
Les photos du tournage Ensemble, elles'gaz!
Les photos du tournage Ensemble, elles'gaz!Les photos du tournage Ensemble, elles'gaz!
Les photos du tournage Ensemble, elles'gaz!
 
Nuevas alternativas de prevención de VIH/SIDA: Antiretrovirales y Prevención
Nuevas alternativas de prevención de VIH/SIDA: Antiretrovirales y PrevenciónNuevas alternativas de prevención de VIH/SIDA: Antiretrovirales y Prevención
Nuevas alternativas de prevención de VIH/SIDA: Antiretrovirales y Prevención
 
Administr..
Administr..Administr..
Administr..
 
Perspectiva general de las políticas de seguridad ciudadana en América Latina
Perspectiva general de las políticas de seguridad ciudadana en América LatinaPerspectiva general de las políticas de seguridad ciudadana en América Latina
Perspectiva general de las políticas de seguridad ciudadana en América Latina
 
Discours du Président de la République d’Haiti aux Nations Unies.
Discours du Président de la République d’Haiti aux Nations Unies.Discours du Président de la République d’Haiti aux Nations Unies.
Discours du Président de la République d’Haiti aux Nations Unies.
 
Brother's chores
Brother's choresBrother's chores
Brother's chores
 
Análisis del programa electoral del Partido Popular en materia laboral y de e...
Análisis del programa electoral del Partido Popular en materia laboral y de e...Análisis del programa electoral del Partido Popular en materia laboral y de e...
Análisis del programa electoral del Partido Popular en materia laboral y de e...
 
Musée virtuel - Case studies
Musée virtuel - Case studiesMusée virtuel - Case studies
Musée virtuel - Case studies
 
Managers Studio
Managers StudioManagers Studio
Managers Studio
 
Qui suis-je ?
Qui suis-je ?Qui suis-je ?
Qui suis-je ?
 
Mode Emploi Salle Visio
Mode Emploi Salle VisioMode Emploi Salle Visio
Mode Emploi Salle Visio
 
Taller cross docking
Taller cross dockingTaller cross docking
Taller cross docking
 
Ponència Barcelona. 23.3.2011. CiJ.
Ponència Barcelona. 23.3.2011. CiJ. Ponència Barcelona. 23.3.2011. CiJ.
Ponència Barcelona. 23.3.2011. CiJ.
 
HIF 2014 Paris - PREDICTIONS IDC 2014 - LES NOUVEAUX FACTEURS DE COMPETITIVIT...
HIF 2014 Paris - PREDICTIONS IDC 2014 - LES NOUVEAUX FACTEURS DE COMPETITIVIT...HIF 2014 Paris - PREDICTIONS IDC 2014 - LES NOUVEAUX FACTEURS DE COMPETITIVIT...
HIF 2014 Paris - PREDICTIONS IDC 2014 - LES NOUVEAUX FACTEURS DE COMPETITIVIT...
 
Mecanismos de contratación estable de trabajadores extranjeros. 12.5.2011.
Mecanismos de contratación estable de trabajadores extranjeros. 12.5.2011.Mecanismos de contratación estable de trabajadores extranjeros. 12.5.2011.
Mecanismos de contratación estable de trabajadores extranjeros. 12.5.2011.
 

Similaire à Des usages de lecture à la réingénierie des cours Vers des tableaux de bord auteurs 
sur la plateforme Openclassrooms

Rédaction scientifique en ergothérapie
Rédaction scientifique en ergothérapieRédaction scientifique en ergothérapie
Rédaction scientifique en ergothérapieUniversity of Montreal
 
Learning analytics&amp;classejanvier2017
Learning analytics&amp;classejanvier2017Learning analytics&amp;classejanvier2017
Learning analytics&amp;classejanvier2017
Vanda Luengo
 
Learning Analytics : entre Promesses et Réalité
Learning Analytics : entre Promesses et RéalitéLearning Analytics : entre Promesses et Réalité
Learning Analytics : entre Promesses et Réalité
Serge Garlatti
 
Adapter ses modalités d'évaluation à distance
Adapter ses modalités d'évaluation à distanceAdapter ses modalités d'évaluation à distance
Adapter ses modalités d'évaluation à distance
Ludovic Miseur
 
Evad vinci
Evad vinciEvad vinci
Evad vinci
Sandrine Youx
 
JABES 2018 - Atelier : bien se préparer aux prochaines évolutions de consigne...
JABES 2018 - Atelier : bien se préparer aux prochaines évolutions de consigne...JABES 2018 - Atelier : bien se préparer aux prochaines évolutions de consigne...
JABES 2018 - Atelier : bien se préparer aux prochaines évolutions de consigne...
ABES
 
Fil rouge atelier "Quels tableaux de bord pour les acteurs de l'éducation ?"
Fil rouge atelier "Quels tableaux de bord pour les acteurs de l'éducation ?"Fil rouge atelier "Quels tableaux de bord pour les acteurs de l'éducation ?"
Fil rouge atelier "Quels tableaux de bord pour les acteurs de l'éducation ?"
Jean-Marie Gilliot
 
Qu'est-ce que décrire un MOOC ?
Qu'est-ce que décrire un MOOC ?Qu'est-ce que décrire un MOOC ?
Qu'est-ce que décrire un MOOC ?
Marilyne Rosselle
 
METHODOLOGIE DU RAPPORT DE STAGE OU MEMOIRE_DE_RECHERCHE_APPLIQUEE.ppt
METHODOLOGIE DU RAPPORT DE STAGE OU MEMOIRE_DE_RECHERCHE_APPLIQUEE.pptMETHODOLOGIE DU RAPPORT DE STAGE OU MEMOIRE_DE_RECHERCHE_APPLIQUEE.ppt
METHODOLOGIE DU RAPPORT DE STAGE OU MEMOIRE_DE_RECHERCHE_APPLIQUEE.ppt
Jihane56
 
sout_crmef.pptx
sout_crmef.pptxsout_crmef.pptx
sout_crmef.pptx
mariame26
 
Dispositif blended learning - Informatique au service des Sciences expériment...
Dispositif blended learning - Informatique au service des Sciences expériment...Dispositif blended learning - Informatique au service des Sciences expériment...
Dispositif blended learning - Informatique au service des Sciences expériment...
Ludovic LM
 
Diprobib aifbd
Diprobib aifbdDiprobib aifbd
Diprobib aifbdapajard
 
MOOC DD animation evaluation par les pairs MOODLE retour expérience
MOOC DD  animation evaluation par les pairs MOODLE retour expérienceMOOC DD  animation evaluation par les pairs MOODLE retour expérience
MOOC DD animation evaluation par les pairs MOODLE retour expérience
Florence Labord
 
Labord. evaluation-par-les-pairs -MOOC-pedagogie
Labord. evaluation-par-les-pairs -MOOC-pedagogieLabord. evaluation-par-les-pairs -MOOC-pedagogie
Labord. evaluation-par-les-pairs -MOOC-pedagogie
ExpertWeb
 
L'évaluation par les pairs - Florence Labord - web-conférence du 9 juin 2015
L'évaluation par les pairs - Florence Labord - web-conférence du 9 juin 2015L'évaluation par les pairs - Florence Labord - web-conférence du 9 juin 2015
L'évaluation par les pairs - Florence Labord - web-conférence du 9 juin 2015
FFFOD
 
MarkUs, un logiciel libre pour l’annotation du code et des travaux rendus par...
MarkUs, un logiciel libre pour l’annotation du code et des travaux rendus par...MarkUs, un logiciel libre pour l’annotation du code et des travaux rendus par...
MarkUs, un logiciel libre pour l’annotation du code et des travaux rendus par...
Morgan Magnin
 
Ap7 cinop burundi octobre 2021 evaluer vos etudiants
Ap7 cinop burundi octobre 2021  evaluer vos etudiantsAp7 cinop burundi octobre 2021  evaluer vos etudiants
Ap7 cinop burundi octobre 2021 evaluer vos etudiants
Christophe Batier
 
L’évaluation des apprentissages
L’évaluation des apprentissagesL’évaluation des apprentissages
L’évaluation des apprentissages
François Perreault
 
Scenari / Moodle - une chaine integree pour la production/diffusion d evaluat...
Scenari / Moodle - une chaine integree pour la production/diffusion d evaluat...Scenari / Moodle - une chaine integree pour la production/diffusion d evaluat...
Scenari / Moodle - une chaine integree pour la production/diffusion d evaluat...Jacques REYNAL
 
Construire ensemble un enseignement du front-end pertinent, pédagogique et pé...
Construire ensemble un enseignement du front-end pertinent, pédagogique et pé...Construire ensemble un enseignement du front-end pertinent, pédagogique et pé...
Construire ensemble un enseignement du front-end pertinent, pédagogique et pé...
Delphine Malassingne
 

Similaire à Des usages de lecture à la réingénierie des cours Vers des tableaux de bord auteurs 
sur la plateforme Openclassrooms (20)

Rédaction scientifique en ergothérapie
Rédaction scientifique en ergothérapieRédaction scientifique en ergothérapie
Rédaction scientifique en ergothérapie
 
Learning analytics&amp;classejanvier2017
Learning analytics&amp;classejanvier2017Learning analytics&amp;classejanvier2017
Learning analytics&amp;classejanvier2017
 
Learning Analytics : entre Promesses et Réalité
Learning Analytics : entre Promesses et RéalitéLearning Analytics : entre Promesses et Réalité
Learning Analytics : entre Promesses et Réalité
 
Adapter ses modalités d'évaluation à distance
Adapter ses modalités d'évaluation à distanceAdapter ses modalités d'évaluation à distance
Adapter ses modalités d'évaluation à distance
 
Evad vinci
Evad vinciEvad vinci
Evad vinci
 
JABES 2018 - Atelier : bien se préparer aux prochaines évolutions de consigne...
JABES 2018 - Atelier : bien se préparer aux prochaines évolutions de consigne...JABES 2018 - Atelier : bien se préparer aux prochaines évolutions de consigne...
JABES 2018 - Atelier : bien se préparer aux prochaines évolutions de consigne...
 
Fil rouge atelier "Quels tableaux de bord pour les acteurs de l'éducation ?"
Fil rouge atelier "Quels tableaux de bord pour les acteurs de l'éducation ?"Fil rouge atelier "Quels tableaux de bord pour les acteurs de l'éducation ?"
Fil rouge atelier "Quels tableaux de bord pour les acteurs de l'éducation ?"
 
Qu'est-ce que décrire un MOOC ?
Qu'est-ce que décrire un MOOC ?Qu'est-ce que décrire un MOOC ?
Qu'est-ce que décrire un MOOC ?
 
METHODOLOGIE DU RAPPORT DE STAGE OU MEMOIRE_DE_RECHERCHE_APPLIQUEE.ppt
METHODOLOGIE DU RAPPORT DE STAGE OU MEMOIRE_DE_RECHERCHE_APPLIQUEE.pptMETHODOLOGIE DU RAPPORT DE STAGE OU MEMOIRE_DE_RECHERCHE_APPLIQUEE.ppt
METHODOLOGIE DU RAPPORT DE STAGE OU MEMOIRE_DE_RECHERCHE_APPLIQUEE.ppt
 
sout_crmef.pptx
sout_crmef.pptxsout_crmef.pptx
sout_crmef.pptx
 
Dispositif blended learning - Informatique au service des Sciences expériment...
Dispositif blended learning - Informatique au service des Sciences expériment...Dispositif blended learning - Informatique au service des Sciences expériment...
Dispositif blended learning - Informatique au service des Sciences expériment...
 
Diprobib aifbd
Diprobib aifbdDiprobib aifbd
Diprobib aifbd
 
MOOC DD animation evaluation par les pairs MOODLE retour expérience
MOOC DD  animation evaluation par les pairs MOODLE retour expérienceMOOC DD  animation evaluation par les pairs MOODLE retour expérience
MOOC DD animation evaluation par les pairs MOODLE retour expérience
 
Labord. evaluation-par-les-pairs -MOOC-pedagogie
Labord. evaluation-par-les-pairs -MOOC-pedagogieLabord. evaluation-par-les-pairs -MOOC-pedagogie
Labord. evaluation-par-les-pairs -MOOC-pedagogie
 
L'évaluation par les pairs - Florence Labord - web-conférence du 9 juin 2015
L'évaluation par les pairs - Florence Labord - web-conférence du 9 juin 2015L'évaluation par les pairs - Florence Labord - web-conférence du 9 juin 2015
L'évaluation par les pairs - Florence Labord - web-conférence du 9 juin 2015
 
MarkUs, un logiciel libre pour l’annotation du code et des travaux rendus par...
MarkUs, un logiciel libre pour l’annotation du code et des travaux rendus par...MarkUs, un logiciel libre pour l’annotation du code et des travaux rendus par...
MarkUs, un logiciel libre pour l’annotation du code et des travaux rendus par...
 
Ap7 cinop burundi octobre 2021 evaluer vos etudiants
Ap7 cinop burundi octobre 2021  evaluer vos etudiantsAp7 cinop burundi octobre 2021  evaluer vos etudiants
Ap7 cinop burundi octobre 2021 evaluer vos etudiants
 
L’évaluation des apprentissages
L’évaluation des apprentissagesL’évaluation des apprentissages
L’évaluation des apprentissages
 
Scenari / Moodle - une chaine integree pour la production/diffusion d evaluat...
Scenari / Moodle - une chaine integree pour la production/diffusion d evaluat...Scenari / Moodle - une chaine integree pour la production/diffusion d evaluat...
Scenari / Moodle - une chaine integree pour la production/diffusion d evaluat...
 
Construire ensemble un enseignement du front-end pertinent, pédagogique et pé...
Construire ensemble un enseignement du front-end pertinent, pédagogique et pé...Construire ensemble un enseignement du front-end pertinent, pédagogique et pé...
Construire ensemble un enseignement du front-end pertinent, pédagogique et pé...
 

Plus de Yannick Prié

Ouvrir les boîtes noires de la mission herschel
Ouvrir les boîtes noires de la mission herschel Ouvrir les boîtes noires de la mission herschel
Ouvrir les boîtes noires de la mission herschel
Yannick Prié
 
Travail intellectuel, traces et réflexivité
Travail intellectuel, traces et réflexivitéTravail intellectuel, traces et réflexivité
Travail intellectuel, traces et réflexivité
Yannick Prié
 
DEScribe : Descriptive Experience Sampling appliqué au desktop
DEScribe : Descriptive Experience Sampling appliqué au desktopDEScribe : Descriptive Experience Sampling appliqué au desktop
DEScribe : Descriptive Experience Sampling appliqué au desktop
Yannick Prié
 
Advene : Annotate Digital Vidéo, Echange on the NEt - Journée Arpège
Advene : Annotate Digital Vidéo, Echange on the NEt - Journée ArpègeAdvene : Annotate Digital Vidéo, Echange on the NEt - Journée Arpège
Advene : Annotate Digital Vidéo, Echange on the NEt - Journée Arpège
Yannick Prié
 
Réintégrations formelles du sens dans le système numérique
Réintégrations formelles du sens dans le système numériqueRéintégrations formelles du sens dans le système numérique
Réintégrations formelles du sens dans le système numérique
Yannick Prié
 
DIAM : Towards a Model for Describing Appropriation Processes Through the Evo...
DIAM : Towards a Model for Describing Appropriation Processes Through the Evo...DIAM : Towards a Model for Describing Appropriation Processes Through the Evo...
DIAM : Towards a Model for Describing Appropriation Processes Through the Evo...
Yannick Prié
 
Pour une ingénierie des connaissances dynamiques. Prendre en compte la dynam...
Pour une ingénierie  des connaissances dynamiques. Prendre en compte la dynam...Pour une ingénierie  des connaissances dynamiques. Prendre en compte la dynam...
Pour une ingénierie des connaissances dynamiques. Prendre en compte la dynam...
Yannick Prié
 
VISU : Une plateforme de visioconférence à base de traces pour le tutorat à d...
VISU : Une plateforme de visioconférence à base de traces pour le tutorat à d...VISU : Une plateforme de visioconférence à base de traces pour le tutorat à d...
VISU : Une plateforme de visioconférence à base de traces pour le tutorat à d...
Yannick Prié
 
Vers une phénoménologie des inscriptions numériques. Dynamique de l’activité ...
Vers une phénoménologie des inscriptions numériques. Dynamique de l’activité ...Vers une phénoménologie des inscriptions numériques. Dynamique de l’activité ...
Vers une phénoménologie des inscriptions numériques. Dynamique de l’activité ...
Yannick Prié
 
Assessing the use of a Trace-Based Synchronous Tool for distant language tut...
Assessing the use of a Trace-Based Synchronous Tool for distant language tut...Assessing the use of a Trace-Based Synchronous Tool for distant language tut...
Assessing the use of a Trace-Based Synchronous Tool for distant language tut...
Yannick Prié
 
Traces numeriques explicites
Traces numeriques explicitesTraces numeriques explicites
Traces numeriques explicites
Yannick Prié
 
Une introduction au concept d'autopoièse
Une introduction au concept d'autopoièseUne introduction au concept d'autopoièse
Une introduction au concept d'autopoièse
Yannick Prié
 
Traces numériques, identités, personnalités
Traces numériques, identités, personnalitésTraces numériques, identités, personnalités
Traces numériques, identités, personnalités
Yannick Prié
 
Une introduction au web de données
Une introduction au web de donnéesUne introduction au web de données
Une introduction au web de donnéesYannick Prié
 
Réflexivité et visualisation interactive de traces
Réflexivité et visualisation interactive de tracesRéflexivité et visualisation interactive de traces
Réflexivité et visualisation interactive de traces
Yannick Prié
 

Plus de Yannick Prié (15)

Ouvrir les boîtes noires de la mission herschel
Ouvrir les boîtes noires de la mission herschel Ouvrir les boîtes noires de la mission herschel
Ouvrir les boîtes noires de la mission herschel
 
Travail intellectuel, traces et réflexivité
Travail intellectuel, traces et réflexivitéTravail intellectuel, traces et réflexivité
Travail intellectuel, traces et réflexivité
 
DEScribe : Descriptive Experience Sampling appliqué au desktop
DEScribe : Descriptive Experience Sampling appliqué au desktopDEScribe : Descriptive Experience Sampling appliqué au desktop
DEScribe : Descriptive Experience Sampling appliqué au desktop
 
Advene : Annotate Digital Vidéo, Echange on the NEt - Journée Arpège
Advene : Annotate Digital Vidéo, Echange on the NEt - Journée ArpègeAdvene : Annotate Digital Vidéo, Echange on the NEt - Journée Arpège
Advene : Annotate Digital Vidéo, Echange on the NEt - Journée Arpège
 
Réintégrations formelles du sens dans le système numérique
Réintégrations formelles du sens dans le système numériqueRéintégrations formelles du sens dans le système numérique
Réintégrations formelles du sens dans le système numérique
 
DIAM : Towards a Model for Describing Appropriation Processes Through the Evo...
DIAM : Towards a Model for Describing Appropriation Processes Through the Evo...DIAM : Towards a Model for Describing Appropriation Processes Through the Evo...
DIAM : Towards a Model for Describing Appropriation Processes Through the Evo...
 
Pour une ingénierie des connaissances dynamiques. Prendre en compte la dynam...
Pour une ingénierie  des connaissances dynamiques. Prendre en compte la dynam...Pour une ingénierie  des connaissances dynamiques. Prendre en compte la dynam...
Pour une ingénierie des connaissances dynamiques. Prendre en compte la dynam...
 
VISU : Une plateforme de visioconférence à base de traces pour le tutorat à d...
VISU : Une plateforme de visioconférence à base de traces pour le tutorat à d...VISU : Une plateforme de visioconférence à base de traces pour le tutorat à d...
VISU : Une plateforme de visioconférence à base de traces pour le tutorat à d...
 
Vers une phénoménologie des inscriptions numériques. Dynamique de l’activité ...
Vers une phénoménologie des inscriptions numériques. Dynamique de l’activité ...Vers une phénoménologie des inscriptions numériques. Dynamique de l’activité ...
Vers une phénoménologie des inscriptions numériques. Dynamique de l’activité ...
 
Assessing the use of a Trace-Based Synchronous Tool for distant language tut...
Assessing the use of a Trace-Based Synchronous Tool for distant language tut...Assessing the use of a Trace-Based Synchronous Tool for distant language tut...
Assessing the use of a Trace-Based Synchronous Tool for distant language tut...
 
Traces numeriques explicites
Traces numeriques explicitesTraces numeriques explicites
Traces numeriques explicites
 
Une introduction au concept d'autopoièse
Une introduction au concept d'autopoièseUne introduction au concept d'autopoièse
Une introduction au concept d'autopoièse
 
Traces numériques, identités, personnalités
Traces numériques, identités, personnalitésTraces numériques, identités, personnalités
Traces numériques, identités, personnalités
 
Une introduction au web de données
Une introduction au web de donnéesUne introduction au web de données
Une introduction au web de données
 
Réflexivité et visualisation interactive de traces
Réflexivité et visualisation interactive de tracesRéflexivité et visualisation interactive de traces
Réflexivité et visualisation interactive de traces
 

Dernier

Iris van Herpen. pptx
Iris         van        Herpen.      pptxIris         van        Herpen.      pptx
Iris van Herpen. pptx
Txaruka
 
Textes de famille concernant les guerres V2.pdf
Textes de famille concernant les guerres V2.pdfTextes de famille concernant les guerres V2.pdf
Textes de famille concernant les guerres V2.pdf
Michel Bruley
 
BATIMENT 5.pptx. Fil français tourné en France
BATIMENT 5.pptx. Fil français tourné en FranceBATIMENT 5.pptx. Fil français tourné en France
BATIMENT 5.pptx. Fil français tourné en France
Txaruka
 
Veille Audocdi 90 - mois de juin 2024.pdf
Veille Audocdi 90 - mois de juin 2024.pdfVeille Audocdi 90 - mois de juin 2024.pdf
Veille Audocdi 90 - mois de juin 2024.pdf
frizzole
 
Bibliothèque de L'Union - Bilan de l'année 2023
Bibliothèque de L'Union - Bilan de l'année 2023Bibliothèque de L'Union - Bilan de l'année 2023
Bibliothèque de L'Union - Bilan de l'année 2023
Bibliothèque de L'Union
 
Proyecto Erasmus Jardineros y jardineras de paz
Proyecto Erasmus Jardineros y jardineras de pazProyecto Erasmus Jardineros y jardineras de paz
Proyecto Erasmus Jardineros y jardineras de paz
Morzadec Cécile
 
cours-LasergrammetrieLe « LiDAR», de l’anglais « Light.pptx
cours-LasergrammetrieLe « LiDAR», de l’anglais « Light.pptxcours-LasergrammetrieLe « LiDAR», de l’anglais « Light.pptx
cours-LasergrammetrieLe « LiDAR», de l’anglais « Light.pptx
AbdessamadAmimi1
 

Dernier (7)

Iris van Herpen. pptx
Iris         van        Herpen.      pptxIris         van        Herpen.      pptx
Iris van Herpen. pptx
 
Textes de famille concernant les guerres V2.pdf
Textes de famille concernant les guerres V2.pdfTextes de famille concernant les guerres V2.pdf
Textes de famille concernant les guerres V2.pdf
 
BATIMENT 5.pptx. Fil français tourné en France
BATIMENT 5.pptx. Fil français tourné en FranceBATIMENT 5.pptx. Fil français tourné en France
BATIMENT 5.pptx. Fil français tourné en France
 
Veille Audocdi 90 - mois de juin 2024.pdf
Veille Audocdi 90 - mois de juin 2024.pdfVeille Audocdi 90 - mois de juin 2024.pdf
Veille Audocdi 90 - mois de juin 2024.pdf
 
Bibliothèque de L'Union - Bilan de l'année 2023
Bibliothèque de L'Union - Bilan de l'année 2023Bibliothèque de L'Union - Bilan de l'année 2023
Bibliothèque de L'Union - Bilan de l'année 2023
 
Proyecto Erasmus Jardineros y jardineras de paz
Proyecto Erasmus Jardineros y jardineras de pazProyecto Erasmus Jardineros y jardineras de paz
Proyecto Erasmus Jardineros y jardineras de paz
 
cours-LasergrammetrieLe « LiDAR», de l’anglais « Light.pptx
cours-LasergrammetrieLe « LiDAR», de l’anglais « Light.pptxcours-LasergrammetrieLe « LiDAR», de l’anglais « Light.pptx
cours-LasergrammetrieLe « LiDAR», de l’anglais « Light.pptx
 

Des usages de lecture à la réingénierie des cours Vers des tableaux de bord auteurs 
sur la plateforme Openclassrooms

  • 1. Des usages de lecture à la réingénierie des cours Vers des tableaux de bord auteurs 
 sur la plateforme Openclassrooms Yannick Prié LS2N UMR 6004 - Université de Nantes UBL - UTICE - Les learning analytics : quand le big data s'intéresse à l’éducation - 19 janvier 2017 Thèse de Madjid Sadallah (Université de Bejaïa), co-encadrée par Benoit Encelle (Université de Lyon 1)
  • 2. Motivation / objectifs Cours en ligne, usages massifs, adaptation continue. Objectif : analyser les usages de cours en ligne 
 en vue de leur reconception • fournir aux auteurs de cours en ligne • un tableau de bord construit à partir des traces de lecture des apprenants • pour faciliter la réingénierie de leurs cours
  • 4. Plan • Objectifs et approche • Contexte applicatif • Indicateurs de lecture • Problèmes et propositions de remédiations • Tableau de bord • Evaluation
  • 5. OpenClassrooms s Première plate-forme européenne d’éducation en ligne spécialisée dans le numérique. En chiffres :
  • 7. Les traces Utilisateur Cours Chapitre Session Date c17be14cebaa7c 3522386 3522393 vrq6ph2bfl6urpqkhj98 2016-03-07 11:50:15 edc72bcfd1f9abf 1885491 1886706 o4lrtbc37urgs7g5e5tp 2014-10-31 10:25:15 69ce920cdca876 2766951 2785906 jtu7sm4e7emvhnu9t97 2015-03-14 12:09:58 ... … … … .. .
  • 8. Plan • Objectifs et approche • Contexte applicatif • Indicateurs de lecture • Problèmes et propositions de remédiations • Tableau de bord • Evaluation
  • 9. Indicateurs de lecture Caractérisent la lecture d’un granule documentaire donné • intérêt, difficulté, etc.
  • 10. Calcul de sessions de lecture Découpent l’activité d’un apprenant en segments significatifs • lecture du cours estimée continue (Sadallah et al. 2015) • cf. problème du time-on-task (Kovanovic et al., 2015) Méthode 1. calcul à partir d’un seuil de temps de lecture maximal pour un chapitre 2. session = séquences de lectures de chapitres < aux seuils
  • 11. Classes d’indicateurs Indicateurs de lecture simple : toutes les lectures d’un granule Indicateurs de relecture : accès secondaires Indicateurs de navigation : navigation intra-session 
 vers / depuis un granule Indicateurs d’arrêts & de reprises : navigation inter-session 
 vers / depuis un granule
  • 12. Indicateurs de lecture simple Rendent compte de l'intérêt des chapitres lus • Taux de visites • Taux de lecteurs distincts • Nb sessions contenant le chapitre • Vitesse moyenne de lecture • Popularité (agrégé)
  • 13. Indicateurs de relecture Lien à la compréhension Taux de relectures conjointes • au sein d’une même séance de lecture (difficulté de compréhension ?) Taux de relectures disjointes • au sein des séances de lecture distinctes (difficulté de rétention ?) Taux de relecture global (agrégé)
  • 14. Indicateurs de navigation Navigation vers et depuis un chapitre particulier • Linéarité de lecture • Linéarité d’arrivée / de départ • Taux arrivées non linéaires depuis l’avant / l’arrière • Taux de départs non linéaires vers l’avant / l’arrière
  • 15. Indicateurs d’arrêt et de reprise Fin de sessions sur un chapitre • Fins de session sans reprise (= arrêt définitif) • Fins de sessions avec reprise linéaire • Fins de sessions avec reprise non linéaire avant / arrière • Taux d’arrêts (agrégé)
  • 16. Plan • Objectifs et approche • Contexte applicatif • Indicateurs de lecture • Problèmes et propositions de remédiations • Tableau de bord • Evaluation
  • 17. Détection de problèmes Détection des granules avec des indicateurs outliers (valeurs remarquables) • méthode de détection : MAD Median Absolute Deviation (Leys, 2013) • exemple : taux lecteur 3 / taux lecteur médian 100
  • 18. Suggestions de révision Fonction de l’indicateur et des valeurs remarquables (trop hautes/trop basses) A partir des actions possibles de la littérature Révision de structure • ajouter / supprimer / déplacer / fusionner / scinder un chapitre Révision de contenu • reformuler, expliquer, simplifier, illustrer, corriger, 
 mettre à jour, etc Révision de navigation • ajouter / modifier / supprimer un lien interne ou externe
  • 19. Plan • Objectifs et approche • Contexte applicatif • Indicateurs de lecture • Problèmes et propositions de remédiations • Tableau de bord • Evaluation
  • 20. Tableau de bord Fonctionnalités • Indicateurs, problèmes potentiels, suggestions de révision • Navigation • Gestion des tâches
  • 21. CoReaDa : Course Reading Dashboard
  • 22. Carte de chaleur des indicateurs
  • 26. Plan • Objectifs et approche • Contexte applicatif • Indicateurs de lecture • Problèmes et propositions de remédiations • Tableau de bord • Evaluation
  • 28. Evaluer… au niveau théorique Approche globale • méthodologie d’assistance à la re-conception de contenus pédagogiques basée sur les traces Concepts proposés + manière de les calculer • notion de sessions de lecture / algorithme de découpage de traces • classes d’indicateurs et indicateurs pour qualifier la lecture • problèmes potentiels détectés associés aux indicateurs • suggestions (révisions) associées aux problèmes détectés
  • 29. Evaluer… au niveau pratique Démarche générale de conception Outil conçu et développé • utilisabilité • utilité • potentielle • effective Effet sur l’apprentissage Effet sur les pratiques
  • 30. Évaluations réalisées Qualité de la reconstruction de sessions de lecture, comparaison avec d’autres méthodes de calcul • test comparatif Pertinence / utilité potentielle des classes d’indicateurs et des indicateurs proposés pour qualifier la lecture • interviews / questionnaires (125 auteurs OC) (Sadallah et al. 2015)
  • 31. Évaluation en cours Problèmes potentiels détectés + propositions de révisions associées • pertinence / complétude (cf. précision / rappel) Utilisabilité tableau de bord auteurs • réussite / rapidité pour réaliser un ensemble de tâches Utilité tableau de bord • acceptabilité / TAM (Technology Acceptance Model) • basé sur perception utilité + facilité d’utilisation
  • 32. Mode d’évaluation, (pour une dizaine de cours) 1. Questionnaire initial A. perception de la lecture du cours et des problèmes potentiels 2. Visite guidée du tableau de bord 3. Tâches basiques d’exploration de fonctionnalités 4. Etude des problèmes et suggestions propres au cours de l’auteur A. évaluation et commentaire des problèmes principaux B. évaluation et commentaire des suggestions principales C. recherche libre d’autres problèmes non détectés 5. Questionnaire TAM 6. (interview)
  • 33. Bilan Approche complète • des logs à un outil utilisable • évaluation en cours Démarche incrémentale • différents acteurs : auteurs de cours, chefs de projets, directeur technique, chercheurs Vers une intégration dans OC ?
  • 34. Références Leys, C., Ley, C., Klein, O., Bernard, P., & Licata, L. (2013). Detecting outliers: Do not use standard deviation around the mean, use absolute deviation around the median. Journal of Experimental Social Psychology, 49(4), pp. 764-766. Kovanović, V., Gašević, D., Dawson, S., Joksimović, S., Baker, R. S., & Hatala, M. (2015). Penetrating the black box of time-on-task estimation. In Proceedings of the Fifth International Conference on Learning Analytics And Knowledge, pp. 184-193. Sadallah, M., Encelle, B., Maredj, A. E., & Prié, Y. (2015). Towards Reading Session-Based Indicators in Educational Reading Analytics. In EC-TEL 2015 Design for Teaching and Learning in a Networked World, pp. 297-310.