Evaluation par les pairs dans les
MOOC : résultats d’enquête
Février 2016 - Clément Dussarps & Elodie
Vaugier
2
Auteurs de l’enquête
 Clément DUSSARPS, docteur en sciences de
l’information et de la communication
clementdussarps@gma...
3
Sommaire
Résultats d'enquête MOOC - Clément Dussarps & Elodie Vaugier
 Echantillon 4
 Activités et temps passé sur le ...
N = 135
Remarques :
• tous les résultats suivants sont issus de
l’échantillon de répondants, 135
apprenants ayant réalisé ...
5
Echantillon
Résultats d'enquête MOOC - Clément Dussarps & Elodie Vaugier
Coursera
13%
Autres
14,81%
France
Université
Nu...
6
Echantillon
 Sexe et âges :
 Statut :
 Localisation :
Résultats d'enquête MOOC - Clément Dussarps & Elodie Vaugier
60...
7
Un échantillon motivé et
satisfait
Résultats d'enquête MOOC - Clément Dussarps & Elodie Vaugier
92%
94%
96%
60%
0% 20% 4...
8
Communication sur l’EPP
Résultats d'enquête MOOC - Clément Dussarps & Elodie Vaugier
Tous les apprenants ne savaient pas...
Activités et temps passé sur le
MOOC
10
Temps passé par type d’activité
Résultats d'enquête MOOC - Clément Dussarps & Elodie Vaugier
72.00%
51.50%
86.00%
20.50...
11
Temps prévu vs temps passé
Résultats d'enquête MOOC - Clément Dussarps & Elodie Vaugier
de temps que celui prévu (annon...
Anonymat et évaluation par les pairs
13
Anonymat et qualité de la note
Résultats d'enquête MOOC - Clément Dussarps & Elodie Vaugier
 47 % des apprenants de no...
14
Anonymat : préférences
Résultats d'enquête MOOC - Clément Dussarps & Elodie Vaugier
33%
20%
47%
Préférent être anonymes...
(EPP : Evaluation Par les Pairs)
EPP: organisation des MOOC
16
EPP et organisation des MOOC
Résultats d'enquête MOOC - Clément Dussarps & Elodie Vaugier
 42 % des apprenants devaien...
Expériences en EPP
18
Expériences précédentes
Résultats d'enquête MOOC - Clément Dussarps & Elodie Vaugier
 56 % des apprenants avaient une ...
EPP et communication avec autrui
20
Evaluer seul ou à plusieurs ?
Résultats d'enquête MOOC - Clément Dussarps & Elodie Vaugier
 90 % des apprenants ont ré...
21
Echanges avec l’équipe pédagogique
Résultats d'enquête MOOC - Clément Dussarps & Elodie Vaugier
 32 % ont contacté l’é...
22
Echanges avec les autres apprenants
Résultats d'enquête MOOC - Clément Dussarps & Elodie Vaugier
Avec l’ensemble des ap...
EPP et ressentis des apprenants
24
Sentiments d’être légitime, capable,
suffisamment formé
Résultats d'enquête MOOC - Clément Dussarps & Elodie Vaugier
Po...
25
Importance des commentaires reçus
Résultats d'enquête MOOC - Clément Dussarps & Elodie Vaugier
 95 % des apprenants ac...
Satisfaction des apprenants
27
Eléments pour aider à évaluer
Résultats d'enquête MOOC - Clément Dussarps & Elodie Vaugier
 86 % des apprenants ont un...
28
Outils pour évaluer
Résultats d'enquête MOOC - Clément Dussarps & Elodie Vaugier
 88 % des apprenants ont trouvé l’out...
29
Utilité pédagogique
Résultats d'enquête MOOC - Clément Dussarps & Elodie Vaugier
 85 % considèrent qu’évaluer leurs pa...
30
Motivation et plaisir à évaluer ses pairs
Résultats d'enquête MOOC - Clément Dussarps & Elodie Vaugier
 84 % des appre...
31
Contrainte à évaluer ses pairs
Résultats d'enquête MOOC - Clément Dussarps & Elodie Vaugier
 22 % ont trouvé l’évaluat...
Préférences et avis sur l’EPP
Crédit image : Elliot
Lepers
33
Regards sur l’EPP
Résultats d'enquête MOOC - Clément Dussarps & Elodie Vaugier
 Malgré un regard majoritairement posit...
Prochain SlideShare
Chargement dans…5
×

Evaluation par les pairs dans les MOOC : résultats d'une enquête

4 985 vues

Publié le

Résultats d'une enquête (qui sera analysée plus profondément dans le futur et sans doute reconduite) sur l'évaluation par les pairs dans les MOOC.

Publié dans : Formation
0 commentaire
2 j’aime
Statistiques
Remarques
  • Soyez le premier à commenter

Aucun téléchargement
Vues
Nombre de vues
4 985
Sur SlideShare
0
Issues des intégrations
0
Intégrations
3 495
Actions
Partages
0
Téléchargements
15
Commentaires
0
J’aime
2
Intégrations 0
Aucune incorporation

Aucune remarque pour cette diapositive

Evaluation par les pairs dans les MOOC : résultats d'une enquête

  1. 1. Evaluation par les pairs dans les MOOC : résultats d’enquête Février 2016 - Clément Dussarps & Elodie Vaugier
  2. 2. 2 Auteurs de l’enquête  Clément DUSSARPS, docteur en sciences de l’information et de la communication clementdussarps@gmail.com  Elodie VAUGIER, ingénieur pédagogique elodievaugier@yahoo.fr  Administrée en avril/mai 2015 Résultats d'enquête MOOC - Clément Dussarps & Elodie Vaugier
  3. 3. 3 Sommaire Résultats d'enquête MOOC - Clément Dussarps & Elodie Vaugier  Echantillon 4  Activités et temps passé sur le MOOC 9  Anonymat et évaluation par les pairs 12  Evaluation par les pairs (EPP) :  Organisation des MOOC 15  Expérience en EPP 17  EPP et communication avec autrui 19  EPP et ressentis des apprenants 23  Satisfaction des apprenants 26  Préférences et avis sur l’EPP 32
  4. 4. N = 135 Remarques : • tous les résultats suivants sont issus de l’échantillon de répondants, 135 apprenants ayant réalisé des évaluations par les pairs ; • l’échantillon est opportuniste et n’a pas vocation à être représentatif. Echantillon
  5. 5. 5 Echantillon Résultats d'enquête MOOC - Clément Dussarps & Elodie Vaugier Coursera 13% Autres 14,81% France Université Numérique 36% Unow 36,30% Plateformes représentées (répartition des individus par plateforme) Principaux MOOC enquêtés : - ABC de la gestion de projet (27 %) - Comprendre le transmédia storytelling (22 %) - Gamification (7 %) - Monter un MOOC de A à Z (7 %) - Effectuation - L’entreprenariat pour tous (5 %) - Informer et communiquer sur les réseaux sociaux (5 %)
  6. 6. 6 Echantillon  Sexe et âges :  Statut :  Localisation : Résultats d'enquête MOOC - Clément Dussarps & Elodie Vaugier 60 % 40 % 5% 24% 41% 30% 0% 20% 40% 60% 80% 100% Age des répondants (en années) 18-24 25-35 36-49 + de 50 71 % ont plus de 35 ans 67 % en emploi 18 % deman- deurs d’emploi 6 % étudiants 85 % en France 11 % en Europe 4 % hors Europe (9 % autres statuts)
  7. 7. 7 Un échantillon motivé et satisfait Résultats d'enquête MOOC - Clément Dussarps & Elodie Vaugier 92% 94% 96% 60% 0% 20% 40% 60% 80% 100% 120% Considèrent le MOOC important pour eux Sont satisfaits du MOOC Ont plaisir à suivre le MOOC Accordent de l'importance à la certification Les apprenants…  Seuls 4 % ont abandonné le MOOC (pour lequel ils répondent à cette enquête)  97 % se disent à l’aise avec les outils numériques
  8. 8. 8 Communication sur l’EPP Résultats d'enquête MOOC - Clément Dussarps & Elodie Vaugier Tous les apprenants ne savaient pas qu’ils auraient à réaliser une évaluation par les pairs (EPP) avant de démarrer le MOOC :  Seuls 59 % des apprenants savaient qu’ils auraient à évaluer leurs pairs AVANT de démarrer le MOOC.  29 % l’ont découvert lors de la première semaine du MOOC et 9 % lors de la réalisation ou l’évaluation du premier travail. 3 % l’ont appris à un autre moment.
  9. 9. Activités et temps passé sur le MOOC
  10. 10. 10 Temps passé par type d’activité Résultats d'enquête MOOC - Clément Dussarps & Elodie Vaugier 72.00% 51.50% 86.00% 20.50% 39.00% 10.00%7.50% 9.50% 4.00% Cours Travaux EPP Temps passé par les apprenants par type d’activité (en heures par semaine) < à 3h De 4 à 6h > à 7h  La plupart des apprenants passent moins de 3 heures par semaine sur chaque type d’activités (cours, travaux à rendre, évaluation par les pairs).  Les travaux à réaliser demandent souvent plus de temps (4 heures ou plus pour 48,50 %) que le reste.  Les travaux à réaliser demandent généralement plus de temps que les évaluations de ses pairs.
  11. 11. 11 Temps prévu vs temps passé Résultats d'enquête MOOC - Clément Dussarps & Elodie Vaugier de temps que celui prévu (annoncé) par les MOOC étudiés. 56 % des apprenants ont passé 20 % des apprenants ont passé 24 % des apprenants ont passé  Généralement, un temps moyen à passer par semaine est indiqué sur les plateformes de MOOC. Ce temps n’est pas toujours celui réellement passé par les apprenants.  Rappel : 41 % des "MOOCeurs" ne savaient pas qu'ils auraient à évaluer leurs pairs avant de commencer le MOOC.
  12. 12. Anonymat et évaluation par les pairs
  13. 13. 13 Anonymat et qualité de la note Résultats d'enquête MOOC - Clément Dussarps & Elodie Vaugier  47 % des apprenants de notre échantillon connaissaient le nom ou pseudo de l'étudiant à évaluer  Les apprenants pensent que l’anonymat… 19 % : améliore la qualité de la note 76 % : ne change rien 5 % : réduit la qualité de la note
  14. 14. 14 Anonymat : préférences Résultats d'enquête MOOC - Clément Dussarps & Elodie Vaugier 33% 20% 47% Préférent être anonymes Préfèrent être connus de leur correcteur Y sont indifférents Préférence vis-à-vis de leur correcteur 31% 28% 41% Préfèrent ne pas connaître la personne qu'ils corrigent Préfère être connu de la personne qu'ils corrigent Y sont indifférents Préférences vis-à-vis de leurs pairs, en tant que correcteurs
  15. 15. (EPP : Evaluation Par les Pairs) EPP: organisation des MOOC
  16. 16. 16 EPP et organisation des MOOC Résultats d'enquête MOOC - Clément Dussarps & Elodie Vaugier  42 % des apprenants devaient s’évaluer eux-mêmes (en plus d’évaluer leurs pairs) 1.61% 43.55% 53.23% 1.61% 1 ou moins 2 à 3 4 à 5 Plus de 5 Nombre de travaux à évaluer  La majorité des apprenants avaient entre 4 et 5 travaux à évaluer :  100 % des apprenants disposaient d'aide à l'évaluation. La consigne est le plus fréquent (87%). 87% 81% 47% 23% Consigne Barème Conseils Exemple de correction Outils d’aide à l’évaluation disponibles :  42 % des apprenants pouvaient contacter leur pair-évaluateur. 18% d'entre eux ne savaient pas si cela était possible.
  17. 17. Expériences en EPP
  18. 18. 18 Expériences précédentes Résultats d'enquête MOOC - Clément Dussarps & Elodie Vaugier  56 % des apprenants avaient une expérience d’évaluation par les pairs (dont 67 % en dehors des MOOC) : 44% 12% 37% 7% Aucune expérience Expérience dans un autre MOOC Expérience hors MOOC Autre MOOC + hors MOOC Expériences précédentes en EPP  Pour 78 %, cette expérience précédente a été une aide pour évaluer leurs pairs dans le MOOC.
  19. 19. EPP et communication avec autrui
  20. 20. 20 Evaluer seul ou à plusieurs ? Résultats d'enquête MOOC - Clément Dussarps & Elodie Vaugier  90 % des apprenants ont réalisé les évaluations seul  Seuls 20 % d’entre eux auraient préféré la faire à plusieurs
  21. 21. 21 Echanges avec l’équipe pédagogique Résultats d'enquête MOOC - Clément Dussarps & Elodie Vaugier  32 % ont contacté l’équipe pédagogique au sujet de l’évaluation par les pairs  56 % estiment ne pas en avoir eu besoin  12 % ne savaient pas si cela était possible
  22. 22. 22 Echanges avec les autres apprenants Résultats d'enquête MOOC - Clément Dussarps & Elodie Vaugier Avec l’ensemble des apprenants :  44 % des apprenants ont échangé avec leurs pairs au sujet de l’évaluation par les pairs et ont obtenu une réponse  43 % ne l’ont pas fait, jugeant cela non nécessaire Pour les 13 % restants : ils ne savaient pas si cela était possible (7%), ne savaient pas comment le faire (3 %) ou cela n'était pas possible dans leur MOOC (3 %). Avec les pairs évalués :  42 % pouvaient contacter les pairs évalués et l’ont fait  40 % ne pouvaient pas les contacter (faute d’un dispositif technique le permettant)  18 % n’ont pas su dire si cela était possible
  23. 23. EPP et ressentis des apprenants
  24. 24. 24 Sentiments d’être légitime, capable, suffisamment formé Résultats d'enquête MOOC - Clément Dussarps & Elodie Vaugier Pour évaluer ses pairs, l’apprenant se sent… 24% 8% 39% 47% 48% 34% 29% 44% 27% Suffisamment formé Capable Légitime Tout à fait Plutôt oui Plutôt non ou pas du tout
  25. 25. 25 Importance des commentaires reçus Résultats d'enquête MOOC - Clément Dussarps & Elodie Vaugier  95 % des apprenants accordent de l’importance aux commentaires reçus de la part de leurs pairs sur leur évaluation. 2% 4% 39% 55% Très faible Plutôt faible Plutôt grande Très grande Importance accordée aux commentaires des pairs-évaluateurs
  26. 26. Satisfaction des apprenants
  27. 27. 27 Eléments pour aider à évaluer Résultats d'enquête MOOC - Clément Dussarps & Elodie Vaugier  86 % des apprenants ont un regard positif sur les éléments mis à leur disposition pour les aider à évaluer les travaux de leurs pairs :  75 % ont trouvé que les aides (consignes, barèmes…) pour évaluer leurs pairs étaient en nombre suffisant. 13.93% 62.30% 23.77% Plutôt insatisfait Plutôt satisfait Totalement satisfait Niveau de satisfaction sur les outils d’aide à l’évaluation Cette observation semble sans lien avec une plateforme ou un MOOC, en regard de l’échantillon.
  28. 28. 28 Outils pour évaluer Résultats d'enquête MOOC - Clément Dussarps & Elodie Vaugier  88 % des apprenants ont trouvé l’outil d’évaluation par les pairs facile (41 %) ou très facile (47 %) à utiliser. Cette observation semble sans lien avec une plateforme ou un MOOC, en regard de l’échantillon.
  29. 29. 29 Utilité pédagogique Résultats d'enquête MOOC - Clément Dussarps & Elodie Vaugier  85 % considèrent qu’évaluer leurs pairs leur a permis de progresser dans leur apprentissage.  81 % considèrent également que leur auto- évaluation leur a permis de progresser.
  30. 30. 30 Motivation et plaisir à évaluer ses pairs Résultats d'enquête MOOC - Clément Dussarps & Elodie Vaugier  84 % des apprenants ont trouvé motivant d’évaluer leurs pairs (39 % très motivant, 45 % plutôt motivant)  89 % des apprenants ont trouvé plaisant d’évaluer leurs pairs (44 % très plaisant, 45 % plutôt plaisant).
  31. 31. 31 Contrainte à évaluer ses pairs Résultats d'enquête MOOC - Clément Dussarps & Elodie Vaugier  22 % ont trouvé l’évaluation par les pairs contraignante. Les principales raisons évoquées sont :  Le manque de temps / un nombre trop important de travaux à évaluer  Le flou des consignes pour évaluer  La complexité du travail  Un sentiment d’illégitimité à évaluer  Une absence de goût pour l’évaluation en général
  32. 32. Préférences et avis sur l’EPP Crédit image : Elliot Lepers
  33. 33. 33 Regards sur l’EPP Résultats d'enquête MOOC - Clément Dussarps & Elodie Vaugier  Malgré un regard majoritairement positif sur l’EPP (permettant de progresser dans l’apprentissage, motivante, satisfaisante…), les répondants indiquent :  À 50 %, qu’ils auraient préféré être notés par un enseignant (dont 43 % parmi ceux trouvant l’EPP motivante)  A 54 % qu’ils jugent l’EPP peu fiable (dont 48 % parmi ceux trouvant l’EPP motivante)  Et cela même si 92 % estiment avoir été évalués avec sérieux par leurs pairs.  L’enseignant reste, pour la majorité des apprenants, l’évaluateur préféré, malgré les avantages ressentis à être évalué par un pair et à évaluer.

×