Le Service de la bibliothèque de l’École de technologie supérieure de Montréal élabore depuis la session d’hiver 2011, un test d’évaluation des compétences informationnelles. Entièrement sur Moodle et s’adressant aux étudiants de maîtrise, ce test vise à identifier le niveau de connaissances et de compétences des étudiants, à orienter nos formations documentaires et à proposer des avenues d’amélioration à nos étudiants. Une banque de questions a été élaborée : des questions à choix multiples et appariements pour évaluer les connaissances ainsi que des tâches plus complexes à effectuer pour évaluer les compétences. Un premier groupe de bibliothécaires, provenant de diverses institutions, ainsi que deux groupes d’étudiants ont testé une première fois l’évaluation. Ainsi, à la session d’été, le test a été déployé auprès des étudiants inscrits à la maîtrise avec mémoire dans le cadre du cours MTR801. Les étudiants ont d’abord eu à faire un premier test (pré-test) au tout début de leur cours. Ils ont, par la suite, reçu une formation de 3 heures données par la bibliothèque. Suite à cette formation, aux travaux exigés par l’enseignant et au cours lui-même, les étudiants ont été invités à faire un second test (post-test). À la suite des deux essais, nous pouvons corriger puis évaluer leur niveau avant une formation, leur niveau après une formation et établir ainsi leurs acquis. Plusieurs conclusions intéressantes ont été tirées de cette évaluation. Vicky Gagnon-Mountzouris, M.S.I Bibliothécaire

1. Un test d’évaluation des compétences informationnelles à l’ÉTS Résultat de la première implantation Vicky Gagnon-Mountzouris, M.S.I

3. Objectif : Développer un pré-test permettant d’évaluer le niveau de compétences informationnelles des étudiants avant le début du cours MTR801 et un post-test permettant d’évaluer leur niveau d’apprentissage après le cours. Le test s’appuie sur les normes reconnues (ACRL);

4. Permettre notamment de connaître le niveau des étudiants et d’évaluer la pertinence de notre propre offre de cours.Pourquoi un test ? 2/36

6. Les groupes sont hétérogènes dans la mesure où les gens proviennent de différentes disciplines et, dans plusieurs cas, de divers pays;

7. La langue et la compréhension du milieu peuvent représenter des défis supplémentaires;

8. Selon la provenance des étudiants, les outils et ressources diffèrent parfois de ce qu’ils ont connu auparavant.Les étudiants: 3/36

9. Pré-test et post-test Environ une heure chaque Divisé en 3 parties : Profil Connaissance Compétences (tâches) Questions: Banque de plus de 60 questions; La partie Profil contient 11 questions, la partie Connaissances, 45 questions et la partie Tâches, 8 questions. Le test : 4/36

10. Rencontres préparatoires avec les professeurs Évaluation à l’interne Évaluation à l’externe (PDCI) Essais pilotes auprès d’étudiants, suivi d’une discussion (payés) Groupe de quatre étudiants à la maîtrise ayant suivi le cours MTR801 Un deuxième groupe de trois étudiants à la maîtrise, n’ayant pas suivi le cours MTR801 Pointage de 5% attribué aux étudiants 2.5 pour le pré-test et 2.5 pour le post-test Procédure: 5/36

11. Moodle Banque de questions Questionnaire Possibilité de retour et de correction manuelle Résultats Excel Possibilité de réutiliser le test pour l’autoformation Contrôle des étudiants et du temps https://moodle.etsmtl.ca/login/index.php Plateforme: 6/36

12. 7/36 Compétences évaluées:

13. 8/36 Résultat:

14. 9/36 Analyse des données: Augmentation substantielle pour les compétences 1-2-3-5 Légère augmentation pour la compétence 4 Statut quo pour la compétence 6

15. 10/36 Analyse par compétences:

16. 11/36 Analyse par compétences:

17. Étudiants qui ne maîtrisent pas le français Certains tests ontétéfaitsrapidement Tâches non faites pour diverses raisons Notation Longueur Reconnaissance des faiblesses Motivation Conclusion: 12/36

18. Personnellement je n'etais tellement un habitue de la bibliotheque, donc ce test m'a fait comprendre le gap 'a savoir les nombreux outils disponibles' que je me dois de combler, l'importance,la richesse et l'interet d'utiliser les ressources de la bibliotheque intéressant mais j'espère que l'on pourra valider chaque chose un peu long pour tout répondre, mais très trèsinteressant It is the most interesting test that I have ever seen. Thanks a lot. Unfortunately, I can't read and understand french rapidly, so I took this test terrible. I wish I could try it again. I was so nervous during the this test. Le test devrait prendre en consideration l`ancienneté des étudiants à l`école, en effet, un nouvel étudiant ne peut pas être familiarisé avec les outils de recherches spécifique à l`école. le test a été bien outil, si bien je ne connaît pas tous les outils je viens de apprendre de la existence des quelqu'uns alors je pense que la formation qui va suivre ce pre-test va être bien utile c'est test me permitte savoir qu'il faut faire des course à la bibliotheque parce que me manque plusier des information pour connaitre. Ce test est trop long. C'est a boneidee de faire un pre test. Maintenant je sais que Il y a des choses a apprendre et je aussi sais ou est-ce que je dois pret plus d'attention dals le cours. Merci. Le test est très bien structuré mais je pense que certaines questions, parmi celles qui sont à choix multiples se ressemblent et pourraient avoir la même réponse. La structure du test est correcte et très abordable par tout public. Commentaires: 13/36

19. Merci à Tous ! Et un remerciement spécial à Dalie Matton qui a piloté le projet auprès des étudiants. Coordonnées: Vicky Gagnon-Mountzouris : vicky.gagnon@etsmtl.ca Bureau: A-0230 Poste: 7200 14/36