L’effet de testing sur les résultats scolaires :                  1910-2010                    Richard P. PHELPS© 2012, Ri...
Meta-analysés  • Une méthode pour    résumer une littérature    de recherche importante,    avec une mesure unique    et c...
Leffet de tests standardisés sur les                 résultats scolaires des élèves                    • étude de 12 ans  ...
Chercher les études d’inclure dans la               méta-analyse1. On a inclus les études qu’ont trouvé en effet d’un test...
Études inclus dans la méta-analyse2. …quand:  •   Un test est introduit de nouveau ou est enlevé  •   La quantité de testi...
Études inclus dans la méta-analyse   3. …plus les méta-analyse d’autres chercheurs (e.g.)                          • Kulik...
Nombre d’études et d’effets,             par type de méthodologie Type de méthodologie               Nombre               ...
Taille d’effet: d de Cohen            d = (YE - YC) / Spool       YE = moyenne du groupe             expérimental       YC...
Taille d’effet: Autres formules                         d = t*((n1+n2/n1*n2)^0,5                         d = 2r/(1-r²)^0,5...
Taille d’effet: Interprétation     • d entre 0,25 et 0,50           un effet faible     • d entre 0,50 et 0,75          ...
Études quantitatives         (population couverture ≈ 7 million                    personnes )© 2012, Richard P           ...
Études quantitatives : Taille d’effet•   Taille d’effet calcul << squelettique >> :                  d ≈ +0,55    …un effe...
Modérateurs important Group de Traitement (par contre le group de               Taille d’effet contrôle)…                 ...
Modérateurs – Origine de testing                                      Nombre        Taille d’effet                        ...
Modérateurs – Patronage de test                                   Nombre       Taille d’Effet                             ...
Modérateurs – Désigne d’étude                                        Nombre          Taille d’effet                       ...
Modérateurs – Taille d’étude                                       Nombre        Taille d’effet                           ...
Modérateurs – Taille d’administration                                     Nombre         Taille d’effet                   ...
Enquêtes et sondages d’opinion© 2012, Richard P                                     19                    Association Mond...
Pourcentage d’items d’enquête,    par groupe de répondeur et type d’enquête                  50                  45       ...
Nombre et pourcentage d’articles d’enquête,  par conséquence de test et le groupe                 affecté       Conséquenc...
Sondages d’opinion, par an              • 244 entre 1958 et 2008, aux États-Unis et en Canada              • 813 combinais...
Enquêtes et sondages d’opinion :Tests standardisés simples et tests de performance                                        ...
Études qualitatives : Résumé           (On ne peut pas calculer un taille d’effet)© 2012, Richard P                       ...
Études qualitatives, par méthodologie                                                      Nombre     Méthode de recherche...
Études qualitatives: Leffet sur les résultats scolaires des élèves               244 études menées depuis 100 ans aux plus...
Études qualitatives : Le testing améliore les   résultats scolaires et l’enseignement                                     ...
Études qualitatives:      Variation par rigueur et conséquence de test                                              Niveau...
Études qualitatives : Tests standardisés simples              et tests de performance                                     ...
Une littérature de recherche énorme• Mais, prétentions que la littérature  n’existe pas de toute sont  communes    – Quelq...
Revues des recherches dépréciant                         •   Avec une revue de la littérature                             ...
Prétentions de premierité  • Avec une prétention    de premierité, un    chercheur insiste    qu’on est le premier à    ét...
Les coûts sociaux• Les recherches des faibles sont perdu; les résultats  qui restes sont favorables aux puissants• Décisio...
L’effet de testing sur les résultats scolaires :                  1910-2010                    Richard P. PHELPS© 2012, Ri...
Prochain SlideShare
Chargement dans…5
×

L'effet de tests standardisés sur les résultats scolaires des élèves : 1910-2010

851 vues

Publié le

Présentation au 2012 réunion de l'Association Mondiale des Sciences de l’Éducation, Reims

Publié dans : Formation
0 commentaire
0 j’aime
Statistiques
Remarques
  • Soyez le premier à commenter

  • Soyez le premier à aimer ceci

Aucun téléchargement
Vues
Nombre de vues
851
Sur SlideShare
0
Issues des intégrations
0
Intégrations
2
Actions
Partages
0
Téléchargements
2
Commentaires
0
J’aime
0
Intégrations 0
Aucune incorporation

Aucune remarque pour cette diapositive

L'effet de tests standardisés sur les résultats scolaires des élèves : 1910-2010

  1. 1. L’effet de testing sur les résultats scolaires : 1910-2010 Richard P. PHELPS© 2012, Richard P 1 Association Mondiale des Sciences dEducation, 17th CongrePHELPS
  2. 2. Meta-analysés • Une méthode pour résumer une littérature de recherche importante, avec une mesure unique et comparable.© 2012, Richard P 2 Association Mondiale des Sciences dEducation, 17th CongrePHELPS
  3. 3. Leffet de tests standardisés sur les résultats scolaires des élèves • étude de 12 ans • analysé a peu pré de 700 études unique, et plus de 1500 effets unique • 2000 autres études étaient passé en revue mais pas inclus (jugées inappropriés d’inclure) • centaines autres ne passeront pas en revue – il n’y a pas assez de temps ou d’argent© 2012, Richard P 3 Association Mondiale des Sciences dEducation, 17th CongrePHELPS
  4. 4. Chercher les études d’inclure dans la méta-analyse1. On a inclus les études qu’ont trouvé en effet d’un test sur les résultats scolaires des élèves ou sur les enseignements des enseigneurs…© 2012, Richard P 4 Association Mondiale des Sciences dEducation, 17th CongrePHELPS
  5. 5. Études inclus dans la méta-analyse2. …quand: • Un test est introduit de nouveau ou est enlevé • La quantité de testing est augmenté ou est diminué • Conséquences d’un test sont introduit ou sont enlevé© 2012, Richard P 5 Association Mondiale des Sciences dEducation, 17th CongrePHELPS
  6. 6. Études inclus dans la méta-analyse 3. …plus les méta-analyse d’autres chercheurs (e.g.) • Kulik, Kulik, Bangert-Drowns, & Schwalb (1983-1991) à propos de: – testing pour obtenir le dessus sur le sujet, << mastery testing >> – fréquence de testing, et – programmes des étudiants universitaire redoublé • Basol & Johanson (2009) à propos du fréquence de testing • Jaekyung Lee (2007) à propos des administrations très grandes • W.J. Haynie (2007) à propos de la formation© 2012, Richard P 6 Association Mondiale des Sciences dEducation, 17th CongrePHELPS
  7. 7. Nombre d’études et d’effets, par type de méthodologie Type de méthodologie Nombre Nombre d’études d’effets Quantitatives 177 640 Enquêtes et sondages 247 813 d’opinion (EUA et Canada) Qualitatives 245 245 TOTAL 669 1698© 2012, Richard P 7 Association Mondiale des Sciences dEducation, 17th CongrePHELPS
  8. 8. Taille d’effet: d de Cohen d = (YE - YC) / Spool YE = moyenne du groupe expérimental YC = moyenne du groupe contrôlé Spool = déviation standardisé© 2012, Richard P 8 Association Mondiale des Sciences dEducation, 17th CongrePHELPS
  9. 9. Taille d’effet: Autres formules d = t*((n1+n2/n1*n2)^0,5 d = 2r/(1-r²)^0,5 d = (YE avant-YE après-YC avant+ YC après)/Spool après© 2012, Richard P 9 Association Mondiale des Sciences dEducation, 17th CongrePHELPS
  10. 10. Taille d’effet: Interprétation • d entre 0,25 et 0,50  un effet faible • d entre 0,50 et 0,75  un effet moyen • d plus de 0,75  un effet fort© 2012, Richard P 10 Association Mondiale des Sciences dEducation, 17th CongrePHELPS
  11. 11. Études quantitatives (population couverture ≈ 7 million personnes )© 2012, Richard P 11 Association Mondiale des Sciences dEducation, 17th CongrePHELPS
  12. 12. Études quantitatives : Taille d’effet• Taille d’effet calcul << squelettique >> : d ≈ +0,55 …un effet moyen• Taille d’effet squelettique réglé pour la fiabilité (a cause de l’erreur qui résulte du procès quand on mesure) d ≈ +0,70 …un effet assez fort• Taille d’effet par chercheur d ≈ +0,88 …un effet fort© 2012, Richard P 12 Association Mondiale des Sciences dEducation, 17th CongrePHELPS
  13. 13. Modérateurs important Group de Traitement (par contre le group de Taille d’effet contrôle)… moyen …connaissant de performance +0,98 …a enseignement spécialisé (e.g., tuteurs) +0,96 … conséquences de test plus fortes +0,87 …testing est plus fréquent +0,85© 2012, Richard P 13 Association Mondiale des Sciences dEducation, 17th CongrePHELPS
  14. 14. Modérateurs – Origine de testing Nombre Taille d’effet d’études moyen Chercheur ou Professeur 87 0,93 National 24 0,87 Commercial 38 0,82 Régional 11 0,72 Total 160© 2012, Richard P 14 Association Mondiale des Sciences dEducation, 17th CongrePHELPS
  15. 15. Modérateurs – Patronage de test Nombre Taille d’Effet d’études moyen International 5 1,02 Local 99 0,93 National 45 0,81 Régional 11 0,64 Total 160© 2012, Richard P 15 Association Mondiale des Sciences dEducation, 17th CongrePHELPS
  16. 16. Modérateurs – Désigne d’étude Nombre Taille d’effet d’études moyen Pré-post 12 0,97 Expérience, Quasi-expérience 107 0,94 Multi variance 26 0,80 Expérience, post test 7 0,60 Pré-post (avec test parallèle) 8 0,58 Total 160© 2012, Richard P 16 Association Mondiale des Sciences dEducation, 17th CongrePHELPS
  17. 17. Modérateurs – Taille d’étude Nombre Taille d’effet d’études moyen Agrégeât 9 1,60 Taille petite 118 0,91 Taille grande 33 0,57 Total 160© 2012, Richard P 17 Association Mondiale des Sciences dEducation, 17th CongrePHELPS
  18. 18. Modérateurs – Taille d’administration Nombre Taille d’effet d’études moyen Salle de classe 115 0,95 Taille moyenne 6 0,72 Taille grande 39 0,71 Total 160© 2012, Richard P 18 Association Mondiale des Sciences dEducation, 17th CongrePHELPS
  19. 19. Enquêtes et sondages d’opinion© 2012, Richard P 19 Association Mondiale des Sciences dEducation, 17th CongrePHELPS
  20. 20. Pourcentage d’items d’enquête, par groupe de répondeur et type d’enquête 50 45 40 35 30 Education Percent 25 Providers 20 15 Education 10 Consumers 5 0 Public opinion polls Program evaluation surveys*© 2012, Richard P 20 Association Mondiale des Sciences dEducation, 17th CongrePHELPS
  21. 21. Nombre et pourcentage d’articles d’enquête, par conséquence de test et le groupe affecté Conséquence Nombre % Groupe affecté Nombre % forte 507 62 Elèves 393 46 moyenne 184 23 Écoles 281 33 faible 33 4 Enseigneurs 116 14 pas de pas connu 89 11 64 7 conséquence TOTAL 813 TOTAL 854© 2012, Richard P 21 Association Mondiale des Sciences dEducation, 17th CongrePHELPS
  22. 22. Sondages d’opinion, par an • 244 entre 1958 et 2008, aux États-Unis et en Canada • 813 combinaisons uniques de question-réponse. • a peut pré 700.000 réponses uniques d’individuels 120 100 80 60 40 20 0 1960 1965 1970 1975 1980 1985 1990 1995 2000 2005 Year© 2012, Richard P 22 Association Mondiale des Sciences dEducation, 17th CongrePHELPS
  23. 23. Enquêtes et sondages d’opinion :Tests standardisés simples et tests de performance Tests simples Tests de performance (N ≈125) (N ≈ 50) L’opinion des répondants d d Connaissance des élèves est amélioré 1,2 1,0 …pondérée par la population de l’étude 1,9 0,5 Enseignement est amélioré 1,0 1,4 …pondérée par la population de l’étude 0,9 0,9 Tests aligne le programme scolaire 1,0 1,0 …pondérée par la population de l’étude 0,5 0,9© 2012, Richard P 23 Association Mondiale des Sciences dEducation, 17th CongrePHELPS
  24. 24. Études qualitatives : Résumé (On ne peut pas calculer un taille d’effet)© 2012, Richard P 24 Association Mondiale des Sciences dEducation, 17th CongrePHELPS
  25. 25. Études qualitatives, par méthodologie Nombre Méthode de recherche d’études % Dossiers 120 43 Expérimentes ou comparaisons avant-après 21 7 Entrevues (individu ou groupe) 75 27 Journaux 2 1 Revues des rapports officiels, enregistrements 33 12 Revues des recherches 8 3 Enquêtes 22 8 ÉTUDES TOTAL 281 100© 2012, Richard P 25 Association Mondiale des Sciences dEducation, 17th CongrePHELPS
  26. 26. Études qualitatives: Leffet sur les résultats scolaires des élèves 244 études menées depuis 100 ans aux plus de 30 pays Nombre d’ Pourcentage Pourcentage Direction d’effet études d’études pas inféré Positive 204 84 93 Positive inféré 24 10 Mélangé 5 2 2 Pas de change 8 3 4 Négative 3 1 1 ÉTUDES TOTAL 244 100 100© 2012, Richard P 26 Association Mondiale des Sciences dEducation, 17th CongrePHELPS
  27. 27. Études qualitatives : Le testing améliore les résultats scolaires et l’enseignement Nombre Connaissance est amélioré d’études % Oui 200 95 Résultats mélangés 1 <1 Non 10 5 ÉTUDES TOTAL 211 100 Nombre Enseignement est amélioré d’études % Oui 158 96 Non 7 4 ÉTUDES TOTAL 165 100© 2012, Richard P 27 Association Mondiale des Sciences dEducation, 17th CongrePHELPS
  28. 28. Études qualitatives: Variation par rigueur et conséquence de test Niveau de rigueurDirection d’effet fort moyen faible Études TotalPositive 95 67 42 204Positive inféré 10 8 6 24Mélangé 3 1 1 5Pas de change 4 3 1 8Négative 1 1 1 3ÉTUDES TOTAL 113 80 51 244 Conséquence Direction d’effet fort moyenne faible pas connu Études Total Positive 133 27 38 6 204 Positive inféré 12 5 7 24 Mélangé 4 1 5 Pas de change 2 1 5 8 Négative 3 3 ÉTUDES TOTAL 154 33 51 6 244© 2012, Richard P 28 Association Mondiale des Sciences dEducation, 17th CongrePHELPS
  29. 29. Études qualitatives : Tests standardisés simples et tests de performance Tests simples Tests de performance (N =176) (N = 69) Résultats d’étude % % En générale, positifs 93 95 Conséquences de test fortes 71 42 Rigueur d’étude fort 46 48 Attitudes des élèves positives 60 71 Attitudes des enseigneurs positives 55 80 Connaissances des élèves amélioré 95 95 Enseignement amélioré 92 100 Nombre des élèves important 86 68© 2012, Richard P 29 Association Mondiale des Sciences dEducation, 17th CongrePHELPS
  30. 30. Une littérature de recherche énorme• Mais, prétentions que la littérature n’existe pas de toute sont communes – Quelques prétentions sont fait par ceux qui opposent le testing standardisé qui prennent leurs désirs pour la réalité – Autres sont << prétentions de premierité >>© 2012, Richard P 30 Association Mondiale des Sciences dEducation, 17th CongrePHELPS
  31. 31. Revues des recherches dépréciant • Avec une revue de la littérature de recherche dépréciant un chercheur assure tout le monde que n’importe qu’autre chercheur a fait une étude sur le même sujet© 2012, Richard P 31 Association Mondiale des Sciences dEducation, 17th CongrePHELPS
  32. 32. Prétentions de premierité • Avec une prétention de premierité, un chercheur insiste qu’on est le premier à étudier un sujet© 2012, Richard P 32 Association Mondiale des Sciences dEducation, 17th CongrePHELPS
  33. 33. Les coûts sociaux• Les recherches des faibles sont perdu; les résultats qui restes sont favorables aux puissants• Décisions politiques sont basés sur leurs résultats• On paie encore et encore pour recherches déjà fait© 2012, Richard P 33 Association Mondiale des Sciences dEducation, 17th CongrePHELPS
  34. 34. L’effet de testing sur les résultats scolaires : 1910-2010 Richard P. PHELPS© 2012, Richard P 34 Association Mondiale des Sciences dEducation, 17th CongrePHELPS

×