20130525 presentatie ord 2013

Esther van Popta
Esther van PoptaAdviser à Esther van Popta
de kwaliteit van
online gegeven peerfeedback
Papersessie ORD2013
31 mei 2013
Drs. Esther van Popta
SCO-ICTO Hogeschool van Arnhem en Nijmegen
Prof. dr. Robert-Jan Simons
Prof. dr. Rob Martens en Dr. Gino Camp
Dr. Marijke Kral
Programma
• Focus en theoretisch kader van de studie
• Doel en vraagstelling
• Methode
• Criteria voor kwaliteit
• Voorlopige resultaten
• Vervolg
• Discussie
Focus en theoretisch kader
• Peerfeedback komt in verschillende vormen voor
• In deze studie ligt de focus op online geven van peerfeedback
• Eerder onderzoek richtte zich met name op de leeropbrengsten uit
het ontvangen van peerfeedback (Kim (2005), Sluijsmans e.a.
(2002) Prins e.a. (2006), Gielen e.a. (2010)).
• Maar lerenden blijken veel (meer) te leren van het geven van
peerfeedback (Boud (2010), Cowan (2010), Sadler (2010), vd Berg
e.a. (2006)) als het onderdeel is van peer review (Nicol (2009,
2011))
• Leren van het geven van peer feedback gaat echter niet vanzelf,
studenten vinden het moeilijk, de kwaliteit blijft achter en het
succesvol inzetten van peer feedback in peer review stelt specifieke
eisen aan de inrichting
Doel en vraagstelling
Nut: gebruiken van online gegeven peer feedback gebruikt wordt om de
competentieontwikkeling van studenten te beoordelen
Doel van de studie is het inzichtelijk maken van de kwaliteit van online
gegeven peer feedback, zodat we beter zicht krijgen op de leerpotentie
van online gegeven peer feedback
Hiertoe gaan we de kwaliteit van online gegeven peer feedback analyseren
Subvragen:
1. Op basis van welke criteria kan de kwaliteit van online gegeven peer
feedback in kaart gebracht worden?
2. Hoe kan de kwaliteit van online gegeven peerfeedback gemeten
worden?
3. Hoe kan de ontwikkeling in de kwaliteit van online gegeven
peerfeedback in kaart gebracht worden?
Methode
1. Bepalen kwaliteitscriteria online gegeven
peer feedback
2. Ontwikkelen instrument om kwaliteit online
gegeven peer feedback te meten
3. Toetsen meetinstrument (2500 fragmenten)
4. In kaart brengen kwaliteit online gegeven
peer feedback per fragment
5. In kaart brengen ontwikkeling in kwaliteit
online gegeven peer feedback per student
Ad 1a. Criteria kwaliteit
online gegeven peer feedback
1. A learner should provide evaluative judgements about the learning
product in the online given peer feedback
2. A learner should provide an explanation for the evaluative judgement (a
sound rationale to justify) in the online given peer feedback
3. A learner should provide constructive feedback by giving suggestions for
improvement in the online given peer feedback
4. A learner should refer to relevant theoretical concepts as part of the
explanation in the online given peer feedback
(theorie: D. Nicol en G. Sparks-Langer)
Ad 1b. Reasoning relationship
Is er een verband tussen de criteria?
1. Inzicht in leerpotentieel, vraagt om analyse van de redenering
2. Pander Maat (2002): tekst is een verzameling expressies: a reasoning
relationship. Hoe meer gerelateerd hoe meer coherent
3. De kwaliteitscriteria zijn zonder betekenis als ze niet gerelateerd zijn
– Een peerfeedback redenering begint met het geven van een evaluative judgement en/of een
verbetersuggestie
– De verklaring in een peerfeedback redenering heeft betrekking op het evaluative judgement of op de
verbetersuggestie
– Het gebruik van theoretische concepten is in een peerfeedback redenering alleen relevant als deze
onderdeel is van de verklaring (die betrekking kan hebben op het judgement of de
verbetersuggestie)
1 2 3
Evaluative judgement
Explanation Theoretical concept(s)
Suggestion for improvement
Voorlopige resultaten
• feedback omvat met name verbetersuggesties
en interpretaties (evaluative judgements)
• feedback bevat weinig verklaringen
• feedback bevat weinig theoretische concepten
• nog onvoldoende zicht op redenering
Vervolg
• Afronden eerste fase met artikel
• Bijstellen meetinstrument
• Afronden tweede fase met toetsing
meetinstrument in twee cases
Discussie
1. Vragen?
2. Welke aanvullende analyses zijn nog
relevant?
3. Welk aanvullende vragen zijn interessant?
Meer informatie
esther.vanpopta@han.nl
www.e-peerfeedback.nl
1 sur 11

Recommandé

20120615 presentatie ord 2012 v2 par
20120615 presentatie ord 2012 v220120615 presentatie ord 2012 v2
20120615 presentatie ord 2012 v2Esther van Popta
447 vues12 diapositives
Presentatietraining pto-po-vo-2010 par
Presentatietraining pto-po-vo-2010Presentatietraining pto-po-vo-2010
Presentatietraining pto-po-vo-2010LPC
1.2K vues27 diapositives
Fotos par
FotosFotos
Fotosandiex11
147 vues1 diapositive
Proposits generales par
Proposits generalesProposits generales
Proposits generalesSandy San
234 vues2 diapositives
Presentación1 par
Presentación1Presentación1
Presentación1bravoeze
55 vues2 diapositives
GSS_Certificate_Graduation par
GSS_Certificate_GraduationGSS_Certificate_Graduation
GSS_Certificate_GraduationPaolo Buonanno
99 vues1 diapositive

Contenu connexe

En vedette

Calendario feriados2011 par
Calendario feriados2011Calendario feriados2011
Calendario feriados2011pcamvc
346 vues1 diapositive
How%20to%20use%20the%20 public%20folder par
How%20to%20use%20the%20 public%20folderHow%20to%20use%20the%20 public%20folder
How%20to%20use%20the%20 public%20foldertestslideshare2
64 vues1 diapositive
Lametec (Lamotrigine Tablets) par
Lametec (Lamotrigine Tablets)Lametec (Lamotrigine Tablets)
Lametec (Lamotrigine Tablets)Clearsky Pharmacy
2.2K vues19 diapositives
Karina par
KarinaKarina
KarinaKarinaGar11
138 vues1 diapositive
Entrega actividad colaborativa equipo 1 Second Life par
Entrega actividad colaborativa equipo 1 Second LifeEntrega actividad colaborativa equipo 1 Second Life
Entrega actividad colaborativa equipo 1 Second Lifejuliafernandezlado
249 vues5 diapositives
Origin of universe par
Origin of universeOrigin of universe
Origin of universeFAHIM AKTHAR ULLAL
194 vues2 diapositives

En vedette(11)

Calendario feriados2011 par pcamvc
Calendario feriados2011Calendario feriados2011
Calendario feriados2011
pcamvc346 vues
Entrega actividad colaborativa equipo 1 Second Life par juliafernandezlado
Entrega actividad colaborativa equipo 1 Second LifeEntrega actividad colaborativa equipo 1 Second Life
Entrega actividad colaborativa equipo 1 Second Life
Ascent systems technologies integrated thermal hydronic system par AscentSystems
Ascent systems technologies   integrated thermal hydronic systemAscent systems technologies   integrated thermal hydronic system
Ascent systems technologies integrated thermal hydronic system
AscentSystems522 vues
Oração das Missões no Setor 26 das CEBs par Bernadetecebs .
 Oração das Missões no Setor 26 das CEBs Oração das Missões no Setor 26 das CEBs
Oração das Missões no Setor 26 das CEBs
Bernadetecebs .603 vues
simple learning of English for Student, Adult ,Professional Writers. par Amit Rahul
simple learning of English for Student, Adult ,Professional Writers.simple learning of English for Student, Adult ,Professional Writers.
simple learning of English for Student, Adult ,Professional Writers.
Amit Rahul146 vues
Философия эволюции и эволюция интернета (2012) par Alexander Boldachev
Философия эволюции и эволюция интернета (2012)Философия эволюции и эволюция интернета (2012)
Философия эволюции и эволюция интернета (2012)

Similaire à 20130525 presentatie ord 2013

Mario Gielen_Presentatie Verdediging_Linkedin par
Mario Gielen_Presentatie Verdediging_LinkedinMario Gielen_Presentatie Verdediging_Linkedin
Mario Gielen_Presentatie Verdediging_LinkedinMario Gielen
198 vues28 diapositives
Peer Assessment[1] par
Peer Assessment[1]Peer Assessment[1]
Peer Assessment[1]Erwin de Beer
1.6K vues15 diapositives
Workshop: het assessment als toetsvorm par
Workshop: het assessment als toetsvorm Workshop: het assessment als toetsvorm
Workshop: het assessment als toetsvorm wimdboer
31 vues17 diapositives
Sneller, flexibel en gepersonaliseerd: met digitaal formatief toetsen kan het... par
Sneller, flexibel en gepersonaliseerd: met digitaal formatief toetsen kan het...Sneller, flexibel en gepersonaliseerd: met digitaal formatief toetsen kan het...
Sneller, flexibel en gepersonaliseerd: met digitaal formatief toetsen kan het...SURF Events
964 vues18 diapositives
Blended learning en (e)-assessment par
Blended learning en (e)-assessmentBlended learning en (e)-assessment
Blended learning en (e)-assessmentLuc Vandeput
853 vues40 diapositives
20120523 virtual action learning bij master pedagogiek v2 par
20120523 virtual action learning bij master pedagogiek v220120523 virtual action learning bij master pedagogiek v2
20120523 virtual action learning bij master pedagogiek v2Esther van Popta
1K vues33 diapositives

Similaire à 20130525 presentatie ord 2013(20)

Mario Gielen_Presentatie Verdediging_Linkedin par Mario Gielen
Mario Gielen_Presentatie Verdediging_LinkedinMario Gielen_Presentatie Verdediging_Linkedin
Mario Gielen_Presentatie Verdediging_Linkedin
Mario Gielen198 vues
Workshop: het assessment als toetsvorm par wimdboer
Workshop: het assessment als toetsvorm Workshop: het assessment als toetsvorm
Workshop: het assessment als toetsvorm
wimdboer31 vues
Sneller, flexibel en gepersonaliseerd: met digitaal formatief toetsen kan het... par SURF Events
Sneller, flexibel en gepersonaliseerd: met digitaal formatief toetsen kan het...Sneller, flexibel en gepersonaliseerd: met digitaal formatief toetsen kan het...
Sneller, flexibel en gepersonaliseerd: met digitaal formatief toetsen kan het...
SURF Events964 vues
Blended learning en (e)-assessment par Luc Vandeput
Blended learning en (e)-assessmentBlended learning en (e)-assessment
Blended learning en (e)-assessment
Luc Vandeput853 vues
20120523 virtual action learning bij master pedagogiek v2 par Esther van Popta
20120523 virtual action learning bij master pedagogiek v220120523 virtual action learning bij master pedagogiek v2
20120523 virtual action learning bij master pedagogiek v2
OWD2012- 6- Digitaal nakijken van papers met turnitin- Patris van Boxel par SURF Events
OWD2012- 6- Digitaal nakijken van papers met turnitin- Patris van BoxelOWD2012- 6- Digitaal nakijken van papers met turnitin- Patris van Boxel
OWD2012- 6- Digitaal nakijken van papers met turnitin- Patris van Boxel
SURF Events1.2K vues
Peerfeedback Umcu 4 Febr 09 par mag ritz
Peerfeedback Umcu 4 Febr 09Peerfeedback Umcu 4 Febr 09
Peerfeedback Umcu 4 Febr 09
mag ritz123 vues
Presentatie velon feedback en ict par Gerard Dummer
Presentatie velon feedback en ictPresentatie velon feedback en ict
Presentatie velon feedback en ict
Gerard Dummer3.8K vues
'Bouwstenen voor de toekomstige (digitale) leeromgeving' - Judith Zwerver-Ber... par SURF Events
'Bouwstenen voor de toekomstige (digitale) leeromgeving' - Judith Zwerver-Ber...'Bouwstenen voor de toekomstige (digitale) leeromgeving' - Judith Zwerver-Ber...
'Bouwstenen voor de toekomstige (digitale) leeromgeving' - Judith Zwerver-Ber...
SURF Events1.3K vues
De waarde van toetsen en beoordelen par lrn21
De waarde van toetsen en beoordelenDe waarde van toetsen en beoordelen
De waarde van toetsen en beoordelen
lrn212.6K vues
Lev hoofdstuk 6 onderwijsinspectie par Els Gansemans
Lev hoofdstuk 6   onderwijsinspectieLev hoofdstuk 6   onderwijsinspectie
Lev hoofdstuk 6 onderwijsinspectie
Els Gansemans648 vues
Kwaliteit van toetsing_steeds_meer_in_het_spotlicht par LICAvansHogeschool
Kwaliteit van toetsing_steeds_meer_in_het_spotlichtKwaliteit van toetsing_steeds_meer_in_het_spotlicht
Kwaliteit van toetsing_steeds_meer_in_het_spotlicht
Keuzedelen en examinering (MBO City 2016) par servicepuntihks
Keuzedelen en examinering (MBO City 2016)Keuzedelen en examinering (MBO City 2016)
Keuzedelen en examinering (MBO City 2016)
servicepuntihks209 vues
Simone van dulmen de proms toolbox par Kelly Adegeest
Simone van dulmen   de proms toolboxSimone van dulmen   de proms toolbox
Simone van dulmen de proms toolbox
Kelly Adegeest275 vues

20130525 presentatie ord 2013

  • 1. de kwaliteit van online gegeven peerfeedback Papersessie ORD2013 31 mei 2013 Drs. Esther van Popta SCO-ICTO Hogeschool van Arnhem en Nijmegen Prof. dr. Robert-Jan Simons Prof. dr. Rob Martens en Dr. Gino Camp Dr. Marijke Kral
  • 2. Programma • Focus en theoretisch kader van de studie • Doel en vraagstelling • Methode • Criteria voor kwaliteit • Voorlopige resultaten • Vervolg • Discussie
  • 3. Focus en theoretisch kader • Peerfeedback komt in verschillende vormen voor • In deze studie ligt de focus op online geven van peerfeedback • Eerder onderzoek richtte zich met name op de leeropbrengsten uit het ontvangen van peerfeedback (Kim (2005), Sluijsmans e.a. (2002) Prins e.a. (2006), Gielen e.a. (2010)). • Maar lerenden blijken veel (meer) te leren van het geven van peerfeedback (Boud (2010), Cowan (2010), Sadler (2010), vd Berg e.a. (2006)) als het onderdeel is van peer review (Nicol (2009, 2011)) • Leren van het geven van peer feedback gaat echter niet vanzelf, studenten vinden het moeilijk, de kwaliteit blijft achter en het succesvol inzetten van peer feedback in peer review stelt specifieke eisen aan de inrichting
  • 4. Doel en vraagstelling Nut: gebruiken van online gegeven peer feedback gebruikt wordt om de competentieontwikkeling van studenten te beoordelen Doel van de studie is het inzichtelijk maken van de kwaliteit van online gegeven peer feedback, zodat we beter zicht krijgen op de leerpotentie van online gegeven peer feedback Hiertoe gaan we de kwaliteit van online gegeven peer feedback analyseren Subvragen: 1. Op basis van welke criteria kan de kwaliteit van online gegeven peer feedback in kaart gebracht worden? 2. Hoe kan de kwaliteit van online gegeven peerfeedback gemeten worden? 3. Hoe kan de ontwikkeling in de kwaliteit van online gegeven peerfeedback in kaart gebracht worden?
  • 5. Methode 1. Bepalen kwaliteitscriteria online gegeven peer feedback 2. Ontwikkelen instrument om kwaliteit online gegeven peer feedback te meten 3. Toetsen meetinstrument (2500 fragmenten) 4. In kaart brengen kwaliteit online gegeven peer feedback per fragment 5. In kaart brengen ontwikkeling in kwaliteit online gegeven peer feedback per student
  • 6. Ad 1a. Criteria kwaliteit online gegeven peer feedback 1. A learner should provide evaluative judgements about the learning product in the online given peer feedback 2. A learner should provide an explanation for the evaluative judgement (a sound rationale to justify) in the online given peer feedback 3. A learner should provide constructive feedback by giving suggestions for improvement in the online given peer feedback 4. A learner should refer to relevant theoretical concepts as part of the explanation in the online given peer feedback (theorie: D. Nicol en G. Sparks-Langer)
  • 7. Ad 1b. Reasoning relationship Is er een verband tussen de criteria? 1. Inzicht in leerpotentieel, vraagt om analyse van de redenering 2. Pander Maat (2002): tekst is een verzameling expressies: a reasoning relationship. Hoe meer gerelateerd hoe meer coherent 3. De kwaliteitscriteria zijn zonder betekenis als ze niet gerelateerd zijn – Een peerfeedback redenering begint met het geven van een evaluative judgement en/of een verbetersuggestie – De verklaring in een peerfeedback redenering heeft betrekking op het evaluative judgement of op de verbetersuggestie – Het gebruik van theoretische concepten is in een peerfeedback redenering alleen relevant als deze onderdeel is van de verklaring (die betrekking kan hebben op het judgement of de verbetersuggestie) 1 2 3 Evaluative judgement Explanation Theoretical concept(s) Suggestion for improvement
  • 8. Voorlopige resultaten • feedback omvat met name verbetersuggesties en interpretaties (evaluative judgements) • feedback bevat weinig verklaringen • feedback bevat weinig theoretische concepten • nog onvoldoende zicht op redenering
  • 9. Vervolg • Afronden eerste fase met artikel • Bijstellen meetinstrument • Afronden tweede fase met toetsing meetinstrument in twee cases
  • 10. Discussie 1. Vragen? 2. Welke aanvullende analyses zijn nog relevant? 3. Welk aanvullende vragen zijn interessant?