SlideShare uma empresa Scribd logo
1 de 18
Geautomatiseerde feedback in
een wiskunde interventie voor
algebra
Dr. Christian Bokhove
@cbokhove
Onderwijs Research Dagen 2016
Doel
• Deel grotere studie met als doel een webgebaseerde
interventie in te zetten voor het verbeteren van
algebraïsche vaardigheden door middel van formatieve
toetsing (Black & Wiliam, 1998).
• Een belangrijk onderdeel hierin is het gebruik van
feedback.
• Een recente meta-analyse over de effecten van
geautomatiseerde feedback waarin onmiddelijke
‘elaborated feedback’ effectief blijkt (Van der Kleij, Feskens
& Eggen, 2015).
2
Feedback
Hattie and Timperley (2007) onderscheidden vier typen
feedback:
1. Task level: hoe goed wordt de taak begrepen (FT)
2. Process level: feedback over de belangrijkste processen
die nodig zijn om te taak te begrijpen (FP)
3. Self-regulation level: feedback gericht op zelfregulering
van acties (FR)
4. Self level: op de person gerichte feedback (FS)
De interventie in deze deelstudie keek (onder andere) naar
implementaties van FT en FR feedback.
3
Opzet
• 324 6vwo wiskunde B leerlingen van 15 klassen in 9
middelbare scholen in Nederland.
• In totaal 11 wiskundeleraren.
• Scholen verspreid door heel Nederland en vertoonden
variatie in schoolgrootte, denominatie en onderwijskundige
achtergronden.
• Twee series van wiskundeopgaven, d1 en d3 werden
aangeboden binnen een grotere interventie gericht op het
verbeteren van algebraïsche vaardigheden.
4
Interventie
• Beide series betrof het oplossen van kwadratische
vergelijkingen.
• De interventie vond plaats in de ‘Digitale Wiskunde
Omgeving’ (DWO).
• In deze omgeving kunnen wiskundige vergelijkingen
worden aangeboden die met tussenstappen dienen te
worden opgelost. De omgeving heeft een voorziening voor
maatwerk feedback.
5
Feedback
Screencast clips
7
Twee condities
• De eerste conditie (c1) maatwerk feedback zonder
aanvullende knoppen in de interface. Feedback werd alleen
gegeven in de tussenstappen van het oplossen van de
vergelijkingen en was gericht op de taak (FT).
• De tweede conditie (c2) had additionele knoppen op het
computerscherm. De knoppen waren (i) hint, voor een hint
voor de volgende stap, (ii) stap, de daadwerkelijk volgende
stap, en (iii) los op, gehele vergelijking stap voor stap
opgelost. Feedback was FT, aangevuld met knoppen voor
zelfregulering (FR).
• Condities toegekend aan scholen.
8
Conditie c1
9
Conditie 2
Resultaten feedback
• Data niet normaal verdeeld dus non-parametrische Mann-
Whitney
• Significant verschil tussen feedback condities score voor d1
(U=7680.00, p<0.001, r=-.321) met conditie c2 hoger dan
conditie c1. De tweede serie d3 liet echter geen significant
verschil zien (U=10560.00, p=.531).
• Aantal pogingen significant hoger voor feedback conditie c1
(Mdn=126.00) (geen knoppen) dan feedback conditie c2
(Mdn=105.00), U=9904.50, p<.001, r=.202.
Uitbreiden: MC-squared project
12http://mc2-project.eu/
13
Digitaleboeken
Feedback open opdracht
15
16
Conclusie
• Taak-gerelateerde en zelf-regulatie(FT and FR) feedback
kan formatief worden ingezet bij het leren van wiskunde (en
andere vakken)
• Leerlingen kunnen de feedback gebruiken om over
misconcepties en moeilijkheden heen te komen, en om
antwoorden te controleren.
• Veel kan echter verbeterd: typen condities, controle.
• Mogelijkheden uitgebreid in een recent Europees project
over digitale wiskundeboeken.
17
Bedankt!
Contact: C.Bokhove@soton.ac.uk
Twitter:
@cbokhove
Presentatie op slideshare
18
Geselecteerde referenties
Black, P., & Wiliam, D. (1998). Assessment and classroom learning. Assessment
in Education: Principles, Policy & Practice, 5(1), 7-73.
Bokhove, C. (in press). Supporting variation in task design through the use of
technology. In A. Leung & Baccaglini-Frank (Eds.) The role and potential of using
digital technologies in mathematics education tasks.
Bokhove, C., & Drijvers, P. (2012). Effects of a digital intervention on the
development of algebraic expertise. Computers & Education, 58(1), 197-208.
http://dx.doi.org/10.1016/j.compedu.2011.08.010
Hattie, J. & Timperley, H. (2007). The power of feedback. Review of Educational
Research, 77(1), 81–112.
Van der Kleij, F.M., Feskens, R.C.W., & Eggen, T.J.H.M. (2015). Effects of
feedback in a computer-based learning environment on students’ learning
outcomes. Review of Educational Research, 85(4), 475–511.
19

Mais conteúdo relacionado

Semelhante a Onderwijs Research Dagen 2016

Grassroots Gerard Janssen
Grassroots Gerard JanssenGrassroots Gerard Janssen
Grassroots Gerard JanssenICTOTUDelft
 
OWD2012- 6- Digitaal nakijken van papers met turnitin- Patris van Boxel
OWD2012- 6- Digitaal nakijken van papers met turnitin- Patris van BoxelOWD2012- 6- Digitaal nakijken van papers met turnitin- Patris van Boxel
OWD2012- 6- Digitaal nakijken van papers met turnitin- Patris van BoxelSURF Events
 
Grassroots digitale oefentoetsen met bonus eindcijfer
Grassroots   digitale oefentoetsen met bonus eindcijferGrassroots   digitale oefentoetsen met bonus eindcijfer
Grassroots digitale oefentoetsen met bonus eindcijferICTOTUDelft
 
De invloed van reken-lespakket "Got It?" op onderwijsprestaties en -efficiënt...
De invloed van reken-lespakket "Got It?" op onderwijsprestaties en -efficiënt...De invloed van reken-lespakket "Got It?" op onderwijsprestaties en -efficiënt...
De invloed van reken-lespakket "Got It?" op onderwijsprestaties en -efficiënt...SURF Events
 
'Onderwijs verbeteren met learning analytics: resultaten van het STELA-projec...
'Onderwijs verbeteren met learning analytics: resultaten van het STELA-projec...'Onderwijs verbeteren met learning analytics: resultaten van het STELA-projec...
'Onderwijs verbeteren met learning analytics: resultaten van het STELA-projec...SURF Events
 
'Technologie-ondersteund samenwerkend leren: bevindingen aan de KU Leuven' - ...
'Technologie-ondersteund samenwerkend leren: bevindingen aan de KU Leuven' - ...'Technologie-ondersteund samenwerkend leren: bevindingen aan de KU Leuven' - ...
'Technologie-ondersteund samenwerkend leren: bevindingen aan de KU Leuven' - ...SURF Events
 

Semelhante a Onderwijs Research Dagen 2016 (7)

Proeven aan Proeve HvA 15 april 2010
Proeven aan Proeve HvA 15 april 2010Proeven aan Proeve HvA 15 april 2010
Proeven aan Proeve HvA 15 april 2010
 
Grassroots Gerard Janssen
Grassroots Gerard JanssenGrassroots Gerard Janssen
Grassroots Gerard Janssen
 
OWD2012- 6- Digitaal nakijken van papers met turnitin- Patris van Boxel
OWD2012- 6- Digitaal nakijken van papers met turnitin- Patris van BoxelOWD2012- 6- Digitaal nakijken van papers met turnitin- Patris van Boxel
OWD2012- 6- Digitaal nakijken van papers met turnitin- Patris van Boxel
 
Grassroots digitale oefentoetsen met bonus eindcijfer
Grassroots   digitale oefentoetsen met bonus eindcijferGrassroots   digitale oefentoetsen met bonus eindcijfer
Grassroots digitale oefentoetsen met bonus eindcijfer
 
De invloed van reken-lespakket "Got It?" op onderwijsprestaties en -efficiënt...
De invloed van reken-lespakket "Got It?" op onderwijsprestaties en -efficiënt...De invloed van reken-lespakket "Got It?" op onderwijsprestaties en -efficiënt...
De invloed van reken-lespakket "Got It?" op onderwijsprestaties en -efficiënt...
 
'Onderwijs verbeteren met learning analytics: resultaten van het STELA-projec...
'Onderwijs verbeteren met learning analytics: resultaten van het STELA-projec...'Onderwijs verbeteren met learning analytics: resultaten van het STELA-projec...
'Onderwijs verbeteren met learning analytics: resultaten van het STELA-projec...
 
'Technologie-ondersteund samenwerkend leren: bevindingen aan de KU Leuven' - ...
'Technologie-ondersteund samenwerkend leren: bevindingen aan de KU Leuven' - ...'Technologie-ondersteund samenwerkend leren: bevindingen aan de KU Leuven' - ...
'Technologie-ondersteund samenwerkend leren: bevindingen aan de KU Leuven' - ...
 

Mais de Christian Bokhove

Can data from largescale assessments ever be useful For mathematics education?
Can data from largescale assessments ever be useful For mathematics education?Can data from largescale assessments ever be useful For mathematics education?
Can data from largescale assessments ever be useful For mathematics education?Christian Bokhove
 
Creating interactive digital books for the transition from secondary to under...
Creating interactive digital books for the transition from secondary to under...Creating interactive digital books for the transition from secondary to under...
Creating interactive digital books for the transition from secondary to under...Christian Bokhove
 
Research on school inspections: What do we know?
Research on school inspections: What do we know?Research on school inspections: What do we know?
Research on school inspections: What do we know?Christian Bokhove
 
Master mathematics teachers: What do Chinese primary schools look like?
Master mathematics teachers: What do Chinese primary schools look like?Master mathematics teachers: What do Chinese primary schools look like?
Master mathematics teachers: What do Chinese primary schools look like?Christian Bokhove
 
The role of non-cognitive factors in science achievement: an analysis of PISA...
The role of non-cognitive factors in science achievement: an analysis of PISA...The role of non-cognitive factors in science achievement: an analysis of PISA...
The role of non-cognitive factors in science achievement: an analysis of PISA...Christian Bokhove
 
Multilevel modelling of Chinese primary children’s metacognitive strategies i...
Multilevel modelling of Chinese primary children’s metacognitive strategies i...Multilevel modelling of Chinese primary children’s metacognitive strategies i...
Multilevel modelling of Chinese primary children’s metacognitive strategies i...Christian Bokhove
 
Help-seeking in an online maths environment: A sequence analysis of log files
Help-seeking in an online maths environment: A sequence analysis of log filesHelp-seeking in an online maths environment: A sequence analysis of log files
Help-seeking in an online maths environment: A sequence analysis of log filesChristian Bokhove
 
Learning loss and learning inequalities during the covid-19 pandemic: an anal...
Learning loss and learning inequalities during the covid-19 pandemic: an anal...Learning loss and learning inequalities during the covid-19 pandemic: an anal...
Learning loss and learning inequalities during the covid-19 pandemic: an anal...Christian Bokhove
 
The challenge of proof in the transition from A-level mathematics to university
The challenge of proof in the transition from A-level mathematics to universityThe challenge of proof in the transition from A-level mathematics to university
The challenge of proof in the transition from A-level mathematics to universityChristian Bokhove
 
How can we develop expansive, research-informed ITE ?
How can we develop expansive, research-informed ITE ?How can we develop expansive, research-informed ITE ?
How can we develop expansive, research-informed ITE ?Christian Bokhove
 
(On)waarheden en (on)bekende zaken uit onderzoek over reken-wiskundeonderwijs
(On)waarheden en (on)bekende zaken uit onderzoek over reken-wiskundeonderwijs(On)waarheden en (on)bekende zaken uit onderzoek over reken-wiskundeonderwijs
(On)waarheden en (on)bekende zaken uit onderzoek over reken-wiskundeonderwijsChristian Bokhove
 
Transparency in Data Analysis
Transparency in Data AnalysisTransparency in Data Analysis
Transparency in Data AnalysisChristian Bokhove
 
Proof by induction in Calculus: Investigating first-year students’ examinatio...
Proof by induction in Calculus: Investigating first-year students’ examinatio...Proof by induction in Calculus: Investigating first-year students’ examinatio...
Proof by induction in Calculus: Investigating first-year students’ examinatio...Christian Bokhove
 
Evidence informed: Waar is de Bijsluiter?
Evidence informed: Waar is de Bijsluiter?Evidence informed: Waar is de Bijsluiter?
Evidence informed: Waar is de Bijsluiter?Christian Bokhove
 
Methodological innovation for mathematics education research
Methodological innovation for mathematics education researchMethodological innovation for mathematics education research
Methodological innovation for mathematics education researchChristian Bokhove
 
Roundtable slides RiTE Paderborn 24/9/2021
Roundtable slides RiTE Paderborn 24/9/2021Roundtable slides RiTE Paderborn 24/9/2021
Roundtable slides RiTE Paderborn 24/9/2021Christian Bokhove
 
Structural Topic Modelling of Ofsted Documents
Structural Topic Modelling of Ofsted DocumentsStructural Topic Modelling of Ofsted Documents
Structural Topic Modelling of Ofsted DocumentsChristian Bokhove
 
Learning loss and learning inequalities during the Covid-19 pandemic: an anal...
Learning loss and learning inequalities during the Covid-19 pandemic: an anal...Learning loss and learning inequalities during the Covid-19 pandemic: an anal...
Learning loss and learning inequalities during the Covid-19 pandemic: an anal...Christian Bokhove
 

Mais de Christian Bokhove (20)

Can data from largescale assessments ever be useful For mathematics education?
Can data from largescale assessments ever be useful For mathematics education?Can data from largescale assessments ever be useful For mathematics education?
Can data from largescale assessments ever be useful For mathematics education?
 
Creating interactive digital books for the transition from secondary to under...
Creating interactive digital books for the transition from secondary to under...Creating interactive digital books for the transition from secondary to under...
Creating interactive digital books for the transition from secondary to under...
 
Research on school inspections: What do we know?
Research on school inspections: What do we know?Research on school inspections: What do we know?
Research on school inspections: What do we know?
 
Master mathematics teachers: What do Chinese primary schools look like?
Master mathematics teachers: What do Chinese primary schools look like?Master mathematics teachers: What do Chinese primary schools look like?
Master mathematics teachers: What do Chinese primary schools look like?
 
The role of non-cognitive factors in science achievement: an analysis of PISA...
The role of non-cognitive factors in science achievement: an analysis of PISA...The role of non-cognitive factors in science achievement: an analysis of PISA...
The role of non-cognitive factors in science achievement: an analysis of PISA...
 
Multilevel modelling of Chinese primary children’s metacognitive strategies i...
Multilevel modelling of Chinese primary children’s metacognitive strategies i...Multilevel modelling of Chinese primary children’s metacognitive strategies i...
Multilevel modelling of Chinese primary children’s metacognitive strategies i...
 
Cryptography
CryptographyCryptography
Cryptography
 
Help-seeking in an online maths environment: A sequence analysis of log files
Help-seeking in an online maths environment: A sequence analysis of log filesHelp-seeking in an online maths environment: A sequence analysis of log files
Help-seeking in an online maths environment: A sequence analysis of log files
 
Learning loss and learning inequalities during the covid-19 pandemic: an anal...
Learning loss and learning inequalities during the covid-19 pandemic: an anal...Learning loss and learning inequalities during the covid-19 pandemic: an anal...
Learning loss and learning inequalities during the covid-19 pandemic: an anal...
 
The challenge of proof in the transition from A-level mathematics to university
The challenge of proof in the transition from A-level mathematics to universityThe challenge of proof in the transition from A-level mathematics to university
The challenge of proof in the transition from A-level mathematics to university
 
How can we develop expansive, research-informed ITE ?
How can we develop expansive, research-informed ITE ?How can we develop expansive, research-informed ITE ?
How can we develop expansive, research-informed ITE ?
 
Discussant EARLI sig 27
Discussant EARLI sig 27Discussant EARLI sig 27
Discussant EARLI sig 27
 
(On)waarheden en (on)bekende zaken uit onderzoek over reken-wiskundeonderwijs
(On)waarheden en (on)bekende zaken uit onderzoek over reken-wiskundeonderwijs(On)waarheden en (on)bekende zaken uit onderzoek over reken-wiskundeonderwijs
(On)waarheden en (on)bekende zaken uit onderzoek over reken-wiskundeonderwijs
 
Transparency in Data Analysis
Transparency in Data AnalysisTransparency in Data Analysis
Transparency in Data Analysis
 
Proof by induction in Calculus: Investigating first-year students’ examinatio...
Proof by induction in Calculus: Investigating first-year students’ examinatio...Proof by induction in Calculus: Investigating first-year students’ examinatio...
Proof by induction in Calculus: Investigating first-year students’ examinatio...
 
Evidence informed: Waar is de Bijsluiter?
Evidence informed: Waar is de Bijsluiter?Evidence informed: Waar is de Bijsluiter?
Evidence informed: Waar is de Bijsluiter?
 
Methodological innovation for mathematics education research
Methodological innovation for mathematics education researchMethodological innovation for mathematics education research
Methodological innovation for mathematics education research
 
Roundtable slides RiTE Paderborn 24/9/2021
Roundtable slides RiTE Paderborn 24/9/2021Roundtable slides RiTE Paderborn 24/9/2021
Roundtable slides RiTE Paderborn 24/9/2021
 
Structural Topic Modelling of Ofsted Documents
Structural Topic Modelling of Ofsted DocumentsStructural Topic Modelling of Ofsted Documents
Structural Topic Modelling of Ofsted Documents
 
Learning loss and learning inequalities during the Covid-19 pandemic: an anal...
Learning loss and learning inequalities during the Covid-19 pandemic: an anal...Learning loss and learning inequalities during the Covid-19 pandemic: an anal...
Learning loss and learning inequalities during the Covid-19 pandemic: an anal...
 

Onderwijs Research Dagen 2016

  • 1. Geautomatiseerde feedback in een wiskunde interventie voor algebra Dr. Christian Bokhove @cbokhove Onderwijs Research Dagen 2016
  • 2. Doel • Deel grotere studie met als doel een webgebaseerde interventie in te zetten voor het verbeteren van algebraïsche vaardigheden door middel van formatieve toetsing (Black & Wiliam, 1998). • Een belangrijk onderdeel hierin is het gebruik van feedback. • Een recente meta-analyse over de effecten van geautomatiseerde feedback waarin onmiddelijke ‘elaborated feedback’ effectief blijkt (Van der Kleij, Feskens & Eggen, 2015). 2
  • 3. Feedback Hattie and Timperley (2007) onderscheidden vier typen feedback: 1. Task level: hoe goed wordt de taak begrepen (FT) 2. Process level: feedback over de belangrijkste processen die nodig zijn om te taak te begrijpen (FP) 3. Self-regulation level: feedback gericht op zelfregulering van acties (FR) 4. Self level: op de person gerichte feedback (FS) De interventie in deze deelstudie keek (onder andere) naar implementaties van FT en FR feedback. 3
  • 4. Opzet • 324 6vwo wiskunde B leerlingen van 15 klassen in 9 middelbare scholen in Nederland. • In totaal 11 wiskundeleraren. • Scholen verspreid door heel Nederland en vertoonden variatie in schoolgrootte, denominatie en onderwijskundige achtergronden. • Twee series van wiskundeopgaven, d1 en d3 werden aangeboden binnen een grotere interventie gericht op het verbeteren van algebraïsche vaardigheden. 4
  • 5. Interventie • Beide series betrof het oplossen van kwadratische vergelijkingen. • De interventie vond plaats in de ‘Digitale Wiskunde Omgeving’ (DWO). • In deze omgeving kunnen wiskundige vergelijkingen worden aangeboden die met tussenstappen dienen te worden opgelost. De omgeving heeft een voorziening voor maatwerk feedback. 5
  • 7. 7
  • 8. Twee condities • De eerste conditie (c1) maatwerk feedback zonder aanvullende knoppen in de interface. Feedback werd alleen gegeven in de tussenstappen van het oplossen van de vergelijkingen en was gericht op de taak (FT). • De tweede conditie (c2) had additionele knoppen op het computerscherm. De knoppen waren (i) hint, voor een hint voor de volgende stap, (ii) stap, de daadwerkelijk volgende stap, en (iii) los op, gehele vergelijking stap voor stap opgelost. Feedback was FT, aangevuld met knoppen voor zelfregulering (FR). • Condities toegekend aan scholen. 8
  • 11. Resultaten feedback • Data niet normaal verdeeld dus non-parametrische Mann- Whitney • Significant verschil tussen feedback condities score voor d1 (U=7680.00, p<0.001, r=-.321) met conditie c2 hoger dan conditie c1. De tweede serie d3 liet echter geen significant verschil zien (U=10560.00, p=.531). • Aantal pogingen significant hoger voor feedback conditie c1 (Mdn=126.00) (geen knoppen) dan feedback conditie c2 (Mdn=105.00), U=9904.50, p<.001, r=.202.
  • 15. 16
  • 16. Conclusie • Taak-gerelateerde en zelf-regulatie(FT and FR) feedback kan formatief worden ingezet bij het leren van wiskunde (en andere vakken) • Leerlingen kunnen de feedback gebruiken om over misconcepties en moeilijkheden heen te komen, en om antwoorden te controleren. • Veel kan echter verbeterd: typen condities, controle. • Mogelijkheden uitgebreid in een recent Europees project over digitale wiskundeboeken. 17
  • 18. Geselecteerde referenties Black, P., & Wiliam, D. (1998). Assessment and classroom learning. Assessment in Education: Principles, Policy & Practice, 5(1), 7-73. Bokhove, C. (in press). Supporting variation in task design through the use of technology. In A. Leung & Baccaglini-Frank (Eds.) The role and potential of using digital technologies in mathematics education tasks. Bokhove, C., & Drijvers, P. (2012). Effects of a digital intervention on the development of algebraic expertise. Computers & Education, 58(1), 197-208. http://dx.doi.org/10.1016/j.compedu.2011.08.010 Hattie, J. & Timperley, H. (2007). The power of feedback. Review of Educational Research, 77(1), 81–112. Van der Kleij, F.M., Feskens, R.C.W., & Eggen, T.J.H.M. (2015). Effects of feedback in a computer-based learning environment on students’ learning outcomes. Review of Educational Research, 85(4), 475–511. 19

Notas do Editor

  1. Deze presentatie zal ingaan op de rol voor geautomatiseerde feedback in een interventie voor het oplossen van kwadratische vergelijkingen. Gebaseerd op het onderscheid tussen feedback op de taak (FT) en feedback voor zelfregulering (FR) werd de interventie gebruikt in 15 6vwo wiskunde B klassen in 9 scholen. Er waren twee condities met geautomatiseerde feedback in twee reeksen vergelijkingen. Het verschil tussen de condities bestond uit de aan- of afwezigheid van additionele knoppen. De resultaten laten een wisselend beeld zien ten aanzien van effectiviteit. Er wordt afgesloten met een discussie van de bepekingen van het onderzoek, alsmede doorintwikkelde feedbackmogelijkheden binnen een Europees project dat gericht is op wiskunde en creativiteit.
  2. Add explanations buttons