OWD2012 - 3 - Learning analytics en formatieve toetsing - Wiskunde leren in de DWO bij...

21
Digitaal leren en toetsen Wiskunde leren in de DWO bij levenswetenschappen André Heck Universiteit van Amsterdam

Transcript of OWD2012 - 3 - Learning analytics en formatieve toetsing - Wiskunde leren in de DWO bij...

Page 1: OWD2012 - 3 - Learning analytics en formatieve toetsing - Wiskunde leren in de DWO bij levenswetenschappen - André Heck

Digitaal leren en toetsen

Wiskunde leren in de DWO bij levenswetenschappen

André Heck

Universiteit van Amsterdam

Page 2: OWD2012 - 3 - Learning analytics en formatieve toetsing - Wiskunde leren in de DWO bij levenswetenschappen - André Heck

1. Wat is de context?

2. Welke vormgeving van ICT Wiskunde ?

3. Welke rol voor Learning Analytics?

Page 3: OWD2012 - 3 - Learning analytics en formatieve toetsing - Wiskunde leren in de DWO bij levenswetenschappen - André Heck

1. Wat is de context?• Zwakke basisvaardigheden wiskunde bij

studenten die in hoger onderwijs starten

Page 4: OWD2012 - 3 - Learning analytics en formatieve toetsing - Wiskunde leren in de DWO bij levenswetenschappen - André Heck

Wat is de context?• Zwakke basisvaardigheden wiskunde bij

studenten die in hoger onderwijs starten

• Heterogene instroom

• Beperkte tijd beschikbaar voor reparatie

• ONBETWIST:Doel: Wiskundekennis van instromers in ho opfrissen, hoog krijgen en houden (voor lagere uitval en hoger rendement)

• Middel: Standaardtoetsen/items verzamelen, beoordelen en verspreiden voor VWO Wiskun-de, Calculus, Lineaire Algebra en Statistiek

Page 5: OWD2012 - 3 - Learning analytics en formatieve toetsing - Wiskunde leren in de DWO bij levenswetenschappen - André Heck

• Wens bij levenswetenschappen UvA: Wiskunde leren in context, wiskundige modellen van groei

•550 1stejaars Psychobiologie, Biologie, Bio-medische wetenschappen

•Instromers:N&G/N&T profiel; Wiskunde A/B;

•Zelfstudie met feedback via de DWO

•Verplicht onderdeel van 1stejaars vak:80% score is een slagingseis

Page 6: OWD2012 - 3 - Learning analytics en formatieve toetsing - Wiskunde leren in de DWO bij levenswetenschappen - André Heck

2. Welke vorm van ICT Wiskunde?

• MC-diagnostische toets over vwo-wiskunde

• 3 digitale lesmodules inhoudelijk gekoppeld aan celbiologie (groeimodellen)

• 1 hoorcollege + oefening door zelfstudie

• Mengsel van gerandomiseerde context-sommen en kale wiskundesommen

• Studenten krijgen digitale feedback en hebben zicht op hun voortgang

• Email-ondersteuning door docent

Page 7: OWD2012 - 3 - Learning analytics en formatieve toetsing - Wiskunde leren in de DWO bij levenswetenschappen - André Heck

Voorbeeld van resultatenscherm

Page 8: OWD2012 - 3 - Learning analytics en formatieve toetsing - Wiskunde leren in de DWO bij levenswetenschappen - André Heck

Voorbeeld van uitleg + kale som

Page 9: OWD2012 - 3 - Learning analytics en formatieve toetsing - Wiskunde leren in de DWO bij levenswetenschappen - André Heck

Feedback voor student en docent

• Summatieve feedback in DWO via score-overzicht

• Formatieve feedback op antwoorden

• Eindeloze kans op verbetering

• Vorderingen door docenten bij te houden op niveau van modules en activiteiten binnen een module

Page 10: OWD2012 - 3 - Learning analytics en formatieve toetsing - Wiskunde leren in de DWO bij levenswetenschappen - André Heck

Voorbeeld van feedback-codering

Page 11: OWD2012 - 3 - Learning analytics en formatieve toetsing - Wiskunde leren in de DWO bij levenswetenschappen - André Heck

Voorbeeld van overzicht voor docent

Page 12: OWD2012 - 3 - Learning analytics en formatieve toetsing - Wiskunde leren in de DWO bij levenswetenschappen - André Heck

Evaluatie van het vakEvaluatie van het vak

• Geen uitstelgedrag (studenten doen het!)• Hogere scores op (deel)tentamens via

formatieve toetsing (80% in 2011 vs. 35% in 2010; 65% schatting voor 2012 )

• Minder fouten tijdens laboratoriumwerk met wiskundige berekeningen (denk aan verdunningsreeks, pH berekening)

• Behoefte aan meer uitleg en meer uitgewerkte voorbeelden bij studenten

Page 13: OWD2012 - 3 - Learning analytics en formatieve toetsing - Wiskunde leren in de DWO bij levenswetenschappen - André Heck

3. Welke rol voor Learning Analytics?• Inzicht bij docent over

daadwerkelijk gebruik van lesmaterialen (ook bij integratie van DWO in een grotere digitale leer- omgeving)

SURF-Pilot: User needs van student en docent bij het gebruik van learning analytics

Page 14: OWD2012 - 3 - Learning analytics en formatieve toetsing - Wiskunde leren in de DWO bij levenswetenschappen - André Heck

Registratie per activiteit binnen DWO• Puntenscores

• Antwoorden

• Pogingen

• Aantal pogingen

• Tijdsduur (ook per onderdeel)

• Deelscores

Doel:

• inzicht in moeilijkheidsgraad van onderdelen

• signalering van veelvoorkomende fouten

Page 15: OWD2012 - 3 - Learning analytics en formatieve toetsing - Wiskunde leren in de DWO bij levenswetenschappen - André Heck

Datalogging

Page 16: OWD2012 - 3 - Learning analytics en formatieve toetsing - Wiskunde leren in de DWO bij levenswetenschappen - André Heck

Correct antwoord ≠ snel antwoord

Page 17: OWD2012 - 3 - Learning analytics en formatieve toetsing - Wiskunde leren in de DWO bij levenswetenschappen - André Heck

Registratie van gebruikersdata• Profielkeuze op vwo: NG / NT

• Wiskunde op vwo: A of B (facultatief D)

• Eindexamencijfer(s) voor vwo wiskunde

• Resultaat van diagnostische entreetoets

• Deeltentamencijfers

• Eindcijfer 1stejaarsvak

• Testresultaat m.b.t. Wiskundeangst

• Testresultaat m.b.t. Toetsangst

• Studierichting

Page 18: OWD2012 - 3 - Learning analytics en formatieve toetsing - Wiskunde leren in de DWO bij levenswetenschappen - André Heck

In combinatie met DWO-gegevens

Effect van verschillende indicatoren (wiskundige vooropleiding, mate van wiskundeangst, profielkeuze, studiekeuze, …)

op studiegedrag en/of studieresultaten

vwo wiskunde - entreetoets 2012

type gemiddelde st.dev.

A 5.6 1.7 significante

B 6.8 1.9 verschillen in

D 8.4 1.1 gemiddelden

Page 19: OWD2012 - 3 - Learning analytics en formatieve toetsing - Wiskunde leren in de DWO bij levenswetenschappen - André Heck

profielkeuze - entreetoets 2012

profiel gemiddelde st.dev.

NG 6.2 1.9 significante verschillen

NT 6.9 2.0 in gemiddelden

studierichting - entreetoets 2012

studie gemiddelde st.dev.

bio-medisch 6.6 1.9 geen significante ver-

psychobiologie 6.5 2.0 schillen; wel tussen

biologie 5.8 1.8 biologie en bio-medisch

Page 20: OWD2012 - 3 - Learning analytics en formatieve toetsing - Wiskunde leren in de DWO bij levenswetenschappen - André Heck

Kanttekeningen

• Dataverwerking tijdrovend

• Analyses pas achteraf

Resultaten pas bruikbaar

• voor cursus volgend studiejaar

• voor bijspijkeren na de cursus

Page 21: OWD2012 - 3 - Learning analytics en formatieve toetsing - Wiskunde leren in de DWO bij levenswetenschappen - André Heck

Meer info

• www.onbetwist.org• Projectleider Hans Cuypers [email protected][email protected]

Dank u voor uw aandacht!

Vragen?