OWD2012 - 3 - Learning analytics en formatieve toetsing - Wiskunde leren in de DWO bij...

Post on 10-Aug-2015

245 views 0 download

Transcript of OWD2012 - 3 - Learning analytics en formatieve toetsing - Wiskunde leren in de DWO bij...

Digitaal leren en toetsen

Wiskunde leren in de DWO bij levenswetenschappen

André Heck

Universiteit van Amsterdam

1. Wat is de context?

2. Welke vormgeving van ICT Wiskunde ?

3. Welke rol voor Learning Analytics?

1. Wat is de context?• Zwakke basisvaardigheden wiskunde bij

studenten die in hoger onderwijs starten

Wat is de context?• Zwakke basisvaardigheden wiskunde bij

studenten die in hoger onderwijs starten

• Heterogene instroom

• Beperkte tijd beschikbaar voor reparatie

• ONBETWIST:Doel: Wiskundekennis van instromers in ho opfrissen, hoog krijgen en houden (voor lagere uitval en hoger rendement)

• Middel: Standaardtoetsen/items verzamelen, beoordelen en verspreiden voor VWO Wiskun-de, Calculus, Lineaire Algebra en Statistiek

• Wens bij levenswetenschappen UvA: Wiskunde leren in context, wiskundige modellen van groei

•550 1stejaars Psychobiologie, Biologie, Bio-medische wetenschappen

•Instromers:N&G/N&T profiel; Wiskunde A/B;

•Zelfstudie met feedback via de DWO

•Verplicht onderdeel van 1stejaars vak:80% score is een slagingseis

2. Welke vorm van ICT Wiskunde?

• MC-diagnostische toets over vwo-wiskunde

• 3 digitale lesmodules inhoudelijk gekoppeld aan celbiologie (groeimodellen)

• 1 hoorcollege + oefening door zelfstudie

• Mengsel van gerandomiseerde context-sommen en kale wiskundesommen

• Studenten krijgen digitale feedback en hebben zicht op hun voortgang

• Email-ondersteuning door docent

Voorbeeld van resultatenscherm

Voorbeeld van uitleg + kale som

Feedback voor student en docent

• Summatieve feedback in DWO via score-overzicht

• Formatieve feedback op antwoorden

• Eindeloze kans op verbetering

• Vorderingen door docenten bij te houden op niveau van modules en activiteiten binnen een module

Voorbeeld van feedback-codering

Voorbeeld van overzicht voor docent

Evaluatie van het vakEvaluatie van het vak

• Geen uitstelgedrag (studenten doen het!)• Hogere scores op (deel)tentamens via

formatieve toetsing (80% in 2011 vs. 35% in 2010; 65% schatting voor 2012 )

• Minder fouten tijdens laboratoriumwerk met wiskundige berekeningen (denk aan verdunningsreeks, pH berekening)

• Behoefte aan meer uitleg en meer uitgewerkte voorbeelden bij studenten

3. Welke rol voor Learning Analytics?• Inzicht bij docent over

daadwerkelijk gebruik van lesmaterialen (ook bij integratie van DWO in een grotere digitale leer- omgeving)

SURF-Pilot: User needs van student en docent bij het gebruik van learning analytics

Registratie per activiteit binnen DWO• Puntenscores

• Antwoorden

• Pogingen

• Aantal pogingen

• Tijdsduur (ook per onderdeel)

• Deelscores

Doel:

• inzicht in moeilijkheidsgraad van onderdelen

• signalering van veelvoorkomende fouten

Datalogging

Correct antwoord ≠ snel antwoord

Registratie van gebruikersdata• Profielkeuze op vwo: NG / NT

• Wiskunde op vwo: A of B (facultatief D)

• Eindexamencijfer(s) voor vwo wiskunde

• Resultaat van diagnostische entreetoets

• Deeltentamencijfers

• Eindcijfer 1stejaarsvak

• Testresultaat m.b.t. Wiskundeangst

• Testresultaat m.b.t. Toetsangst

• Studierichting

In combinatie met DWO-gegevens

Effect van verschillende indicatoren (wiskundige vooropleiding, mate van wiskundeangst, profielkeuze, studiekeuze, …)

op studiegedrag en/of studieresultaten

vwo wiskunde - entreetoets 2012

type gemiddelde st.dev.

A 5.6 1.7 significante

B 6.8 1.9 verschillen in

D 8.4 1.1 gemiddelden

profielkeuze - entreetoets 2012

profiel gemiddelde st.dev.

NG 6.2 1.9 significante verschillen

NT 6.9 2.0 in gemiddelden

studierichting - entreetoets 2012

studie gemiddelde st.dev.

bio-medisch 6.6 1.9 geen significante ver-

psychobiologie 6.5 2.0 schillen; wel tussen

biologie 5.8 1.8 biologie en bio-medisch

Kanttekeningen

• Dataverwerking tijdrovend

• Analyses pas achteraf

Resultaten pas bruikbaar

• voor cursus volgend studiejaar

• voor bijspijkeren na de cursus

Meer info

• www.onbetwist.org• Projectleider Hans Cuypers hansc@win.tue.nl • a.j.p.heck@uva.nl

Dank u voor uw aandacht!

Vragen?