Digitaal toetsen en learning analytics - Jeroen Donkers - OWD2013
-
Upload
de-onderwijsdagen -
Category
Education
-
view
101 -
download
1
description
Transcript of Digitaal toetsen en learning analytics - Jeroen Donkers - OWD2013
Jeroen Donkers, Universiteit Maastricht, O&O
4 x per jaar, 12000 studenten geneeskunde in 5 instellingen tegelijkertijd
200 MCQ vragen (met vraagteken) over de hele stof
Relatieve normering
Toetsafname zelf is papier (logistiek)
Werkt ProF als feedback instrument?
Relatie tussen het gebruik van ProF en de groei in voortgangstoets-resultaten
Gebruik meten mbv. Piwik – gebruiksdata koppelen met toetsresultaten
0%
5%
10%
15%
20%
25%
30%
35%
40%
45%
50%
1 2-5 6-20 >20
Pe
rce
nta
ge v
an d
e s
ess
ies
Lengte van de sessie in aantal acties
Onvold
Vold
Goed
“Growth”: (T4+T5) – (T1+T2+T3)
“Level”: gemiddelde uitkomst (o/v/g)
“Usage”: aantal serieuze sessies (>5 paginas) in ProF
G ~ U + L + Y + U:L + U:Y◦ G = growth, U = usage, L = level, Y = year
Intercept 9.25772 (< 2e-16 ***)
U 0.39928 (8.95e-06 ***)
L -1.26625 (1.29e-05 ***)
Y -0.13215 (1.69e-11 ***)
U:Y -0.02627 (0.0652)
L:Y -0.36046 (2.13e-11 ***)
(R-squared is 0.1099, but beta for U is 0.12)
Gemiddelde groei is ongeveer 10 procentpunten
Students die ProF 5 keer of meer serieusgebruikten, groeiden 2 procentpunt meer
◦ (gecorrigeerd voor level en year)
ProF is een voorbeeld van een rijke feedback van toetsgegevens dankzij learning analytics
Meta-analyse suggesteert dat mate van het gebruik van deze feedback-tool gecorreleerdis aan meer kennisgroei