Jeroen Donkers, Universiteit Maastricht, O&O

4 x per jaar, 12000 studenten geneeskunde in 5 instellingen tegelijkertijd

200 MCQ vragen (met vraagteken) over de hele stof

Relatieve normering

Toetsafname zelf is papier (logistiek)

Werkt ProF als feedback instrument?

Relatie tussen het gebruik van ProF en de groei in voortgangstoets-resultaten

Gebruik meten mbv. Piwik – gebruiksdata koppelen met toetsresultaten

0%

5%

10%

15%

20%

25%

30%

35%

40%

45%

50%

1 2-5 6-20 >20

Pe

rce

nta

ge v

an d

e s

ess

ies

Lengte van de sessie in aantal acties

Onvold

Vold

Goed

“Growth”: (T4+T5) – (T1+T2+T3)

“Level”: gemiddelde uitkomst (o/v/g)

“Usage”: aantal serieuze sessies (>5 paginas) in ProF

G ~ U + L + Y + U:L + U:Y◦ G = growth, U = usage, L = level, Y = year

Intercept 9.25772 (< 2e-16 ***)

U 0.39928 (8.95e-06 ***)

L -1.26625 (1.29e-05 ***)

Y -0.13215 (1.69e-11 ***)

U:Y -0.02627 (0.0652)

L:Y -0.36046 (2.13e-11 ***)

(R-squared is 0.1099, but beta for U is 0.12)

Gemiddelde groei is ongeveer 10 procentpunten

Students die ProF 5 keer of meer serieusgebruikten, groeiden 2 procentpunt meer

◦ (gecorrigeerd voor level en year)

ProF is een voorbeeld van een rijke feedback van toetsgegevens dankzij learning analytics

Meta-analyse suggesteert dat mate van het gebruik van deze feedback-tool gecorreleerdis aan meer kennisgroei