Regelmatige voortgangstoetsing met behulp van Blackboard

Dr. P.A. (Peter) Starreveld

Met dank aan Maartje Prevosth, CasparGroeneveld en Paul Lodder

2

Digitaal werkboek Psychologie, UvA

• Na elk college– Een bijbehorende activerende opdracht

• Experiment, simulatie, film

– Een multiple-choice toets met vragen over (a) de opdracht(b) alle stof tot dan toe

• Allemaal in Blackboard Learn (versie 9)

Inhoud

• Doelen digitale werkboek

• Evaluatie

• Aanpassingen

• Discussie

4

Doelen digitaal werkboek

• Activeren

• Trainen

• Feedback geven

• Motiveren

Activeren

Waarom activeren?

• Activeren = beter onthouden

• Netwerkmodellen van geheugen

Onderzoek door priming

• Voorbeeld:– Sneeuw is ......?

– Een koe drinkt .....?

7

dorst

melk

wit

kalf

water

sneeuw

koe

drinkt

Waarom activeren?

• Activeren = beter onthouden

• Door actief met de stof om te gaan maakt de student nieuwe verbindingen

• Hoe meer verbindingen, hoe beter het netwerk

Activatie

• Het experiment van Craik en Tulving(1975)

• Deelnemers kregen één voor één een flink aantal woorden te zien– KOE, MOND, vaas, land, BED, enz.

• Bij elk woord werd er een vraag gesteld, steeds over een bepaald aspect van het woord

9 9

Activatie

• Drie typen vragen– KOE

Staat het woord in hoofdletters? (druk)

– MONDRijmt het woord op rond (klank)

– vaasPast het woord in de zin: Het meisje zette de … op tafel (betekenis)

10 10

11

Activatie

• Het experiment van Craik en Tulving(1975)

0

20

40

60

80

druk klank be te ke nis

s o o rt v ra a g t ijde n s be s tu de rin g

pe

rc

en

ta

ge

co

rre

ct

11

12

Nut van activatie

• Je leert beter!

• Hoe activeer je 500 studenten buitenhet college en de werkgroepen?

• Opdrachten en toetsen via Blackboard

13

Voorbeeld opdrachten

• Zeer Actieve Psychologie (ZAP)– Experimenten en simulaties, bv de werking

van neuronen

20 januari 2011 UvA Symposium Studiesucces 14

15

Voorbeeld opdrachten

• Zeer Actieve Psychologie (ZAP)

• PsychSim– Simulaties van psychologische fenomenen,

bijvoorbeeld hemisferische verschillen

20 januari 2011 UvA Symposium Studiesucces 16

17

Voorbeeld opdrachten

• Zeer Actieve Psychologie (ZAP)

• PsychSim– Simulaties van psychologische fenomenen,

bijvoorbeeld de invloed van de manier van belonen op het leren

• In eigen huis ontwikkelde oefeningen

Trainen

Training

Het experiment van Karpicke en Roediger III (2008)

• Leren van 40 woordparen – bv reinforcer = bekrachtiger

heuristic = vuistregeladdiction = verslaving

• 4 verschillende manieren van herhalen

19 19

Training

• Herhaalcondities (4 groepen studenten)– Steeds alles opnieuw bestuderen en alles opnieuw

testen (Ba Ta)

– Alleen de niet-onthouden woordparen opnieuw bestuderen, alles opnieuw testen (Bn Ta)

– Steeds alles opnieuw bestuderen, alleen de niet-onthouden woordparen opnieuw testen (Ba Tn)

– Alleen de niet-onthouden woordparen opnieuw bestuderen en alleen die opnieuw testen (Bn Tn)

20

Training

• Na afloop– Alle studenten kenden alle woordparen

• Wat gebeurde er tijdens de echte test na 1 week?– Studenten uit alle groepen voorspelden dat

ze na een week nog ongeveer de helft van de woordparen zouden weten

21

0.2

0.3

0.4

0.5

0.6

0.7

0.8

0.9

Ba Ta Bn Ta Ba Tn Bn Tn

Perc

ent

age

cor

rect

Herhaalconditie

Training

22 22

Nut van training

• Opnieuw alles leren doet niet zoveelOpnieuw alles testen, dat doet veel!!

• Digitaal werkboek gebruikt herhaaldetesten met herhaalde vragen

• Opbouwende toetsen– De behandelde stof tot dan toe!

– Oude tentamenvragen

23 23

20 januari 2011 UvA Symposium Studiesucces 24

Feedback

26

Feedback

• De toetsen geven direct feedback

– Bij een fout, uit welk hoofdstuk de vraag kwam

– Studenten weten welke onderwerpen opnieuw bestudeerd moeten worden

– Ze weten waar ze staan

• Formatief

Motivatie

Motivatie

• We hopen dat de opdrachten motiveren– Interessant, nuttig en belangrijk

• We hopen dat de toetsen motiveren– om de opdrachten te doen– om vanaf het begin te studeren

• Studenten blijven bij

– door vroeg en individueel feedback op studieprestaties

– doordat het gaat om oude tentamenvragen

28

Motivatie

• De toetsresultaten tellen mee voor het eindcijfer (summatief)

• We belonen studenten die goed studiegedrag (inclusief discipline) laten zien

29

Evaluatie

31

Kosten

• Voor alle vakken– Eenmalig

• Oefeningen uitzoeken en beschikbaar maken• Tentamenvragen invoeren

– Jaarlijks• Opzetten toetsen• Verwerken toetsresultaten• Beantwoorden mails van studenten over de

toetsvragen• Aanpassen op grond van evaluaties

• De moeite waard?

32

Evaluatie: Studenten

• Inleiding en Cognitie deel A– 90% heeft alle oefeningen gemaakt

– 76% vond de oefeningen interessant

– 83% vond de oefeningen nuttig

– 93% vond de toetsen nuttig

33

Evaluatie: Studenten

• Totaal na een jaar– Opdrachten nuttig?

• 64% eens; 15% oneens

– Door Digitale Werkboek stof goed bijgehouden• 68% eens; 12% oneens

– Toetsen nuttig?• Gemiddeld over alle vakken

84% eens; 6% oneens

34

Evaluatie: Studenten

• Opmerkingen– Je blijft goed bij

– Je bent actief bezig met de stof

– Afwisselend

– Leerzaam

35

Evaluatie: Studenten

• Verbeterpunten– Veel deadlines

• schools

– Foutjes in de meerkeuzevragen

– Veel stof

36

Conclusie

• We gaan door

• Veranderingen 2011-2012– 1 deadline per week

– Foutjes in meerkeuzevragen verbeterd

– Handleiding voor studenten in toetsvorm

– Samenvatting individuele feedback per mail

Interesse?

• Protocol Digitaal Werkboek op te vragen bij Maartje PrevosthM.M.Prevosth@uva.nl

Vragen/discussie

39

• Toetsinstellingen – Test availability op Set Timer

• Communicatie: Punten is geen cijfer