Sneller en beter feedback geven met digitale tools

SCALA-project

Programma toetsing en toetsgestuurd lerenwww.surf.nl/scalaDe projectgroep:

Patris van Boxel

Janneke van der Hulst

Ineke van den Berg

Sumit Mehra

José Beijer

Annelies Riteco

Sanne Meeder

Sanne Gratama van Andel

SCALA

Scaffolding Assessment for LeArning• Partners: HVA, HU, VU, UU• SURF project • Maart 2012-Maart 2014

SCALA: digitaal feedback geven en beoordelen

Belangrijkste projectdoelen:• Vermindering werkdruk docenten• Verbeteren van de kwaliteit van feedback op geschreven

producten

Tools: Turnitin, Winvision

Plaatje 1

SCALA

• Hergebruiken van feedback• Rubrics en beoordelingscriteria

Plaatje 2

SCALA hergebruik feedback

Voorgestructureerde feedback in een set: QuickmarksVia drag en drop

Plaatjes 3,4 en 5

SCALA

• Gebruik van Quickmark sets door groep docenten• Standaardisering van feedback

Plaatje 6

SCALA: rubric

• Transparante criteria voor docenten – Verhoogt consistentie / betrouwbaarheid van

beoordelingen• Transparantie criteria voor studenten

– Geeft inzicht in aspecten waarop beoordeeld wordt– Geeft niveau aan dat verwacht wordt / waar naar

gestreefd dient te worden– Bevordert zelfreflectie / zelfsturing

Rubrics in GradeMark

SCALA

• 28 pilots (21 Turnitin, 7 Winvision)

Grote variatie van pilots:• Rubric vs geen rubric• Docenten feedback• Peer feedback• Gebruik van Quickmarks • Gebruik van beoordelingscriteria• Één of meer docenten• Grote en kleine groepen

SCALA deliverables

• Onderzoeksrapportage• Good practice beschrijving• Voorbeelden van rubrics en quickmarksets• Voorbeelden van trainingsmateriaal

Allemaal vindbaar op: www.surf.nl/scala

SCALA: De ResultatenTijdsbesparing

Docenten (n=67)• Bijna 40% geeft aan minder tijd te hebben besteed,

gemiddeld 25% tijdswinst• Bij herhaald gebruik ervaren meer docenten tijdswinst

Let wel:• Het ontwikkelen van rubrics, quickmarks en

beoordelingscriteria vraagt eerst een tijdsinvestering

SCALA: De resultatenWaarin zit de tijdswinst

• Bij gebruik van rubrics• Hergebruik van feedback dmv quickmarks leidt tot

tijdswinst • Bij gebruik van vaste sets beoordelingscriteria• Minder administratieve rompslomp• Peerfeedback, met name faciliteren

SCALA: De ResultatenKwaliteitsverbetering

Docenten (n=67):• 40% van de docenten geeft aan dat de kwaliteit van de

feedback is toegenomen• Beoordeling is uniformer• Beoordeling transparanter voor studenten en

mededocenten

Studenten (n=552):• Beoordelen feedback met een 7,1• 71% vindt de hoeveelheid feedback voldoende

SCALA samenvatting en conclusie

• 40% heeft tijd bespaard• 40% van de docenten geeft aan dat er kwaliteitsverbetering

is• Tijdsbesparing is niet ten koste gegaan van de kwaliteit• 65% vond het systeem een handig middel• 85% van de docenten wil vaker deze systemen gebruiken

DEMO

• Mocht je na vandaag nog eens terug willen kijken, dan kan dat op www.turnitin.com staan diverse filmpjes:

SCALA

• Contact: R.GratamavanAndel@uu.nl• www.surf.nl/scala

Bronnen

• Plaatje 1: gevonden op 8 oktober 2013 op :http://euangelizomai.blogspot.nl/2006/06/grading-papers.html

• Plaatje 2:gemaakt door Patris van Boxel, oktober 2012 via http://www.wordle.net/createv

• Plaatjes 3, 4 en 5, gevonden op 8 oktober 2013 op: http://www.turnitin.com/en_us/features/grademark

• Plaatje 6: gevonden op 8 oktober 2013 op: http://www.infrasec.nl/?PageID=18&menu=84