Toets der kritiek

Het belang van goed toetsen in het hoger beroepsonderwijs

Wat is er aan de hand?

Inspectie in 2005: “Inholland is regelmatig in het nieuws. Studenten klagen onder meer over slecht onderwijs en gebrekkige studiebegeleiding, personeel klaagt onder meer over de wijze waarop organisatieveranderingen worden doorgevoerd en over de stijl van leidinggeven2. De afgelopen weken nam de publicitaire drukte verder toe.

Bron: Brief van de Inspecteur-generaal van het Onderwijs, mevrouw mr. drs. C. Kervezee, aan minister Rutte van onderwijs, 2005.

http://www.geenstijl.nl/mt/archieven/2011/04/de_wassen_neus_die_hboaccredit.html

Jurroen Cluitmans

• Coördinator accountantsopleidingen HAN

– AD, Bachelor, Post-hbo

– VT, dt, duaal

– Lid adviescommissie Eindtermen AC-opleiding

– Bestuurslid AC-scholenoverleg

– Docent boekhouden

• #TeachMeSo (onderwijsadvies)

Was het vroeger dan zoveel beter?

Volgens de wet van Posthumus (1940) krijgt bij het beoordelen van proefwerken en tentamens in het onderwijs een kwart van de leerlingen een onvoldoende, de helft een middelmatig cijfer en een kwart een goed cijfer, onafhankelijk van het niveau van het geleverde werk. Met andere woorden: de eisen passen zich aan de vastgeroeste verdeling aan

Bij

het

ove

rlei

jden

van

AD

de

Gro

ot,

naa

raa

nle

idin

gva

n

“Vijv

ene

n Z

esse

n”.

Han

s Fische

r, 40

jaa

r vijven en

zessen: H

et veelzijdig

eng

ag

emen

t van

A

.D. d

e Gro

ot, in

: Vakb

lad B

eter On

de

rwijs N

ede

rland

, 1e

jaargang, n

um

me

r 1, n

ovem

ber 2

00

6 ISSN

18

73

-52

07

Theo

retisch: n

orm

aalverde

eldb

ijzelfde

gemid

de

lde

en zelfd

estan

daard

deviatie

Bij

het

ove

rlijd

enva

n A

D d

e G

roo

t, n

aar

aan

leid

ing

van

“V

ijven

en

Zes

sen

”.

Hans Fischer, 40 jaar vijven en zessen: Het veelzijdig engagement van A.D. de Groot, in: Vakblad Beter Onderwijs Nederland, 1e jaargang, nummer 1, november 2006 ISSN 1873-5207

http://www.lsvb.nl/upload/Factsheet%20bekostiging%20HBO%20-%20OCW%202007.pdf

De realiteit van vandaag

• Er is veel kritiek op de kwaliteit van toetsing in het hoger onderwijs;• Kritiek op eindniveau maar (vooral) ook op naleving procedures /

wet (zie inspectieonderzoek)• Vanuit bv CvB worden strikte eisen gesteld (HAN: OWE-

beschrijvingen, “mappenproject”); • Verantwoording van wat we doen is cruciaal;• Toetsen en zeker het eindniveau zullen in accreditaties een zeer

belangrijke rol spelen;• Het onderscheid tussen 5-en en 6-en maar ook tussen 6-en en 7-

ens moeten we uit kunnen leggen;• Het kan altijd beter;• Weten hoe het moet is nog niet altijd doen zoals het moet.

Toetskwaliteit

RechtvaardigheidseisenVan Berkel en Bax, Toetsen, toetssteen of dobbelsteen” in “Toetsen in het hoger onderwijs’.

• Validiteit

• Betrouwbaarheid

• Objectiviteit

• Transparantie

• Normering

Validiteit (1)

Validiteit (2)

Stagaire Marloes heeft een deel van het grootboek van haar stage-organisatie meenaar huis genomen. ‘s Ochtens komt zebeneden en ziet tot haar schrik dat de hondhet grootboek aan flarden heeft gescheurd. Hieronder tref je de stukken aan die Marloesnog kan vinden. Kun jij haar helpen om de puzzel bij elkaar te leggen?

Validiteit (3)

• Meten wat je wilt meten

O.a.• Inhoudsvaliditeit• Begripsvaliditeit

hulpmiddelen• toetsplan• toetsmatrijs

Validiteit (toetsplan)

• Overzicht van alle toetsen in de opleiding

• Moment van afname

• Wijze van toetsing

• Toetstermen (afgeleid van de competenties of eindtermen)

Dient ook om:

• Duidelijk te maken dat alle eindtermen aanbod komen, op niveau.

Validiteit (toetsmatrijs)

• Grote verschillen in detailleringsniveau van de doelstellingen

• Toetsen veelal niet vanuit de matrijsgeconstrueerd

De praktijk

• Beroeps- en opleidingsprofiel(eindtermen, competenties) -> Landelijkoverleg

• Curriculum (waaronder toetsplan) -> curriculumcommissie

• Toetsmatrijs -> sectievoorzitter, module-eigenaar

• Toets -> docent

Betrouwbaarheid (1)

Betrouwbaarheid (2)

De praktijk

• De tentamenorganisatie dicteert

• Compenseren in plaats van verlengen

• Te weinig tijd beschikbaar voor goed toetsen(zowel constructie als afname)

• Niet iedereen is een goede toetsconstructeur

Objectiviteit (1)

Objectiviteit (2)

• Intersubjectiviteit

• Zowel bij de constructie als bij de beoordeling

De praktijk

• Meer ogen kosten meer geld

• Wij docenten weten het beter

• Onze eigen objectiviteit is soms gekleurd(stage, AOD)

Transparantie (1)

Transparantie (2)

• Op welke doelstellingen ligt de nadruk?

• Zijn ze allemaal even belangrijk?

• Wat is het niveau?

• Hoeveel tijd is beschikbaar?

• Hoe is de normering?

De praktijk

• Korte cycli, weinig tijd voor oefening

• Veel klachten van studenten

• Angst dat we met transparantie allesweggeven

Normering (1)

Normering (2)

• De Groot: twee typen rechtvaardiging voorbeslissingen:

– Voorspellend vermogen van de toets

– Inhoudelijke rechtvaardiging

• Normeren:

– Absoluut

– Relatief

De praktijk

• 50/55 %

• Correctie voor gokken

• Toewerken naar…

Samenvattend

Funny exam answers

• http://www.youtube.com/watch?v=XYy94B7M554&feature=related