Assessments in de HU - husite.nl · Criteriumgericht Interview Oefening in drietal A, B en C A =...

35
Assessments in de HU Hannah Wielenga Onderdeel Judith Kortas 28 05 2018 10.15-12.30u

Transcript of Assessments in de HU - husite.nl · Criteriumgericht Interview Oefening in drietal A, B en C A =...

Page 1: Assessments in de HU - husite.nl · Criteriumgericht Interview Oefening in drietal A, B en C A = kandidaat B en C zijn assessor A kiest een criterium (z.o.z.) waarop hij/zij wordt

Assessments in de HU

Hannah Wielenga

Onderdeel Judith Kortas

28 05 2018

10.15-12.30u

Page 2: Assessments in de HU - husite.nl · Criteriumgericht Interview Oefening in drietal A, B en C A = kandidaat B en C zijn assessor A kiest een criterium (z.o.z.) waarop hij/zij wordt

Programma (tot 12.30u)

Een criteriumgericht interview (oefenen)

Informatie - met focus op: Competentiegerichte assessments

Videobeelden assessmentsessie IA

Verschillende interpretaties van het begrip

assessment Formulier ‘Kenmerken van assessments’

Checklist ‘Waaraan denken bij het ontwerpen van assessments?’

Advisering assessmentontwikkeling en training

assessoren 22018 05 28 Masterclass Assessments HU - Judith Kortas

Page 3: Assessments in de HU - husite.nl · Criteriumgericht Interview Oefening in drietal A, B en C A = kandidaat B en C zijn assessor A kiest een criterium (z.o.z.) waarop hij/zij wordt

Criteriumgericht interview

(CGI)

wie heeft zelf wel eens een CGI ondergaan?

wie heeft al ervaring met het afnemen van

CGI’s?

wie is bekend met interviewtechnieken?

vorm drietallen – zo gemengd mogelijk

32018 05 28 Masterclass Assessments HU - Judith Kortas

Page 4: Assessments in de HU - husite.nl · Criteriumgericht Interview Oefening in drietal A, B en C A = kandidaat B en C zijn assessor A kiest een criterium (z.o.z.) waarop hij/zij wordt

Criteriumgericht Interview

Oefening in drietal A, B en C

A = kandidaat

B en C zijn assessor

A kiest een criterium (z.o.z.) waarop hij/zij

wordt ondervraagd in een CGI van 10 min.

door B en C

A noteert het gekozen criterium voor B en C

42018 05 28 Masterclass Assessments HU - Judith Kortas

Page 5: Assessments in de HU - husite.nl · Criteriumgericht Interview Oefening in drietal A, B en C A = kandidaat B en C zijn assessor A kiest een criterium (z.o.z.) waarop hij/zij wordt

A kiest een criterium uit:

Je wordt gevraagd om in een CGI aannemelijk

te maken dat je als competente HU-docent:

aansluit bij de persoonlijke interesse van studenten, of

rekening houdt met verschillen tussen je studenten, of

controleert of je studenten de leerdoelen hebben

behaald, of

alle studenten bij je les betrekt, of

studenten leert samenwerken, of

studenten voldoende structuur biedt, of

studenten constructieve feedback geeft, of

… (een eigen criterium)

52018 05 28 Masterclass Assessments HU - Judith Kortas

Page 6: Assessments in de HU - husite.nl · Criteriumgericht Interview Oefening in drietal A, B en C A = kandidaat B en C zijn assessor A kiest een criterium (z.o.z.) waarop hij/zij wordt

werkwijze (3 + 10 min.)

3 min.

A kiest een criterium – noteert het voor B/C

B en C overleggen kort over: te stellen vragen bij het criterium

te hanteren werkwijze:

stellen we allebei vragen, of neemt een van de twee het

voortouw, of observeert een van de twee

gebruik van interviewmethodiek (STARR-methodiek, LSD,

etc)

wie bewaakt de tijd (10 min).

10 min CGI62018 05 28 Masterclass Assessments HU - Judith Kortas

Page 7: Assessments in de HU - husite.nl · Criteriumgericht Interview Oefening in drietal A, B en C A = kandidaat B en C zijn assessor A kiest een criterium (z.o.z.) waarop hij/zij wordt

Terugblik op CGI

4 min. eerst in je drietal

wat ging goed (TOPS)

wat kan beter (TIPS)

en verder… (?/!)

plenair

Wat leert je deze korte oefening?

welke vragen roept dit op t.a.v. assessments?

72018 05 28 Masterclass Assessments HU - Judith Kortas

Page 8: Assessments in de HU - husite.nl · Criteriumgericht Interview Oefening in drietal A, B en C A = kandidaat B en C zijn assessor A kiest een criterium (z.o.z.) waarop hij/zij wordt

Programma (tot 12.30u)

Welkom, programma

Een criteriumgericht interview (oefenen)

Informatie - met focus op:

Competentiegerichte assessments

Videobeelden assessmentsessie IA

Verschillende interpretaties van het begrip

assessment

Formulier ‘Kenmerken van assessments’

Checklist ‘Waaraan denken bij het ontwerpen van

assessments?’

Advisering assessmentontwikkeling en training

assessoren 82018 05 28 Masterclass Assessments HU - Judith Kortas

Page 9: Assessments in de HU - husite.nl · Criteriumgericht Interview Oefening in drietal A, B en C A = kandidaat B en C zijn assessor A kiest een criterium (z.o.z.) waarop hij/zij wordt

Toetsing en assessment

Term ‘assessment’ = toetsing en/of vaststellen

In de Engelstalige literatuur – van oorsprong:

synoniem voor elke vorm van toetsing en

beoordeling

meten van prestatie

standaardtoetsen o.a. voor vergelijken

van leerlingprestaties

2018 05 28 Masterclass Assessments HU - Judith Kortas 9

Page 10: Assessments in de HU - husite.nl · Criteriumgericht Interview Oefening in drietal A, B en C A = kandidaat B en C zijn assessor A kiest een criterium (z.o.z.) waarop hij/zij wordt

toetsing = assessment?

Gericht op Van

toetsing METEN

en beoordelen

competentiegericht

assessment

WAARDEREN

en beoordelen

10

Andere focus:

2018 05 28 Masterclass Assessments HU - Judith Kortas

Page 11: Assessments in de HU - husite.nl · Criteriumgericht Interview Oefening in drietal A, B en C A = kandidaat B en C zijn assessor A kiest een criterium (z.o.z.) waarop hij/zij wordt

toetsing = assessment?

Gericht op Van

toetsing METEN

en beoordelen

Leeruitkomsten

(kennis, houding,

vaardigheden)

competentiegericht

assessment

WAARDEREN 1)

en beoordelen

Professioneel

handelen in

(beroeps-)context

11

Andere focus:

1) Sadler, D.R. (2013). Making competent judgments of competence. In: S.

Blömeke, e.a. (red.) Modeling and measuring competencies in Higher

Education: Tasks and Challenges. Rotterdam: Sense Publishers (p. 13-27)2018 05 28 Masterclass Assessments HU - Judith Kortas

Page 12: Assessments in de HU - husite.nl · Criteriumgericht Interview Oefening in drietal A, B en C A = kandidaat B en C zijn assessor A kiest een criterium (z.o.z.) waarop hij/zij wordt

toetsing = assessment?

Gericht op Van

toetsing METEN

en beoordelen

ANALYTISCH

Leeruitkomsten

(kennis, houding,

vaardigheden)

competentiegericht

assessment

WAARDEREN 1)

en beoordelen

IN SAMENHANG

Professioneel

handelen in

(beroeps-)context

12

Andere focus:

1) Sadler, D.R. (2013). Making competent judgments of competence. In: S.

Blömeke, e.a. (red.) Modeling and measuring competencies in Higher

Education: Tasks and Challenges. Rotterdam: Sense Publishers (p. 13-27)2018 05 28 Masterclass Assessments HU - Judith Kortas

Page 13: Assessments in de HU - husite.nl · Criteriumgericht Interview Oefening in drietal A, B en C A = kandidaat B en C zijn assessor A kiest een criterium (z.o.z.) waarop hij/zij wordt

Doel van competentietoetsing

‘Bij het toetsen van competenties gaat het

om het tot stand brengen van een oordeel

over adequaat professioneel handelen in

uiteenlopende (beroeps-)contexten’

Van Berkel, A. (2012). Kritische reflectie op competentietoetsen in het hbo.

In: Onderwijsinnovatie, juni, p. 17-26

132018 05 28 Masterclass Assessments HU - Judith Kortas

Page 14: Assessments in de HU - husite.nl · Criteriumgericht Interview Oefening in drietal A, B en C A = kandidaat B en C zijn assessor A kiest een criterium (z.o.z.) waarop hij/zij wordt

Competentietoetsing geeft zicht op de

mate waarin een student:

kennis, vaardigheden en houdingen kan integreren in

adequaat professioneel handelen in een beroepsrelevante

situatie;

dit professioneel gedrag flexibel kan aanpassen in

verschillende beroepssituaties, ofwel bewuste beheersing van

de competenties vertoont;

zicht heeft op de ‘mate van ontwikkeling van een competentie

en in staat is deze doelgericht verder te ontwikkelen. M.a.w.: of

er sprake is van duurzame competentiebeheersing.

Gulikers, J. & Van Benthum, N. (2014). Toetsen van competenties. In: H. van Berkel, A. Bax,

& D. Joosten-ten Brinke, (red.). Toetsen in het hoger onderwijs. Houten: Bohn Stafleu van

Loghum (p. 218-219)142018 05 28 Masterclass Assessments HU - Judith Kortas

Page 15: Assessments in de HU - husite.nl · Criteriumgericht Interview Oefening in drietal A, B en C A = kandidaat B en C zijn assessor A kiest een criterium (z.o.z.) waarop hij/zij wordt

Meten of waarderen (1)

Het scoren in een assessment is niet zozeer

een vorm van meten maar eerder een proces

van redeneren, waarderen en beslissen.

De assessoren (experts) zijn

informatieverwerkers: interpreteren, zoeken

relevante informatie, integreren in beoordeling

en beslissen

Govaerts, M.J.B. (2011). Climbing the pyramid. Towards understanding

performance assessments. Maastricht: Universiteit (proefschrift) (p. 95 e.v.)152018 05 28 Masterclass Assessments HU - Judith Kortas

Page 16: Assessments in de HU - husite.nl · Criteriumgericht Interview Oefening in drietal A, B en C A = kandidaat B en C zijn assessor A kiest een criterium (z.o.z.) waarop hij/zij wordt

Meten of waarderen (2)

Competenties niet zoveel mogelijk

uiteenrafelen maar:

Beperkt aantal karakteristieken zoeken (je hebt immers gedeelde taal nodig)

Afvinklijsten voldoen niet

Het gaat om ‘contextualised judgments’:

je neemt de context mee in de

waardering/beoordeling

Sadler (2013) In: Blömeke, e.a., ibid

162018 05 28 Masterclass Assessments HU - Judith Kortas

Page 17: Assessments in de HU - husite.nl · Criteriumgericht Interview Oefening in drietal A, B en C A = kandidaat B en C zijn assessor A kiest een criterium (z.o.z.) waarop hij/zij wordt

Beslissing:

Zien we het deze persoon doen in de

praktijk? (Ja of nee)

Aangeven wat wél is aangetoond

van adequaat professioneel handelen

172018 05 28 Masterclass Assessments HU - Judith Kortas

Page 18: Assessments in de HU - husite.nl · Criteriumgericht Interview Oefening in drietal A, B en C A = kandidaat B en C zijn assessor A kiest een criterium (z.o.z.) waarop hij/zij wordt

Toetspiramide Miller

182018 05 28 Masterclass Assessments HU - Judith Kortas

Page 19: Assessments in de HU - husite.nl · Criteriumgericht Interview Oefening in drietal A, B en C A = kandidaat B en C zijn assessor A kiest een criterium (z.o.z.) waarop hij/zij wordt

Vaardigheid of competentie?

Personen zijn vaardig als ze in staat zijn

om efficiënt en doelgericht geleerde

procedures uit te voeren

Personen zijn competent als ze kunnen

omgaan met slecht-gedefiniëerde

problemen in complexe situaties

Straetmans (2014) in: Van Berkel e.a. (red.) Toetsen in het

hoger onderwijs. Houten: Bohn Stafleu van Loghum (p. 188)

192018 05 28 Masterclass Assessments HU - Judith Kortas

Page 20: Assessments in de HU - husite.nl · Criteriumgericht Interview Oefening in drietal A, B en C A = kandidaat B en C zijn assessor A kiest een criterium (z.o.z.) waarop hij/zij wordt

Voorbeeld

Vaardig t.a.v. beademen van dummy

Competent in bepalen van ziektebeeld

en wel of niet kunstmatig moeten

beademen in de ambulance

Straetmans (2014) ibid

202018 05 28 Masterclass Assessments HU - Judith Kortas

Page 21: Assessments in de HU - husite.nl · Criteriumgericht Interview Oefening in drietal A, B en C A = kandidaat B en C zijn assessor A kiest een criterium (z.o.z.) waarop hij/zij wordt

situaties effecthandelen

zichtbaar

onzichtbaar

unieke persoonlijkheidkwaliteiten motivatie inspiratie

beroepsopvatting beroepshouding

kennis van zaken

handelingsrepertoire

verantwoordelijkheid

Competentie

212018 05 28 Masterclass Assessments HU - Judith Kortas

Page 22: Assessments in de HU - husite.nl · Criteriumgericht Interview Oefening in drietal A, B en C A = kandidaat B en C zijn assessor A kiest een criterium (z.o.z.) waarop hij/zij wordt

Twee assessoren:

1 van HU (Beoordelaar Begeleider)

1 uit werkveld (gecertificeerd!)

Dagdeel

Portfolio

Presentatie

Criteriumgericht Interview (CGI)

Beoordeling (VD/NVD)

Assessment Startbekwaam (laatste 5 ec aan einde bacheloropleiding –

Instituut Archimedes)

222018 05 28 Masterclass Assessments HU - Judith Kortas

Page 23: Assessments in de HU - husite.nl · Criteriumgericht Interview Oefening in drietal A, B en C A = kandidaat B en C zijn assessor A kiest een criterium (z.o.z.) waarop hij/zij wordt

Lerarenopleiding (2e graads docent natk)

Compilatie (ca. 11 min.)

Presentatie door student

Overleg assessoren (wat al gezien, wat nog

bevragen?)

Criteriumgericht Interview

Overleg assessoren gericht op beoordeling

Rapportage van oordeel en feedback aan student

23

Videobeelden assessment

2018 05 28 Masterclass Assessments HU - Judith Kortas

Page 24: Assessments in de HU - husite.nl · Criteriumgericht Interview Oefening in drietal A, B en C A = kandidaat B en C zijn assessor A kiest een criterium (z.o.z.) waarop hij/zij wordt

Programma (tot 12.30u)

Welkom, programma

Een criteriumgericht interview (oefenen)

Informatie - focus op:

Competentiegerichte assessments

Videobeelden assessmentsessie IA

Verschillende interpretaties van het begrip

assessment

Formulier ‘Kenmerken van assessments’

Checklist ‘Waaraan denken bij het ontwerpen

van assessments?’

Advisering assessmentontwikkeling en training

assessoren 242018 05 28 Masterclass Assessments HU - Judith Kortas

Page 25: Assessments in de HU - husite.nl · Criteriumgericht Interview Oefening in drietal A, B en C A = kandidaat B en C zijn assessor A kiest een criterium (z.o.z.) waarop hij/zij wordt

Kenmerken van assessments

Formulier met 11 punten

Twee kolommen – twee uitersten op een

continuum

Niet: links is fout, rechts is goed

Gaat om doelen van het assessment

Bewustwording van keuzes en mogelijke gevolgen

voor de opleiding/student

Wat is minder/meer wenselijk252018 05 28 Masterclass Assessments HU - Judith Kortas

Page 26: Assessments in de HU - husite.nl · Criteriumgericht Interview Oefening in drietal A, B en C A = kandidaat B en C zijn assessor A kiest een criterium (z.o.z.) waarop hij/zij wordt

Formulier ‘Kenmerken van

assessments’

In duo’s (2x7 min.):

Interview elkaar a.d.h.v. het formulier:

Welke kenmerken zijn van toepassing op jullie

assessment?

Plenaire terugkoppeling

262018 05 28 Masterclass Assessments HU - Judith Kortas

Page 27: Assessments in de HU - husite.nl · Criteriumgericht Interview Oefening in drietal A, B en C A = kandidaat B en C zijn assessor A kiest een criterium (z.o.z.) waarop hij/zij wordt

Assessments in de HU:

niet alleen…

een mondelinge toets…

summatief inzetten (aan het eind van het

leerproces), maar ook de

formatieve en duurzame functie benutten (ten

behoeve van leerprocessen),

daarbij ‘peers’ inschakelen,

leerwegonafhankelijk maken

en koppelen aan leren in de beroepspraktijk

(leren participeren – professionele identiteit

ontwikkelen)

272018 05 28 Masterclass Assessments HU - Judith Kortas

Page 28: Assessments in de HU - husite.nl · Criteriumgericht Interview Oefening in drietal A, B en C A = kandidaat B en C zijn assessor A kiest een criterium (z.o.z.) waarop hij/zij wordt

Checklist ‘Waaraan denken bij het

ontwerpen van een assessment?’

eindkwalificaties opleiding

toetsbeleid

toetsprogramma

rol en vorm van assessment

Organiseerbaarheid

(om mee te nemen)

282018 05 28 Masterclass Assessments HU - Judith Kortas

Page 29: Assessments in de HU - husite.nl · Criteriumgericht Interview Oefening in drietal A, B en C A = kandidaat B en C zijn assessor A kiest een criterium (z.o.z.) waarop hij/zij wordt

Voor advies bij assessment-

ontwikkeling en

training van assessoren

Bureau Assessment & Validering

Instituut Archimedes

In gesprek met Expertisecentrum Docent HBO

Voorlopig: eerst een oriënterend gesprek met

Berber Visser

292018 05 28 Masterclass Assessments HU - Judith Kortas

Page 30: Assessments in de HU - husite.nl · Criteriumgericht Interview Oefening in drietal A, B en C A = kandidaat B en C zijn assessor A kiest een criterium (z.o.z.) waarop hij/zij wordt

Advies

Oriënterend: wat is precies onze behoefte?

Adviesgesprekken in ontwikkelfase: hoe willen

we toetsen, welke rol willen we assessment

laten spelen, hoe hangt dat samen met

andere vormen van toetsing, wat betekent dat

voor ontwikkelwerk en organisatie, …

30

Advisering en training

2018 05 28 Masterclass Assessments HU - Judith Kortas

Page 31: Assessments in de HU - husite.nl · Criteriumgericht Interview Oefening in drietal A, B en C A = kandidaat B en C zijn assessor A kiest een criterium (z.o.z.) waarop hij/zij wordt

Advisering en training

Training CGI: als (extra) toetsvorm bij een

(bestaand) beoordelingskader bij bv. een

beroepsproduct, focus op vraagtechnieken

2 dagdelen

Basistraining assessoren: indien een assessment

wordt ingezet om de competentieontwikkeling

(beroepsbekwaamheid) van studenten integratief te

toetsen op basis van een al ontwikkeld

competentieprofiel met gedragsindicatoren

o 4 dagdelen + 1 dagdeel certificering

o PILOT BLENDED VARIANT (8-10 u zelfstudie +

1 dag training + 1 dagdeel certificering)

312018 05 28 Masterclass Assessments HU - Judith Kortas

Page 32: Assessments in de HU - husite.nl · Criteriumgericht Interview Oefening in drietal A, B en C A = kandidaat B en C zijn assessor A kiest een criterium (z.o.z.) waarop hij/zij wordt

Advisering en training

Training, evt. ook

Training assessmentrapportage schrijven

Training valideren van EVC (eerder/elders

verworven competenties)

Training voor reeds gecertificeerde

assessoren die in een andere context

assessment af gaan nemen

…322018 05 28 Masterclass Assessments HU - Judith Kortas

Page 33: Assessments in de HU - husite.nl · Criteriumgericht Interview Oefening in drietal A, B en C A = kandidaat B en C zijn assessor A kiest een criterium (z.o.z.) waarop hij/zij wordt

Van harte aanbevolen:

Berkel, A. van, (2017)

De assessmentdriehoek voor leerwegonafhankelijk

toetsen en begeleiden.

In: OnderwijsInnovatie, juni (p.17-25)

Sinke, G.J. (2009)

Aan de slag met assessment. Toetsen en beoordelen in

een competentiegerichte leeromgeving. Nuenen:

Onderwijsadviesbureau M.A.F. Dekkers

Berkel, H. van, Bax, A., & Joosten-ten Brinke, D.

(red.). Toetsen in het hoger onderwijs. Houten: Bohn

Stafleu van Loghum 332018 05 28 Masterclass Assessments HU - Judith Kortas

Page 34: Assessments in de HU - husite.nl · Criteriumgericht Interview Oefening in drietal A, B en C A = kandidaat B en C zijn assessor A kiest een criterium (z.o.z.) waarop hij/zij wordt

342018 05 28 Masterclass Assessments HU - Judith Kortas

Page 35: Assessments in de HU - husite.nl · Criteriumgericht Interview Oefening in drietal A, B en C A = kandidaat B en C zijn assessor A kiest een criterium (z.o.z.) waarop hij/zij wordt

Opbrengst van vanochtend?

En graag formuliertje invullen voor Judith

352018 05 28 Masterclass Assessments HU - Judith Kortas