Blended learning & (e)assessment

Luc VandeputKHLeuven- KU Leuven

HUBrussel, januari 2012

Creative commons

Slideshare: www.slideshare.com/luput:

Opwarmer…

Voortgangstoets en studenthttp://prof.ivtg.nl/node/7

VU Amsterdam

http://www.youtube.com/watch?feature=endscreen&v=cqVvEDwdras&NR=1

Overzicht

• Leren, onderwijs en toetsen• Argumenten voor nieuw toetsparadigma• Beleid: Van toetsbeleid naar toetsvormen• Kwaliteitsbewaking via studenten/

toetsplatform

• Tot slot• NIET: hoe digitaal toetsen!

Onderwijs, opgevat als instructie

Maatschappij en onderwijs

van directief naar dynamiek

Nieuwe onderwijsconcepten vragen andere wijze van toetsing

Onderwijs en leerlandschap

• Collaborate• Connect• Create• Competenties• Reflectie• Begeleide zelfstudie• Dynamische

Leerinhouden• Samenwerkend leren• Werkplekleren

Toetsing

Assessment

Organisatie• Personeelsbeleid• Middelen• Infrastructuur• Administratie• Veranderingsmanagement

What’s new?• Toetsbeleid en –plan• Assessent maturity model• Peer reviewing• Benchmarking• Itemanalyse• Toetsmatrijs• Versiebeheer• Computer assisted assessment• Mobile assessment• Embedded assessments into learning materials• Assessment spaces• Toetsplatform• Toetsanalyse• E-exam venue (Turku)• …

Is dat zo?

Historiek en perspectief

Onderwijsorganisatorisch en administratief

Concretisering Leeractiviteiten

Concretisering: Blend van ‘spaces’ (TPC)

Concretisering: ‘inhouden’

Concretisering3: formeel <> informeel

30 70

Concretisering 4 Technologie

En dit betekent voor het toetsplan

Concretisering 21st Century Skills

En dit betekent voor het toetsplan

Concretisering: leermodellen

En dit betekent voor het toetsplan

Toetsbeleid: zaak van instelling/ groep

Toetsvormen: zaak van de vakgroep/ontwikkelteam

Type competentie Toetsvorm

Materiedeskundigheid Toetsen met meerkeuzeopgaven of andere kleinere taken

Probleemoplossingsvaardigheden

Authentieke taken die leiden tot systematisch handelen dat leidt tot prestatie

Netwerkvaardigheden Samenwerkend onderwijs: taken in groepen (incl. self assessment en PA)

Zelfregulatie professionele ontwikkeling

Reflectie n.a.v. zelfinschatting en inschatting door exerne beoordelaar

Zelfregulatie commitment Reflectie n.a.v. zelfinschatting, begeleider, medestudent en opdrachtgever

Beleid voor (e-)assessment

Beleidskader

Visie van de instelling

Onderwijsvisie

Organisatorische aspecten

Personeelsbeleid

Infrastructuur

Financiën

Ondersteuning en training

Professionalisering

Ondersteuningsteams

Planning en implementatie

Doelstellingen en acties

Top-down vs. Bottom-up

Veranderingsmanagement

E-assessment Maturity Model

Tot slot 1• Complexiteit is groot (geïntegreerd digtaal toetsen)• Goede inschatting maken van kosten,

personeelsinzet en infrastructuur• Project raakt hele organisatie• Draagvlak bij management cruciaal (Schlusmans,

2011)• Investeer in opbouwen van expertise in diactiek,

pakket op alle terreinen• Niet afhankelijk maken van leverancier van systeem.

Meerdere mensen eigenaar maken• Invoer van items is specialisten werk - opbouw en

centralisatie van deze expertise

Tot slot 2Toekomst: vakken jaarlijks live, meervoudig online, dus toetsing flexibel

Tot slot 3

• Download via de JISC website:

http://bit.ly/oB2QIp

28

Stellingen (Schlusmans, 2011)

1. De voordelen van digitaal toetsen wegen niet op tegen de complexiteit en de kosten• eens• oneens• geen mening

2. De introductie van digitaal toetsen leidt niet zonder meer tot verbetering van de toetskwaliteit

3. De introductie van digitaal toetsen leidt niet zonder meer tot grotere flexibiliteit van toetsing en examinering

4. Digitaal toetsen is meer kwetsbaar dan het reguliere systeem

29

Stellingen (Schlusmans, 2011) (2)

1. Digitaal toetsen is zeker niet kostenbesparend2. De invoering van digitaal toetsen moet worden

aangepakt als een veranderproces3. Om digitaal toetsen succesvol in te voeren, moeten

de verantwoordelijken ook eigenaar zijn van de toetsapplicatie(s)

4. Docenten moeten verplicht worden al hun vragen beschikbaar te stellen in gemeenschappelijke toetsbanken

5. Centraal investeren in scholing van docenten m.b.t. toetsbeleid is voorwaarde voor succesvol digitaliseren van toetsen.

30

Stellingen (Schlusmans, 2011) (3)

1. Top-down invoeren is de enige manier om digitaal toetsbeleid succesvolk te kunnen invoeren

2. Een digitale vragendatabase kan alleen worden gebruikt voor examens

3. Digitaal toetsen levert voornamelijk efficiëntie op4. Als het management van je instelling of opleiding niet

overtuigd is van het nut van digitaal toetsen, dan initieer je dat gewoon bottum up als opleiding of vakgroep

Self assessment• 1 Heb ik geen ervaring of kennis van

• 2 Heb ik in een opleidingssituatie kennis mee gemaakt

• 3 Heb ik in een werk of stagesituatie onder begeleiding mee gewerkt

• 4 Heb ik in een werk-of stagesituatie samen met anderen gedaan

• 5 Heb ik in een werk of stagesituatie zelfstandig gedaan en mijn werk is in overeenstemming met de

eisen ter plekke.

Voorbeeld van een self assessment

Peer assessment

Voorbeeld peer assessment

Toetsanalyse door studenten• De toetsvragen waren helder geformuleerd• De toetsvragen waren goed leesbaar op het scherm• De afbeedlingen of filmpjes waren goed zichtbaar (vul ja/neen in

indien van toepassing)• Sommige vragen/ casussen zouden verhelderend kunnen worden

door het toevoegen van beeldmateriaal (filmpje, foto,...)• De vragen passen bij het beeld dat ik heb van de beroepspraktijk• De vragen sluiten aan bij de casus• De Toets sluit goed aan bij de inhoud (kennis, inzicht, toepassing

van het OPO of module• Ik had voldoende tijd om de toets te maken• Ik vod de toets --veel te moeilijk--- veel te gemakkelijk• De score klopte met mijn inschatting van hoe ik de toets heb

gemaakt• De toets krijgt van mij het rapportcijfer 1-10

Rapportering van de peer asessment

Peer assessment in discussieforum

Peer assessment en ‘rating’ in BB 7.2

Kwaliteitsbewaking via digitale verwerking