Digitaal Toetsen

Waarom? – Hoe? – En dan?

Drs. Nynke BosCoördinator Onderwijstechnologie

Academisch Medisch Centrum – Universiteit van Amsterdam

Waarom? Hoe? En dan….?

• Waarom digitaal toetsen?• Hoe?

Huidige situatie in het AMC - Organisatie - Voorbeelden

• En dan….?• Conclusies

Waarom digitaal toetsen….?

1. Omdat ik niet achter wil blijven2. Snel klaar met nakijken3. Heb ik geen papieren rompslomp meer4. Hoef alleen maar vragen te maken, de rest

wordt geregeld5. Hoef geen handschriften meer te

ontcijferen6. Ik wil de studenten de toetsresultaten

kunnen mailen7. Ik wil helemaal niet digitaal toetsen8. Anders….

10

Waarom digitaal toetsen?

• ‘Ik ga digitaal toetsen omdat ik niet achter wil blijven’• ‘Snel klaar met nakijken’• ‘Geen papier’• ‘Ik hoef alleen maar vragen te maken,

de rest wordt voor me geregeld’• ‘Ik hoef geen handschriften meer te ontcijferen• ‘Ik wil studenten de toetsresultaten kunnen mailen’

Waarom niet digitaal toetsen?

Wat levert digitaal toetsen op?

• Flexibele toetsing (plaats, tijd & vorm (frequentie))• Gebruik van multimedia• Gebruik van verschillende vraagtypen

• (Directe) feedback• Gestructureerde vragenbank• Automatische analyse & verwerking

• Delen van vragen (instituut overstijgend!)

Een fictieve rekensomvoor een business case (UvA)

• Summatiefo UvA breed zijn dit 18.000 tentamens (volledig digitaal)

tijdwinst voor het verwerkingsproces is 30 min besparing in uren : 9000 ( +/- 6 fte)

• Formatiefo 20 tussentoetsen per jaar ; 10 digitaal ( 50%)o UvA breed zijn dit 180.000 tussentoetsen (volledig

digitaal)tijdwinst voor het verwerkingsproces is 10 minbesparing in uren : 30.000 (+/- 20 fte)

Uit Proeve aan Proeve, UvA, Frank Benneker

Randvoorwaarden digitale toetsing

• Doelstellingen bepalen

• Toetssysteem• Docenten opleiden* !

• Ondersteuning (logistiek & techniek)* !• Studenten voorbereiden

*AMC open vragen

Toetsen @ AMC-UvA

• 10 eindtoetsen (max n=200)• 50 toetsen in co-schappen (n=12)• 1 communicatietoets (n=350)

• 30 tussentijdse (bonus) toetsen (n=350)• 25 ingangstoetsen (n=350)

22.200 resultaten per jaarFormatief

Summatief

Organisatie digitale toetsing AMC-UvA

• 1 ICT & Onderwijs adviseur:o Adviseren docent(en) over gebruik vraagtypen & opbouw toetso Benadrukken voordelen digitale toetsing (en nadelen!)

• 1 Functioneel beheerder toetssysteemo (Trainen secretariaten voor) vraaginvoero Samenstellen toetso Roosteren toets & beschikbaar stellen via ELOo Standby tijdens toets voor vragen/problemen

• 1 Medewerker Toetsingo Analyse toetsresultaten & einduitslag

• 1 Systeembeheerder:o Standby tijdens toets voor technische problemen

• Docent:o Vragen bedenken & coördinatie overige docenteno Aanwezig tijdens afname voor inhoudelijke vragen (examenregeling)o Besluitvorming cesuur op basis van toetsanalyse & uitslag

• (Secretariaat docent:)o (Vragen invoeren)

Inzet van digitaal toetsen 

• Nieuwe toetsvormen mogelijk door de introductie van:o Nieuwe vraagtypen , b.v. “spoken response” o Inzet van multimedia in de opdrachto Ontsluiting van meerdere bronnen tijdens een toetso Introductie van itembanken draagt bij aan het hergebruik van

toetsvragen en de kwaliteit van toetseno Maken van interactieve toetsvragen kost tijd*

• Vereenvoudigt de ontwikkeling en inzet van ‘tussentoetsen’ en diagnostische toetseno Kan een bijdrage leveren aan een beter begrip van de stof bij

studenten en het studieresultaat• Kan een bijdrage leveren aan een optimalisatie van het

proces van creëren, aanbieden en verwerken van toetsen & toetsresultaten

Ik zou digitaal toetsen vooral willen gebruiken om…

1. Meer zelftoetsen aan studenten aan te bieden

2. Meer tussentoetsen (meetellen) aan te bieden

3. Eindtoetsen af te nemen

4. Een itembank op te bouwen

5. Ik voel er (nog steeds) niets voor

10

Brede implementatie

• Draagvlak en de wens is breed aanwezig, maar vrijmaken van mensen en middelen is problematisch

• Hoe meten we een kwaliteitstoename in het onderwijsproces ?

• De business case gaat al snel over efficiency en niet over onderwijskwaliteit (zie het fictieve rekenmodel)

• Stabiele, veilige en betrouwbare infrastructuur is een essentiële voorwaarde maar is kostbaar op de schaal van voorzieningen voor de gehele universiteit

Conclusies

• Meerwaarde vaststelleno Waar zetten wij op in? Meetbare doelstellingen!

• Beleid over inzet digitaal toetsen• Grote groepen heeft impact op afname• Opschaling: ruimte• Toetsen in shifts bewerkelijk -> duur!• Goede technische ondersteuning

Achteraf

• Presentatie nogmaals lezen?

• http://www.slideshare.net/NynkeBos

• Contact?

• Via: http://www.linkedin.com/in/nynkebos

• Ofo Mail: N.R.Bos@amc.uva.nl

Kosten en batenVoor digitaal toetsen is een

forse investering noodzakelijk

1. Eens2. Oneens

Kwaliteit van het onderwijsDoor digitaal toetsen zal de kwaliteit van het onderwijs

toenemen

1. Eens2. Oneens

OrganisatieVoor de invoering van digitaal

toetsen zijn organisatie veranderingen noodzakelijk

1. Eens 2. Oneens

OrganisatieBij een eventuele brede

invoering van digitaal toetsen moeten we docente verplichten

digitaal te gaan toetsen1. Eens2. Oneens