HvA digitaal toetsen2012_04_26

48
Kom verder. Saxion. Stand van zaken Alexander Kremers Voorzitter SURF SIG Digitaal Toetsen 26 april 2012 Mini-conferentie Digitaal Toetsen

description

Hogeschool van Amsterdam, Bewegen, Sport en Voeding, Digitaal toetsen

Transcript of HvA digitaal toetsen2012_04_26

Kom verder. Saxion.

Stand van zaken

Alexander KremersVoorzitter SURF SIG Digitaal Toetsen

26 april 2012 Mini-conferentie Digitaal Toetsen

Kom verder. Saxion.

SaxionAantal studenten ongeveer 23.000Verdeeld over Enschede, Deventer en Apeldoorn

Aantal medewerkers ongeveer 2.200

In totaal 12 academies met ruim 70 opleidingen

Van gezondheidszorg tot textiel van werktuigbouwkunde tot

economie

Kom verder. Saxion.

SaxionICT&O speerpunten• E-learning en didactiek• Digitaal toetsen• Video / Weblectures

Ervaring met digitaal toetsen• 12,5 jaar bezig met digitaal toetsen• Bedrijfskritisch 10 weken per jaar• Kwaliteit hoog in het vaandel

Kom verder. Saxion.

Techniek / Organisatie / …

Kom verder. Saxion.

Organisatie

ToetsbureauToetsdeskAcademie A

ToetsdeskAcademie B

Toetsafname

Momenteel zitten we op zo’n 24.000 toetsmomenten

Kom verder. Saxion.

SaxionDigitale toets afnamen

2010: 12.0002011: 17.0002012: 24.0002013: …??

Hot issue(s):• Capaciteitsproblematiek• Keuze nieuw toetssysteem• Kwaliteit van toetsen / kwantiteit van vragen

Kom verder. Saxion.

SURF SIG Digitaal toetsenBevordering van kwantiteit en kwaliteit van digitale toetsing in

het onderwijs, door het bij elkaar brengen van experts en belangstellenden en het uitvoeren van gezamenlijke activiteiten ter bevordering van expertiseontwikkeling op het gebied van digitale toetsing

Belangrijkste doelen:• Opbouw expertiseplatform (mensen)• Opbouw kennisplatform (documenten)• Opbouw communicatieplatform (delen)

Lid worden? www.surfspace.nl/sig/6-digitaal-toetsen/

Kom verder. Saxion.

Wie van u is verantwoordelijk

voor de toetsorganisatie?

voor de financiën rond toetsen?

voor de techniek rond toetsen?

voor de kwaliteit van toetsen?

Kom verder. Saxion.

Visie

Kom verder. Saxion.

Academie Elke docent:Vragen makenVragen nakijkenVragen analyseren

Elke academie:DeskundigheidInfra en beheer

Kom verder. Saxion.

Saxion Op thema/vak:Centraal vragen makenCentraal vragen nakijkenCentraal vragen analyseren

SIG Toetsing:Grootschalige afnameLicentiesDeskundigheidBeveiliging

Kom verder. Saxion.

Landelijk Kwantiteit van vragen Kwaliteit / analyses Techniek /Infra beheer Deskundigheid Licenties inkopen

Alles in de Cloud GELD besparing

Kom verder. Saxion.

Om over na te denken

Een nationale infrastructuur kunnen we nu nog zelf regelen

Dit kan alleen maar als we het samen doen anders opdracht naar ….

Kom verder. Saxion.

?? Wilt u delen ??

Alexander [email protected]

PITCH: DIGITALE TOETSING HVA DEM‘De verbinding tussen onderwijs, kwaliteit en ICT’

Rob van den Heuvel

Mini conferentie ‘digitaal toetsen, 26 april 2012

15

KENNISMAKING

Portfolio digitaal toetsen Rob van den Heuvel:

Algemeen:

• opzet en uitrol van 5 toetslocaties in Nederland voor IB Groep (nu DUO), 2008 - 2010

• deelname leerprogramma Masterclass Digitaal Toetsen, 2009 - 2011

• eigenaar VDHC Toetscentrum Amsterdam 2008 – 2011, digitale afnames voor landelijke instituten

HvA DEM:

• implementatie digitaal toetsen Johan Cruyff University /HvA, 2007 - 2010

• projectleider digitaal toetsen i.o. HvA DEM, januari 2010 – december 2011

• adviseur HvA DEM locaties WBW/FMB, januari 2012 - heden

DIGITALISERING TOETSEN

Digitale database

Opbouw itembank schriftelijke afname + print & scan bij mc toetsen

online afname + (online) correctie(afhankelijk van PC-capaciteit)

Docenten, vakgroepen,

inhouds-deskundigen

Kwalitatieve en

kwantitatieve indicatoren

Aantal vragen – rubricering – taxonomie van Bloom – toetsmatrijs – redactie vragen – statistische waarden – historie

DIGITALISERING TOETSEN

= organisatieontwikkeling; visie + de mens en zijn competenties staan centraal

= het eigenaarschap bij de opleidingen met ICT als middel

= de kracht van de interne ambassadeurs

= delen en tonen van successen

= gebaat bij een ‘olievlek implementatie’

= medewerker toetstools met gevoel voor onderwijs en kwaliteit

= definiëren van taken en rollen

= de brug tussen de ‘oude’ naar de ‘nieuwe’ wereld

= de hefboom voor de kwaliteit van toetsen

= vooral leuk, nuttig, interessant, uitdagend!

= maatwerk en meer transparantie in processen

SCOPE DIGITAAL TOETSEN HVA DEM

VT WBW

6 opleidingen

VT/INT FMB

11 opleidingen

DT/DU LWB

JCU/SPM

CE

BE

MER

HRM

START ‘10-’11

Ca 15.00 studenten

PILOTS AFGERONDSTART SEPT ‘11

Inventarisatie

ENGELSNEDERL.

Bus.B.Recht

IBL

MER

Educatiever, excel+ diversen

80%

20%

SPEERPUNTEN DIGITAAL TOETSEN(TE VERTALEN NAAR CONCRETE DOELSTELLINGEN EN INDICATOREN)

Het verhogen van de kwaliteit van de (kennis)toetsen

Het stimuleren van tijd- en plaatsonafhankelijk toetsen

Efficiënter maken van logistieke- en administratieve toetsproces

DE (DIGITALE) TOETSCYCLUS + WERKPROCES

AuteursprocesAuteursproces ConstructieprocesConstructieproces

AfnameprocesAfnameprocesVerwerkingsprocesVerwerkingsproces

CorrectieprocesCorrectieprocesAnalyseprocesAnalyseprocesPublicatieprocesPublicatieproces

6,73,48,76,45,6

BeheersprocesBeheersproces

InschrijvingsprocesInschrijvingsprocesPlanningsprocesPlanningsproces

InzageprocesInzageproces

ONDERWIJS(opleidingen)

Toetsinhoud, opbouw database, kwaliteit,cesuurbepaling,

cijferbepaling,publicatie, opschaling,decentrale organisatie

BEDRIJFSBUREAUToetslogistiek, toetsafname,

roostering, inschrijving,cijferadministratie

I CTInfrastructuur,

hardware, software,functioneel ICT beheer

KWALITEIT (O&K)Effectmeting,

training,professionalisering

Coördinatoren Digitaal Toetsen

Toetscommissie

Examencommissie

Opleidingsmanager

DocentenICT medewerker

Surveillant

Functioneel Beheer

Roosteraar

Adviseur

Externe leverancier toetstoolMedewerker(s) O&K

Curriculum Commissie

Surveillantcoordinator

Digitaal toetsteam

Tentamencoordinator

SIS medewerker

Student

EIGENAARSCHAP - KRACHTENVELD

HOE GAAN WE DIT IN GOEDE BANEN LEIDEN?

TAKEN, ROLLEN EN RECHTEN VIA RA(S)CI-MODEL

Voordelen toepassing RA(S)CI model:

- afstemming en verheldering van de rol(len), rechten en verantwoordelijkheden- door afstemming groeiend draagvlak - input en inzicht voor het inrichten van de functionele organisatie;- teamwerk wordt aangemoedigd en dubbelingen in het werk worden voorkomen.

25

voorbeeld

terug

werkproces rollen

FUNCTIONELE ORGANISATIE

Coördinator Digitaal Toetsen FMB + WBW

- Gebruiksbeheer diverse toetstools - Interne consultant naar docent - sporttoetsen- Organisatie en begeleiding afname- Rapporteur itemanalyses – kwaliteit- Genereren uitslagen - herijkingen- Training kwaliteit – diversiteit- Aansturen medewerkers (database/beheer/org)

Coördinator Digitaal Toetsen FMB + WBW

- Gebruiksbeheer diverse toetstools - Interne consultant naar docent - sporttoetsen- Organisatie en begeleiding afname- Rapporteur itemanalyses – kwaliteit- Genereren uitslagen - herijkingen- Training kwaliteit – diversiteit- Aansturen medewerkers (database/beheer/org)

Functioneel B.

IT – ICT

Functioneel B.

IT – ICT

DEM WBW / FMBVT-DT-DUAAL

Hoofd IV

DEM WBW / FMBVT-DT-DUAAL

Hoofd IV

AFDELING/LOCATIES

WBW / FMB

MT’s

AFDELING/LOCATIES

WBW / FMB

MT’s

OPLEIDINGEN

Opleidingsmanager(s)

OPLEIDINGEN

Opleidingsmanager(s)

Projectleider/adviseur

Projectleider/adviseur

AdviseurO&K Domein

AdviseurO&K Domein

BedrijfsbureauBedrijfsbureau

Toetscommissies

Examencommissies

Toetscommissies

ExamencommissiesDocenten, toetsontwikkeling

+ rechten (bv inzage/rapportage)

Docenten, toetsontwikkeling+ rechten (bv inzage/rapportage)

Onderzoek

Communicatie

Onderzoek

Communicatie

Adviseur O&K afd.Adviseur O&K afd.

ICTICT

RESULTATEN VANAF 2010-2011

LWB VT + WBW VT(2010-2011 + 2011-2012)

FMB VT

ICT

Organisatie

Kwaliteit

- Externe hosting , ICT infrastructuur, secure QM (WBW)en tentamenstand (FMB) , RMS, nwe versies QMP/MATA, P&S

- Coördinatoren digitaal toetsen op FMB en WBW- FB met portefeuille digitaal toetsen- Inbedding bij opleidingen WBW conform RA(S) CI model

- 1e resultaten van opschaling en kwaliteitslag + trainingen- Borging toetscyclus ,werkprocessen, toetsdefinities

Online toetsafnames (summatief)Online formatieve toetsen QMP

ruim 20.000 toetsafnamesStatistiek

ruim 7.500 toetsafnames Engels

Soorten toetsafnames Mc vragen + combi (online cor.) Mc vragen

Aantal vakken online toetsafnames ≤ 50 vakken voor 5 opleidingen 9 vakken voor 3 opleidingen

Vakken schriftelijke toetsen uit QMP 11x Volgt

Ontwikkelingen - Single sign on, koppeling SIS, PC capaciteit, test zware toetsen- Surftender vragenbank BE ism H. van Rotterdam/HHS- Ontwikkeling formatieve toetsing /formatieve server/apps

WORKSHOP: AAN DE SLAG MET IMPLEMENTATIE

1.Warming up: korte brainstorm over de ‘winst’ van digitaal toetsen

(5 minuten + 5 minuten nabespreking)

• De winst voor de student, docent, opleiding, organisatie

2. Hoe gaan we implementeren: taken en rollen (15 minuten + 5 minuten nabespreking)

• Deeloefening RASCI-model: koppeling werkproces aan rollen/functies

DANK VOOR UW AANDACHT EN TOT ZO!

Mini- conferentie Digitaal ToetsenHvA

Digitaal toetsen bij DOO Praktische ervaring

Iman Abdullatif

30

1- Inhoudelijk: kwaliteit (soort vragen), objectiviteit, efficiëntie (nakijkwerk), rapportage.

2- Organisatorisch en logistiek: toetsgroepen, roostering, surveillanten, instructies, ondersteuning, presentielijst en rapportage.

3- Toets Infrastructuur: beveiliging, software en hardware, toetslokalen, netwerk, desktops/ laptops, inlogaccounts en applicatierechten.

1

Belangrijke zaken betreffende summatieve digitale toetsen

Die

nst

dig

itaa

l to

etse

n

Vo

orb

eeld

: p

roce

du

re b

ij D

OO

2

DIGITALE TOETSPROGRAMMA’S IN GEBRUIK BIJ DOO

(Summatieve en formatieve)

1- Wintoets: eigen toetsen maken door docent en/of DOO student (docent in opleiding)

2- Pabo en tweedegraad (QMP) HBO-raad, project 10 voor de leraar: landelijk verplichte kennistoetsen

3- Cito-Pabo: landelijk verplichte toetsen

4- Dialang: zelfbeoordeling talen toets

5- NOA (Nederlands Onderzoek Arbeidsmarkt): Oriëntatie motivatie/ taal en rekenen

3

• Steeds veel meer digitale toetsen

• Procedures, Instructies en communicatie, inrichting rondom de toetsen verbeteren

• Stabiliteit IT-Flex, netwerk en programma’s verbeteren

• Trainingen verzorgen en docenten ondersteunen

• Groot digitaal toetslokaal ( nu met laptops )

4

STAND VAN ZAKEN BIJ DOO

WENSEN VOOR DE TOEKOMST

• Rapportages verbeteren (direct online, analyse, export: excel, access)

• Efficiënter groepenbeheer (SIS- koppeling, oplossing Wintoets)

• Groot digitaal toetslokaal met desktops+ meerdere kleinere toetslokalen voor gebruik door HvA ( en UvA? )

5

BEDANKT EN TOT ZIENS

DIGITAAL TOETSEN

EEN MIDDEL OM KWALITEIT TE VERHOGEN EN TIJD TE BESPAREN

Wilma Kannegieter en Sumit Mehra

26 april 2012

WEBSPELLEROnline taalprogramma

TURN-IT-INGestandaardiseerde feedback bij studentenproducten

WEBSPELLEROnline taalprogramma

KENMERKEN WEBSPELLER

• ZELFSTUDIE MET VIRTUELE AANDACHT VAN HET PROGRAMMA

• GEAUTOMATISEERDE FEEDBACK OP VERSCHILLENDE NIVEAUS

• EIGEN TEMPO/INDIVIDUELE LEERWEG

• FORMATIEF EN SUMMATIEF TOETSEN VAN SPELLING EN GRAMMATICA

• FLEXIBEL AAN TE PASSEN PER GROEP (NORMERING, DEADLINES ETC)

• DOCENT KAN ACHTER DE SCHERMEN MONITOREN OP GROEPSNIVEAU EN

OP NIVEAU VAN INDIVIDUELE STUDENT

TURN-IT-INGestandaardiseerde feedback bij studentenproducten

DIGITAAL FEEDBACK GEVEN

SCALA / SURF-subsidie

Schrijfproducten

Uitgangspunten– Feedback hergebruiken– Transparante beoordelingscriteria

Turnitin dienst

Tussentijdse resultaten

• Veel enthousiasme bij docenten én bij managers

• Pilots bij DMR, maar mogelijk ook andere domeinen

BEDANKT VOOR JULLIE AANDACHT EN MEDEWERKING..