HvA digitaal toetsen2012_04_26
-
Upload
ericabeerman -
Category
Education
-
view
705 -
download
2
description
Transcript of HvA digitaal toetsen2012_04_26
Kom verder. Saxion.
Stand van zaken
Alexander KremersVoorzitter SURF SIG Digitaal Toetsen
26 april 2012 Mini-conferentie Digitaal Toetsen
Kom verder. Saxion.
SaxionAantal studenten ongeveer 23.000Verdeeld over Enschede, Deventer en Apeldoorn
Aantal medewerkers ongeveer 2.200
In totaal 12 academies met ruim 70 opleidingen
Van gezondheidszorg tot textiel van werktuigbouwkunde tot
economie
Kom verder. Saxion.
SaxionICT&O speerpunten• E-learning en didactiek• Digitaal toetsen• Video / Weblectures
Ervaring met digitaal toetsen• 12,5 jaar bezig met digitaal toetsen• Bedrijfskritisch 10 weken per jaar• Kwaliteit hoog in het vaandel
Kom verder. Saxion.
Organisatie
ToetsbureauToetsdeskAcademie A
ToetsdeskAcademie B
Toetsafname
Momenteel zitten we op zo’n 24.000 toetsmomenten
Kom verder. Saxion.
SaxionDigitale toets afnamen
2010: 12.0002011: 17.0002012: 24.0002013: …??
Hot issue(s):• Capaciteitsproblematiek• Keuze nieuw toetssysteem• Kwaliteit van toetsen / kwantiteit van vragen
Kom verder. Saxion.
SURF SIG Digitaal toetsenBevordering van kwantiteit en kwaliteit van digitale toetsing in
het onderwijs, door het bij elkaar brengen van experts en belangstellenden en het uitvoeren van gezamenlijke activiteiten ter bevordering van expertiseontwikkeling op het gebied van digitale toetsing
Belangrijkste doelen:• Opbouw expertiseplatform (mensen)• Opbouw kennisplatform (documenten)• Opbouw communicatieplatform (delen)
Lid worden? www.surfspace.nl/sig/6-digitaal-toetsen/
Kom verder. Saxion.
Wie van u is verantwoordelijk
voor de toetsorganisatie?
voor de financiën rond toetsen?
voor de techniek rond toetsen?
voor de kwaliteit van toetsen?
Kom verder. Saxion.
Academie Elke docent:Vragen makenVragen nakijkenVragen analyseren
Elke academie:DeskundigheidInfra en beheer
Kom verder. Saxion.
Saxion Op thema/vak:Centraal vragen makenCentraal vragen nakijkenCentraal vragen analyseren
SIG Toetsing:Grootschalige afnameLicentiesDeskundigheidBeveiliging
Kom verder. Saxion.
Landelijk Kwantiteit van vragen Kwaliteit / analyses Techniek /Infra beheer Deskundigheid Licenties inkopen
Alles in de Cloud GELD besparing
Kom verder. Saxion.
Om over na te denken
Een nationale infrastructuur kunnen we nu nog zelf regelen
Dit kan alleen maar als we het samen doen anders opdracht naar ….
PITCH: DIGITALE TOETSING HVA DEM‘De verbinding tussen onderwijs, kwaliteit en ICT’
Rob van den Heuvel
Mini conferentie ‘digitaal toetsen, 26 april 2012
15
KENNISMAKING
Portfolio digitaal toetsen Rob van den Heuvel:
Algemeen:
• opzet en uitrol van 5 toetslocaties in Nederland voor IB Groep (nu DUO), 2008 - 2010
• deelname leerprogramma Masterclass Digitaal Toetsen, 2009 - 2011
• eigenaar VDHC Toetscentrum Amsterdam 2008 – 2011, digitale afnames voor landelijke instituten
HvA DEM:
• implementatie digitaal toetsen Johan Cruyff University /HvA, 2007 - 2010
• projectleider digitaal toetsen i.o. HvA DEM, januari 2010 – december 2011
• adviseur HvA DEM locaties WBW/FMB, januari 2012 - heden
DIGITALISERING TOETSEN
Digitale database
Opbouw itembank schriftelijke afname + print & scan bij mc toetsen
online afname + (online) correctie(afhankelijk van PC-capaciteit)
Docenten, vakgroepen,
inhouds-deskundigen
Kwalitatieve en
kwantitatieve indicatoren
Aantal vragen – rubricering – taxonomie van Bloom – toetsmatrijs – redactie vragen – statistische waarden – historie
DIGITALISERING TOETSEN
= organisatieontwikkeling; visie + de mens en zijn competenties staan centraal
= het eigenaarschap bij de opleidingen met ICT als middel
= de kracht van de interne ambassadeurs
= delen en tonen van successen
= gebaat bij een ‘olievlek implementatie’
= medewerker toetstools met gevoel voor onderwijs en kwaliteit
= definiëren van taken en rollen
= de brug tussen de ‘oude’ naar de ‘nieuwe’ wereld
= de hefboom voor de kwaliteit van toetsen
= vooral leuk, nuttig, interessant, uitdagend!
= maatwerk en meer transparantie in processen
SCOPE DIGITAAL TOETSEN HVA DEM
VT WBW
6 opleidingen
VT/INT FMB
11 opleidingen
DT/DU LWB
JCU/SPM
CE
BE
MER
HRM
START ‘10-’11
Ca 15.00 studenten
PILOTS AFGERONDSTART SEPT ‘11
Inventarisatie
ENGELSNEDERL.
Bus.B.Recht
IBL
MER
Educatiever, excel+ diversen
80%
20%
SPEERPUNTEN DIGITAAL TOETSEN(TE VERTALEN NAAR CONCRETE DOELSTELLINGEN EN INDICATOREN)
Het verhogen van de kwaliteit van de (kennis)toetsen
Het stimuleren van tijd- en plaatsonafhankelijk toetsen
Efficiënter maken van logistieke- en administratieve toetsproces
DE (DIGITALE) TOETSCYCLUS + WERKPROCES
AuteursprocesAuteursproces ConstructieprocesConstructieproces
AfnameprocesAfnameprocesVerwerkingsprocesVerwerkingsproces
CorrectieprocesCorrectieprocesAnalyseprocesAnalyseprocesPublicatieprocesPublicatieproces
6,73,48,76,45,6
BeheersprocesBeheersproces
InschrijvingsprocesInschrijvingsprocesPlanningsprocesPlanningsproces
InzageprocesInzageproces
ONDERWIJS(opleidingen)
Toetsinhoud, opbouw database, kwaliteit,cesuurbepaling,
cijferbepaling,publicatie, opschaling,decentrale organisatie
BEDRIJFSBUREAUToetslogistiek, toetsafname,
roostering, inschrijving,cijferadministratie
I CTInfrastructuur,
hardware, software,functioneel ICT beheer
KWALITEIT (O&K)Effectmeting,
training,professionalisering
Coördinatoren Digitaal Toetsen
Toetscommissie
Examencommissie
Opleidingsmanager
DocentenICT medewerker
Surveillant
Functioneel Beheer
Roosteraar
Adviseur
Externe leverancier toetstoolMedewerker(s) O&K
Curriculum Commissie
Surveillantcoordinator
Digitaal toetsteam
Tentamencoordinator
SIS medewerker
Student
EIGENAARSCHAP - KRACHTENVELD
TAKEN, ROLLEN EN RECHTEN VIA RA(S)CI-MODEL
Voordelen toepassing RA(S)CI model:
- afstemming en verheldering van de rol(len), rechten en verantwoordelijkheden- door afstemming groeiend draagvlak - input en inzicht voor het inrichten van de functionele organisatie;- teamwerk wordt aangemoedigd en dubbelingen in het werk worden voorkomen.
FUNCTIONELE ORGANISATIE
Coördinator Digitaal Toetsen FMB + WBW
- Gebruiksbeheer diverse toetstools - Interne consultant naar docent - sporttoetsen- Organisatie en begeleiding afname- Rapporteur itemanalyses – kwaliteit- Genereren uitslagen - herijkingen- Training kwaliteit – diversiteit- Aansturen medewerkers (database/beheer/org)
Coördinator Digitaal Toetsen FMB + WBW
- Gebruiksbeheer diverse toetstools - Interne consultant naar docent - sporttoetsen- Organisatie en begeleiding afname- Rapporteur itemanalyses – kwaliteit- Genereren uitslagen - herijkingen- Training kwaliteit – diversiteit- Aansturen medewerkers (database/beheer/org)
Functioneel B.
IT – ICT
Functioneel B.
IT – ICT
DEM WBW / FMBVT-DT-DUAAL
Hoofd IV
DEM WBW / FMBVT-DT-DUAAL
Hoofd IV
AFDELING/LOCATIES
WBW / FMB
MT’s
AFDELING/LOCATIES
WBW / FMB
MT’s
OPLEIDINGEN
Opleidingsmanager(s)
OPLEIDINGEN
Opleidingsmanager(s)
Projectleider/adviseur
Projectleider/adviseur
AdviseurO&K Domein
AdviseurO&K Domein
BedrijfsbureauBedrijfsbureau
Toetscommissies
Examencommissies
Toetscommissies
ExamencommissiesDocenten, toetsontwikkeling
+ rechten (bv inzage/rapportage)
Docenten, toetsontwikkeling+ rechten (bv inzage/rapportage)
Onderzoek
Communicatie
Onderzoek
Communicatie
Adviseur O&K afd.Adviseur O&K afd.
ICTICT
RESULTATEN VANAF 2010-2011
LWB VT + WBW VT(2010-2011 + 2011-2012)
FMB VT
ICT
Organisatie
Kwaliteit
- Externe hosting , ICT infrastructuur, secure QM (WBW)en tentamenstand (FMB) , RMS, nwe versies QMP/MATA, P&S
- Coördinatoren digitaal toetsen op FMB en WBW- FB met portefeuille digitaal toetsen- Inbedding bij opleidingen WBW conform RA(S) CI model
- 1e resultaten van opschaling en kwaliteitslag + trainingen- Borging toetscyclus ,werkprocessen, toetsdefinities
Online toetsafnames (summatief)Online formatieve toetsen QMP
ruim 20.000 toetsafnamesStatistiek
ruim 7.500 toetsafnames Engels
Soorten toetsafnames Mc vragen + combi (online cor.) Mc vragen
Aantal vakken online toetsafnames ≤ 50 vakken voor 5 opleidingen 9 vakken voor 3 opleidingen
Vakken schriftelijke toetsen uit QMP 11x Volgt
Ontwikkelingen - Single sign on, koppeling SIS, PC capaciteit, test zware toetsen- Surftender vragenbank BE ism H. van Rotterdam/HHS- Ontwikkeling formatieve toetsing /formatieve server/apps
WORKSHOP: AAN DE SLAG MET IMPLEMENTATIE
1.Warming up: korte brainstorm over de ‘winst’ van digitaal toetsen
(5 minuten + 5 minuten nabespreking)
• De winst voor de student, docent, opleiding, organisatie
2. Hoe gaan we implementeren: taken en rollen (15 minuten + 5 minuten nabespreking)
• Deeloefening RASCI-model: koppeling werkproces aan rollen/functies
DANK VOOR UW AANDACHT EN TOT ZO!
Mini- conferentie Digitaal ToetsenHvA
Digitaal toetsen bij DOO Praktische ervaring
Iman Abdullatif
30
1- Inhoudelijk: kwaliteit (soort vragen), objectiviteit, efficiëntie (nakijkwerk), rapportage.
2- Organisatorisch en logistiek: toetsgroepen, roostering, surveillanten, instructies, ondersteuning, presentielijst en rapportage.
3- Toets Infrastructuur: beveiliging, software en hardware, toetslokalen, netwerk, desktops/ laptops, inlogaccounts en applicatierechten.
1
Belangrijke zaken betreffende summatieve digitale toetsen
DIGITALE TOETSPROGRAMMA’S IN GEBRUIK BIJ DOO
(Summatieve en formatieve)
1- Wintoets: eigen toetsen maken door docent en/of DOO student (docent in opleiding)
2- Pabo en tweedegraad (QMP) HBO-raad, project 10 voor de leraar: landelijk verplichte kennistoetsen
3- Cito-Pabo: landelijk verplichte toetsen
4- Dialang: zelfbeoordeling talen toets
5- NOA (Nederlands Onderzoek Arbeidsmarkt): Oriëntatie motivatie/ taal en rekenen
3
• Steeds veel meer digitale toetsen
• Procedures, Instructies en communicatie, inrichting rondom de toetsen verbeteren
• Stabiliteit IT-Flex, netwerk en programma’s verbeteren
• Trainingen verzorgen en docenten ondersteunen
• Groot digitaal toetslokaal ( nu met laptops )
4
STAND VAN ZAKEN BIJ DOO
WENSEN VOOR DE TOEKOMST
• Rapportages verbeteren (direct online, analyse, export: excel, access)
• Efficiënter groepenbeheer (SIS- koppeling, oplossing Wintoets)
• Groot digitaal toetslokaal met desktops+ meerdere kleinere toetslokalen voor gebruik door HvA ( en UvA? )
5
DIGITAAL TOETSEN
EEN MIDDEL OM KWALITEIT TE VERHOGEN EN TIJD TE BESPAREN
Wilma Kannegieter en Sumit Mehra
26 april 2012
KENMERKEN WEBSPELLER
• ZELFSTUDIE MET VIRTUELE AANDACHT VAN HET PROGRAMMA
• GEAUTOMATISEERDE FEEDBACK OP VERSCHILLENDE NIVEAUS
• EIGEN TEMPO/INDIVIDUELE LEERWEG
• FORMATIEF EN SUMMATIEF TOETSEN VAN SPELLING EN GRAMMATICA
• FLEXIBEL AAN TE PASSEN PER GROEP (NORMERING, DEADLINES ETC)
• DOCENT KAN ACHTER DE SCHERMEN MONITOREN OP GROEPSNIVEAU EN
OP NIVEAU VAN INDIVIDUELE STUDENT
DIGITAAL FEEDBACK GEVEN
SCALA / SURF-subsidie
Schrijfproducten
Uitgangspunten– Feedback hergebruiken– Transparante beoordelingscriteria
Turnitin dienst
Tussentijdse resultaten
• Veel enthousiasme bij docenten én bij managers
• Pilots bij DMR, maar mogelijk ook andere domeinen