Post on 13-May-2015
Evaluatie in Evaluatie in e-leren!e-leren!
Startbijeenkomst overzicht
1. Start: 13u302. Verwelkoming en kennismaking3. Evaluatie (algemeen)4. Verschillende vormen van evaluatie
(algemeen en in Moodle)– Automatische testen– Opdrachten– …
5. Einde: 16u30
Voorstelling Toll-net
Voorstelling Toll-net
Toll- Technologie-ondersteund levenslang leren- Volwasseneneducatie
NetFaciliteren van netwerk, waar kennis en
ervaringen worden gedeeld- lesgevers- directies- ICT-coördinatoren
- pedagogisch begeleiders
Partners Toll-net
Samenwerking / overleg met hogescholen en universiteiten, BE-ODL, Europese en Vlaamse projecten, uitgeverijen, …
Activiteiten Toll-net
1. Toll-shops
– Workshops (gratis)– Kort (1/2 dag of 1 dag)– 2 delen– Deel 1: kennisdelen, netwerken,
didactiek, …– Deel 2: Praktijk gedeelte
Activiteiten Toll-net
2. Toll-cursus
– 3 contact momenten– 6 online modules
= gecombineerd leren= zelf ondervinden
Intensieve basis e-didactiek Netwerkleren
Activiteiten Toll-net
3. Website Toll-net
– Heel veel informatie over e-leren
– Iedereen kan lid worden en informatie toevoegen
– Materiaal workshops, Toll-cursus en ook andere zaken kunnen worden gedownload van de website= delen = heel belangrijk
Activiteiten Toll-net
4. Toll-communitiesDit schooljaar:
– NT2– Rekenblad– Computerinitiatie en internet
Volgend schooljaar:– Fotografie en fotobewerking– SLO– Nijverheidstechnieken
Wie zijn jullie?
– Naam?– Ervaring met e-leren?– Ervaring met evaluatie?– Vakgebied?– School?– Verwachtingen voor deze workshop?
Start
Evalueren?
Procesevaluatie (informatie inwinnen over het verloop van het leerproces)
Productevaluatie (nagaan of de cursist heeft bereikt wat wordt verwacht)
Evalueren?
Summatieve evaluatie (Nagaan of de vooropgestelde doelstellingen van een opleidingsonderdeel bereikt zijn met als doel beslissen of iemand geslaagd is of niet)
= EVALUEREN VAN HET LERENFormatieve evaluatie
(cursisten inlichten over hun kennen en kunnen om zo het leerproces bij te sturen)
= EVALUEREN OM TE LEREN
Vormen van e-evalueren
– Automatisch testen– Opdrachten– Reflectie– Peer evaluatie – Zelfevaluatie– …
Gezonde mix is altijd aan te raden!
Automatische Automatische testentesten
Automatische testen
• Met goede feedback en sturing tijdens de test, kan de cursist zijn leerproces zelf bijsturen.
• Authentieke kenmerken (vb. audio, video) aan de vragen toekennen
• In ELO kunnen scores worden bijgehouden
Voordelen automatische testen
• Correctie kost weinig tijd (gebeurt automatisch)
• Beoordeling is objectief• Het kunnen formuleren speelt geen
rol (Rik ??)• Cursus kan volledig gedekt worden• Gemakkelijke remediëring van de
test door de docent: volgende keer kan hij de zwakkere vragen weglaten …
Nadelen automatische testen
• Niet alles kan getoetst worden (vooral kennis)
• Goede vragen opstellen kost veel tijd• Het is mogelijk om inzichts- en
toepassingsvragen te stellen (maar moeilijk)
• Soms is er een raadkans aanwezig • …
Soorten vragen
1. Ja/neen vragen2. Meerkeuzevragen3. Sorteervragen4. Korte antwoord vragen…
1. ja/neen vragen
Voorbeeld:
Parijs ligt aan de Seine.Waar / Onwaar
Opmerkingen• Er wordt een ongenuanceerd oordeel
gevraagd.• 50% kans om goed te gokken.
goed voorbeeld?
De Mont Blanc, de hoogste berg van de wereld, ligt in de Alpen.
Waar / Onwaar
Fout
Nee, deze stelling bevat 2 informatieve elementen, waardoor de cursist in
verwarring kan gebracht worden.
Beter
De Mont Blanc ligt in de Alpen.Waar / Onwaar
De Mont Blanc is de hoogste berg van de wereld.
Waar / Onwaar
In Moodle
De Mont Blanc ligt in de Alpen.Waar / niet waar
2. Meerkeuze vragen
Tips goede meerkeuze vragen
• Vermijd absolutisme zoals altijd, nooit, …
• Vermijd vage termen zoals soms, ongeveer
• Vermijd negatieve formuleringen• Vermijd herhaling in de stam en de
alternatieven.• Streef naar 4 alternatieven
Voorbeeld 1
La Paz is de hoofdstad van …
1.Algerije2.Bolivia3.Mexico4.India
Tip 1
Geef in alternatieven niet onmiddellijk het goede
antwoord weg. Alternatieven moeten met zorg worden
gekozen.
Voorbeeld 1
Beter …
La Paz is de hoofdstad van …
1.Peru2.Bolivia3.Brazilië4.Ecuador
Voorbeeld goede alternatieven
Hoeveel planeten zijn er in ons zonnestelsel?
a. 7b. 8c. 9d. 10
Het juiste antwoord is B, acht.A is een afleider omdat mensen misschien de aarde vergeten mee te tellen.C is een sterkere afleider omdat tot 2006 dit het juiste antwoord was. Toen
werd Pluto gereclassificeerd tot een dwergplaneet en niet langer meegeteld als volledige planeet in ons zonnestelsel.
D is een fout antwoord.
Voorbeeld 2
Welk van de onderstaande alternatieven past niet in het rijtje thuis?
1.Appel2.Tomaat3.Sla4.Andijvie
Tip 2
Zorg dat één antwoord onbetwistbaar juist is en geef aan wat je wilt weten…
Voorbeeld 2
Welk van de onderstaande alternatieven is geen groente?
1.Appel2.Tomaat3.Sla4.Andijvie
Voorbeeld 3
Algerije …
1.Heeft een overwegend zwarte bevolking
2.Is een voormalige Franse kolonie3.Heeft een landklimaat
Tip 3
Vorige vraag bestaat eigenlijk uit 3 losse vragen. Zorg dat één antwoord onbetwistbaar juist is.
Let er op dat je in het item slechts één vraag stelt.
Voorbeeld 3
Algerije is een voormalig kolonie van …
1.Frankrijk2.Portugal3.Spanje
Voorbeeld 4
Melk kan gepasteuriseerd worden ...
1.Door ze tot 50° te verhitten2.Door ze tot 60° te verhitten3.Door ze tot 70° te verhitten4.Door ze tot 80° te verhitten
Tip 4
Neem in de stam alle woorden op die anders in elk alternatief moeten worden herhaald.
Voorbeeld 4
De laagste temperatuur die gebruikt kan worden om melk te pasteuriseren, is …
1.50 °C2.60 °C3.70 °C4.80 °C
Voordeel meerkeuzevragen
Gerichte feedback mogelijk: per antwoordalternatief kan andere feedback gegeven worden.
Voorbeeld Moodle
Hoeveel planeten zijn er in ons zonnestelsel?
a. 7b. 8c. 9d. 10Het juiste antwoord is B, acht (Mercurius, Venus, Aarde, Mars, Jupiter, Saturnus, Uranus, Neptunus)
A is een afleider omdat mensen misschien de aarde vergeten mee te tellen.C is een sterkere afleider omdat tot 2006 dit het juiste antwoord was. Toen
werd Pluto gereclassificeerd tot een dwergplaneet en niet langer meegeteld als volledige planeet in ons zonnestelsel.
D is een fout antwoord.
3. Sorteervragen
Zoek van ieder land de hoofdstad
Noorwegen RomeZweden WashingtonItalië StockholmU.S.A. Oslo
Sorteervragen
Bedenkingen
• De vragen zijn moeilijk op te stellen.• Het mogelijk aantal vragen m.b.t. een
bepaalde leerinhoud is klein.• De getoetste kennis is steeds feitenkennis.• Leerlingen kunnen het antwoord vrij
gemakkelijk raden.
In Moodle = koppelen
Zoek van ieder land de hoofdstad
Noorwegen RomeZweden WashingtonItalië StockholmU.S.A. Oslo
Korte antwoord vragen
Christoffel Columbus ontdekte Amerika in ...
van groot belang om bij het opstellen van invulvragen erop te letten dat er maar één correct antwoord mogelijk is.
Voorbeeld
John Glenn maakte zijn eerste vlucht in...
Tip
Verschillende mogelijkheden (het jaar, vervoermiddel)
Het is soms beter een aanvulvraag in de vorm van een volledige zin met vraagteken aan het eind aan te bieden
Voorbeeld
In welk jaar maakte John Glenn zijn eerste vlucht rond de aarde?
Moodle
In welk jaar maakte John Glenn zijn eerste vlucht rond de aarde?
Antwoord: 1962
Feedback automatische testen
Bij automatische testen kan je best zo snel mogelijk feedback geven (onmiddellijk na de vraag).
Feedback automatische testen
Testen worden wel automatisch verbeterd maar …
de docent moet wel de scores opvolgen … en achterhalen wat het probleem is bij lage scores.
Vragen bundelen tot test
Moodle• Nieuwe test aanmakenOpties• Toegestane pogingen = 1• Adaptieve modus = nee• Onmiddellijk na de poging ->
feedback
Hoe het niet moet!
http://www.articulate.com/community/blogdemo/5questions/quiz.html
OpdrachtenOpdrachten
Opdrachten
Keuzes maken
Chequelist opdracht
• Soort opdracht• Duur van de opdracht• Wie geeft feedback• Groep- of individuele taak• Moment (voor, tijdens of na leerstof)• Tijdsinvestering (docent, cursist)• Openheid (gesloten, open)• Soort handeling • Verwacht product• Situering• Evaluatie
Opdracht
Voorbeeld opdracht
Lees de tekst over transformatoren opnieuw en leg uit hoe geluidshinder door transformatoren kan ontstaan.
Je kan hiervoor eventueel verwijzen naar wetenschappelijke artikels.
Zorg dat je antwoord voldoende lang is. Vergelijk je antwoord met dat van enkele medestudenten en plaats je afgewerkt product tijdig op het discussieforum.
Webquest
Een webquest is een zoektocht naar informatie op het internet
http://www.webkwestie.nl/
Opdrachten
Voldoende links, materiaal meegeven zodat ze niet altijd alles moeten uitzoeken.
Evaluatie opdrachten
Klassiek• Puntenverdeling per onderdeel Schalen• Sam schaal (meten van attitudes en
vaardigheden) • Instrumenten beoordeling
taalvaardigheid SLO.pdf (p.33)• Europees referentiekader (voor talen
p. 136)
Opdrachten evalueren Moodle
Uploaden van bestand• Eenvoudig• Algemeen punt
invullen• Feedback gegeven via
tekst• Geen automatisch
puntenverdeling per onderdeel
• Geen automatische schalen mogelijk
Workshop• Complex!• Werken in
verschillende fasen• Puntenverdeling per
onderdeel mogelijk• Zelf schalen inbrengen
mogelijk (creatieve manier)
• Peer- en zelfevaluatie mogelijk
2 mogelijke activiteiten
Opdrachten in Moodle
Keuze activiteit• Geavanceerd uploaden van
bestandenOpties• Verwijderen toestaan = nee• Max. geüploade bestanden = 3• Notities toestaan = ja
Workshop in Moodle
• Zeer complex• Enkel als je al enige ervaring hebt• Op het einde komt de technische
uitleg
ReflectieReflectie
Reflectie
• Geen score aan verbonden• Zie voorbeeld reflectie
Enquête in Moodle
Keuze activiteit• EnquêteOpties• Type: antwoord één keer• Type respondent: anoniem of
volledige naam• Nieuw of kopie
Peer evaluatiePeer evaluatie
Peer-evaluatie
Eenvoudig via forum feedback geven op elkaar
• Enkel beoordelen wel of niet gedaan
Peer-evaluatie
Peer-evaluatie met beoordeling via forum
Voorbeeld filmpje
http://www.youtube.com/watch?v=Tp8v2UBbmN4&feature=related
Peer-evaluatie
Peer-evaluatie via workshop module
• Complex!• Zie einde
ZelfevaluatieZelfevaluatie
Zelfevaluatie
Zie voorbeeld zelfevaluatie
Zelfevaluatie in Moodle
• Ga je aan de zelfevaluatie een score toekennen (en zo ja, ga je deze later nog corrigeren?)
• Zonder score en niet te corrigeren-> enquête
• Met score, corrigeren en commentaar mogelijk-> test
• Workshop met zelfevaluatie (maar zeer complex)
Puntenboek in Puntenboek in MoodleMoodle
Puntenboek in Moodle
• Niet online activiteiten kunnen worden opgenomen in het puntenboek (activiteit = offline activiteit)
• Puntenboek naar je hand zetten.
WorkshopWorkshop
Workshop in Moodle
Uitleg slideshare
Workshop in Moodle
Fase 1: workshop aanmaken
Keuze activiteit• WorkshopOpties• Workshop features: leeg laten• Grade for submission: invullen• Grade for evaluatie: 0• Eventueel laattijdig inzenden
toestaan
Workshop in Moodle
Fase 2: Edit assessment form (wijze van beoordelen toevoegen)
• Aspect 1– Beschrijven (eventueel schaal toevoegen)– Hoogste cijfer geven– Weging toevoegen (1)
• Aspect 2• Aspect 3• …
Workshop in Moodle
Fase 3: Inzendigsfase activeren
• Door op het lampje van de fase te klikken kunnen vanaf nu de cursisten inzenden.
• Cursisten zenden in.
Workshop in Moodle
Fase 4: Evaluatiefase
• Door op het lampje van de fase te klikken kun je vanaf nu de cursisten evalueren
• Klik op de link van de opdracht van de cursist (bekijk de opdracht).
• Druk op de knop evalueer en evalueer de opdracht.
Workshop in Moodle
Fase 5: Grading evaluation phase
• Niet belangrijk als je als docent zelf evalueert.
• Toch moet je op knop herbereken drukken.
Workshop in Moodle
Fase 6: Gesloten
• Studenten zien hun punten (in detail + opmerkingen)
The end