Evaluatie in Evaluatie in e-leren!e-leren!

Startbijeenkomst overzicht

1. Start: 13u302. Verwelkoming en kennismaking3. Evaluatie (algemeen)4. Verschillende vormen van evaluatie

(algemeen en in Moodle)– Automatische testen– Opdrachten– …

5. Einde: 16u30

Voorstelling Toll-net

Voorstelling Toll-net

Toll- Technologie-ondersteund levenslang leren- Volwasseneneducatie

NetFaciliteren van netwerk, waar kennis en

ervaringen worden gedeeld- lesgevers- directies- ICT-coördinatoren

- pedagogisch begeleiders

Partners Toll-net

Samenwerking / overleg met hogescholen en universiteiten, BE-ODL, Europese en Vlaamse projecten, uitgeverijen, …

Activiteiten Toll-net

1. Toll-shops

– Workshops (gratis)– Kort (1/2 dag of 1 dag)– 2 delen– Deel 1: kennisdelen, netwerken,

didactiek, …– Deel 2: Praktijk gedeelte

Activiteiten Toll-net

2. Toll-cursus

– 3 contact momenten– 6 online modules

= gecombineerd leren= zelf ondervinden

Intensieve basis e-didactiek Netwerkleren

Activiteiten Toll-net

3. Website Toll-net

– Heel veel informatie over e-leren

– Iedereen kan lid worden en informatie toevoegen

– Materiaal workshops, Toll-cursus en ook andere zaken kunnen worden gedownload van de website= delen = heel belangrijk

Activiteiten Toll-net

4. Toll-communitiesDit schooljaar:

– NT2– Rekenblad– Computerinitiatie en internet

Volgend schooljaar:– Fotografie en fotobewerking– SLO– Nijverheidstechnieken

Wie zijn jullie?

– Naam?– Ervaring met e-leren?– Ervaring met evaluatie?– Vakgebied?– School?– Verwachtingen voor deze workshop?

Start

Evalueren?

Procesevaluatie (informatie inwinnen over het verloop van het leerproces)

Productevaluatie (nagaan of de cursist heeft bereikt wat wordt verwacht)

Evalueren?

Summatieve evaluatie (Nagaan of de vooropgestelde doelstellingen van een opleidingsonderdeel bereikt zijn met als doel beslissen of iemand geslaagd is of niet)

= EVALUEREN VAN HET LERENFormatieve evaluatie

(cursisten inlichten over hun kennen en kunnen om zo het leerproces bij te sturen)

= EVALUEREN OM TE LEREN

Vormen van e-evalueren

– Automatisch testen– Opdrachten– Reflectie– Peer evaluatie – Zelfevaluatie– …

Gezonde mix is altijd aan te raden!

Automatische Automatische testentesten

Automatische testen

• Met goede feedback en sturing tijdens de test, kan de cursist zijn leerproces zelf bijsturen.

• Authentieke kenmerken (vb. audio, video) aan de vragen toekennen

• In ELO kunnen scores worden bijgehouden

Voordelen automatische testen

• Correctie kost weinig tijd (gebeurt automatisch)

• Beoordeling is objectief• Het kunnen formuleren speelt geen

rol (Rik ??)• Cursus kan volledig gedekt worden• Gemakkelijke remediëring van de

test door de docent: volgende keer kan hij de zwakkere vragen weglaten …

Nadelen automatische testen

• Niet alles kan getoetst worden (vooral kennis)

• Goede vragen opstellen kost veel tijd• Het is mogelijk om inzichts- en

toepassingsvragen te stellen (maar moeilijk)

• Soms is er een raadkans aanwezig • …

Soorten vragen

1. Ja/neen vragen2. Meerkeuzevragen3. Sorteervragen4. Korte antwoord vragen…

1. ja/neen vragen

Voorbeeld:

Parijs ligt aan de Seine.Waar / Onwaar

Opmerkingen• Er wordt een ongenuanceerd oordeel

gevraagd.• 50% kans om goed te gokken.

goed voorbeeld?

De Mont Blanc, de hoogste berg van de wereld, ligt in de Alpen.

Waar / Onwaar

Fout

Nee, deze stelling bevat 2 informatieve elementen, waardoor de cursist in

verwarring kan gebracht worden.

Beter

De Mont Blanc ligt in de Alpen.Waar / Onwaar

De Mont Blanc is de hoogste berg van de wereld.

Waar / Onwaar

In Moodle

De Mont Blanc ligt in de Alpen.Waar / niet waar

2. Meerkeuze vragen

Tips goede meerkeuze vragen

• Vermijd absolutisme zoals altijd, nooit, …

• Vermijd vage termen zoals soms, ongeveer

• Vermijd negatieve formuleringen• Vermijd herhaling in de stam en de

alternatieven.• Streef naar 4 alternatieven

Voorbeeld 1

La Paz is de hoofdstad van …

1.Algerije2.Bolivia3.Mexico4.India

Tip 1

Geef in alternatieven niet onmiddellijk het goede

antwoord weg. Alternatieven moeten met zorg worden

gekozen.

Voorbeeld 1

Beter …

La Paz is de hoofdstad van …

1.Peru2.Bolivia3.Brazilië4.Ecuador

Voorbeeld goede alternatieven

Hoeveel planeten zijn er in ons zonnestelsel?

a. 7b. 8c. 9d. 10

Het juiste antwoord is B, acht.A is een afleider omdat mensen misschien de aarde vergeten mee te tellen.C is een sterkere afleider omdat tot 2006 dit het juiste antwoord was. Toen

werd Pluto gereclassificeerd tot een dwergplaneet en niet langer meegeteld als volledige planeet in ons zonnestelsel.

D is een fout antwoord.

Voorbeeld 2

Welk van de onderstaande alternatieven past niet in het rijtje thuis?

1.Appel2.Tomaat3.Sla4.Andijvie

Tip 2

Zorg dat één antwoord onbetwistbaar juist is en geef aan wat je wilt weten…

Voorbeeld 2

Welk van de onderstaande alternatieven is geen groente?

1.Appel2.Tomaat3.Sla4.Andijvie

Voorbeeld 3

Algerije …

1.Heeft een overwegend zwarte bevolking

2.Is een voormalige Franse kolonie3.Heeft een landklimaat

Tip 3

Vorige vraag bestaat eigenlijk uit 3 losse vragen. Zorg dat één antwoord onbetwistbaar juist is.

Let er op dat je in het item slechts één vraag stelt.

Voorbeeld 3

Algerije is een voormalig kolonie van …

1.Frankrijk2.Portugal3.Spanje

Voorbeeld 4

Melk kan gepasteuriseerd worden ...

1.Door ze tot 50° te verhitten2.Door ze tot 60° te verhitten3.Door ze tot 70° te verhitten4.Door ze tot 80° te verhitten

Tip 4

Neem in de stam alle woorden op die anders in elk alternatief moeten worden herhaald.

Voorbeeld 4

De laagste temperatuur die gebruikt kan worden om melk te pasteuriseren, is …

1.50 °C2.60 °C3.70 °C4.80 °C

Voordeel meerkeuzevragen

Gerichte feedback mogelijk: per antwoordalternatief kan andere feedback gegeven worden.

Voorbeeld Moodle

Hoeveel planeten zijn er in ons zonnestelsel?

a. 7b. 8c. 9d. 10Het juiste antwoord is B, acht (Mercurius, Venus, Aarde, Mars, Jupiter, Saturnus, Uranus, Neptunus)

A is een afleider omdat mensen misschien de aarde vergeten mee te tellen.C is een sterkere afleider omdat tot 2006 dit het juiste antwoord was. Toen

werd Pluto gereclassificeerd tot een dwergplaneet en niet langer meegeteld als volledige planeet in ons zonnestelsel.

D is een fout antwoord.

3. Sorteervragen

Zoek van ieder land de hoofdstad

Noorwegen RomeZweden WashingtonItalië StockholmU.S.A. Oslo 

Sorteervragen

Bedenkingen

• De vragen zijn moeilijk op te stellen.• Het mogelijk aantal vragen m.b.t. een

bepaalde leerinhoud is klein.• De getoetste kennis is steeds feitenkennis.• Leerlingen kunnen het antwoord vrij

gemakkelijk raden.

 

In Moodle = koppelen

Zoek van ieder land de hoofdstad

Noorwegen RomeZweden WashingtonItalië StockholmU.S.A. Oslo 

Korte antwoord vragen

Christoffel Columbus ontdekte Amerika in ...

 van groot belang om bij het opstellen van invulvragen erop te letten dat er maar één correct antwoord mogelijk is.

Voorbeeld

John Glenn maakte zijn eerste vlucht in...

 

Tip

Verschillende mogelijkheden (het jaar, vervoermiddel)

Het is soms beter een aanvulvraag in de vorm van een volledige zin met vraagteken aan het eind aan te bieden

Voorbeeld

In welk jaar maakte John Glenn zijn eerste vlucht rond de aarde?

 

Moodle

In welk jaar maakte John Glenn zijn eerste vlucht rond de aarde?

Antwoord: 1962

 

Feedback automatische testen

Bij automatische testen kan je best zo snel mogelijk feedback geven (onmiddellijk na de vraag).

Feedback automatische testen

Testen worden wel automatisch verbeterd maar …

de docent moet wel de scores opvolgen … en achterhalen wat het probleem is bij lage scores.

Vragen bundelen tot test

Moodle• Nieuwe test aanmakenOpties• Toegestane pogingen = 1• Adaptieve modus = nee• Onmiddellijk na de poging ->

feedback

Hoe het niet moet!

http://www.articulate.com/community/blogdemo/5questions/quiz.html

OpdrachtenOpdrachten

Opdrachten

Keuzes maken

Chequelist opdracht

• Soort opdracht• Duur van de opdracht• Wie geeft feedback• Groep- of individuele taak• Moment (voor, tijdens of na leerstof)• Tijdsinvestering (docent, cursist)• Openheid (gesloten, open)• Soort handeling • Verwacht product• Situering• Evaluatie

Opdracht

Voorbeeld opdracht

Lees de tekst over transformatoren opnieuw en leg uit hoe geluidshinder door transformatoren kan ontstaan.

Je kan hiervoor eventueel verwijzen naar wetenschappelijke artikels.

Zorg dat je antwoord voldoende lang is. Vergelijk je antwoord met dat van enkele medestudenten en plaats je afgewerkt product tijdig op het discussieforum.

Webquest

Een webquest is een zoektocht naar informatie op het internet

http://www.webkwestie.nl/

Opdrachten

Voldoende links, materiaal meegeven zodat ze niet altijd alles moeten uitzoeken.

Evaluatie opdrachten

Klassiek• Puntenverdeling per onderdeel Schalen• Sam schaal (meten van attitudes en

vaardigheden) • Instrumenten beoordeling

taalvaardigheid SLO.pdf (p.33)• Europees referentiekader (voor talen

p. 136)

Opdrachten evalueren Moodle

Uploaden van bestand• Eenvoudig• Algemeen punt

invullen• Feedback gegeven via

tekst• Geen automatisch

puntenverdeling per onderdeel

• Geen automatische schalen mogelijk

Workshop• Complex!• Werken in

verschillende fasen• Puntenverdeling per

onderdeel mogelijk• Zelf schalen inbrengen

mogelijk (creatieve manier)

• Peer- en zelfevaluatie mogelijk

2 mogelijke activiteiten

Opdrachten in Moodle

Keuze activiteit• Geavanceerd uploaden van

bestandenOpties• Verwijderen toestaan = nee• Max. geüploade bestanden = 3• Notities toestaan = ja

Workshop in Moodle

• Zeer complex• Enkel als je al enige ervaring hebt• Op het einde komt de technische

uitleg

ReflectieReflectie

Reflectie

• Geen score aan verbonden• Zie voorbeeld reflectie

Enquête in Moodle

Keuze activiteit• EnquêteOpties• Type: antwoord één keer• Type respondent: anoniem of

volledige naam• Nieuw of kopie

Peer evaluatiePeer evaluatie

Peer-evaluatie

Eenvoudig via forum feedback geven op elkaar

• Enkel beoordelen wel of niet gedaan

Peer-evaluatie

Peer-evaluatie met beoordeling via forum

Voorbeeld filmpje

http://www.youtube.com/watch?v=Tp8v2UBbmN4&feature=related

Peer-evaluatie

Peer-evaluatie via workshop module

• Complex!• Zie einde

ZelfevaluatieZelfevaluatie

Zelfevaluatie

Zie voorbeeld zelfevaluatie

Zelfevaluatie in Moodle

• Ga je aan de zelfevaluatie een score toekennen (en zo ja, ga je deze later nog corrigeren?)

• Zonder score en niet te corrigeren-> enquête

• Met score, corrigeren en commentaar mogelijk-> test

• Workshop met zelfevaluatie (maar zeer complex)

Puntenboek in Puntenboek in MoodleMoodle

Puntenboek in Moodle

• Niet online activiteiten kunnen worden opgenomen in het puntenboek (activiteit = offline activiteit)

• Puntenboek naar je hand zetten.

WorkshopWorkshop

Workshop in Moodle

Uitleg slideshare

Workshop in Moodle

Fase 1: workshop aanmaken

Keuze activiteit• WorkshopOpties• Workshop features: leeg laten• Grade for submission: invullen• Grade for evaluatie: 0• Eventueel laattijdig inzenden

toestaan

Workshop in Moodle

Fase 2: Edit assessment form (wijze van beoordelen toevoegen)

• Aspect 1– Beschrijven (eventueel schaal toevoegen)– Hoogste cijfer geven– Weging toevoegen (1)

• Aspect 2• Aspect 3• …

Workshop in Moodle

Fase 3: Inzendigsfase activeren

• Door op het lampje van de fase te klikken kunnen vanaf nu de cursisten inzenden.

• Cursisten zenden in.

Workshop in Moodle

Fase 4: Evaluatiefase

• Door op het lampje van de fase te klikken kun je vanaf nu de cursisten evalueren

• Klik op de link van de opdracht van de cursist (bekijk de opdracht).

• Druk op de knop evalueer en evalueer de opdracht.

Workshop in Moodle

Fase 5: Grading evaluation phase

• Niet belangrijk als je als docent zelf evalueert.

• Toch moet je op knop herbereken drukken.

Workshop in Moodle

Fase 6: Gesloten

• Studenten zien hun punten (in detail + opmerkingen)

The end