|1 10-10-2012 S turen Betere resultaten door docent-student voortgangsinteractie Projectleider Ellen...

20
| 1 10-10-2012 Sturen Betere resultaten door docent-student voortgangsinteractie Projectleider Ellen Zillig- Straatman Meten Analysere n Informere n

Transcript of |1 10-10-2012 S turen Betere resultaten door docent-student voortgangsinteractie Projectleider Ellen...

Page 1: |1 10-10-2012 S turen Betere resultaten door docent-student voortgangsinteractie Projectleider Ellen Zillig-Straatman M eten A nalyseren I nformeren.

| 1

10-10-2012

Sturen

Betere resultaten door docent-student voortgangsinteractie

ProjectleiderEllen Zillig-Straatman

Meten

AnalyserenInformeren

Page 2: |1 10-10-2012 S turen Betere resultaten door docent-student voortgangsinteractie Projectleider Ellen Zillig-Straatman M eten A nalyseren I nformeren.

| 2

Wat willen we bereiken

Verbeteren van het studierendement, het

project moet aansluiten op “Koersen op Studiesucces”

Inzicht in gedrag en resultaten en het effect van terugkoppeling hierover

Page 3: |1 10-10-2012 S turen Betere resultaten door docent-student voortgangsinteractie Projectleider Ellen Zillig-Straatman M eten A nalyseren I nformeren.

| 3

Waarom

Studieduur bij de TU is aan de lange kant

Studenten moeten aan de bal blijven

Betrokkenheid tussen docenten en studenten kan beter

Page 4: |1 10-10-2012 S turen Betere resultaten door docent-student voortgangsinteractie Projectleider Ellen Zillig-Straatman M eten A nalyseren I nformeren.

| 44

Hoe

METEN

Studiegedrag

Studievoortgang 

ANALYSEREN

Welke vakken 

Welke criteria

Wat is het resultaat van de  terugkoppeling

INFORMEREN

Voortgang 

Gedrag

Resultaten (formatieve toetsen)

STUREN

Student stuurt zelf bij op basis van verkregen 

input

Meten en analyseren van het online gedrag van studenten binnen de digitale leer- en werkomgeving, plus het op basis hiervan informeren van studenten.

Page 5: |1 10-10-2012 S turen Betere resultaten door docent-student voortgangsinteractie Projectleider Ellen Zillig-Straatman M eten A nalyseren I nformeren.

|

Doelstelling“Het doel van dit project was onderzoeken of en hoe de interactie over voortgang met behulp van het bestaande Early Warning System (EWS) in Blackboard (Bb) de docent en student kan ondersteunen om uitstelgedrag te voorkomen en betere resultaten te verkrijgen voor een vak.”

5

Page 6: |1 10-10-2012 S turen Betere resultaten door docent-student voortgangsinteractie Projectleider Ellen Zillig-Straatman M eten A nalyseren I nformeren.

|

Resultaten• Literatuuronderzoek• Functionaliteiten EWS• Privacy onderzoek• Scenario’s• Criteria• Werven docenten• Pilots draaien

6

Page 7: |1 10-10-2012 S turen Betere resultaten door docent-student voortgangsinteractie Projectleider Ellen Zillig-Straatman M eten A nalyseren I nformeren.

|

LiteratuuronderzoekToekomstscenario’s 1

• Nut voor de student• Nut voor de docent

Feedback geven 2

• Procesmatige feedback• Inhoudelijke feedback

71 Ferguson - The State of Learning Analytics in 2012, h. 10 Future challenges2 Uit Digitale didactiek.nl - Vormen van feedback in een digitale leeromgeving

Page 8: |1 10-10-2012 S turen Betere resultaten door docent-student voortgangsinteractie Projectleider Ellen Zillig-Straatman M eten A nalyseren I nformeren.

|

Functionaliteiten EWS

8

Page 9: |1 10-10-2012 S turen Betere resultaten door docent-student voortgangsinteractie Projectleider Ellen Zillig-Straatman M eten A nalyseren I nformeren.

|

Privacy onderzoekJuridische afdeling:• Geen privacy belemmering• Geen specifieke verwijzing die dit mogelijk

maakt

We moeten het doen met de wetenschap dat er geen bezwaar is.

9

Page 10: |1 10-10-2012 S turen Betere resultaten door docent-student voortgangsinteractie Projectleider Ellen Zillig-Straatman M eten A nalyseren I nformeren.

|

Scenario’s/criteria• Scenario’s niet uitgewerkt• Opstellen van criteria lijkt voldoende

Criteria:• Soort onderwijs: hoorcollege/ werkcollege /

projectonderwijs/….• Studenten aantal: 20 - 500• Niveau van Blackboard gebruik: alleen als

informatieopslag of meerdere functionaliteiten

• Gebruik opdrachten (due dates)• Gebruik van toetsen in Blackboard (cijfer)

10

Page 11: |1 10-10-2012 S turen Betere resultaten door docent-student voortgangsinteractie Projectleider Ellen Zillig-Straatman M eten A nalyseren I nformeren.

|

Werven docenten• Genoeg interesse• Veel Bb vakken vooraf al niet geschikt• Geen vak kunnen vinden met grote groep en

weinig interactie• Met 5 vakken gestart

11

Page 12: |1 10-10-2012 S turen Betere resultaten door docent-student voortgangsinteractie Projectleider Ellen Zillig-Straatman M eten A nalyseren I nformeren.

|

Pilots draaien

12

Page 13: |1 10-10-2012 S turen Betere resultaten door docent-student voortgangsinteractie Projectleider Ellen Zillig-Straatman M eten A nalyseren I nformeren.

|

Conclusies en geleerde lessenHet EWS kan een eenvoudige en nuttige toevoeging zijn om de voortgang van studenten te monitoren.

Het EWS heeft vooral nut bij vakken met: • grotere groepen• weinig persoonlijk contact met de student• meerdere opdrachten of toetsen in Bb• opdrachten of toetsen aan begin van het vak• groot belang van deadlines

13

Page 14: |1 10-10-2012 S turen Betere resultaten door docent-student voortgangsinteractie Projectleider Ellen Zillig-Straatman M eten A nalyseren I nformeren.

|

Succescriteria“Dit project is geslaagd als we inzicht hebben gekregen over het gebruik van het EWS. We willen antwoord op de volgende vragen kunnen geven:• Lijkt het gebruik van het EWS effect te hebben op

uitstelgedrag van studenten• Welke scenario’s kunnen docenten gebruiken bij het

EWS• Aan welke criteria moeten vakken voldoen om effect

van het EWS te hebben Daarnaast is het project een succes als we inzicht hebben gekregen in wat er nodig is om het EWS op de hele campus te introduceren. Als er uitkomt dat het EWS aangepast zou moeten worden, is dat ook een positieve uitkomst. “

14

Page 15: |1 10-10-2012 S turen Betere resultaten door docent-student voortgangsinteractie Projectleider Ellen Zillig-Straatman M eten A nalyseren I nformeren.

|

Niet succes-criterium“Het project is geen succes als we de verschillende scenario’s niet hebben kunnen toetsen. “

15

Page 16: |1 10-10-2012 S turen Betere resultaten door docent-student voortgangsinteractie Projectleider Ellen Zillig-Straatman M eten A nalyseren I nformeren.

|

Evaluatie• Gekeken naar ervaringen van studenten en

docenten• Kwantitatief niet mogelijk

16

Page 17: |1 10-10-2012 S turen Betere resultaten door docent-student voortgangsinteractie Projectleider Ellen Zillig-Straatman M eten A nalyseren I nformeren.

|

Beperkingen EWS• Assignments Safeassignments• Niet duidelijk welke groep je mailt• Geen groepsaanduiding bij groepsopdracht• Naam van de opdrachtn iet automatisch in

het gegenereerde bericht.

17

Page 18: |1 10-10-2012 S turen Betere resultaten door docent-student voortgangsinteractie Projectleider Ellen Zillig-Straatman M eten A nalyseren I nformeren.

|

Geleerde lessen mbt LA• 1 onderwijskwartaal is erg kort• Steekproef te klein voor kwantitatieve

analyse• Geen rekening gehouden met plaats van het

vak in de studie

18

Page 19: |1 10-10-2012 S turen Betere resultaten door docent-student voortgangsinteractie Projectleider Ellen Zillig-Straatman M eten A nalyseren I nformeren.

|

Toekomst• Niet alsnog kwantitatief onderzoek• Wel uitrollen over de TU• Ervaringen delen met andere Blackboard

gebruikers• Als de kans zich aandient een vak monitoren

met veel studenten en weinig docent-student interactie

Meer informatie:Ellen Zillig-StraatmanLinda Mebus

19

Page 20: |1 10-10-2012 S turen Betere resultaten door docent-student voortgangsinteractie Projectleider Ellen Zillig-Straatman M eten A nalyseren I nformeren.

| 20

EINDE

MAIS

!!