eXamine overview icto-contactpersonen

28
1 W E E T W A T O N D E R W IJ S W A A R D I S Onderwijscentrum VU

description

De rol van Online Survey Tool eXamine bij de VU

Transcript of eXamine overview icto-contactpersonen

Page 1: eXamine overview icto-contactpersonen

1

W E E T

W A T

O N D E R W IJ S

W A A R D

I S

Onderwijscentrum VU

Page 2: eXamine overview icto-contactpersonen

2

W E E T

W A T

O N D E R W IJ S

W A A R D

I S

Onderwijscentrum VU

wat is eXamine?

A. HartoogICTO contactpersonenoverleg 28-10-2008

Page 3: eXamine overview icto-contactpersonen

3

eXamine overview

wat is eXamine:gereedschap om een persoon of groep personen op een geprogrammeerde manier te bevragen via internet. Dat wil zeggen:

• de manier waarop de respondent door de vragen wordt geleid is volledig programmeerbaar

• gegeven antwoorden en bewerkingen daarop kunnen on the fly worden gebruikt als parameter in een algoritme

• resultaten en conclusies kunnen direct worden getoond.

(het mechanisme is een web-interface – simpel gezegd is het online vragenlijst software)

Page 4: eXamine overview icto-contactpersonen

4

voorbeelden

Page 5: eXamine overview icto-contactpersonen

5

Page 6: eXamine overview icto-contactpersonen

6

de rol van het Onderwijscentrummet betrekking tot eXamine

historisch (2005-2007, trekker Silvester Draaijer)

organisatie en formalisatie van de behoeftestelling binnen de VU voor gereedschap voor online dataverzamelen (2005)

trekker van het evaluatie/keuze-traject met eXamine als resultaat (2006)

realisatie van een pilot-omgeving voor eXamine (2006)

functionele ondersteuning van gebruik (2007) (in feite productie)

Page 7: eXamine overview icto-contactpersonen

7

eXamine gebruik bij de VU

eXamine is een product van eXamine BVlicentie overeenkomst 2008-2009 dekt het gebruik voor:

alle medewerkers en studenten van de VU voor onderwijs en onderzoek

1e lijns gebruikersondersteuning: nu nog door Onderwijscentrum, op termijn: tbd

2e lijns technische ondersteuning: firma eXamine BV (en Kensas)

hosting: onder verantwoordelijkheid van Dienst IT bij SARA

Page 8: eXamine overview icto-contactpersonen

8

eXamine momentopname oktober 2008

op de examine “productie”-omgeving van de VU

• staan op dit moment 205 actieve vragenlijsten,• zijn 3839 vragenlijsten gemaakt door 1256 ontwerpers,

schatting van verdeling: 80% studenten en 5% docenten 10% onderzoekers (rest is ondersteuning en testen)

• van die studenten/docenten is 90% van FSW• die onderzoekers hebben wel de meest complexe

vragenlijsten, en ook de meeste respondenten

(op basis van gegevens van 2/3 van de ontwerpers)

Page 9: eXamine overview icto-contactpersonen

9

conclusies hieruit

• eXamine belangrijk onderwijsgereedschap (vooral voor vak methoden en technieken bij FSW)

• toenemend gebruik voor onderzoekopmerking: we weten niet echt hoe zich dit verhoudt in de eisen die aan het systeem worden gesteld

• consequenties voor systeemeigenaarschap

Page 10: eXamine overview icto-contactpersonen

10

Hoe werkt dat nou, eXamine

kort exposé hoe met eXamine een online onderzoek kan worden

uitgevoerd

(sheets komen uit een cursus die op verzoek kan worden gegeven)

Page 11: eXamine overview icto-contactpersonen

11

werkwijze

1.1. ProbleemstellingProbleemstelling

2.2. Plan van aanpak / UitvoeringsmogelijkhedenPlan van aanpak / Uitvoeringsmogelijkheden

3.3. Het ontwerpHet ontwerp

4.4. Invoeren vragenlijstInvoeren vragenlijst

5.5. Uitvoeren onderzoekUitvoeren onderzoek

6.6. Verwerking resultatenVerwerking resultaten

Page 12: eXamine overview icto-contactpersonen

12

eXamine proces

probleemstelling

strategie

onderzoekdoor middel van

enquete

enqueteontwerp

resultatenanalyseren

enqueteopbouwen

enqueteuitvoeren

enqueteverwerken

domein van eXamine

Page 13: eXamine overview icto-contactpersonen

13

1. enquete ontwerp: question

experimental design

questionaire

screens

questions

answer options

Types:text (short or long)numberdatee-mail adressdropdownlistradiobuttonscheckboxesscale

content:id, numbermandatory?typetext + explanationweight

score = points x weight

choice

Page 14: eXamine overview icto-contactpersonen

14

voorbeelden

hoe zien die schermen en menu’s er uit?(eXamine versie 2.0)

Page 15: eXamine overview icto-contactpersonen

15

gevulde lijst vragenlijst

Page 16: eXamine overview icto-contactpersonen

16

Page 17: eXamine overview icto-contactpersonen

17

details vragen typekeuze

Page 18: eXamine overview icto-contactpersonen

18

voorbeeld: tekst vraag en radiobuttons:

Page 19: eXamine overview icto-contactpersonen

19

voorbeeld: scale

Page 20: eXamine overview icto-contactpersonen

20

2. enquete uitvoeren

regel 1: respondenten zijn “assets”, en verdienen een daarbijhorende behandeling.

– adequaat aanspreken,– uitleggen waarom, wat wanneer, hoe,– wat gebeurt met de resultaten (privacy),– zorgvuldigheid, niet voor de gek houden.

regel 2: testen, testen, testen, testen– de werking van de geprogrammeerde

vragenlijst– de benadering van respondenten– het downloaden van gegevens– het analyseren van gegevens

Page 21: eXamine overview icto-contactpersonen

21

checkconsistency

click

Page 22: eXamine overview icto-contactpersonen

22

checkstructure

click

Page 23: eXamine overview icto-contactpersonen

23

2. enquete uitvoeren

• anoniem of persoonlijk• kies de stijl (layout)• maak “tekstblokken”

– e-mail tekst– colophon– help informatie– privacy statement– headers & footers

• stel lijst op van respondenten• stuur vragen, manage respondenten

Page 24: eXamine overview icto-contactpersonen

24

Page 25: eXamine overview icto-contactpersonen

25

eXamine studiedag 19 juni

probleemstelling

strategie

onderzoekdoor middel van

enquete

enqueteontwerp

resultatenanalyseren

enqueteopbouwen

enqueteuitvoeren

enqueteverwerken

domein van eXamine

Page 26: eXamine overview icto-contactpersonen

26

3. enquete verwerken

download gegevens naar:Excel

– meestal voor quick scan, controle,– beperking door maximaal aantal rijen

SPSS– standaard analyse en report-tool– veel kennis voorhanden

XML– mogelijkheden “onbeperkt”– export naar eigen database of analysetools

Page 27: eXamine overview icto-contactpersonen

27

de rol van het Onderwijscentrummet betrekking tot eXamine

Nu (2008, Silvester en Alfred)

vaststellen focus, vooral in licht van groei van onderzoekstoepassingen

consolidatie van gebruikersondersteuning regie van overgangstraject naar nieuwe versie (meer

grafische user-interface en uitbreiding met collaboration tools)

belegging van het systeem-eigenaarschap promotie van eXamine tot concernsysteem consolidatie van de relatie met de leverancier

Page 28: eXamine overview icto-contactpersonen

28

tot slot:

vragen?meer weten?interesse in demo?behoefte aan cursus?