1 Informatie zoeken op het web 15 oktober 2010 Meten van cognitieve processen met...

35
1 Informatie zoeken op het web 15 oktober 2010 Meten van cognitieve processen met oogbewegingregistratieapparatuu r Workshop eye-tracking Ludo van Meeuwen, CELSTEC, Open Universiteit Nederland

Transcript of 1 Informatie zoeken op het web 15 oktober 2010 Meten van cognitieve processen met...

Page 1: 1 Informatie zoeken op het web 15 oktober 2010 Meten van cognitieve processen met oogbewegingregistratieapparatuur Workshop eye-tracking Ludo van Meeuwen,

1 Informatie zoeken op het web 15 oktober 2010

Meten van cognitieve processen met

oogbewegingregistratieapparatuurWorkshop eye-tracking

Ludo van Meeuwen, CELSTEC, Open Universiteit Nederland

Page 2: 1 Informatie zoeken op het web 15 oktober 2010 Meten van cognitieve processen met oogbewegingregistratieapparatuur Workshop eye-tracking Ludo van Meeuwen,

2 Informatie zoeken op het web 15 oktober 2010

Interesses en verwachtingen

• Voorstellen/Achtergrond?

• Ervaringen met eye-tracking?

• Met welke verwachting naar deze workshop gekomen? / wat hoop je te leren?

Page 3: 1 Informatie zoeken op het web 15 oktober 2010 Meten van cognitieve processen met oogbewegingregistratieapparatuur Workshop eye-tracking Ludo van Meeuwen,

3 Informatie zoeken op het web 15 oktober 2010

Ludo van Meeuwen

• BSc Technische Innovatie Wetenschappen (oude Techniek en Maatschappij)

• Ir. Human Technology Interaction (HTI/HCI)

• Master thesis: CELSTEC, Information Problem Solving

• Gebruik eye-tracker (meten van (meta-)cognitieve processen)

• PhD: CELSTEC/Luchtverkeersleiding Nederland

• Adaptief trainen• Gebruik eye-tracker

• Meten van (meta-)cognitieve processen

• Scanning

• Docent Trends

Page 4: 1 Informatie zoeken op het web 15 oktober 2010 Meten van cognitieve processen met oogbewegingregistratieapparatuur Workshop eye-tracking Ludo van Meeuwen,

4 Informatie zoeken op het web 15 oktober 2010

Het Oog: onderdelen

Tobii (2010)

Page 5: 1 Informatie zoeken op het web 15 oktober 2010 Meten van cognitieve processen met oogbewegingregistratieapparatuur Workshop eye-tracking Ludo van Meeuwen,

5 Informatie zoeken op het web 15 oktober 2010

Het oog: Visual Acuity / Visual Resolution

• Visual Acuity. Het stuk dat we scherp zien dankzij de Fovea Centralis (geen staafjes, alleen kegeltjes)

Page 6: 1 Informatie zoeken op het web 15 oktober 2010 Meten van cognitieve processen met oogbewegingregistratieapparatuur Workshop eye-tracking Ludo van Meeuwen,

6 Informatie zoeken op het web 15 oktober 2010

Het Oog

Saccades

Fixaties

Page 7: 1 Informatie zoeken op het web 15 oktober 2010 Meten van cognitieve processen met oogbewegingregistratieapparatuur Workshop eye-tracking Ludo van Meeuwen,

7 Informatie zoeken op het web 15 oktober 2010

Het Oog: Fixaties en saccades

• Saccades: 4 à 5 saccades per seconde tijdens lezen

• Fixaties: Alleen dan kun je wat zien (je ziet nooit een eigen saccade in een spiegel)

Secular & Blake (2002)Holmqvist et al. (2010)

Page 8: 1 Informatie zoeken op het web 15 oktober 2010 Meten van cognitieve processen met oogbewegingregistratieapparatuur Workshop eye-tracking Ludo van Meeuwen,

8 Informatie zoeken op het web 15 oktober 2010

Waarvoor eye-tracking?

• User-interface design

Page 9: 1 Informatie zoeken op het web 15 oktober 2010 Meten van cognitieve processen met oogbewegingregistratieapparatuur Workshop eye-tracking Ludo van Meeuwen,

9 Informatie zoeken op het web 15 oktober 2010

Waarvoor eye-tracking?

• Verkeersonderzoek

Page 10: 1 Informatie zoeken op het web 15 oktober 2010 Meten van cognitieve processen met oogbewegingregistratieapparatuur Workshop eye-tracking Ludo van Meeuwen,

10 Informatie zoeken op het web 15 oktober 2010

Waarvoor eye-tracking?

• Luchtverkeersleiding

Page 11: 1 Informatie zoeken op het web 15 oktober 2010 Meten van cognitieve processen met oogbewegingregistratieapparatuur Workshop eye-tracking Ludo van Meeuwen,

11 Informatie zoeken op het web 15 oktober 2010

Waarvoor eye-tracking?

• Hulp voor gehandicapten

Page 12: 1 Informatie zoeken op het web 15 oktober 2010 Meten van cognitieve processen met oogbewegingregistratieapparatuur Workshop eye-tracking Ludo van Meeuwen,

12 Informatie zoeken op het web 15 oktober 2010

Waarvoor eye-tracking?

• Leesonderzoek

Page 13: 1 Informatie zoeken op het web 15 oktober 2010 Meten van cognitieve processen met oogbewegingregistratieapparatuur Workshop eye-tracking Ludo van Meeuwen,

13 Informatie zoeken op het web 15 oktober 2010

Waarvoor eye-tracking?

• Zoeken op Internet / HCI

Page 14: 1 Informatie zoeken op het web 15 oktober 2010 Meten van cognitieve processen met oogbewegingregistratieapparatuur Workshop eye-tracking Ludo van Meeuwen,

14 Informatie zoeken op het web 15 oktober 2010

Verschillende modellen eye-trackers

according to Holmqvist et al. (2010)

Page 15: 1 Informatie zoeken op het web 15 oktober 2010 Meten van cognitieve processen met oogbewegingregistratieapparatuur Workshop eye-tracking Ludo van Meeuwen,

15 Informatie zoeken op het web 15 oktober 2010

Verschillende modellen eye-trackers

Page 16: 1 Informatie zoeken op het web 15 oktober 2010 Meten van cognitieve processen met oogbewegingregistratieapparatuur Workshop eye-tracking Ludo van Meeuwen,

16 Informatie zoeken op het web 15 oktober 2010

Verschillende modellen eye-trackers

Page 17: 1 Informatie zoeken op het web 15 oktober 2010 Meten van cognitieve processen met oogbewegingregistratieapparatuur Workshop eye-tracking Ludo van Meeuwen,

17 Informatie zoeken op het web 15 oktober 2010

Verschillende modellen eye-trackers

Page 18: 1 Informatie zoeken op het web 15 oktober 2010 Meten van cognitieve processen met oogbewegingregistratieapparatuur Workshop eye-tracking Ludo van Meeuwen,

18 Informatie zoeken op het web 15 oktober 2010

Voor- en nadelen

Mobiliteit, hoofdbewegingen ✔ ✖ ✖

“aanwezigheid” afleidend ✔ ✔ ✖

Resolutie✖ ✔ ✔

Automatische analyse✖ ✔ ✔

Fysische reacties (armbewegingen) ✔ ✔ ✖ ✔

Page 19: 1 Informatie zoeken op het web 15 oktober 2010 Meten van cognitieve processen met oogbewegingregistratieapparatuur Workshop eye-tracking Ludo van Meeuwen,

19 Informatie zoeken op het web 15 oktober 2010

Data-kwaliteit

• Callibratie

• Bril

• Mascara

• Oudere ogen

• Etniciteit

• Lange haren

• Knipperen

• (Snelle) hoofdbewegingen

• Schermafstand (ongeveer 60 cm)

• Duur opname (drift her-callibratie)

• Onbekende factoren

Page 20: 1 Informatie zoeken op het web 15 oktober 2010 Meten van cognitieve processen met oogbewegingregistratieapparatuur Workshop eye-tracking Ludo van Meeuwen,

20 Informatie zoeken op het web 15 oktober 2010

• Casus van meten: SRL in Luchtverkeersleidingopleiding

• Wat zijn cognitieve processen

• Op taak niveau: domein competenties• Scannen

• Opbouwen mentaal beeld

• Besluitvorming volgorde

• Op meta niveau: SRL vaardigheden• Oriënteren

• Plannen

• Monitoren

• Aanpassen

• Beoordelen

Hoe meet je (meta-)cognitieve processen?

Page 21: 1 Informatie zoeken op het web 15 oktober 2010 Meten van cognitieve processen met oogbewegingregistratieapparatuur Workshop eye-tracking Ludo van Meeuwen,

21 Informatie zoeken op het web 15 oktober 2010

Hoe meet je (meta-)cognitieve processen?

• Meten van (meta-)cognitieve processen

• Online: Hardop denken (noem voor- en nadelen)- Stoort het ‘echte’ proces van een taak

- Behoeft training

- Mist informatie (klikken zonder iets te zeggen)

+Geen ‘fabricage’

• Off-line: Vragenlijsten (noem voor- en nadelen)- Sociaal wenselijke antwoorden

- Beperkte validiteit

- Lange vragenlijsten

+Eenvoudige data analyse

Page 22: 1 Informatie zoeken op het web 15 oktober 2010 Meten van cognitieve processen met oogbewegingregistratieapparatuur Workshop eye-tracking Ludo van Meeuwen,

22 Informatie zoeken op het web 15 oktober 2010

Hoe meet je (meta-)cognitieve processen?

• Cued Retrospective Reporting

• In plaats van Hardop denken

ATC Task Cued Retrospective

Report

Page 23: 1 Informatie zoeken op het web 15 oktober 2010 Meten van cognitieve processen met oogbewegingregistratieapparatuur Workshop eye-tracking Ludo van Meeuwen,

23 Informatie zoeken op het web 15 oktober 2010

Hoe meet je (meta-)cognitieve processen?

• CRR-uitingen

• “Hier zie je hoe ik dit groepje in de gaten houd” (taakniveau)

• “Ik had er voor kunnen kiezen om deze kist af te remmen, maar ik gebruikte een andere strategie…” (meta-niveau/monitor).

• “Hier had ik ervoor moeten kiezen om die kist toch naar voren te halen omdat…”(meta-niveau/beoordelen)

• “Hier maakte ik er echt een drama van!” (meta-niveau/beoordelen)

• Uittypen van report Maken scoreschema scoren

Page 24: 1 Informatie zoeken op het web 15 oktober 2010 Meten van cognitieve processen met oogbewegingregistratieapparatuur Workshop eye-tracking Ludo van Meeuwen,

24 Informatie zoeken op het web 15 oktober 2010

Hoe meet je (meta-)cognitieve processen?

• Online: Hardop denken (noem voor- en nadelen)- Stoort het ‘echte’ proces van een taak- Behoeft training- Mist informatie (klikken zonder iets te zeggen)+Geen ‘fabricage’

• Cued Retrospective Report+ Stoort het ‘echte’ taakproces niet+ Behoeft nauwelijks training+ Krijgt heel veel informatie- Beperkte taaklengte (10 min)- Kost veel tijd (zeker bij vertraagd afspelen) - (dure) apparatuur- Te veel informatie?

Page 25: 1 Informatie zoeken op het web 15 oktober 2010 Meten van cognitieve processen met oogbewegingregistratieapparatuur Workshop eye-tracking Ludo van Meeuwen,

25 Informatie zoeken op het web 15 oktober 2010

Proef op de som

• Een persoon achter de eye-tracker

• Info zoeken

Page 26: 1 Informatie zoeken op het web 15 oktober 2010 Meten van cognitieve processen met oogbewegingregistratieapparatuur Workshop eye-tracking Ludo van Meeuwen,

26 Informatie zoeken op het web 15 oktober 2010

IPS and eye-tracking

• Tracking the brain

Page 27: 1 Informatie zoeken op het web 15 oktober 2010 Meten van cognitieve processen met oogbewegingregistratieapparatuur Workshop eye-tracking Ludo van Meeuwen,

27 Informatie zoeken op het web 15 oktober 2010

Samenvattend tot nu toe

• Het Oog

• Waarvoor eye-tracking

• Waarmee eye-tracking

• Data-kwaliteit

• Hoe meet je (meta) cognitieve processen?

• Zelf ervaren

• IPS

• Straks:

• Zelf eye-tracken

• Zelf onderzoek opstellen

• Voorbeeld studie (Scanning)

Page 28: 1 Informatie zoeken op het web 15 oktober 2010 Meten van cognitieve processen met oogbewegingregistratieapparatuur Workshop eye-tracking Ludo van Meeuwen,

28 Informatie zoeken op het web 15 oktober 2010

Einde deel 1

Vragen? Opmerkingen?

Page 29: 1 Informatie zoeken op het web 15 oktober 2010 Meten van cognitieve processen met oogbewegingregistratieapparatuur Workshop eye-tracking Ludo van Meeuwen,

29 Informatie zoeken op het web 15 oktober 2010

Proef

• MARS

Page 30: 1 Informatie zoeken op het web 15 oktober 2010 Meten van cognitieve processen met oogbewegingregistratieapparatuur Workshop eye-tracking Ludo van Meeuwen,

30 Informatie zoeken op het web 15 oktober 2010

Het eigen onderzoek

• Probleem

• Hypothesen

• Methode

• Eye-tracking

• Resultaten/conclusie….

• Wat voor type data komt er nou uit…wat voor vragen zijn te beantwoorden

Page 31: 1 Informatie zoeken op het web 15 oktober 2010 Meten van cognitieve processen met oogbewegingregistratieapparatuur Workshop eye-tracking Ludo van Meeuwen,

31 Informatie zoeken op het web 15 oktober 2010

Analyse van:AOI’s Fixation Duration, Visit duration, Transition matrix...

• Scanning studie

• Proefpersoon

• Presentatie van de voorlopige resultaten

Page 32: 1 Informatie zoeken op het web 15 oktober 2010 Meten van cognitieve processen met oogbewegingregistratieapparatuur Workshop eye-tracking Ludo van Meeuwen,

32 Informatie zoeken op het web 15 oktober 2010

Einde deel 2

Vragen? Opmerkingen?

[email protected]

Page 33: 1 Informatie zoeken op het web 15 oktober 2010 Meten van cognitieve processen met oogbewegingregistratieapparatuur Workshop eye-tracking Ludo van Meeuwen,

33 Informatie zoeken op het web 15 oktober 2010

(aan)leren mbv eye-trackng (Jarodzka 2010)

top-down

bottom-upNOVICES

EXPERTS

Page 34: 1 Informatie zoeken op het web 15 oktober 2010 Meten van cognitieve processen met oogbewegingregistratieapparatuur Workshop eye-tracking Ludo van Meeuwen,

34 Informatie zoeken op het web 15 oktober 2010

Expertise difference studies

• Classification of movement patterns in zoology

Jarodzka, H., Scheiter, K., Gerjets, P., & Van Gog, T. (2010). In the eyes of the beholder: How do experts and novices interpret complex, dynamic stimuli, Learning and Instruction, 20, 146-154.

NOVICESEXPERTS

• are faster and more accurate in task performance

•use heterogeneous task approaches

• use knowledge- and experience-based shortcuts (in perceptual and conceptual processes)

...

• are slow and more inaccurate in task performance

•use homogenous task approaches (saliency-driven)

• attend to irrelevant elements (in looking and describing)

...

Page 35: 1 Informatie zoeken op het web 15 oktober 2010 Meten van cognitieve processen met oogbewegingregistratieapparatuur Workshop eye-tracking Ludo van Meeuwen,

35 Informatie zoeken op het web 15 oktober 2010

Influence of different display designs to facilitate task performance

• Attention guidance

• How can attention of observers be guided?

• Efficient visual search

• Looking fast and long on relevant areas, without being distracted by salient, but irrelevant areas

• Interpretation

• Correctly interpreting the relevant areas