Een evidence-based methodologie om taalcompetenties te meten

26
Een evidence-based methodologie om taalcompetenties te meten Evidence-based HRM (EB HRM) Selor event 14/11/2013

description

Een evidence-based methodologie om taalcompetenties te meten. Evidence-based HRM (EB HRM) Selor event 14/11/2013. Evidence-based approach. Het project en de resultaten De kwaliteit monitoren: Waarom en hoe? Welk type evidence op welk moment? - PowerPoint PPT Presentation

Transcript of Een evidence-based methodologie om taalcompetenties te meten

Page 1: Een  evidence-based  methodologie om  taalcompetenties  te  meten

Een evidence-based methodologie om

taalcompetenties te meten

Evidence-based HRM (EB HRM)

Selor event

14/11/2013

Page 2: Een  evidence-based  methodologie om  taalcompetenties  te  meten

Evidence-based approach

1. Het project en de resultaten

2. De kwaliteit monitoren: Waarom en hoe?

3. Welk type evidence op welk moment?

4. Toegevoegde waarde van de evidence-based aanpak

Page 3: Een  evidence-based  methodologie om  taalcompetenties  te  meten

1. Het project en de resultaten

Page 4: Een  evidence-based  methodologie om  taalcompetenties  te  meten

Receptieve taalvaardigheden Productieve taalvaardigheden

Page 5: Een  evidence-based  methodologie om  taalcompetenties  te  meten
Page 6: Een  evidence-based  methodologie om  taalcompetenties  te  meten

Testinhoud & testspecificaties

Nieuwe beoordelingstools

Opleidingsmodules assessoren Tests 2.0

Page 7: Een  evidence-based  methodologie om  taalcompetenties  te  meten

2. De kwaliteit monitoren: Waarom en hoe?

Page 8: Een  evidence-based  methodologie om  taalcompetenties  te  meten
Page 9: Een  evidence-based  methodologie om  taalcompetenties  te  meten

In theory there is no difference between theory and practice.

In practice there is.

Yogi Berra

Page 10: Een  evidence-based  methodologie om  taalcompetenties  te  meten

expectations reality

reality theory

Page 11: Een  evidence-based  methodologie om  taalcompetenties  te  meten
Page 12: Een  evidence-based  methodologie om  taalcompetenties  te  meten
Page 13: Een  evidence-based  methodologie om  taalcompetenties  te  meten

Sources:

-ALTE quality management checklists

-Manual for Language Test Development and Examining (ALTE on behalf of the Council of Europe)

2009

DESIGN

ADMINI-STER

PROCESS

ANALYSE & REVIEW

2012

Page 14: Een  evidence-based  methodologie om  taalcompetenties  te  meten

3. Welk type evidence op welk moment?

Page 15: Een  evidence-based  methodologie om  taalcompetenties  te  meten

kwantitatieve analyses

assessoren : enquêtes en workshops

validatie scope keuze validatiemodel

werkgroepen : deliverables

experimenten (pretesting)

analyse van de prétesting

content validation &

eindbeslissingen (scoring)

Implementatie

KICK-OFF PROJECT

Page 16: Een  evidence-based  methodologie om  taalcompetenties  te  meten

ANALYSE &

REVIEW

kwantitatieve analyses

enquêtes en workshops

validatie scope

Page 17: Een  evidence-based  methodologie om  taalcompetenties  te  meten

Validatie-model

ANALYSE &

REVIEW

Page 18: Een  evidence-based  methodologie om  taalcompetenties  te  meten

CONTEXT VALIDITY

THEORY BASED VALIDITY

SCORING VALIDITY

EXTERNAL CRITERION

VALIDITY

CONSEQUENTIAL VALIDITY

RESPONSE

SCORE

Adapted from: Weir (2005) Language Testing and Validation

TEST TASKS & CONCEPT

Page 19: Een  evidence-based  methodologie om  taalcompetenties  te  meten

REDESIGN

deliverables

Page 20: Een  evidence-based  methodologie om  taalcompetenties  te  meten

Adapted from: R. Jakobson 1963 & ALTE 2011 individual component checklist

Page 21: Een  evidence-based  methodologie om  taalcompetenties  te  meten

ADMINISTER &

PROCESS

pretesting

analyse van de

pretesting

validatie & eindbeslissingen

Page 22: Een  evidence-based  methodologie om  taalcompetenties  te  meten

4. Toegevoegde waarde van de evidence-based aanpak

Page 23: Een  evidence-based  methodologie om  taalcompetenties  te  meten

Stakeholders

Institutioneel

Overheidsdiensten

Werkgevers

Selor Management

Academisch

Selor wetenschappelijk

comité

TaaltestenTask force

Individueel

Assessoren

Kandidaten

Burgers

Page 24: Een  evidence-based  methodologie om  taalcompetenties  te  meten

EVIDENCE BASED APPROACH

Page 25: Een  evidence-based  methodologie om  taalcompetenties  te  meten
Page 26: Een  evidence-based  methodologie om  taalcompetenties  te  meten

DANK U VOOR UW AANDACHT!

MERCI POUR VOTRE ATTENTION !