TaalVaST Taalvaardig aan de start

38
Oriëntering LUCI 26 januari 2016 Lieve De Wachter Jordi Heeren

Transcript of TaalVaST Taalvaardig aan de start

Page 1: TaalVaST Taalvaardig aan de start

Oriëntering

LUCI

26 januari 2016

Lieve De Wachter – Jordi Heeren

Page 2: TaalVaST Taalvaardig aan de start

Overzicht

LUCI-testOntwikkeling en achtergrond

Afname

Resultaten

En nu?

Page 3: TaalVaST Taalvaardig aan de start

Overzicht

LUCI-testOntwikkeling en achtergrond

Afname

Resultaten

En nu?

Page 4: TaalVaST Taalvaardig aan de start

Ontwikkeling en achtergrond

• LUCI-test < LUCI-platform (www.luci.be)

• Reflectie stimuleren

+ kritische beeldvorming hoger onderwijs

≠ persoonlijk studiekeuzeadvies

Page 5: TaalVaST Taalvaardig aan de start
Page 6: TaalVaST Taalvaardig aan de start

4 elementen

• Verken jezelf

• Verken het hoger onderwijs

• Verken de opleiding

• Verken je toekomst

Meer info: Julita Jarmuz

Page 7: TaalVaST Taalvaardig aan de start

Ontwikkeling: waarom LUCI-test nodig?

• Factoren voor ‘academic achievement’:

o resultaten middelbaar onderwijs

o academisch ‘zelfconcept’

o motivatie

o academische ‘geletterdheid’ (academic literacy)

LUCI-test: selectie van een risicodoelgroep

Dochy et al. 1999, Harackiewicz et al. 2002,Hailikari et al. 2008, McNamara, 2000,

VanDyk, 2010, Marsch, 2007 and Guay et al. 2008

Page 8: TaalVaST Taalvaardig aan de start

Ontwikkeling: waarom LUCI-test nodig?

• Factoren voor ‘academic achievement’:

o resultaten middelbaar onderwijs

o academisch ‘zelfconcept’

o motivatie

o academische ‘geletterdheid’ (academic literacy)

LUCI-test: selectie van een risicodoelgroep

Dochy et al. 1999, Harackiewicz et al. 2002,Hailikari et al. 2008, McNamara, 2000,

VanDyk, 2010, Marsch, 2007 and Guay et al. 2008

Page 9: TaalVaST Taalvaardig aan de start

Taalvaardigheidstest – ontwikkeling en doel

• Construct: Academische strategische taalvaardigheid

• Vorm:

o Computertest

o 30 minuten

o 25 items

Van den Branden 2010, Davies 1990, McNamara 2000, Brown & Hudson 2002, Davies et al. 1999

Niet-frequente woordenschat

Complexe grammaticale structuren

Onpersoonlijke taal

Impliciete relatie tussen tekstdelen

“…a set of metacognitive components […]

which can be thought of as higher order

executive processes that provide a cognitive

management function in language use, as

well as in other cognitive activities” (Bachman

& Palmer, 1996, p. 70)

Page 10: TaalVaST Taalvaardig aan de start

Taaltest - ontwikkeling

• 2 types items

Woorden

Lezen (& schrijven)

• Doel

Mix: kennis

en strategieën

Page 11: TaalVaST Taalvaardig aan de start

Taaltest - ontwikkeling

Woorden: synoniemen

Page 12: TaalVaST Taalvaardig aan de start

Taaltest - ontwikkeling

Woorden: 1 woord, 3 contexten

Page 13: TaalVaST Taalvaardig aan de start

Taaltest - ontwikkeling

Lezen - tekststructuur

Page 14: TaalVaST Taalvaardig aan de start

Taaltestontwikkeling

Lezen - tekstbegrip

Page 15: TaalVaST Taalvaardig aan de start

Taaltest - ontwikkeling

Lezen (& schrijven): alineaopbouw

Page 16: TaalVaST Taalvaardig aan de start

Taaltest - ontwikkeling: pilot (2009)

• Noodzakelijke fase in testontwikkeling

• Representatieve doelgroep

• Eerste bevindingen

o Item analyse

o Betrouwbaarheid

o Validiteit 0

10

20

30

40

50

60

70

80

90

100

1 2 3 4 5 6 7 8 9 10 11 19 20 21 22 29 30 31 32 12 25 18 24 28 27

1 5 19 24 item

score

Very good /good very good good not good

KR20: 0,78

Page 17: TaalVaST Taalvaardig aan de start

Taaltest - ontwikkeling: pilot

0

5

10

15

20

25

30

35

91-100

81-90

71-80

61-70

51-60

41-50

31-40

21-30

11-20

0-10

Eerste bachelor studenten

ASO

TSO

1ste jaar universiteit

ASO

TSO

% studenten

score in %

Page 18: TaalVaST Taalvaardig aan de start

Overzicht

LUCI-testOntwikkeling en achtergrond

Afname

Resultaten

En nu?

Page 19: TaalVaST Taalvaardig aan de start

Overzicht

LUCI-testOntwikkeling en achtergrond

Afname

Resultaten

En nu?

Page 20: TaalVaST Taalvaardig aan de start

Taaltest - afname

• 2010-2014 19.156 studenten van de Associatie KU Leuven

n = 971

n

=

521

n =

9045

n = 5727

n =

2893

Page 21: TaalVaST Taalvaardig aan de start

Taaltest - afname

N α

1384 0,70

2898 0,68

4329 0,72

4769 0,76

Page 22: TaalVaST Taalvaardig aan de start

Taalvaardigheidstest Hogeschool Rotterdam

• Eerste afname: TaalVaST

te moeilijk

gemiddeld 45%

• Aangepaste test met authentieke contexten hogeschool

pilot: aanpassing items

normale verdeling

vergelijkbare correlatie studiesucces

Page 23: TaalVaST Taalvaardig aan de start

Overzicht

LUCI-testOntwikkeling en achtergrond

Afname

Resultaten

En nu?

Page 24: TaalVaST Taalvaardig aan de start

Overzicht

LUCI-testOntwikkeling en achtergrond

Afname

Resultaten

En nu?

Page 25: TaalVaST Taalvaardig aan de start

Taaltest-validiteit: meertaligheid

0

5

10

15

20

25

30

0-10 11 20 21-30 31-40 41-50 51-60 61-70 71-80 81-90 91-100

Nederlandstalig

Meertalig

Gem.: 69%

Gem.: 61%

Aa

nta

l stu

de

nte

n in

%

Testscore in %

Scores op basis van thuistaal (2010, 2011, 2012)

p<0.000;

d = 0,58

Herelixka C. (2013) Academisch taalvaardig van start tot finish [masterproef]

Page 26: TaalVaST Taalvaardig aan de start

De taaltest: resultaten: studiesucces (2012)Richting # studenten Gemiddelde

Grieks – Wiskunde 22 82.22%

Rudolf Steiner pedagogie 2 80.36%

Grieks – Latijn 48 77.46%

Latijn – Wiskunde 173 75.89%

Grieks – Wetenschappen 4 75.0%

Latijn – Wetenschappen 110 73.51%

Grieks – Moderne talen 1 73.21%

Wetenschappen – Wiskunde 279 71.87%

Latijn – Moderne talen 197 71.16%

Economie – Wiskunde 26 69.99%

Wetenschappen – Topsport 2 69.64%

Moderne talen – Wiskunde 13 68.96%

Humane wetenschappen 192 68.44%

Moderne talen –

Wetenschappen 90 68.17%

Bijzondere wetenschappelijke

vorming 1 68.0%

Economie – Wetenschappen 7 67.86%

Economie – Moderne talen 171 66.81%

Wetenschappen – Sport 9 60.32%

> taaltest

Vergelijken met lijst van

Declerck en Verboven (2010)

=

Onderzoek naar studiesucces

Page 27: TaalVaST Taalvaardig aan de start

De taaltest: resultaten: studiesucces (2012)Richting # studenten Gemiddelde

Grieks – Wiskunde 22 82.22%

Rudolf Steiner pedagogie 2 80.36%

Grieks – Latijn 48 77.46%

Latijn – Wiskunde 173 75.89%

Grieks – Wetenschappen 4 75.0%

Latijn – Wetenschappen 110 73.51%

Grieks – Moderne talen 1 73.21%

Wetenschappen – Wiskunde 279 71.87%

Latijn – Moderne talen 197 71.16%

Economie – Wiskunde 26 69.99%

Wetenschappen – Topsport 2 69.64%

Moderne talen – Wiskunde 13 68.96%

Humane wetenschappen 192 68.44%

Moderne talen – Wet. 90 68.17%

Bijzondere wetenschappelijke

vorming 1 68.0%

Economie – Wetenschappen 7 67.86%

Economie – Moderne talen 171 66.81%

Wetenschappen – Sport 9 60.32%

Declerck en Verboven (2010)

Grieks - wiskunde

Latijn - wiskunde

Grieks - Latijn

Latijn - wetenschappen

Wetenschappen - wiskunde

Economie - wiskunde

Moderne talen - wiskunde

Latijn - moderne talen

Moderne talen - wetenschappen

Sportwetenschappen

Economie - moderne talen

Humane wetenschappen

Steinerpedagogie

Page 28: TaalVaST Taalvaardig aan de start

De taaltest: resultaten: studiesucces (2012)Richting # studenten Gemiddelde

Grieks – Wiskunde 22 82.22%

Rudolf Steiner pedagogie 2 80.36%

Grieks – Latijn 48 77.46%

Latijn – Wiskunde 173 75.89%

Grieks – Wetenschappen 4 75.0%

Latijn – Wetenschappen 110 73.51%

Grieks – Moderne talen 1 73.21%

Wetenschappen – Wiskunde 279 71.87%

Latijn – Moderne talen 197 71.16%

Economie – Wiskunde 26 69.99%

Wetenschappen – Topsport 2 69.64%

Moderne talen – Wiskunde 13 68.96%

Humane wetenschappen 192 68.44%

Moderne talen – Wet. 90 68.17%

Bijzondere wetenschappelijke

vorming 1 68.0%

Economie – Wetenschappen 7 67.86%

Economie – Moderne talen 171 66.81%

Wetenschappen – Sport 9 60.32%

Declerck en Verboven (2010)

Grieks - wiskunde

Latijn - wiskunde

Grieks - Latijn

Latijn - wetenschappen

Wetenschappen - wiskunde

Economie - wiskunde

Moderne talen - wiskunde

Latijn - moderne talen

Moderne talen - wetenschappen

Sportwetenschappen

Economie - moderne talen

Humane wetenschappen

Steinerpedagogie

Page 29: TaalVaST Taalvaardig aan de start

De taaltest: resultaten: studiesucces (2012)Richting # studenten Gemiddelde

Grieks – Wiskunde 22 82.22%

Rudolf Steiner pedagogie 2 80.36%

Grieks – Latijn 48 77.46%

Latijn – Wiskunde 173 75.89%

Grieks – Wetenschappen 4 75.0%

Latijn – Wetenschappen 110 73.51%

Grieks – Moderne talen 1 73.21%

Wetenschappen – Wiskunde 279 71.87%

Latijn – Moderne talen 197 71.16%

Economie – Wiskunde 26 69.99%

Wetenschappen – Topsport 2 69.64%

Moderne talen – Wiskunde 13 68.96%

Humane wetenschappen 192 68.44%

Moderne talen – Wet. 90 68.17%

Bijzondere wetenschappelijke

vorming 1 68.0%

Economie – Wetenschappen 7 67.86%

Economie – Moderne talen 171 66.81%

Wetenschappen – Sport 9 60.32%

Declerck en Verboven (2010)

Grieks - wiskunde

Latijn - wiskunde

Grieks - Latijn

Latijn - wetenschappen

Wetenschappen - wiskunde

Economie - wiskunde

Moderne talen - wiskunde

Latijn - moderne talen

Moderne talen - wetenschappen

Sportwetenschappen

Economie - moderne talen

Humane wetenschappen

Steinerpedagogie

Page 30: TaalVaST Taalvaardig aan de start

De taaltest: resultaten: studiesuccesRichting # studenten Gemiddelde

Grieks – Wiskunde 22 82.22%

Rudolf Steiner pedagogie 2 80.36%

Grieks – Latijn 48 77.46%

Latijn – Wiskunde 173 75.89%

Grieks – Wetenschappen 4 75.0%

Latijn – Wetenschappen 110 73.51%

Grieks – Moderne talen 1 73.21%

Wetenschappen – Wiskunde 279 71.87%

Latijn – Moderne talen 197 71.16%

Economie – Wiskunde 26 69.99%

Wetenschappen – Topsport 2 69.64%

Moderne talen – Wiskunde 13 68.96%

Humane wetenschappen 192 68.44%

Moderne talen – Wet. 90 68.17%

Bijzondere wetenschappelijke

vorming 1 68.0%

Economie – Wetenschappen 7 67.86%

Economie – Moderne talen 171 66.81%

Wetenschappen – Sport 9 60.32%

Declerck en Verboven (2010)

Grieks - wiskunde

Latijn - wiskunde

Grieks - Latijn

Latijn - wetenschappen

Wetenschappen - wiskunde

Economie - wiskunde

Moderne talen - wiskunde

Latijn - moderne talen

Moderne talen - wetenschappen

Sportwetenschappen

Economie - moderne talen

Humane wetenschappen

Steinerpedagogie

Page 31: TaalVaST Taalvaardig aan de start

Taaltest-validiteit: correlatie studiesucces

Academiejaar 2010-2011+2011-2012:

R = 0,35; p < 0,0001

Duidelijk significantNiet erg zuiver

gemiddeld beter op de taaltest

= gemiddeld beter op de examensuitzonderingen

Page 32: TaalVaST Taalvaardig aan de start

Taaltest-validiteit: correlatie studiesucces

data: 2010+2011

N = 2660

Page 33: TaalVaST Taalvaardig aan de start

Taaltest-validiteit: correlatie studiesucces

±24% van de studenten scoort <60% op de taaltest

= 72% slaagt niet voor de examens in januari

Belangrijk verband:

De taaltest is geen voorspeller, maar geeft

een sterk signaal

Page 34: TaalVaST Taalvaardig aan de start

Overzicht

LUCI-testOntwikkeling en achtergrond

Afname

Resultaten

En nu?

Page 35: TaalVaST Taalvaardig aan de start

Overzicht

LUCI-testOntwikkeling en achtergrond

Afname

Resultaten

En nu?

Page 36: TaalVaST Taalvaardig aan de start

Wat doen met resultaten?

• Signaal: aantal academische vaardigheden

• Enkel voor wie universiteit wil doen!

• Scholier:

o resultaat combineren met eindpercentage SO + advies

klassenraad

o LUCI-test: geen strikte voorspeller van studiesucces!

o ijkingstoets voor wiskundige richtingen!

o stoomcursus of ander initiatief?

Page 37: TaalVaST Taalvaardig aan de start

Wat doen met resultaten?

• Signaal: aantal academische vaardigheden

• Enkel voor wie universiteit wil doen!

• Scholier:

o resultaat combineren met eindpercentage SO + advies

klassenraad

o LUCI-test: geen voorspeller van studiesucces!

o stoomcursus of ander initiatief?

o ijkingstoets voor wiskundige richtingen!

Page 38: TaalVaST Taalvaardig aan de start

En de cijfers? (midden maart – midden oktober)