Uitspraak trainen met een computer:

is dat mogelijk?

Ambra Neri Catia Cucchiarini, Helmer StrikRadboud Universiteit Nijmegen, CLST

Helmer Strik De dag vd Fonetiek, Utrecht, 22-12-05 2

InleidingInleiding

Context:CAPT: Computer Assisted Pronunciation TrainingAutomatische feedback op uitspraak(-fouten)Wat is het effect op de uitspraak?Buitenlanders die Nederlands leren (NT2).

Helmer Strik De dag vd Fonetiek, Utrecht, 22-12-05 3

InleidingInleiding

Doelstellingen:Bepalen wat belangrijke uitspraakfouten zijn:11 doelklankenAutomatische detectie van uitspraakfouten.Geven van feedback over uitspraakfouten.Bestuderen van de effecten van deze feedback op het leerproces.Opstellen van richtlijnen voor het gebruiken van spraak-technologie en -analyse in computerondersteund taalonderwijs (COTO).

Helmer Strik De dag vd Fonetiek, Utrecht, 22-12-05 4

Dutch CAPT systeemDutch CAPT systeemOverzichtOverzicht

Het programma bevat 4 lessen die ieder bestaan uit:

1. Video: soap-opera met Nederlandse acteurs (uit Nieuwe Buren, een communicatieve multimediale leermethode)

2. 3 verschillende soorten oefeningen: 22 dialogen: rol spelen 46 oefeningen: vragen beantwoorden 38 oefeningen: woorden uitspreken

Helmer Strik De dag vd Fonetiek, Utrecht, 22-12-05 5

Video: een voorbeeldVideo: een voorbeeld

Helmer Strik De dag vd Fonetiek, Utrecht, 22-12-05 6

Helmer Strik De dag vd Fonetiek, Utrecht, 22-12-05 7

Helmer Strik De dag vd Fonetiek, Utrecht, 22-12-05 8

Helmer Strik De dag vd Fonetiek, Utrecht, 22-12-05 9

Helmer Strik De dag vd Fonetiek, Utrecht, 22-12-05 10

Helmer Strik De dag vd Fonetiek, Utrecht, 22-12-05 11

ProefpersonenProefpersonen

Alle proefpersonen volgden ‘reguliere’ lessen.

3 groepen, Exp. + 2 controle groepen:Exp. - 15 pp. - Dutch CAPT systeem

wel feedback over uitspraakNiBu - 10 pp. - Nieuwe Buren

geen feedback over uitspraakGeen - 5 pp. - Niets extra’s

[geen feedback over uitspraak]

Helmer Strik De dag vd Fonetiek, Utrecht, 22-12-05 12

EvaluatieEvaluatie

Proefpersonen:Vragenlijsten - resultaten: positiefSets van 5 fonetisch rijke zinnen inspreken Pre (set 1) – voor het exp. Post (set 1) – na het exp. Gen (set 2) – na het exp.

6 experts:Beoordeling sets van 5 fonetisch rijke zinnenSegmentele kwaliteitHoge agreement

Helmer Strik De dag vd Fonetiek, Utrecht, 22-12-05 13

Resultaten: scores 6 expertsResultaten: scores 6 experts

3,7

4,75,0

5,65,66,0

3,5

4,0

4,5

5,0

5,5

6,0

6,5

pre post

Exp

Geen

NiBu

Helmer Strik De dag vd Fonetiek, Utrecht, 22-12-05 14

Extra analysesExtra analyses

Vervolgens zijn extra analyses uitgevoerd om meer inzicht te krijgen in de resultaten.

O.a. tellen van het aantal gemaakte foutenVoor 11 doelklankenVoor andere klanken

Helmer Strik De dag vd Fonetiek, Utrecht, 22-12-05 15

Percentage foutenPercentage fouten

0.00%

5.00%

10.00%

15.00%

20.00%

25.00%

Exp. Controle Exp. Controle

11 doelklanken andere klanken

% errors (relative to type)

pre-test

post-test

Helmer Strik De dag vd Fonetiek, Utrecht, 22-12-05 16

Scores 6 expertsScores 6 experts

Nadere analyse van de scores van de 6 experts.

Correlaties - van expert scores met0.88 - % fouten in klanken0.67 - % fouten in 11 doelklanken0.85 - % fouten in andere klanken

In de fonetisch rijke zinnen:18.5% : doelklanken81.5% : andere klanken

Helmer Strik De dag vd Fonetiek, Utrecht, 22-12-05 17

MetadataMetadata

Onevenwichtige verdeling van Arabische sprekers over de groepen: Geen in controle groepen (NiBu & Geen)Wel in Exp. groep 6 (40%) Arabisch (Ar) 9 (60%) Indo-Europees (IE)

Helmer Strik De dag vd Fonetiek, Utrecht, 22-12-05 18

MetadataMetadata

3,7

4,7

3,3

4,04,0

5,15,0

5,65,66,0

3,0

3,5

4,0

4,5

5,0

5,5

6,0

pre post

Exp

Exp_Ar

Exp_IE

Geen

NiBu

Helmer Strik De dag vd Fonetiek, Utrecht, 22-12-05 19

ConclusiesConclusies

Uitspraak trainen met een computer:is dat mogelijk? Antwoord: Ja!

Automatisch gegenereerde feedback : Significant grotere reductie in aantal fouten voor de doelklanken

Helmer Strik De dag vd Fonetiek, Utrecht, 22-12-05 20

Meer informatieMeer informatie

Voor meer informatie, zie

//lands.let.ru.nl/projects/DutchCAPT.html//lands.let.ru.nl/staff/neri.php//lands.let.ru.nl/staff/catia.php//lands.let.ru.nl/staff/strik.phpzap.to/helmer

Helmer Strik De dag vd Fonetiek, Utrecht, 22-12-05 21

Meer informatieMeer informatie

Voor meer informatie, zie

//lands.let.ru.nl/projects/DutchCAPT.html//lands.let.ru.nl/staff/neri.php//lands.let.ru.nl/staff/catia.php//lands.let.ru.nl/staff/strik.phpzap.to/helmer