Uitspraak trainen met een computer: is dat mogelijk?

21
Uitspraak trainen met een computer: is dat mogelijk? Ambra Neri Catia Cucchiarini, Helmer Strik Radboud Universiteit Nijmegen, CLST

description

Uitspraak trainen met een computer: is dat mogelijk?. Ambra Neri Catia Cucchiarini, Helmer Strik Radboud Universiteit Nijmegen, CLST. Inleiding. Context: CAPT: Computer Assisted Pronunciation Training Automatische feedback op uitspraak(-fouten) Wat is het effect op de uitspraak? - PowerPoint PPT Presentation

Transcript of Uitspraak trainen met een computer: is dat mogelijk?

Page 1: Uitspraak trainen met een computer: is dat mogelijk?

Uitspraak trainen met een computer:

is dat mogelijk?

Ambra Neri Catia Cucchiarini, Helmer StrikRadboud Universiteit Nijmegen, CLST

Page 2: Uitspraak trainen met een computer: is dat mogelijk?

Helmer Strik De dag vd Fonetiek, Utrecht, 22-12-05 2

InleidingInleiding

Context:CAPT: Computer Assisted Pronunciation TrainingAutomatische feedback op uitspraak(-fouten)Wat is het effect op de uitspraak?Buitenlanders die Nederlands leren (NT2).

Page 3: Uitspraak trainen met een computer: is dat mogelijk?

Helmer Strik De dag vd Fonetiek, Utrecht, 22-12-05 3

InleidingInleiding

Doelstellingen:Bepalen wat belangrijke uitspraakfouten zijn:11 doelklankenAutomatische detectie van uitspraakfouten.Geven van feedback over uitspraakfouten.Bestuderen van de effecten van deze feedback op het leerproces.Opstellen van richtlijnen voor het gebruiken van spraak-technologie en -analyse in computerondersteund taalonderwijs (COTO).

Page 4: Uitspraak trainen met een computer: is dat mogelijk?

Helmer Strik De dag vd Fonetiek, Utrecht, 22-12-05 4

Dutch CAPT systeemDutch CAPT systeemOverzichtOverzicht

Het programma bevat 4 lessen die ieder bestaan uit:

1. Video: soap-opera met Nederlandse acteurs (uit Nieuwe Buren, een communicatieve multimediale leermethode)

2. 3 verschillende soorten oefeningen: 22 dialogen: rol spelen 46 oefeningen: vragen beantwoorden 38 oefeningen: woorden uitspreken

Page 5: Uitspraak trainen met een computer: is dat mogelijk?

Helmer Strik De dag vd Fonetiek, Utrecht, 22-12-05 5

Video: een voorbeeldVideo: een voorbeeld

Page 6: Uitspraak trainen met een computer: is dat mogelijk?

Helmer Strik De dag vd Fonetiek, Utrecht, 22-12-05 6

Page 7: Uitspraak trainen met een computer: is dat mogelijk?

Helmer Strik De dag vd Fonetiek, Utrecht, 22-12-05 7

Page 8: Uitspraak trainen met een computer: is dat mogelijk?

Helmer Strik De dag vd Fonetiek, Utrecht, 22-12-05 8

Page 9: Uitspraak trainen met een computer: is dat mogelijk?

Helmer Strik De dag vd Fonetiek, Utrecht, 22-12-05 9

Page 10: Uitspraak trainen met een computer: is dat mogelijk?

Helmer Strik De dag vd Fonetiek, Utrecht, 22-12-05 10

Page 11: Uitspraak trainen met een computer: is dat mogelijk?

Helmer Strik De dag vd Fonetiek, Utrecht, 22-12-05 11

ProefpersonenProefpersonen

Alle proefpersonen volgden ‘reguliere’ lessen.

3 groepen, Exp. + 2 controle groepen:Exp. - 15 pp. - Dutch CAPT systeem

wel feedback over uitspraakNiBu - 10 pp. - Nieuwe Buren

geen feedback over uitspraakGeen - 5 pp. - Niets extra’s

[geen feedback over uitspraak]

Page 12: Uitspraak trainen met een computer: is dat mogelijk?

Helmer Strik De dag vd Fonetiek, Utrecht, 22-12-05 12

EvaluatieEvaluatie

Proefpersonen:Vragenlijsten - resultaten: positiefSets van 5 fonetisch rijke zinnen inspreken Pre (set 1) – voor het exp. Post (set 1) – na het exp. Gen (set 2) – na het exp.

6 experts:Beoordeling sets van 5 fonetisch rijke zinnenSegmentele kwaliteitHoge agreement

Page 13: Uitspraak trainen met een computer: is dat mogelijk?

Helmer Strik De dag vd Fonetiek, Utrecht, 22-12-05 13

Resultaten: scores 6 expertsResultaten: scores 6 experts

3,7

4,75,0

5,65,66,0

3,5

4,0

4,5

5,0

5,5

6,0

6,5

pre post

Exp

Geen

NiBu

Page 14: Uitspraak trainen met een computer: is dat mogelijk?

Helmer Strik De dag vd Fonetiek, Utrecht, 22-12-05 14

Extra analysesExtra analyses

Vervolgens zijn extra analyses uitgevoerd om meer inzicht te krijgen in de resultaten.

O.a. tellen van het aantal gemaakte foutenVoor 11 doelklankenVoor andere klanken

Page 15: Uitspraak trainen met een computer: is dat mogelijk?

Helmer Strik De dag vd Fonetiek, Utrecht, 22-12-05 15

Percentage foutenPercentage fouten

0.00%

5.00%

10.00%

15.00%

20.00%

25.00%

Exp. Controle Exp. Controle

11 doelklanken andere klanken

% errors (relative to type)

pre-test

post-test

Page 16: Uitspraak trainen met een computer: is dat mogelijk?

Helmer Strik De dag vd Fonetiek, Utrecht, 22-12-05 16

Scores 6 expertsScores 6 experts

Nadere analyse van de scores van de 6 experts.

Correlaties - van expert scores met0.88 - % fouten in klanken0.67 - % fouten in 11 doelklanken0.85 - % fouten in andere klanken

In de fonetisch rijke zinnen:18.5% : doelklanken81.5% : andere klanken

Page 17: Uitspraak trainen met een computer: is dat mogelijk?

Helmer Strik De dag vd Fonetiek, Utrecht, 22-12-05 17

MetadataMetadata

Onevenwichtige verdeling van Arabische sprekers over de groepen: Geen in controle groepen (NiBu & Geen)Wel in Exp. groep 6 (40%) Arabisch (Ar) 9 (60%) Indo-Europees (IE)

Page 18: Uitspraak trainen met een computer: is dat mogelijk?

Helmer Strik De dag vd Fonetiek, Utrecht, 22-12-05 18

MetadataMetadata

3,7

4,7

3,3

4,04,0

5,15,0

5,65,66,0

3,0

3,5

4,0

4,5

5,0

5,5

6,0

pre post

Exp

Exp_Ar

Exp_IE

Geen

NiBu

Page 19: Uitspraak trainen met een computer: is dat mogelijk?

Helmer Strik De dag vd Fonetiek, Utrecht, 22-12-05 19

ConclusiesConclusies

Uitspraak trainen met een computer:is dat mogelijk? Antwoord: Ja!

Automatisch gegenereerde feedback : Significant grotere reductie in aantal fouten voor de doelklanken

Page 20: Uitspraak trainen met een computer: is dat mogelijk?

Helmer Strik De dag vd Fonetiek, Utrecht, 22-12-05 20

Meer informatieMeer informatie

Voor meer informatie, zie

//lands.let.ru.nl/projects/DutchCAPT.html//lands.let.ru.nl/staff/neri.php//lands.let.ru.nl/staff/catia.php//lands.let.ru.nl/staff/strik.phpzap.to/helmer

Page 21: Uitspraak trainen met een computer: is dat mogelijk?

Helmer Strik De dag vd Fonetiek, Utrecht, 22-12-05 21

Meer informatieMeer informatie

Voor meer informatie, zie

//lands.let.ru.nl/projects/DutchCAPT.html//lands.let.ru.nl/staff/neri.php//lands.let.ru.nl/staff/catia.php//lands.let.ru.nl/staff/strik.phpzap.to/helmer