- peli ja puheteknologia lasten vieraan kielen oppimisessa · •Pelillisyys lisää motivaatiota...

13
www.helsinki.fi/yliopisto “Say it again, kid!” - peli ja puheteknologia lasten vieraan kielen oppimisessa Sari Ylinen, Kognitiivisen aivotutkimuksen yksikkö, käyttäytymistieteiden laitos, Helsingin yliopisto & Mikko Kurimo, signaalinkäsittelyn ja akustiikan laitos, sähkötekniikan korkeakoulu, Aalto-yliopisto 6.2.2014 Ylinen & Kurimo 1

Transcript of - peli ja puheteknologia lasten vieraan kielen oppimisessa · •Pelillisyys lisää motivaatiota...

Page 1: - peli ja puheteknologia lasten vieraan kielen oppimisessa · •Pelillisyys lisää motivaatiota harjoitella, vaikka lapsi ei ... •Oppimisen vaikutukset voivat näkyä ensin aivovasteissa

www.helsinki.fi/yliopisto

“Say it again, kid!”

- peli ja puheteknologia lasten vieraan

kielen oppimisessa

Sari Ylinen, Kognitiivisen aivotutkimuksen yksikkö,

käyttäytymistieteiden laitos, Helsingin yliopisto

&

Mikko Kurimo, signaalinkäsittelyn ja akustiikan laitos, sähkötekniikan

korkeakoulu, Aalto-yliopisto

6.2.2014 Ylinen & Kurimo 1

Page 2: - peli ja puheteknologia lasten vieraan kielen oppimisessa · •Pelillisyys lisää motivaatiota harjoitella, vaikka lapsi ei ... •Oppimisen vaikutukset voivat näkyä ensin aivovasteissa

www.helsinki.fi/yliopisto

• Speech Technology in Language Learning for Finnish

Children (STILL-Child)

• Helsingin yliopisto:

• PI Risto Näätänen, Kognitiivisen aivotutkimuksen

yksikkö, käyttäytymistieteiden laitos, HY; Tartu

University, Viro; University of Aarhus, Tanska

• Aalto-yliopisto:

• PI Mikko Kurimo, signaalinkäsittelyn ja akustiikan laitos,

sähkötekniikan korkeakoulu, Aalto-yliopisto; Suomen

Akatemian laskennallisen päättelyn huippuyksikkö

6.2.2014 2 Ylinen & Kurimo

Konsortio

Page 3: - peli ja puheteknologia lasten vieraan kielen oppimisessa · •Pelillisyys lisää motivaatiota harjoitella, vaikka lapsi ei ... •Oppimisen vaikutukset voivat näkyä ensin aivovasteissa

www.helsinki.fi/yliopisto

• Vieraan eli toisen kielen oppiminen hyödyttää sekä yksilöä

että yhteiskuntaa

• Suomessa vieraita kieliä aletaan usein opiskella liian

myöhään (esim. Helsingin Sanomat, 6.4.2013)

• Mitä nuorempana kieltä aletaan oppia, sitä parempi

kielitaito (esim. Flege, 1995)

6.2.2014 3 Ylinen & Kurimo

Lasten vieraan kielen

oppiminen

Page 4: - peli ja puheteknologia lasten vieraan kielen oppimisessa · •Pelillisyys lisää motivaatiota harjoitella, vaikka lapsi ei ... •Oppimisen vaikutukset voivat näkyä ensin aivovasteissa

www.helsinki.fi/yliopisto

1. Kehittää tietokonepohjainen kielenoppimispeli

2. Tutkia puhutun vieraan kielen käsittelyn ja

kielenoppimisen aivomekanismeja

3. Kehittää automattisen puheentunnistuksen menetelmiä:

lasten puheelle sopiva tunnistin

6.2.2014 4 Ylinen & Kurimo

Projektin tavoitteet

Page 5: - peli ja puheteknologia lasten vieraan kielen oppimisessa · •Pelillisyys lisää motivaatiota harjoitella, vaikka lapsi ei ... •Oppimisen vaikutukset voivat näkyä ensin aivovasteissa

www.helsinki.fi/yliopisto

• Keskittyy englannin ääntämisen ja sanojen oppimiseen

• Hyödyntää automaattista puheentunnistusta

• Suunnattu suomenkielisille esikoulu- ja kouluikäisille

lapsille

• Normaalisti etenevän kielenoppimisen lisäksi pyrkii

parantamaan kielenoppimisen edellytyksiä luki-

vaikeuden omaavilla lapsilla

• Pelillisyys lisää motivaatiota harjoitella, vaikka lapsi ei

vielä ymmärtäisi, mitä hyötyä kielenoppimisesta on

tulevaisuudessa

6.2.2014 5 Ylinen & Kurimo

1. Tietokonepohjainen

kielenoppimispeli

“Say it again, kid!”

Page 6: - peli ja puheteknologia lasten vieraan kielen oppimisessa · •Pelillisyys lisää motivaatiota harjoitella, vaikka lapsi ei ... •Oppimisen vaikutukset voivat näkyä ensin aivovasteissa

www.helsinki.fi/yliopisto

• Oppimista voidaan käyttäytymisen lisäksi arvioida

aivovasteista

• Yhdistämällä tietoa aivovasteiden voimakkuudesta,

ajoituksesta ja niiden lähteistä voidaan paremmin

ymmärtää vieraskielisen puheen käsittelyn ja oppimisen

mekanismeja aivoissa

• Oppimisen vaikutukset voivat näkyä ensin

aivovasteissa ja sitten käyttäytymisessä

• Aivovastemittaukset ovat mahdollisia passiivisessa

koeasetelmassa, jolloin lapsen motivaatio ja

yhteistyökyky eivät vaikuta tuloksiin

6.2.2014 7 Ylinen & Kurimo

2. Vieraan kielen käsittelyn

ja kielenoppimisen

aivomekanismien tutkimus

Page 7: - peli ja puheteknologia lasten vieraan kielen oppimisessa · •Pelillisyys lisää motivaatiota harjoitella, vaikka lapsi ei ... •Oppimisen vaikutukset voivat näkyä ensin aivovasteissa

www.helsinki.fi/yliopisto

2. Vieraan kielen käsittelyn ja

kielenoppimisen aivomekanismien

tutkimus

6.2.2014 8 Ylinen & Kurimo

Page 8: - peli ja puheteknologia lasten vieraan kielen oppimisessa · •Pelillisyys lisää motivaatiota harjoitella, vaikka lapsi ei ... •Oppimisen vaikutukset voivat näkyä ensin aivovasteissa

www.helsinki.fi/yliopisto

• Automaattista puheentunnistusta on käytetty tietokoneavusteisessa kielenoppimisessa 80-luvulta lähtien

• Puheentunnistuksen käyttö parantaa ääntämisen oppimistuloksia, koska se mahdollistaa tarkan palautteen ääntämisestä (Golonka et al. 2014)

• 11-vuotiailla lapsilla puheentunnistukseen perustuva ääntämisopetus oli yhtä tehokasta kuin opettajan ääntämisopetus (Neri et al. 2008)

• Itse- ja etäopiskelu varsinaisen opetuksen tukena, mahdollisuus suureen toisto- ja palautemäärään

• Tavoitteena alle kouluikäisten lasten puheelle sopiva tunnistin, joka pystyy arvioimaan myös ääntämisen hyvyyttä

6.2.2014 9 Ylinen & Kurimo

3. Automaattisen puheen-

tunnistuksen kehittäminen

Page 9: - peli ja puheteknologia lasten vieraan kielen oppimisessa · •Pelillisyys lisää motivaatiota harjoitella, vaikka lapsi ei ... •Oppimisen vaikutukset voivat näkyä ensin aivovasteissa

www.helsinki.fi/yliopisto 5.2.2014 10 Osasto / Henkilön nimi / Esityksen nimi

Äänteiden digitaalinen

käsittely

Page 10: - peli ja puheteknologia lasten vieraan kielen oppimisessa · •Pelillisyys lisää motivaatiota harjoitella, vaikka lapsi ei ... •Oppimisen vaikutukset voivat näkyä ensin aivovasteissa

www.helsinki.fi/yliopisto

• Lasten korkean äänen vuoksi perustaajuus ja formantit sekoittuvat

• Lapsilla on enemmän yksilöiden välistä ja ikään liittyvää variaatiota puheessa

• Lasten puheen aineistojen puute

• Vieraan kielen puhujan ja varsinkin opiskelijan puheessa äänteet ja painot poikkeavat merkittävästi synnynnäisistä puhujista, joiden äänellä tunnistimet on opetettu

• Runsaasti yksilöiden välistä ja opiskelun vaiheeseen sekä äidinkieleen liittyvää variaatiota puheessa

• Vieraskielisten ja opiskelijoiden puheen aineistojen puute

6.2.2014 11 Ylinen & Kurimo

3. Automaattisen puheen-

tunnistuksen kehittäminen

Page 11: - peli ja puheteknologia lasten vieraan kielen oppimisessa · •Pelillisyys lisää motivaatiota harjoitella, vaikka lapsi ei ... •Oppimisen vaikutukset voivat näkyä ensin aivovasteissa

www.helsinki.fi/yliopisto

• Toistaiseksi puheentunnistusta

on käytetty mittaamaan,

tunnistuuko kielenoppijan

puhe oikein käyttäen

synnynnäisten puhujien äänellä

opetettuja keskiarvomalleja

• Kielenoppijan puhe poikkeaa

suuresti opetusaineistosta ja

yksittäisen sanan tai äänteen

erojen mittausta haittaavat

muutkin erot (äänenkorkeus,

painot, äidinkieli)

3. Automaattisen puheen-

tunnistuksen kehittäminen

6.2.2014 12 Ylinen & Kurimo

Page 12: - peli ja puheteknologia lasten vieraan kielen oppimisessa · •Pelillisyys lisää motivaatiota harjoitella, vaikka lapsi ei ... •Oppimisen vaikutukset voivat näkyä ensin aivovasteissa

www.helsinki.fi/yliopisto

1. Teoreettinen tavoite: käyttää kielenoppimispeliä

työkaluna kielenoppimisen aivomekanismien tutkimiseen

2. Metodologinen tavoite: automaattisen

puheentunnistuksen kehittäminen lapsille soveltuvaksi

3. Käytännöllinen tavoite: kehittää puheteknologiaa

hyödyntävä kielenoppimispeli, jonka avulla lapset

voisivat oppia englantia hauskalla tavalla ja joka

helpottaisi kielenoppimisen vaikeuksia

6.2.2014 13 Ylinen & Kurimo

Yhteenveto

Page 13: - peli ja puheteknologia lasten vieraan kielen oppimisessa · •Pelillisyys lisää motivaatiota harjoitella, vaikka lapsi ei ... •Oppimisen vaikutukset voivat näkyä ensin aivovasteissa

www.helsinki.fi/yliopisto

Kiitos!

6.2.2014 Ylinen & Kurimo 14