Arviointi-käytäntöjen kehittäminen ammattikorkea-koulussa

Kirsi Viitanen 2017

Arvioinnin merkitysViestii opiskelijalle, mikä on tärkeää oppimisen arvoista, ”mikä on

arvostettua käyttäytymistä sekä tietoa, taitoja ja asenne”

Arvottaa opiskelijaa suhteessa häneen itseensä ja muihin

Määrittelee, millainen suoriutuminen on hyväksyttävää tai erinomaista

Ohjaa oppimisprosessia

Jokainen arviointijärjestelmän osanen täyttää tiettyä osaa koko tutkinnon tuottamasta osaamisesta

Arviointikulttuuri tarkoitetaan niitä arvoja ja uskomuksia, jotka vaikuttavat siihen, millaisena yhteisö näkee arvioinnin tavoitteet ja tehtävät, ja jotka ohjaavat yhteisön arviointikäytäntöjä (Fuller & Skidmore, 2014).

• Arviointitutkijat ovat jo pitkään painottaneet arviointikulttuurin tarvetta muuttua mittaamisen kulttuurista oppimisen kehittämisen ja tukemisen kulttuuriin (Birenbaum, 1996; Black, Harrison, Lee,

Marshall & William, 2004; Brown, Bull & Pendlebury, 1997).

• Arviointikäytäntöjen tulisi kehittyä muuttuvan yhteiskunnan mukana vastaamaan näihin uudenlaisiin työelämätarpeisiin ja huomioida elinikäisen oppimisen tarpeet.

• Opettajien kokema kuormittuminen on yksi syy siihen, että oppimista edistäviä arviointimenetelmiä ei oteta käyttöön (Deneen &

Boud, 2014) tai niistä luovutaan jonkin ajan päästä (Halinen ym., 2013).

Arviointikulttuuri • Vahvan kontrolloivan otteen ja opettajajohtoisuuden sijaan

tulisi suosia arviointikäytäntöjä, joissa opiskelija on aktiivinen toimija (Boud, 2000; Black ym., 2004; Bryan & Clegg, 2006; Kearney, 2013; Sluijsmans, Dochy &

Moerkerke, 1999).

• Osaamisen kehittämiseen perustuvassa näkemyksessä arviointi nähdään pikemminkin mahdollisuutena edistää opiskelijoiden oppimista kuin mitata osaamista arviointi on samalla oppimistilanne ja oppimisen edistäjä (Crisp, 2012).

• Arviointi ohjaa opiskelua ja oppimista enemmän kuin mikään muu tekijä oppimistilanteessa Opiskelijat suuntaavat omaa oppimisprosessiaan arvioinnin mukaisesti, toisin sanoen he opiskelevat sen mukaan, miten heidän suorituksiaan opintojaksolla arvioidaan (Biggs & Tang, 2007; Brown ym., 1997).

4

Arvioinnin tavoitteet, kriteerit ja kohteet• ei saa olla itsetarkoitus, vaan sen pitää

johtaa toimenpiteisiin oppimisen parantamiseksi ja osaamisen kehittymiseksi.

• Opiskelijan on myös ymmärrettävä arvioinnin merkitys ja tarkoitus oppimisen motivoinnissa.

• Eettisesti kestävän arvioinnin pitää lisätä itseluottamusta eli voimaannuttaa oppivaa yksilöä

• Arviointi on laadullista palautetta oppimisen edistymisestä, kun taas arvostelu tähtää numeeriseen, määrälliseen tietoon

Arvioinnin tavoitteet, kriteerit ja kohteet• tavoite:

– mihin arviointitietoa käytetään?

– arviointitiedon merkitys/vaikutus

• kriteerit:

– kuka arvioi ja ketkä osallistuvat arviointiin?

– millaisen informaation pohjalta arvioidaan?

– arvioidaanko produktia vai prosessia?

• kohteina voivat olla:– opiskelija, oppimisprosessi ja

osaamisen kehittyminen

– opettaja ja opetusprosessi

– ohjaaja ja ohjausprosessi

– opetussuunnitelma (tavoitteet, sisällöt jne.)

– koulujärjestelmä jne.

Subjektiivisuus vs. objektiivisuus

Arv

ioin

nin

te

htä

vät

7

1. Toteava tehtävä: esim. alkutilanteen toteaminen; tästä lähdetään liikkeelle,diagnostinen arviointi

2. Motivoiva tehtävä:arvioinnin tulisi kannustaa ja lisätä opiskelun mielekkyyttä

3. Ohjaava ja korjaava tehtävä:”väliarviointia”, pyritään toteamaan oppimisen eteneminenformatiivinen arviointi

4. Ennustava tehtävä:mahdollinen tuleva suoriutuminen”portinvartija”

5. Kehittävä tehtävä:arvioinnin tulisi tarjota kehittymisen kohteita ja välineitä

Arvioinnin suunnitteluArviointimenetelmällä tarkoitetaan sitä, millä keinoin ja millaisella tehtävällä osaamista arvioidaan (Brown ym., 1997).

• kuka toimii arvioijana, eli onko kyseessä itse- tai vertaisarviointi vai opettajan tekemä arviointi (Brown ym., 1997).

• suunnittelun taustalla on oltava arvioinnin tarkoitus ja päämäärä: osaamisen diagnosointi, kontrollointi ja valikointi, oppimisen edistäminen tai elinikäisen oppimisen tukeminen (Boud, 2000; Crisp, 2012; Falchikov, 2005).

• arviointimenetelmän tulee tukea oppimistavoitteita (Biggs & Tang, 2007).

8

Arvioinnin suunnittelu• jokaisella yksittäisellä arviointimenetelmällä on vahvuutensa ja

heikkoutensa, kun sitä tarkastelee valideetin, reliabiliteetin tai oppimisen edistämisen näkökulmista: mikään arviointimenetelmä ei sinänsä ole muita parempi, vaan olennaista on arvioinnin kokonaisuus.

• Arviointimenetelmät olisikin syytä suunnitella laajempien kokonaisuuksien kuin yhden opintojakson puitteissa

• opiskelijan tulee tietää, mihin tarkoitukseen arviointia milloinkin käytetään: onko arvioinnin tavoitteena diagnosoida senhetkistä osaamista tai kehittää taitoja tulevaisuuden työelämää varten (Crisp, 2012).

9

Arviointisuunnitelma

Koko tutkinnon kattava suunnitelma arvioinnin yleisistä periaatteista ja toteuttamisesta

– Opintokokonaisuudet ja yksittäiset opintojaksot

– Itse-, vertais- ja ulkoinen arviointi

– Arvioinnin kohteet, osaamisen näyttö ja muu osaamisen arviointi• Työn perustana olevan tiedon hallinta

• Työprosessin hallinta

• Työmenetelmien, -välineiden ja materiaalien hallinta

• Elinikäisen oppimisen avaintaitojen ja yleisten työelämävalmiuksien hallinta

Kontekstiperustainen arviointi (Poikela 2013)

• Oppija ei ole vain arvioinnin kohteena, vaan tärkeä yhteistoimija ja kumppani arviointi-prosessin alusta saakka; omistaa oppimis- ja arviointiprosessinsa

• Kriteeriperustaisessa arvioinnissa opiskelijan suoritusta verrataan sovittuihin näkyvästi ilmaistuihin kriteereihin ja opiskelijoilla on tiedossa eri osaamistasoihin liittyvät vaatimukset.

• Korkeakouluissa suoritusvaatimukset ovat useimmiten olleet sellaisia, joilla pystytään osoittamaan vain kognitiivista tai toiminnallista (operationaalista) osaamista

Miksi arviointia tulisi muuttaa?

Työelämän odotuksiin vastaaminen asettaa paineita arvioinnin suunnitteluun ja ohjaa opettajia vaatimaan opiskelijoilta aiempaa monipuolisempia suorituksia tai näyttöjä, joissa tulee esille sosiaalisten ja ennen kaikkea reflektiivisten osaamisalueiden taso.

korkea-asteen koulutuksessa osaamisen osoittamisen tulisi toteutua aidoissa tai simuloiduissa työtilanteissa, jolloin osaamisessa korostuu kyky tietojen ja taitojen soveltamiseen sekä oman toiminnan perustelemiseen

Arvioinnissa huomio kiinnitetään erityisesti » aikaan, paikkaan ja tilannetekijöihin

» itse prosessiin sekä

» toiminnan synnyttämiin tuloksiin

Kun kriteeriperustainen arviointi on jalkautettu koulutukseen, tekee se läpinäkyväksi kokonaisvaltaisen osaamisen

13Poliisiammattikorkeakoulu

Poikela 2013

Poikela 2013

Oppimista ja osaamista tuottavan arvioinnin perusta on prosessiarviointi, joka vaikuttaa sekä itsearviointiin että tavoitteisiin liittyvään tuotosarviointiin

prosessia ja eri konteksteja korostava arviointi ottaa oppijan arviointikumppaniksi ja käyttää arviointitoimintaa hyödykseen jo prosessin aikana eri osapuolten (oppija, opettaja, työelämän edustajat) toimesta muutokset (oppijat ja opettajat) tehdään jo prosessin aikana

Itse- ja vertaisarviointi

16

Itse-

arviointi 20%

Vertais-arviointi 20%

Opettajan ulkoinen

arviointi 60%

Itse- ja

vertaisarviointi

otetaan elinikäistä

oppimista tukevan

arvioinnin osiksi

opettajan tekemän

arvioinnin rinnalla

Oppimista ja osaamista tuottavat prosessit

Arviointi

Sosiaaliset prosessit(osallistuminen ja vuorovaikuttaminen)• osallistaa• vuorovaikuttaa• innostaa

Havainnoidaan ja arvioidaan oppijoiden kykyä toimia yksin ja yhdessä, heidän riippuvuuttaan muiden tuesta sekä kykyä toimia ryhmässä, ryhmän jäsenenä ja johtajana –vuorovaikutus- ja neuvottelutaidot, suullinen viestintä, kommunikointitaidot, yhteistoiminta ja toimiminen ryhmässä, toisten huomioon ottaminen ja johtamisen tavat

Reflektiiviset prosessit(ongelmanratkaisu ja oivaltaminen)• ennakoi• oivaltaa• ratkoo tilanteita

Kertovat oppijan turvautumista erilaisiin toimintamalleihin, kyvystä kohdata erilaisia ongelmatilanteita, etsiä ratkaisumalleja tai osoittaa luovuutta – arviointikyky, oman ja muiden toiminnan tarkastelu ja analysointi, kokonaisuuksien hallinta, luova ajattelu sekä ongelmaratkaisutaidot

Kognitiiviset prosessit(muistaminen ja ymmärtäminen)• muistaa• tietää• ymmärtää

Osoittavat tiedon hallintaa, joka alkaa ohjeiden lukemisen ja noudattamisen taidoista, toimintaperiaatteiden muotoilusta ja työvälineiden käytön perusteluista kokonaisuuksien hallintaan saakka –tiedonhallinnan osoittaminen, tiedon havainnointi, omaksuminen, hallinta, käsittely, ajattelu, muistaminen ja tiedon tuottaminen

Operationaaliset prosessit(tekeminen ja toiminta)• tekee• toimii• havainnollistaa

Osoittavat tehtävien ja toiminnan jäsentynyttä ja sujuvaa hallintaa –näyttöarviointi, jossa mukana on työelämän edustajia – käytännön työ ja toiminta, aikataulujen noudattaminen, yhteistyökyky, käytännön tilanteiden hallinta ja ratkaiseminenLähteet: Poikela, 2013 ja Arvola, 2012)

18

Oppimista ja osaamista tuottavat prosessit

Arviointiasteikko 1Tilannekohtainen, (jäljittelevä) ja suppea ammatillinen osaaminen (suoriutuu ohja-tusti)

Arviointiasteikko 3Jäsentynyt, arvioiva ja soveltava ammatillinen osaaminen (tekee itsenäisesti)

Arviointiasteikko 5Laaja-alainen, luova ja kehittävä ammatillinen osaaminen (osaa kriittisesti ja innovatiivisella tavalla)

Kognitiivinen

Osaa • tunnistaa ja määritellä

alaan liittyvät ilmiöt ja peruskäsitteistön

• rajata ja perustella tietolähteiden käytön

Tunnistaa, nimeää, määrittelee

Osaa • jäsentää alaan liittyvien

ilmiöiden ja käsitteiden väliset suhteet

• arvioida käyttämiään tietolähteitä kriittisesti

Soveltaa, selittää, vertailee

• Ymmärtää laaja-alaisia kokonaisuuksia ja niiden välisiä suhteita

• Osaa arvioida käyttämiään tietolähteitä monipuolisesti ja kriittisesti

Yleistää, analysoi, luo

Operationaalinen

Osaa • toimia erilaisissa tilanteissa

tehtäväksi-annonmukaisesti sekä osaa sel-viytyä ennakoimattomissa tilanteissa

• perustella toimintansa yksittäisessä tilanteessa

Osaa • toimia ennakoimattomissa ja

monimutkaisissa tilanteissa sekä vaihtelevissa ympäristöissä

• valita eri vaihtoehdoista sopivimman menettelytavan ja perustella valintansa

Osaa • etsiä, vertailla ja analysoida

erilaisia ratkaisuvaihtoehtoja sekä ratkaista monimutkaisia ja ennakoimattomia ammatillisia ongelmia luovasti

19

Reflektiivinen

Osaa • antaa ja vastaanottaa

palautetta• toimia asiakkaiden kanssa

tilanteen vaatimalla tavalla• soveltaa eettisiä periaatteita

eri tilanteissa

Tarkastelee ja arvioi asioita omasta näkökulmastaan

Osaa • antaa ja vastaanottaa palautetta

aktiivisesti ja rakentavasti• arvioida toimintaa

asiakastilanteissa• soveltaa kriittisesti eettisiä

periaatteita eri tilanteissa

Tarkastelee ja arvioi asioita sekä omasta että lähiyhteisönsä näkökulmasta

Käyttää palautetta syste-maattisesti oman ja yhteisönsä ammatillisen kasvun välineenä

Tarkastelee ja arvioi itseään sekä sitä yhteisöä tai työko-konaisuutta, jossa toimii

Edistää ja kehittää toimintaa asiakastilanteissa

Edistää eettisten periaatteiden soveltamista ennakoimattomissa tilanteissa

Sosiaalinen

Osaa • tehdä yhteistyötä erilaisissa

työympäristöissä ja työyhteisöissä

• toimia ryhmässä ta-voitteellisesti

Tunnistaa • vuorovaikutustaitonsa• omalle alalle tärkeitä

toimintatapoja

Ottaa vastuun omasta suo-riutumisestaan

Osaa • organisoida erilaisten ryhmien

tavoitteellista toimintaa ja ottaa vastuuta siitä

• toimia yhteistyössä vastuullisesti ja on valmis kehittämään vuorovaikutustaitojaan sekä edistämään ryhmän tavoitteellista toimintaa

Tunnistaa ja noudattaa omalle alalle tärkeitä toimintatapoja

Ottaa vastuuta ja sitoutuu oman toiminnan lisäksi myös ryhmän toimintaan

Osaa • johtaa erilaisten ryhmien

tavoitteellista toimintaa• toimia yhteistyössä

vastuullisesti, joustavasti ja rakentavasti

Kehittää ja ohjaa sekä omaa että ryhmän vuorovaikutusta

Toimii vastuullisesti ja si-toutuneesti yhteisön ja oman alansa vaatimukset ja tarpeet huomioon ottaen

Osaamistavoite: opiskelija osaa

Oppimisen ja osaamisen prosessit

Arvioitava suoritus Arvioitsijat

arvioida monipuolisesti omaa osaamistaan ja kehittymistään kouluttajana

Kognitiivinen ja reflektiivinen prosessi

Itsearviointi osaamisesta ja kehittämisuunni-telman laatiminen (sos.viestintätyylin testi)

Opiskelija Opettaja

suunnitella koulutustilaisuuksia aikuisopiskelijan erityispiirteet ja erilaiset oppimistyylit huomioiden

kognitiivinen, operationaalinen ja sosiaalinen prosessi

Opetustuokion suunnitelma pareittain

OpiskelijaOpiskelija-kollegaOpettaja

edistää yksilöllistä ja yhteisöllistä oppimista

kognitiivinen ja operationaalinen prosessi

Essee oppimisestaOpetustuokiontoteuttaminen pareittain

OpettajaOpiskelija Opiskelija-kollegat

hyödyntää koulutustilaisuuksissa monipuolisesti tieto- ja viestintätekniikkaa ja erilaisia opetusmenetelmiä.

Kognitiivinen, operationaalinen ja sosiaalinen prosessi

Opetustuokion toteuttaminen pareittain Kahden opetusmenetelmän esitteleminen Moodlessa

OpettajaOpiskelija Opiskelija-kollegat

HYVÄKSYTTY:

Opiskelija osallistuu aktiivisesti lähiopinnoissa ja verkkotyöskentelyyn. Hän palauttaa oppimistehtävät sovitusti sekä tekee yhteistyötä muiden opiskelijoiden kanssa. Hän suorittaa korvaavat tehtävät poissaoloistaan.Oppimistehtävät on laadittu johdonmukaisesti ja selkeästi. Ne ovat havainnollisia ja niissä on sovellettu tarkoituksenmukaisesti koulutuksen sisältöjä ja omia kokemuksia. Oppimistehtäviä on mahdollista hyödyntää autenttisissa opetus- ja/tai koulutustilanteissa.Esseessä on yhdistelty koulutuksen sisältöjä ja omia kokemuksia. Teksti on kirjoitettu johdonmukaisesti ja selkeästi. Se on havainnollista ja asia on hahmotettu esseetä kokonaisvaltaisesti.Opetustuokiosta on laadittu ennakkosuunnitelma, jossa on otettu huomioon koulutuksen sisältöjä ja omia kokemuksia. Opetustuokio on toteutettu ennakkosuunnitelman mukaisesti joko yksin tai toisen opiskelijan kanssa.

HYLÄTTY: Opiskelijan osallistuminen lähiopinnoissa ja verkkotyöskentelyssä on vähäistä tai hän ei osallistu niihin ollenkaan. Hän palauttaa oppimistehtävät myöhässä sekä yhteistyö muiden opiskelijoiden kanssa on olematonta.Oppimistehtävät on laadittu sekavasti ja niissä on hyödynnetty vain vähän koulutuksen sisältöjä ja omia kokemuksia. Oppimistehtävistä puuttuu kokonaan havainnollisuus tai sitä on vain vähän. Ne ovat jäsentymättömiä eikä niitä voi tarkoituksenmukaisesti soveltaa autenttisissa opetus- ja/tai koulutustilanteissa.Esseessä on tuotu esiin vain vähän koulutuksen sisältöjä ja siitä puuttuu kokonaan asian peilaaminen omiin kokemuksiin tai se on hyvin pintapuolista. Teksti on kirjoitettu epäselvästi ja sekavasti. Siinä havainnollisteta asia vain vähän tai ei ollenkaan. Oma pohdinta jää hataraksi.Opetustuokiosta on laadittu ennakkosuunnitelma, mutta siinä ei ole otettu huomioon koulutuksen sisältöjä ollenkaan tai niitä on hyödynnetty vain vähän. Opetustuokio toteutus ei perustu ennakkosuunnitelmaan tai sitä ei toteuteta ollenkaan.

Itsearvioinnin hyödyntäminen Itsearviointi on aina oppimistilanne, jossa opiskelija itse arvioi oman osaamisensa tasoa ja usein myös reflektoi omaa oppimis-prosessiaan (Andrade & Du, 2007; Falchikov & Boud, 1989).

• Kun opiskelija toimii itse arvioijana, hän saa käsityksen oman alansa osaamisen laadun standardeista ja oppii suhteuttamaan oman osaamisensa tason käytössä oleviin kriteereihin (Boud, 2000, 161).

• Parhaimmillaan itsearviointi kannustaa opiskelijaa omaksumaan syvällistä ymmärrystä tuottavan lähestymistavan oppimiseen ja edistää opiskelijan kykyä säädellä itse oppimistaan (Ozogul & Sullivan, 2007).

• Kyky arvioida omaa osaamistaan ei kehity ilman harjoittelua, joten opiskelijoita tulee osallistaa arviointiprosessiin, käydä läpi arviointikriteereitä ja perustella, miksi itsearviointia tehdään (Kearney, 2013; Rust, Price & O’Donovan, 2003).

Itsearvioinnin hyödyntäminen

Arviointia tulee myös harjoitella koko koulutuksen ajan (De Grez, Valcke & Roozen, 2012; Topping, 1998).

• Noviisi ei tunne alan käytäntöjä ja tapaa ajatella eikä noviisilla ole asiantuntijan tietotasoa, joten oman osaamisen arviointi voi olla haastavaa

kokeneemmat opiskelijat olivat arvioinneissaan tarkempia kuin aloittelevat opiskelijat (Falchikov & Boud, 1989).

arviointiprosessin huolellinen suunnittelu keskeistä

24

Reflektio voidaan määritellä

• Kognitiivinen ja affektiivinen (tunteisiin vaikuttava), ihmisen mielen sisällä tapahtuva, aktiivinen, tietoinen, tavoitteellinen toiminto, joka kohdistuu kokemukseen ja jossa tietoa muokataan ja jäsennetään kokemuksista.

• Yksilön sisäiseksi dialogiksi ja itsetutkiskeluksi, itsen ymmärtämiseen kohdistuva tarkastelu, omien ajatteluprosessien pohtimista sekä valintojen ja ratkaisujen pohtimista

Reflektio voidaan määritellä

Yhteisölliseksi prosessiksi, jossa yksilö pohtii omaa toimintaansa suhteessa toisiin ja toisten kanssa tai yhteisön arvioi omaa toimintaansa siten, että se kehittää koko yhteisön sekä yksilön työtoimintaa

Kriittinen reflektio: tutkitaan myös toiminnan taustalla olevia uskomuksia ja oletuksia sekä kontekstin tekijöitä

Kolbin oppimissykli ja reflektointi

Reflektiivinen havainnointi –toiminnan jälkeinen reflektointi (reflection onaction)

Abstrakti käsitteellistäminen –toimintaa edeltävä reflektointi (reflection for action)

Aktiivinen kokeilu –toiminnan aikainen reflektointi (reflection in action)

Välitön konkreettinen kokemus

Tajuaminen

Ymmärtäminen

Kokeilu

Pohdinta

Yhteisöllisen reflektion piirteitä:

• ei ole vain sisäinen, psyykkinen prosessi eikä pelkkää pohtimista; se on toimintapainotteista.

• ei ole pelkästään kieleen perustuva, yksilöllinen prosessi; se edellyttää sosiaalista kanssakäymistä.

• ei ole arvovapaata eikä neutraalia; se kuvaa ja palvelee inhimillisiä, sosiaalisia, kulttuurisia ja poliittisia tavoitteita.

• on ideologisesti muovautunutta; se muovaa ideologiaa.

• ei ole mekaaninen prosessi eikä pelkkää uusien ideoiden tuottamiseen tähtäävää luovaa toimintaa; se on toimintaa, joka pystyy muokkaamaan yhteisöä kommunikoinnin, valinta-päätösten ja sosiaaliseen elämään osallistumisen avulla. (Anttila 2007)

Reflektion kohteita (Vuorinen 1998)

• oma tieto/taito

• toiminnan arvot/motivaatio/rituaalit ammatilliset käytännöt

• oman työn laadun arviointi

• ongelmanratkaisutaidot

• yhteistyötaidot

• omat vahvuudet ja heikkoudet

• omat kehitystarpeet

• omien ajattelu- ja toimintamallien kyseenalaistaminen

• vuorovaikutustaidot

• dialogisuus

• ammatissa kasvaminen ja kehittyminen

Kysymyksiä reflektointiin(Toivakka&Toivakka 2000)

• Missä onnistuin? Missä epäonnistuin?

• Mikä kiinnosti eniten? Mistä kiinnostuin? Mikä vähiten?

• Mitä uutta opin?• Miten osallistuin?• Miten kannustin ja tuin

muita?• Miten onnistuin

työskentelemään ryhmässä?• Mitä en ymmärtänyt?

• Millainen oli motivaationi ja innostukseni?

• Mistä haluaisin tietää enemmän?

• Mitä tunteita koin?• Milloin, missä ja mitä

opiskelin?• Miten opetusmenetelmät

sopivat minulle?• Mitä voisin tehdä paremmin

ensi kerralla?• Miten hyödynnän oppimaani

toiminnassani ja työssäni?

Vertaisarviointi

• Vertaisarvioinnissa opiskelijat ja/tai opiskelijaryhmät arvioivat toinen toisiaan.

• Vertaisarvioinnin etuja ovat – palautteen säännöllisyys,

– opiskelijoiden yhteistoiminnallisuuden edistäminen sekä

– oppimisen prosessiluonteen,

– oppimisen edistymisen ja

– ryhmäytymisen tukeminen

• kehittää myös opiskelijan kykyä antaa palautetta.

Perusteita vertaisarvioinnille (Race ym. 2005)

• Opiskelijat – tekevät vertaisarviointia joka tapauksessa

koko ajan.

– saavat hieman ymmärrystä arviointikulttuurista.

– oppivat syvemmin, jos heillä on tunne omistajuudesta oppimiseensa.

• Arvioinnin tekeminen on yksi syvimmistä oppimiskokemuksista.

• Vertaisarviointi sallii – opiskelijoiden oppimisen toisensa onnistumisista.

– opiskelijoiden oppimisen toisensa epäonnistumisista.

Vertaisarviointi• soveltuu sekä formatiiviseen että summatiiviseen tarkoitukseen

(Falchicov & Goldfinch, 2000; Nulty, 2011; Topping, 1998.)

• vertaisarvioinnissa opiskelija pääsee osalliseksi arviointiprosessista ja että opiskelijoiden aktiivisuuden kautta myös oppimisen laatu paranee (Asikainen, Postareff, Heino & Virtanen, 2014; Davey & Palmer, 2012; Gouli, 2008; McGarr & Glifford, 2013).

• Arvioimalla toisten opiskelijoiden suorituksia opiskelija samalla perehtyy oman alansa tiedon laadun kriteereihin ja oppii vertaisiltaan.

• Vertaisarviointi keinona sisällyttää opintojaksoihin työelämätaitojen harjoittelua kuten palautteen antamista ja vastaanottamista, ja se auttaa opiskelijaa pohtimaan kriittisesti omia taitojaan, tietojaan ja asiantuntijuuttaan omalla alallaan.

33

VertaisarviointiAntaa valmiuksia elinikäiselle oppimiselle

• Opettajan näkökulmasta vertaisarviointia voi pitää tehokkaana keinona antaa palautetta suurelle opiskelijajoukolle ja tehostaa yksittäisen opettajan ajankäyttöä (Asikainen ym., 2014; Davey & Palmer, 2012).

• Tutkimukset ovat osoittaneet, että opiskelijoiden antamat arvosanat eivät poikkea merkitsevästi opettajien antamista arvosanoista (Asikainen ym., 2014; Davey & Palmer, 2012; Falchikov & Goldfinch, 2000; Nulty, 2011).

• Luotettavuuden mittarina on käytetty opiskelijoiden ja opettajien antamien arvosanojen yhtäläisyyttä, ja opettajan tekemä arvio on lähtökohtaisesti tulkittu luotettavaksi.

34

VertaisarviointiVertaisarvioinnin luotettavuus paranee, kun arviointi kohdistuu tuotoksiin tai prosessiin, ei niinkään ammatillisiin käytänteisiin kuten esim. opetustaitoon tai asiakastyöhön.

• Selkeät arviointikriteerit ja niiden käsittely yhdessä opiskelijoiden kanssa parantavat vertaisarvioinnin luotettavuutta.

• Opiskelijoiden kokemukset ovat pääosin myönteisiä ja opiskelijat arvostavat esimerkiksi sitä, miten paljon itse oppii arviointiin osallistumalla (Davey & Palmer, 2012; McGarr & Clifford, 2013; Vu& Dall’Alba, 2007).

• Opiskelija oppii ymmärtämään, mihin arviointi perustuu, millaista osaamista hyvä arvosana edellyttää ja miten hyvä vastaus tai muu suoritus rakentuu.

35

VertaisarviointiOpiskelija saa palautetta osaamisestaan ja oppii itse arvioimaan oman osaamisensa tasoa suhteessa kriteereihin.

• Arviointia tehdessään, perehtymällä toisten opiskelijoiden vastauksiin tai muihin suorituksiin, opiskelija syventää omaa ymmärrystään käsitellystä aiheesta (Vu & Dall’Alba, 2007).

• Opiskelijat kokivat, että vertaisarviointi auttoi tehokkaasti oppimisessa ja herätti kiinnostusta sisältöön.

• Arviointikriteerit ja niihin tutustuminen olivat opiskelijoiden mielestä ehdoton edellytys arvioinnin sujumiselle.

• Arviointiprosessin ja arviointikriteerien käsittely yhdessä opiskelijoiden kanssa on olennaista siltä kannalta, miten positiivisena ja hyödyllisenä opiskelijat kokevat vertaisarvioinnin (Lindblom-Ylänne ym., 2006; Vu & Dall’Alba, 2007; Welsh, 2007).

VertaisarviointiOpiskelijoiden negatiivisia tuntemuksia

• Epäilevät etukäteen, onko vertaisarvioinnista hyötyä, onko vertainen pätevä ja oikeudenmukainen arvioimaan ja onko itse pätevä arvioimaan muita, mutta voivat arvostaa kokemusta jälkeenpäin (Vu& Dall’Alba, 2007).

• Saattavat kokea, että koko vertaisarviointiprosessi vie liikaa aikaa (Asikainen ym., 2014).

• Saattavat epäillä vertaisarvioinnin käyttöä loppuarvosanan määrittämisessä, vaikka arvostaisivat sitä muuten (Patton, 2012).

• Opiskelijoiden negatiiviset kokemukset eivät välttämättä vaikuta arvioinnin luotettavuuteen, mutta niillä on kuitenkin vaikutusta siihen, miten hyvin opiskelijat sitoutuvat arvioimaan toistensa suorituksia.

37

Vertaisarviointi käytännössä Opintojen vaihe, oppimisympäristö tai ryhmän koko ei tutkimusten mukaan vaikuta vertaisarvioinnin luotettavuuteen (Asikainen ym. 2014; Davey, 2011; Mostert & Snowball, 2013; Nulty, 2011; Vickerman, 2009).

• Eroja ei ole myöskään havaittu, kun vertaisarvioinnin kohteena on ollut essee, lopputentti tai ryhmätyö (Davey, 2011; De Wever, Van Keer, Schellens & Valcke, 2011; Lindblom-Ylänne ym., 2006).

• Mikäli opiskelijoilla on käytössään selkeät kriteerit, kuten arviointimatriisi tai jonkinlaiset mallivastaukset, opiskelijoiden antamat arvosanat eivät poikkea merkitsevästi opettajien antamista arvosanoista.

• Sen sijaan prosessien, työelämätaitojen tai laadullisten tuotosten loppuarvosanan arvioimisen suhteen vertaisarvioinnin onnistuminen vaatii opettajalta huolellisempaa suunnittelua (Vu & Dall’Alba, 2007).

38

Vertaisoppimisen edut

– tiedollisten oppimistulosten saavuttaminen (opittavan asian aito ymmärrys ja metakognitiivisten taitojen kehittyminen)

– itseohjautuvuuden kehittyminen

– vuorovaikutustaitojen kehittyminen ja

– opinnoissa viihtyminen– kriittisen reflektiokyvyn

kehittyminen

– yleisten oppimis- ja työelämävalmiuksien hankkiminen

– pidemmällä tähtäyksellä työelämässä toimiminen

– motivaation kasvu– itseluottamuksen

kehittyminen– Toisia ohjatessaan ja

opettaessaan opiskelijat myös oppivat itse parhaiten.

Vertaisoppimisen vaikutuksista tehdyissä tutkimuksissa niiden tehokkuus on todettu merkittäväksi seuraavissa asioissa: (Topping 1996; Poikela & Vuorinen 2008)

Opiskelijat kokevat vertaisarvioinnilla olevan vaikutusta myös pidemmällä tähtäyksellä opiskelu- ja työelämässä toimimiseen, jolloin he joutuvat arvioimaan koko tulevan uransa ajan sekä omaa toimintaansa että kollegoidensa suorituksia. Näin opiskelijat kokevat myös palautteen antamisen olevan oppimistilanne. (Papinczak, Young & Groves 2007)

Esteitä ja ongelmia vertais-palautteen toteuttamisessa I

• Opiskelijat kokevat vertaispalautteen liian haastavana ja epämiellyttävänä. (Falchikov 2007; Hanrahan & Isaacs 2001; Topping ym. 2000; Divarahan & Atputhamasy 2002; Segers & Dochy2001)

• Opiskelijoiden mielestä vertaisarviointi voi olla epäluotettavaa ja epäoikeudenmukaista (Reiter ym. 2002; Papinczak ym. 2007)

• Opiskelijat kokevat myös ennakkoasenteiden ja ryhmän jäsenten vuorovaikutussuhteiden vaikuttavan arviointiin (Sluijmansym. 2001)

• Opiskelijat eivät ole tottuneet vertaisarviointiin, joten se koetaan senkin tähden vieraaksi eikä välttämättä ymmärretä sen oppimista edistävää merkitystä.

• Monet opiskelijat eivät ole tottuneet antamaan palautetta omalla nimellään ja haluaisivat palautetilanteeseen lisää anonyymisyyttä.

• Opiskelijat ovat lojaaleja toisilleen eivätkä halua antaa kritiikkiä toisilleen.

Esteitä ja ongelmia vertais-palautteen toteuttamisessa II

• Opettajat saattavat myös pelätä arvioinnin luotettavuuden kärsivän, jos se toteutetaan vertaisarviointina.(Falchikov 2007)

• Opettajat saattavat myös suhtautua liian varovaisesti opiskelijoihin, jotka ovat yliherkkiä palautteelle, tai he pelkäävät, että oppimisilmapiiri heikkenee ja kilpailu lisääntyy, jos ryhdytään antamaan palautetta. (Papinczak ym. 2007)

• Vertaispalautteeseen ei ole kehitetty läpinäkyviä arviointikriteereitä; usein lähdetään arvioimaan liian monia asioita yhtaikaa ja arvioinnin kohde hämärtyy.

• Voidaan myös hylätä tärkeät oppimisen prosessit sen vuoksi, että niitä on vaikea mitata.(Falchikov &Goldfinch 2000)

Opettajan toiminta vertaisoppimisen ja -palautteen aikaansaamiseksi

• Vastavuoroisissa vertaisoppimisen tilanteissa opiskelijat toimivat sekä opettajan että oppijan rooleissa.

• Opettajan tehtävänä on lähinnä huolehtia ryhmän kiinteydestä ja varmistaa, että ryhmän kriteereistä neuvotellaan yhdessä. (D. Boud 2007)

Opettaja huolehtii ryhmän hyvästä aloituksesta– Tärkeää on ryhmän tutustuminen, opettajan esittäytyminen,

agendan kertominen, käytännöt, avoimuus, yhteissuunnittelueli opiskelijat keskustelevat pienryhmissä tai pareittain omista tavoitteistaan, oppimisen haasteistaan ja kysymyksistään.

Opettajan toiminta vertaisoppimisen ja -palautteen aikaansaamiseksi

Opettaja huolehtii hyvästä ilmapiiristä– Opettajan tulee huolehtia siitä, että opiskelijat voivat liittyä toisiinsa ja että

niihin kehittyy yhteistyötä tukeva ilmapiiri, jolloin opiskelijat voivat sitoutua yhteiseen tiedon rakentamiseen.

– Opettaja voi luoda yhteistoiminnallista oppimista hyvästä ilmapiiristä ja oppijoiden yhteisvastuusta huolehtimalla.

– Vertaisoppimisen etu suhteessa muihin opettamisen ja oppimisen strategioihin on myös sen sisäänrakennetussa mahdollisuudessa edistää kriittistä reflektiota.

– Kriittinen reflektio voidaan kohdistaa käsiteltävään asiaan, arviointikäytäntöihin tai vertaisoppimisen prosesseihin.

– Tällöin täytyy kiinnittää riittävästi huomiota hyvän oppimisilmapiirin luomiseen, keskinäiseen vuorovaikutukseen ja avoimuuteen palautteelle. (Balantyne 2002)

Opettajan toiminta vertaisoppimisen ja -palautteen aikaansaamiseksi

Opettaja huolehtii arviointikriteereiden käsittelystä – Onpa vertaisoppimisen arvioinnin tavoitteena käsitteellinen

ymmärrys tai asenteellinen muutos, arviointikriteerit tulee käsitellä etukäteen vertaisryhmässä.

– Osanottajat voivat joko määritellä kriteerit tai käsitellä ja hyväksyä jo ennalta laaditut kriteerit.

– Arviointi voi substanssin oppimisen lisäksi kohdistua myös esim. ryhmän johtamiseen, neuvottelutaitoon tai konfliktin ratkaisuun, osanottajien vuorovaikutukseen, tehtävän suorittamiseen ja palautteen antamiseen. (Balantyne 2002)

– Arviointikriteerien täytyisi olla läpinäkyviä ja sopia arviointituloksiin.

– On myös tärkeää, että opiskelijoilla on tilaisuus vaikuttaa arviointikriteereihin ja päättää siitä, mihin palaute kohdistuu.

– Näin he saavat arviointiprosessin omistajuuden ja kykenevät sitoutumaan siihen. (Falchikov & Goldfinch 2000; Papinczak et al. 2007)

Opettajan toiminta vertaisoppimisen ja -palautteen aikaansaamiseksi

Opettaja siirtää valtaa opiskelijalle– Opettajan täytyy luopua vallankahvasta ja antaa vastuu opiskelijoille. – Vastuu määrittyy ja täsmentyy merkitysneuvotteluissa,

vuorovaikutteisessa kyseenalaistamisessa ja ryhmän esityksissä. – Siinä rohkaistaan sekä ryhmän että yksilön reflektiota ja kokemusten

ryhmäprosessointia. (Bonk & Cunningham; Bereiter & Scardamalia)

Opettaja ohjaa epäonnistumisten hyväksymiseen– Se, että opettaja kehittää opetuksestaan kollaboratiivista ja osallistavaa,

varmistaa myös sen, että siitä tulee yksilöllistä ja itseohjattua.

– Opettajan tehtävänä on myös varmistaa, että jokainen tulee kuulluksi.

– Hän sallii opiskelijan olla epävarma, kysyä, kokeilla, erehtyä ja tutkia (ks. Anderson 1999).

Opettaja käyttää aikaa vertaispalautteen oppimiseen– Vertaispalautteen antaminen on asia, johon täytyy oppia vähitellen, siihen

tottuminen vie aikaa (Falchikov & Goldfinch 2000; Papinczak ym. 2007)

Vertaispalautteen kohteita• Oppisisällöstä

– Sisältöjenrakentuminen, logiikka, ydinaines

– Tekstitys, helppolukuisuus

– Opitunhyödyllisyys

• Työskentelystä

• Osallistumisesta

• Oppimistehtävistä

• Tavoitteen mukaisista toiminnasta

Lähtökohtana aina kurssin TAVOITE

Vertaispalaute

• miten kurssilaiset tukevat toistensa oppimista?

• miten he pitävät yhteyttä keskenään?

• miten luodaan kurssille ilmapiiri, jossa jokainen viihtyy?

Parireflektio

• Mitä tapahtui?

• Missä voisi tapahtua?

• Mitä pitäisi tapahtua, jotta saavuttaisimme tavoitteemme vielä paremmin?

• Miten tilanteessa toimittiin?

• Miten voi korjata/jatkaa tilanteesta?

Vertaispalaute• Mitkä asiat edistivät oppimistasi - mitkä

asiat vaikeuttivat oppimistasi?

• Mitkä asiat ovat vielä epäselviä - mitkä jo hyvin opittuja?

• Mitkä olivat kiinnostavimmat asiat, jotka opit ja miksi?

• Mitä olisit voinut tehdä paremmin, jotta olisit oppinut enemmän / jotta ryhmänne olisi oppinut enemmän?

• Missä onnistuit / onnistuitte erityisen hyvin?

Vertaispalaute

Opiskelija on • kommentoinut toisten opiskelijoiden tehtäviä ja

perustellut mielipiteensä • kommentoinut toisten opiskelijoiden tehtäviä,

perustellut mielipiteensä teoriatiedon pohjalta sekä antanut kehittämisideoita

• kommentoinut toisten opiskelijoiden tehtäviä aktiivisesti ja kriittisesti, perustellut mielipiteensä syvällisesti teoriatiedon pohjalta sekä antanut kehittämisideoita

• Opiskelija ei ole kommentoinut toisten töitä.

Vertaispalaute

• Mikä siinä tekstissä oli mielenkiintoista ja mikä herätti ihmetystä?

• Ajattelitko asioista samalla tavalla?

• Mitä olisit itse tehnyt toisin?

• Opitko jotain uutta? Mitä?

• Arvioi tekstin kieliasu

• Arvioi älä arvostele

• Mitä oivalluksia sait?

• Arvioi tavoitteiden näkökulmasta

• Mitä yhtäläisyyksiä ja eroavaisuuksia totesit

• Anna kaverille kolme plussaa ja yksi miinus työstä

Arviointimenetelmien valinta

Arviointimenetelmiä tulisi valita vasta kun on käsitys ja ymmärrys siitä– onko arvioinnin tarkoitus ensisijaisesti

oppimisen ohjaaminen vai osaamisen arviointi

– mitä ja millaista osaamista arvioidaan ja millaisilla kriteereilläOsaamisen arvioinnissa tarvitaan erilaisia menetelmiä, koska se koostuu

hyvin moninaisista asioista ja erilaisista toiminnoista: yhdellä arviointimenetelmällä voidaan arvioida vain ”yhtä asiaa”.

Erilaiset tavoitteet, eri vaatimustasot tavoitteissa, vaihtoehtoiset suoritustavat, taustaltaan erilaiset opiskelijat, mahdollisuus vaihdella menetelmiä opintopolun edetessä.

Arviointimenetelmien valinta

• Oppimista mittaavien arviointimenetelmien valinnan tulisi perustua mm.– oppimiselle asetettujen yksilöllisten ja

– yhteisöllisten tavoitteiden ja

– eettisten periaatteiden pohjalle.

• Perinteisin arviointimenetelmin ei voida vastata kaikkiin niihin vaatimuksiin, joita nykyaikaisille, moderneille oppimistoiminnoille on asetettu.

• Tämä asettaa entistä suuremmat vaatimukset oppimisympäristöjen sekä koko oppimisprosessin suunnittelulle.

Arvioinnin ongelmia

• Arviointi yhdistyy perinteisesti arvosteluun taidoista, kyvyistä ja henkisestä kapasiteetista

• Se on koettu oppimistapahtumasta erillisenä toimintona, jonka tavoite on lisäksi ollut usein muualla kuin oppimisessa (esim. opintopisteet)

• Arviointiin valmistutuminen on ollut laskelmoimista ja selviytymistä

• Arviointi on ollut oppimiseen nähden jälkijättöistä

Arvioinnin kehittämisen haasteet

Yhteisön arviointikulttuuri eli taustalla vaikuttavat käsitykset, arvot ja uskomukset vaikuttavat olennaisesti siihen, millaiset arviointikäytännöt menetelmineen ovat yleisesti hyväksyttyjä (Biggs & Tang, 2007; Deneen & Boud, 2014).

• Arviointikulttuuri on vahvasti kytköksissä yhteisön käsityksiin ja kokemuksiin arvioinnista.

• Opettajien käsitykset arvioinnista vaikuttavat siihen, miten he arvioivat opiskelijoidensa oppimista (Postareff ym., 2012; Samuelowicz & Bain,

2002; Watkins, Dahlin & Ekholm, 2005), ja mitä tutumpi arviointimenetelmä on opiskelijalle, sitä mielekkäämmäksi hän sen kokee (Stryuven ym. 2005).

54

Arvioinnin kehittämisen haasteetOpetushenkilöstön muutosvastarinta

• muutoksen vastustaminen johtuu usein siitä, että ei ymmärretä uudenlaisten arviointikäytäntöjen merkitystä.

• opettajat saattavat kokea, että he eivät voi omin päin lähteä muuttamaan arviointikäytäntöjään, vaan muutosta pitäisi johtaa ylemmältä tasolta.

• aiheuttavat opettajien kiire ja suuri työmäärä, jolloin aikaa arvioinnin kehittämiselle ei tunnu löytyvän.

Opettajat näkevät usein arvioinnin opintojakson lopussa tapahtuvana irrallisena osana opetus-oppimisprosessia, jolloin arviointi ja palaute eivät linkity luontevaksi, oppimista ohjaavaksi ja edistäväksi toiminnaksi (Hailikari

ym., 2014; Parpala & Lindblom-Ylänne, 2007; Postareff ym., 2012). johtavat herkästi summatiivisten ja tietoa toistavien arviointimenetelmien käyttöön.

Arvioinnin kehittämisen haasteet

Opiskelijat pitää saada hyväksymään uudenlaiset arviointimenetelmät• opiskelijat kokivat perinteisen, opintojakson lopussa tehtävän arvioinnin olevan

epäluotettava osaamisen mittari ja liian riippuvaista ulkoisista tekijöistä, kuten fyysisestä vireystilasta tai tenttiahdistuksesta.

• opiskelijat olivat huolissaan myös vaihtoehtoisten arviointimenetelmien oikeudenmukaisuudesta

• jokaiseen arviointimenetelmään liittyy tiettyjä haasteita ja on vaikeaa löytää arviointimenetelmää, jonka kaikki opiskelijat kokisivat luotettavaksi ja oikeudenmukaiseksi.

• siihen, miten opiskelijat reagoivat tiettyyn arviointiin, vaikuttavat lukuisat tekijät, kuten sopiva haastavuustaso, muut kurssit ja niiden arviointimenetelmät sekä opiskelijoiden kokema kuormitus ylipäätään (Cilliers ym.,

2010; Gijbels, Segers & Struyf, 2008; Postareff, Lindblom-Ylänne & Parpala, 2014).

Arvioinnin kehittäminen tulisi nähdä koko yhteisön yhteisenä tehtävänä, kuten opetuksen kehittämisen suhteen on monissa instituutioissa toimittu.

• Opettajat saattavat vertailla opiskelijoiden suorituksia toisiinsa tai muuttaa annettuja pisteitä jälkeenpäin tehdäkseen eroa muiden suorituksiin tai antaakseen tasaisesti eri arvosanoja opiskelijoille (Bloxham, Boyd & Orr, 2011; Hailikari ym., 2014).

• Opettajalla saattaa olla arviointikriteerit, mutta ne perustuvat arvosanajakaumaan eli opiskelijoiden järjestämiseen suhteessa toisiinsa

saattaa lisätä opiskelijoiden keskinäistä kilpailua ja estää kannustavan ja positiivisen ilmapiirin syntymistä (Sadler, 2005, 186–187)

ei myöskään tue elinikäisen oppimisen edistämisen tavoitetta, sillä opiskelija ei voi peilata omaa osaamistaan suhteessa olemassa oleviin kriteereihin.