Mitä ihmettä on analytiikalla tekemistä ihmisen taloudessa?

Itä-Suomen yliopisto on pilotoimassa syksyllä 2024 kahta Moodleen (eLEarniin) yhdistettävää oppimisanalytiikkaohjelmaa. Moni kollega varmaankin ihmettelee, mitä niillä tehdään ja mitä hyötyä niistä voisi olla. Meneekö opetus opiskelijoiden paapomiseksi tai kyttäämiseksi? Otetaan alkuun kaksi esimerkkiä omasta opetustyöstäni:

Opettajan työsuunnitelma

Pyöritän viittä ympärivuotista monimuotokurssia, joissa opiskelijat palauttavat erilaisia kirjallisia tehtäviä, jotka arvioin ja joista annan heille lyhyesti kirjallista palautetta. Tehtäviä on yhteensä kurssisalustoilla 30 ja palautuksia niihin saadaan keskimäärin vuosittain 80 – 200 opiskelijalta. Moodle ei valitettavasti pysty antamaan suoraan raporttia, josta näkyisi, montako tehtävää on kullakin kurssilla odottamassa arviointia. Niinpä käytän jokaisena maanantaina työaikaani laskeakseni, montako tehtävää on arviointia odottamassa.

En laske tehtäviä pelkästään mielenkiinnosta, vaan tarvitsen tietoa allokoidakseni työaikaani. Varaan viisi minuuttia kunkin tehtävän tarkistamiseen, jolloin 96 palautusta vaatii yhden työpäivän. Luonnollisesti työviikostani ei löydy täysin vapaita päiviä vaan jaan arvioinnin lyhempiin osioihin esim. kokousten väleille. Tiedän, että oppimisanalytiikkatyökalut mahdollistaisivat suoraan tällaisen opettajanäkymän, mikä nopeuttaisi työaikataulun rakentamista huomattavasti.

Opiskelijoiden muistuttaminen

Olen kaikilla monimuotopedagogiikkaa hyödyntävillä kursseillani havainnut saman haasteen: osa opiskelijoista lopettaa kurssin suorittamisen ensimmäisten päivien tai viikkojen aikana, mikä alentaa kurssin läpäisyastetta ja saa kurssin vaikuttamaan vaikeammalta kuin se on. Tällöin riskinä voi olla kurssitehtävien tarpeeton helpottaminen. Olen myös huomannut, että ensimmäisten päivien alhainen kurssiaktiivisuus ennustaa korkeaa keskeyttämisriskiä, minkä vuoksi hitaasti etenevien opiskelijoiden tavoittaminen ensimmäisinä kurssipäivinä voisi auttaa heitä suorittamaan opintoja. Minulla onkin hyviä kokemuksia yhteydenpidosta kurssien ensimmäisen viikon aikana: kannustuksesta, jolla hitaammat saadaan mukaan touhuun.

Moodle antaa edistymisen seurantaan joitain työkaluja, mutta ne ovat kovin vaikeita käyttää. Käytän usein ”aktiivisuuden jakautuminen” -näkymää, josta voin nähdä lokitietoihin perustuen kurssiaktiivisuuden erot jo ennen kuin opiskelijat palauttavat ensimmäistäkään tehtävää. Kuitenkaan Moodle ei mahdollista tämän datan suoraa siirtämistä muihin ohjelmiin, jolloin joudun kopiomaan näkymän kahden ohjelman kautta taulukkolaskentaan ja siivoamaan sen rakentamallani makrolla ennen kuin saan löydettyä luotettavasti hitaasti etenevät suuresta opiskelijajoukosta. Luonnollisesti tällaiset DIY ratkaisut eivät ole suositeltavissa täysjärkisille opettajille. Sen sijaan, oppimisanalytiikan työkalut mittaavat erinomaisesti kurssialustan klikkauksia, jolloin ne olisivat tarjoamassa valmiin luettelon putoamisuhan alla olevista opiskelijoista, joihin opettaja voi olla suoraan yhteydessä.

Luultavasti en ole ainoa opetustyötä tekevä, jolle opiskelijat palauttavat labraraportteja ja esseetehtäviä, koodin pätkiä ja laskelmiaan. En myöskään ole ainoa, joka ei ole tehnyt kurssialustoistaan niin selkeitä että JOKAINEN opiskelija pystyisi edistymään alustalla ripeästi ilman apua tai ohjausta. Sen vuoksi analytiikasta voisi olla apua muillekin.

Kurssin kehittäminen

Entä sitten kurssin jälkeen? Oletetaan, että olet kokeillut kurssillasi jotain uutta elementtiä ja haluat tietää, oliko siitä hyötyä. Luotatko opiskelijoiden palautteeseen (siis niiden molempien opiskelijoiden, jotka palautetta antoivat) vai haluatko jotain muutakin tietoa?

Itselläni oli syksyllä 2023 kokeilussa englanninkielistä materiaalia, jota tarjosin ensimmäisen vuoden opiskelijoille vaihtoehtoiseksi oppimismenetelmäksi omien tylsien tehtävieni sijasta. Luonnollisesti halusin tietää ainakin vaihtoehtojen käyttöasteen ennen kuin menen esittämään kalliin teknisen ratkaisun hankkimista. Oppimisanalytiikkaohjelmistot tarjoavat yksinkertaisia näkymiä kuvaamaan erilaisten aktiviteettien suorittamista mutta myös keinoja selvittää, onko yksittäinen valinta (esimerkiksi mainitsemani englanninkielinen materiaali) parantanut oppimistuloksia. Yksinkertaisetkin kuvaajat auttavat opettajaa huomaamaan, mikäli kurssialustalla on osioita, joita opiskelijat eivät juurikaan käytä, ja ymmärtämään, että ne kenties koetaan joko vaikeiksi tai vähemmän tärkeiksi.

Tehtävien antamien on nopeampaa kuin niiden tekeminen. Itselläni on ollut haasteena, että pakkaan vuosien saatossa liikaa opiskeltavaa materiaalia ja tehtäviä etenkin sellaisille kursseille, joita en ole rakentamassa viimeisenä yönä. Pyytäessäni opiskelijoita referoimaan englanninkielistä tiedeartikkelia tai arvioimaan erilaisten lähteiden luotettavuutta kurssimateriaalin perusteella minun on vaikea ennustaa, kuluuko tehtävään puoli tuntia vai puoli päivää. Moodlen tehtäväpalautus antaa työmäärästä lukuja, mutta niiden luotettavuus on olematonta. En usko, että kukaan opiskelijoistani käyttäisi yksittäisen tehtävän kirjoittamiseen lähemmäs 200 työpäivää.

Ainakin osa analytiikkaohjelmistoista laskee kurssialustalla tapahtuvien klikkausten välejä, jolloin tehtävien suorittamiseen vaadittava aktiivinen työmäärä voidaan määrittää. Tämä auttaisi opintopisteiden vaativuuden arvioinnissa.

Analytiikka & opiskelijat

Analytiikka auttaa suoraan myös opiskelijoita. Moodlen muistutusviestit ja liikennevalot auttavat opiskelijoita pysymään vauhdissa ja hahmottamaan kurssin suorittamiseen jäljellä olevan työmäärän. Muistan useammankin kerran, kun olen kurssin aikana alustaa täydentänyt ja saanut opiskelijoilta palautetta kun heillä näkyykin kurssin suoritus enää 60 %:ssa.

Analytiikan avulla opiskelijat voisivat verrata omaa työmääräänsä muihin kurssin suorittajiin. En ole aivan varma sen toimivuudesta, mutta kenties se hillitsisi innokkaimpia opiskelijoita käyttämästä liikaa aikaa parin opintopisteen suoritukseen.

Yliopistonlehtori Vesa Paajanen, Ympäristö- ja biotieteiden laitos, Itä-Suomen yliopisto

Anna palautetta – opiskelijat kaipaavat enemmän vastakaikua opintojensa etenemisestä! Kerää palautetta – kehitä itseäsi opettajana ja paranna koulutuksen laatua!

Näihin toiveisiin, kehotuksiin ja jopa vaatimuksiin meillä on nykyään näppärät digitaaliset järjestelmät. On Moodle ja sen tehtävien arvioinnin yhteydestä löytyvät sanallisen palautteen laatikot. On yksilö- ja yhteisviestit – niin itse kuin tekoälyn avustuksella kirjoitettuna. On yhteismitallisia palautelomakkeita, jotka kilahtavat opiskelijoiden sähköposteihin automaattisesti opintojaksojen päätyttyä.

Digitaaliset alustat mahdollistavat eri tavoin palautteen antamisen ja keräämisen, mutta niiden mukana on tullut myös uusia haasteita. Palautteen keräämisen helppouden sivutuotteena syntyy palauteähkyä. Pyyntöjä satelee niin lähikaupan kokemuksista kuin yksittäisistä seminaareista, kustakin opintojaksosta ja opintojen etenemisestä yleisesti.

Pyynnöt hukkuvat toistensa sekaan, ellei vastaajan tunnenyppylöitä ole saatu stimuloitua. Kuulemme heistä, jotka ovat inhonneet tai rakastaneet opintojaksoa, ja keskimääräinen kokemus jää helposti piiloon. On tyypillistä, että osallistujamäärästä riippumatta on haastavaa saada kokoon opintojaksopalautteita edes ne vaadittavat viisi kappaletta, jotta palautteet pääsisi lukemaan. Kehitä ja kehity nyt siinä sitten, mutta ehkäpä voi pyytää tekoälyä generoimaan reflektiota tukevaa palautetta pahimpaan palautevajeeseen.

Palauteähkyn ohella digitaalinen palaute turhan kärkkäästi ajautuu mittaamisen logiikkaan. Digitaalinen palaute saattaa jäädä etäiseksi ja kasvottomaksi, jolloin opiskelija voi tulkita sen arvosteluna taidoistaan, eikä niinkään opintojen ja oppimisen tukemisen välineenä. Oppimisalustojen aktiivisuustiedot osoittavat, etteivät läheskään kaikki opiskelijat edes avaa saamiaan palautteita ja siten he eivät myöskään hyödy niistä. Rutiininomaisesti annetut palautteet eivät välttämättä myöskään osu oikeaan – palautteen fokusoinnissa opiskelijalla itsellään olisi keskeinen rooli.

Mittaamisen ongelma korostuu digitaalisissa opintojaksojen palautekyselyissä. Yhteismitallisten, numeraaliseen arviointiin perustuvien lomakkeiden tavoitteena lienee taata vastaamisen helppous ja palautteen tasalaatuisuus. Samalla se kuitenkin viestii, että olemme kiinnostuneita vain siitä, onko opetuksesi 3.7 vai peräti 4.8 keskiarvon arvoinen. Vertailtavuus ja yhteismitallisuus eivät jätä tilaa kunkin opintojakson omalle kontekstille ja kehittämistavoitteille – pilottikokeilun palaute on usein erilaista kuin vuosien varrella huolellisesti hiotun opetuksen. Jos siis olet yhtä hyvä opettajana kuin viimeisin pisteytyksesi, kannustaako se kokeiluihin? Yhteismitallisuus, joka vieraantuu sisällöistä ja kontekstista, saattaa entisestään etäännyttää sekä opettajia että opiskelijoita.  

Mitä näille haasteille sitten voisi tehdä, jotta saisimme enemmän iloa irti digitaalisten alustojen palautemahdollisuuksista? Näemme keskeisenä ratkaisuna vuorovaikutuksellisuuden painottamisen. Palautteen ja palauteosaamisen merkityksistä ja annetun palautteen käyttötavoista tulee puhua avoimesti ja tavoitteellisesti. Palautteen antaminen ja saaminen tulisi nähdä työelämätaitona, jota harjoitellaan opiskelijoiden kanssa. Hyväksi palautteen antajaksi ja saajaksi voi oppia, ja näistä taidoista on iloa työssä kuin työssä. Meidän tulisikin kannustaa opiskelijoita antamaan palautetta, ei vain jotta he voivat kehittyä sisällöissä ja me voimme kehittyä opettajina, vaan jotta opiskelijat voivat oppia työelämässä tarvittavia taitoja. Dialogi on parhaimmillaan palauteosaamisen ytimessä.

Meillä on myös mahdollisuuksia – ainakin osittain – astua mittaamisen ja datafikaation ulkopuolelle. Palautetta voi ja kannattaa kerätä opintojakson eri vaiheissa. Opintojakson aikana voi käydä opiskelijoiden kanssa palautekeskusteluja, kirjoituttaa itsereflektioita, luoda aktivoivia tehtäviä, joissa opiskelijat pohtivat opintojakson sisältöjen toimivuutta ja omia kokemuksiaan. Yhteiset keskustelut, tapahtuvat ne sitten luokkatiloissa tai digitaalisilla alustoilla, mahdollistavat myös opettajalle tilaisuuden tuoda esille opiskelijoiden onnistumisia, kehittymisiä ja asioita, joihin voisi vielä kiinnittää huomiota omaa oppimista edistääkseen. Opiskelijoilla on myös mahdollisuus vastata tähän palautteeseen. Vuorovaikutuksen ja dialogin kautta palautteen antamisella ja saamisella on sekä sisällöllistä että taidollista iloa myös digitaalisessa maailmassa.

Outi Hakola ja Kati Kasanen

Kirjoittajista Hakola työskentelee Itä-Suomen yliopistossa laadullisten tutkimusmentelmien yliopistonlehtorina ja akatemiatutkijana. Hän valmistuu Oppiminen ja opettaminen digitaalisissa ympäristöissä -erikoistumiskoulutuksesta syyskuussa 2024. Kasanen työskentelee vanhempana yliopistonlehtorina psykologian oppiaineessa. Hän valmistui DigiErkosta syksyllä 2023.

Blogiteksti on julkaistu 27.5.2024 Valtakunnallisen DigiErko-verkoston Vierailijakynä-palstalla.

Viikon vinkki 41/2023

Moodlen ryhmäasetukset – miksi niillä on merkitystä? 

Vinkki pätee UEF eLearn-Moodleen, mutta myös DigiCampus-Moodleen. 

Moodlessa on mahdollista luoda kurssille ryhmiä, ja hyödyntää ryhmiä vaikkapa keskusteluissa. 

Ryhmien luonti 
Ryhmät luodaan ”Osallistujat” -sivulla valitsemalla alasvetovalikosta ”Ryhmät”. Voit luoda ryhmät manuaalisesti tai automaattisesti. Voit myös määrittää ryhmille avaimet, joita ryhmän jäsenet voivat käyttää kurssiavaimen sijasta liittyessään kurssille ja samalla ohjautuvat siihen ryhmään, jonka avainta käyttävät.  

 
Voit myös antaa opiskelijoiden luoda tai valita ryhmänsä käyttämällä Ryhmänmuodostus- tai Ryhmävalinta -aktiviteetteja kurssilla. 

Kurssilla voi myös olla erilaisia ryhmiä eri tarkoituksiin ja niistä voidaan muodostaa ryhmittelyjä, joilla valitaan mitä ryhmiä käytetään eri aineistoissa/aktiviteeteissa. Opiskelija voi siis kuulua kurssilla useampaan eri ryhmään – vaikkapa ryhmiin, joilla opiskelijat jaetaan kampuksittain ja ryhmiin, joilla opiskelijat jaetaan ryhmätyöskentelyä varten. 

Ryhmäasetukset ja kurssin aktiviteetit 
Ryhmien luominen ei vielä riitä! Ne täytyy myös ottaa käyttöön aktiviteeteissa. 
Oletuksena Moodle-kurssin asetuksissa ryhmäasetus on aina ”Ei ryhmiä”.  

Jos laitat kurssin asetuksissa päälle ”Erilliset ryhmät” tai ”Näkyvät ryhmät”, kyseistä asetusta käytetään kaikissa aktiviteeteissa, jotka lisäät tämän jälkeen kurssillesi. Voit myös pakottaa ryhmämoodin, jolloin asetusta ei voi enää muuttaa aktiviteeteissa. Jos pakotusta ei ole otettu käyttöön, voit muuttaa ryhmäasetusta jokaisessa aktiviteetissa erikseen. 

Aktiviteeteissa voi valita aina ”Ei ryhmiä”, ”Erilliset ryhmät” tai ”Näkyvät ryhmät”

  • Ei ryhmiä = kaikki opiskelijat ovat aktiviteetissa yhtä suurta ryhmää. 
  • Erilliset ryhmät ja Näkyvät ryhmät = aktiviteetissa käytetään kurssille muodostettuja ryhmäjakoja. 

Näiden erot vaikuttavat lähinnä keskustelualueella: 

  • Erilliset ryhmät = opiskelija näkee ja voi lähettää viestejä vain omaan ryhmäänsä. 
  • Näkyvät ryhmät = opiskelija voi lähettää viestejä vain omaan ryhmäänsä, mutta näkee ja voi lukea myös muiden ryhmien viestejä. 

Jos kurssille ei ole tehty ryhmiä ja jaettu opiskelijoita ryhmiin tai kurssille lisätyssä aktiviteetissa ei ole otettu ryhmiä käyttöön kurssin tai aktiviteetin asetusten kautta, opiskelijoita käsitellään yhtenä suurena joukkona. Jos Ryhmät puuttuvat kurssilta ja silti käytetään aktiviteettien ryhmätoimintoja, se voi johtaa outoihin lopputuloksiin. 

Esimerkki 1 
Kurssille ei ole tehty ryhmiä. Kurssilla on Tehtävän palautus ja sen asetuksissa on valittu ”Opiskelijat palauttavat ryhmätöitä: Kyllä” ja ”Opiskelijan on kuuluttava ryhmään voidakseen palauttaa: Ei.”  

Koska kurssilla ei nyt ole ryhmiä/opiskelijoita ei ole jaettu ryhmiin, kaikki kurssin opiskelijat ovat yhtä suurta joukkoa ja muodostavat näin oman ”ryhmänsä”. Kun yksi opiskelija palauttaa tehtävän, näkevät kaikki muutkin opiskelijat tämän palautuksen ja pystyvät myös esim. poistamaan sen tai täydentämään palautusta omilla palautuksillaan (jos voi palauttaa useamman kuin 1 tiedoston), jotka sitten myös näkyvät kaikille. 

Toisin sanoen, josTehtävässä valitaan ”Opiskelijat palauttavat ryhmätöitä: Kyllä”, tarvitaan kurssilla myös ryhmät ja opiskelijat täytyy myös jakaa ryhmiin, ellei sitten ole tarkoituskin, että kaikki näkevät toistensa palautukset. 

Esimerkki 2 
Kurssilla ei ole ryhmiä. Kurssilla on käytössä Keskustelualue ja sen asetuksissa on valittu ”Erilliset ryhmät” (tai näkyvät ryhmät) käyttöön. Opettaja voi lähettää viestejä keskustelualueelle, mutta kukaan opiskelija ei, eikä opiskelija voi myöskään vastata opettajan viesteihin, koska ei kuulu mihinkään ryhmään. 
 
Toisin sanoen, jos Keskustelualueella valitaan ”Erilliset ryhmät” tai ”Näkyvät ryhmät” käyttöön, tarvitaan kurssille myös ryhmät ja opiskelijat täytyy myös jakaa ryhmiin, jotta he voivat viestiä ja vastata keskustelualueella oman ryhmänsä viesteihin. 

Jos ryhmiä ei ole valittu keskustelualueen asetuksissa käyttöön, näkevät opiskelijat kaikki viestit Keskustelualueella ja voivat myöskin lähettää ja vastata viesteihin. 

Hyödyntäminen aktiviteeteissa 

Tehtävänpalautuksessa, käytettäessä ”Opiskelijat palauttavat ryhmätöitä” -asetusta, ryhmät mahdollistavat sen, että yksi ryhmän jäsenistä voi tehdä palautuksen ja se näkyy myös muilla ryhmän jäsenillä ja he voivat tarvittaessa täydentää palautusta.  Opettaja voi arvioida palautuksen yhdeltä ryhmän jäseneltä ja valita, että sama arviointi ja palaute menee koko ryhmälle. 

Jos tehtävässä ei käytetä ”Opiskelijat palauttavat ryhmätöitä” -asetusta, palautettu tehtävä näkyy vain palautuksen tehneelle opiskelijalle ja kurssin opettajille, mutta ryhmistä voi silti olla hyötyä.  Jos kurssilla on useita opettajia ja jokainen opettaja tarkistaa tietyn opiskelija joukon palautukset, voi opiskelijat jakaa ryhmiin ja tehtävässä ottaa käyttöön erilliset tai näkyvät ryhmät. Opettaja voi sitten palautuksia tarkistaessaan valita, minkä ryhmän palautuksia tarkastaa. 

Samoin esim. tentissä, jossa palautettu tenttisuoritus näkyy vain opettajille (ja ehkä palautuksen tehneelle opiskelijalle), voi tentissä ottaa käyttöön erilliset tai näkyvät ryhmät, jolloin opettaja voi tarkistella valitsemassa ryhmän suorituksia. 

Ryhmiä voi käyttää myös muissa aktiviteeteissa ja niitä voi hyödyntää esim. pääsyn rajoituksissa niin, että eri ryhmille saadaan näkyviin erilaiset aineistot tai aktiviteetit yhden kurssin sisällä.  

Lisätietoja Ryhmistä ja ryhmittelyistä löydät esimerkiksi seuraavista linkeistä: 

Ryhmien ja ryhmittelyiden luominen kurssille: https://help.mediamaisteri.com/ryhmat-ryhmittelyt  

Ohjevideot: Moodle ryhmätyöskentelyn tukena: https://elearn.uef.fi/course/view.php?id=170  

Ryhmien ja ryhmittelyjen idea: https://docs.moodle.org/3x/fi/Ryhmien_ja_ryhmittelyjen_idea  

Vinkin tarjoilivat Jani Lemmetyinen, DiPa & Perttu Suhonen, Oppitupa 

Viikon vinkki 3/2023

Kurssin kopiointi eLearnissa

Viime vuonna käyttöönotettu eLearn-Moodle toi mukanaan uudistuksen, jossa opettajan ei tarvitse pyytää kurssin kopiointia uudeksi kurssiksi tukipalveluista, vaan nyt voit tilata uuden tyhjän kurssipohjan eLearn-Moodlen etusivulta tai Pepistä ja lisätä sisällöt suoraan entiseltä kurssiltasi itse.

Uuden tyhjän kurssipohjan valmistumisesta saat myös jatkossa sähköpostiviestin. Kun menet ensimmäistä kertaa tilaamallesi kurssipohjalle, se avautuu ns. Kickstart-formaatissa, josta pääset ottamaan valmiin mallipohjan käyttöön kurssillesi tai hakea sisältöjä aikaisemmilta kursseiltasi. Sisällön hakeminen tapahtuu ”Siirrä sisältöä muilta kursseilta” -kohdasta (kurssisi voi näkyä joko suoraan listauksessa tai voit käyttää Haku-toimintoa).

· Valitse haluttu kurssi ja paina ”Tuo kurssi”.

· Jätä palautuksen oletusasetukset ja paina ”Hyppää suoraan viimeiseen vaiheeseen”

· Kun sisällön palautus on tehty, näytöllä lukee ” Tuonti suoritettu. Klikkaa jatka palataksesi kurssille”.

· Paina lopuksi ”Jatka”.

Huomaathan, että mikäli kurssillasi on käytössä esimerkiksi H5P-työkaluja, sisällön siirrossa voi mennä vähän pidempään.

Ongelmatilanteissa apua saat asiointi.uef.fi -palvelusta.

Vinkin tarjoili Satu Turkka/Oppitupa

Viikon vinkki 19/22

Terveiset Moodle-maailmasta!

Kuten ehkä olet huomannut, olemme UEFissa siirtymässä monipuolisempaan Moodleen, joka kulkee nimellä eLearn. Mukavasti onkin jo uusia kurssipohjia tilattu, kertovat tilastot.

Tänne kirjautumalla saat tietopaketin uudesta Moodlesta: https://elearn.uef.fi/course/view.php?id=1335. Kurssiavain on elearn.

Nykyinen Moodle sulkeutuu 31.5.2023, jolloin myös vanhat Moodle-kurssit lakkaavat toimimasta.

Jos haluat itsellesi talteen kurssin, jota ehkä mahdollisesti vielä joskus opetat, voit kopioida Moodle-kurssin itsellesi näin: Kurssin etusivulta, oikean yläreunan hammasrattaan alta löytyy kohta ”Varmuuskopiointi”. Ota ruksi pois kohdasta ”Osallistujat”. Jos muita asetuksia ei tarvitse säätää, paina ”Hyppää suoraan viimeiseen vaiheeseen”. Näin kurssistasi luodaan varmuuskopio varmuuskopioalueelle ja voit sieltä tallentaa sen itsellesi.