Blogi

Design and pilot of the learning analytics student tool in the University of Oulu

Holiday season is coming but we are still busy with learning analytics (LA). In this blog post we will update you about what is going in University of Oulu. First about the LA tool we have developed: how it was done and iterated and then about the continuing and planned pilots.

If you have been following our project and previous post, you may already know that one of the main goal in the AnalytiikkaÄly project was to develop learning analytics tools aimed directly for students. This was of high priority for the project and work started already in 2019. We had three guiding principles in our work: Grounding in learning theory, multidisciplinary collaboration, and user cantered design.

Firstly, we based out work on self-regulated learning theory suggesting four important phases for students self-regulated learning: Planning, monitoring, controlling and reflection. Our work aimed to support these phases with LA tool functionalities and we especially focused on the study path level starting from the begging till the end of the studies. As has been shown by previous research, majority of LA tools focus on course level processes with analytics reflecting micro level learning events. Our approach was different as we worked with and visualized macro level learning events such as enrolment and completion of courses, workload and graduation time estimations.

Picture 1. First version of the LA student tool

Secondly, we utilized multidisciplinary experts in the fields of IT and educational psychology, as well as legal specialist to plan, design and pilot the tool as well as to secure individuals’ privacy according to high ethical and legal standards.

Thirdly, the LA tool was designed based on the student needs analysis and improvements were made based on students’ feedback. So far, the tool has two iterations. Below you can see the first version of the tool is presented in the picture 1 and improved second version in the picture 2. Three functionalities were added to support planning of the studies. Additionally, more functionalities were added to help monitor progress of the studies without the focus on grades. 

Picture 2. Second improved version of the LA student tool.

Pilot of the improved version of the tool is organized from September 2020 until 2021 May. This study has a follow up design with pilot and control groups. Pilot groups will be provided with possibility to use the tool for the longer time and report on their experiences regarding perceived support for study planning, monitoring, controlling and reflection from the tool and its functionalities. Control groups will report about their regular experiences using other digital tools currently available in the University of Oulu.

This pilot will provide us an opportunity to gather students feedback about the tool. This information will be used to once again improve the tool as well as to better understand how phases of self-regulation are supported on the study path level. Additionally, we will be able to design recommendations and suggest processes how the LA tool should be best utilized in our university so that as many students as possible could benefit from learning analytics.

Egle Gedrimiene

University of Oulu

Blogi

Oppimisanalytiikka etäopiskelijoiden ohjauksen työkaluna

LUT-yliopistolla on jo useamman vuoden ajan toteutettu etämaisteriohjelmia, joissa opiskelijat ovat taustaltaan joko ammattikorkeakoulusta valmistuneita insinöörejä tai tekniikan kandidaatteja. Tavoitteena heillä on valmistua diplomi-insinööreiksi joustavasti työn ohessa opiskellen, ja pääosa opinnoista suoritetaan etäopetusmateriaaleja ja etäyhteyksiä hyödyntäen.

Etäopiskeluohjelmissa opiskelevien opiskelijoiden taustat voivat olla hyvinkin erilaisia, osalla heistä edellisistä opinnoista on kulunut jo useita vuosia, kun taas osa saattaa jatkaa DI-opintoja suoraan insinööriopintojensa jatkeeksi, eli katkosta opiskelujen väliin ei tule. Lisäksi suurin osa etäopiskelijoista käy päivätöissä samanaikaisesti opintojensa kanssa, mikä luo ajankäytöllisiä haasteita opiskeluun, vaikka toki ohjelma onkin niin suunniteltu, että työnteko opintojen kanssa yhtä aikaa on mahdollista.

Edellä mainitut seikat ja opiskelijoiden erilaiset taustat asettavat haasteita opiskelijoiden ohjaukseen ja osaltaan myös opintojaksojen suunnitteluun, sillä taustatiedot eivät luonnollisesti ole opettajien eikä ohjaajien tiedossa, vaan tarvitaan oikeudet näiden tietojen käyttöön ennustuksia tehdessä. Eräänlaiseksi haasteeksi voi muodostua myös se, että etäohjelmiin osallistujat suunnittelevat usein tutkintonsa suoritusajan eripituiseksi verrattuna kampuksella läsnäoleviin opiskelijoihin. Tämän seurauksena HOPS saattaa sisältää samat opintojaksot esimerkiksi kahdelle, kolmelle tai jopa neljälle vuodelle rytmitettyinä, mutta silti kyseessä on opiskelijan näkökulmasta ihannetoteutusmalli. Opiskelijakohtaisten valintojen tunnistaminen opintojen viivästymisestä onkin siten yksi AnalytiikkaÄly-sovellukselta vaadittavista lisäominaisuuksista.

Ymmärrettävää toki on, että opiskelijoiden tarkemmat taustatiedot ja esimerkiksi tieto aikaisemmin hankitusta osaamisesta eivät ole yleisesti saatavilla, ja niiden tietojen käyttöön tarvitaan oikeudet. Näin etäopiskelijoiden opintojen ohjaustyöhän osallistuvina toivoisimme näkevämme joskus, jo mahdollisesti lähitulevaisuudessa, esimerkiksi jonkinlaisen ennustemallin/-ratkaisun, joka edesauttaisi opettajia ja ohjaajia ymmärtämään opiskelijoiden etenemistä perustuen heidän erilaisiin taustoihinsa ja ennakko-osaamiseensa.

Aikaisemmin opitun hyödyntäminen tutkinnossa (AHOT) vaatii AnalytiikkaÄly-sovelluksilta erityispiirteitä, jotka tulisi voida rakentaa opintojaksokohtaisesti siten, että opiskelijakohtaisesti voidaan tunnistaa AHOT-prosessiin sopiva osaaminen ja siirtää tieto ennustemalliin. Jos/kun AHOT-mahdollisuuden tunnistaminen on nykyisinkin suhteellisen vaativa prosessi, on se sitä varmasti pyrittäessä hyödyntämään AHOT-tunnistustoimintoja osana ennustemallia. Haasteita siis riittää, mutta toivottavasti näihin kuitenkin löytyy jonkinlaisia ratkaisuja, jos ei nyt vielä AnalytiikkaÄly-hankkeessa, niin mahdollisissa jatkoyhteistyökuvioissa lähitulevaisuudessa.

Toinen tärkeä seikka nyky-yliopistossa yliopiston näkökulmasta on yritysmaailman osaajatarpeiden ymmärtäminen ja sinne tarvittavan tulevaisuuden työvoiman tuottaminen. Olisi tärkeää osata yhdistää koulutustuotteiden sisällöt näihin osaajatarpeiden täyttämisiin, tämä voisi olla mahdollista esimerkiksi tuottamalla oikeanlaisia sivuopintokokonaisuuksia. Tässä onkin yksi suurista haasteista analytiikan näkökulmasta, kuinka osataan ennustaa esimerkiksi viiden vuoden päähän tätä tarvetta?

Katriina Mielonen ja Harri Eskelinen

Lappeenrannan-Lahden teknillinen yliopisto LUT

Blogi

Oppimisanalytiikan linjaustyö Turun yliopistossa

Yksi keskeinen tapa edistää oppimisanalytiikan käyttöä omassa korkeakoulussa on oppimisanalytiikan linjauksen (policy) muodostaminen, joka ohjaa ja mahdollistaa oppimisanalytiikan käyttöä organisaatiossa. Jiri Lallimo kirjoitti Oppimisanalytiikan linjauksesta maaliskuun blogikirjoituksessa ja kuvasi kuinka linjauksen tekeminen on edennyt Aalto yliopistossa. Tässä kirjoituksessa kuvaan lyhyesti sitä, kuinka vastaavaa prosessia on edistetty Turun yliopistossa.

Työ Turun yliopistossa aloitettiin Aallon linjausluonnoksen pohjalta. Karkean lokalisoinnin jälkeen luonnos otettiin opintoasiainjohtajan esityksestä yliopiston sisäisen ohjeistuksen tiimin käsiteltäväksi yhteistyössä analytiikan asiantuntijoiden kanssa. Sisäisen ohjeistuksen tiimi on pieni ja monipuolinen työryhmä, joka edustaa erityisesti opintohallintoa ja sisältää myös ylioppilaskunnan edustuksen.

Tavoitteena oli ensi vaiheessa paitsi sovittaa linjaus Turun yliopiston dokumenttien tyyliin, niin myös tuoda se omille toimijoillemme lähestyttävään muotoon. Aallon ja ulkomaisten yliopistojen malli loi hyvän pohjan työlle, mutta toi myös mukanaan haasteita. Monet oppimisanalytiikan asiat voidaan nähdä kansallisesti yhteisinä. Toisaalta taas analytiikan käyttöä ohjaavan dokumentin tulisi rakentua organisaation omista lähtökohdista käsin ja toisen valmiin tekstin taakse kytkeytyvää ajattelua voi olla vaikea tavoittaa. Linjauksesta muodostuu oman organisaationsa ja sen toimijoiden näköinen. Turussa onkin päädytty nimimuotoon Oppimisanalytiikan ohjelma.

Tehtävää kehitystyötä on nyt esitelty yliopiston Koulutusneuvostolle sekä opintohallinnolle ja olemme juuri päättämässä ensimmäisen kommenttikierroksen. Tällä kierrokselle olemme kuulleet erityisesti erilaisia asiantuntijatahoja, kuten tietosuojavastaavaa, analytiikkaan perehtyneitä opettajia sekä opetuksesta vastaavaa vararehtoria. Päivitettyämme ohjelmamme saadun palautteen pohjalta, toteutamme toisen tiedekunnille ja muille yksiköille suunnatun kommentointikierroksen. Sen jälkeen ohjelma tavoitteellisesti saadaan valmiiksi ja yliopiston johdon hyväksyttäväksi syksyn loppuun mennessä.

Selvänä haasteena prosessin aikana on teeman suhteellinen vieraus monille tahoille. Ohjelma pyrkii kuvaamaan sellaista toimintaa, jota ei vielä systemaattisesti harjoiteta. Tämä asettaa ohjelmalle ja sen tekijöille erilaisia kysymyksiä esimerkiksi opetuksen vapauden ja analytiikan systemaattisen hyödyntämisen suhteesta. Tämän vuoksi on ollut keskeistä, että työskentelyssä on ollut ja tulee olemaan mukana niin opiskelija-, opettaja-, kuin hallintoperspektiiviä. Pyrimmekin Aallon tavoin ajattelemaan ohjelmaa myös dynaamisesti, jotta se voi tulevaisuudessa kehittyä yhdessä oppimisanalytiikan käytäntöjen kanssa.

Janne Mikkola

Turun yliopisto

Blogi

AnalytiikkaÄly Pedaforumissa

Pedaforum-päivät järjestetään Oulun yliopiston ja Oulun ammattikorkeakoulun yhteistyönä 20.-21.8.2020. Varsinaisten seminaaripäivien lisäksi keskiviikkona 19.8. järjestetään verkostotapaamisia. Tänä vuonna seminaari on maksuton ja se järjestetään täysin verkossa. Päivien teema on Pyörällä päästään – pilveen ja paikalle ja seminaarin ohjelma rakentuu jatkuvan oppimisen, avoimen oppimisen ja digitalisaation sekä kampuskokemuksen, erilaisten oppimisympäristöjen, oppijoiden ja esteettömyyden ympärille. 

Oppimisanalytiikan teema on myös vahvasti esillä päivien aikana, sillä järjestämme keskiviikkona 19.8. oppimisanalytiikan verkostotapaamisen yhteistyössä APOA-hankkeen kanssa ja hankkeellamme on seminaarissa peräti kuusi esitystä/työpajaa! Seminaarin ohjelman löydät kokonaisuudessaan täältä, mutta alta löydät kätevästi kaikki osiot, joissa AnalytiikkaÄly-hankkeemme on mukana.

Keskiviikko 19.8.2020

Oppimisanalytiikan verkostotapaaminen! Oppimisanalytiikan verkostotapaamisessa pureudutaan kahden hankkeen kuulumisiin ja tuloksiin sekä keskustellaan aktiivisesti ja osallistavasti oppimisanalytiikan ajankohtaisista tuulista.

Verkostotapaamisen ohjelma:

10.00 Tervetuloa!

10.05-12.00 Hankkeiden kuulumiset

AnalytiikkaÄly: Työkaluja oppimisanalytiikan käyttöönoton tueksi ja kurkistus tuleviin pilotteihin

APOA: Kokemuksia piloteinneista ja suositukset oppimisanalytiikan käyttöönottoon

12.00-13.00 Lounastauko

13.00-14.00 Analytiikkajaosto: oppimisanalytiikan kansalliset kuulumiset ja oppimisanalytiikan viitekehys

14.00-15.00 Työpajatyöskentelyä:  Miten tästä eteenpäin? Miten oppimisanalytiikan verkosto organisoituu? Miten oppimisanalytiikkaa voidaan edistää hankkeiden päättymisen jälkeen?

Verkostotapaaminen järjestetään Zoomissa. Suosittelemme tietoturvasyistä lataamaan Zoom-sovelluksen uusimman version laitteille jo etukäteen. Selaimista parhaiten Zoomia tukee Google Chrome. Verkostotapaamisessa käytämme odotusaulaa, joten liitythän tapaamiseen omalla nimelläsi. Selkokieliset Zoomin käyttöohjeet löydät täältä.

Pääset lukemaan esityksien ja työpajojen abstraktit klikkaamalla esitystä.

Torstai 20.8.2020

Rinnakkaissessio 1 klo: 14-15.30 Workshop: Opiskelija AnalytiikkaÄly dashboard hands-on

Rinnakkaissessio 1 klo:14-15.30 Workshop: Työkaluja ja toimintamalleja oppimisanalytiikkatiedon käytön tueksi: juridiikka ja johtaminen

Rinnakkaissessio 1 klo:15-15.30 Listen & Learn: Opintopolku palvelupolkuna AnalytiikkaÄly-hankkeessa

Perjantai 21.8.2020

Rinnakkaissessio 2 klo: 10.15-11.45 Workshop, Opintopolku blueprint ja oppimisanalytiikan hyödyntäminen opiskelun tukena

Rinnakkaissessio 2 klo: 10.45-11.15 Listen & Learn: Kohti oppimisanalytiikan käyttöä: omaopettajien kokemus roolistaan ja oppimisanalytiikan työpöydän käytöstä ohjauksessa

Rinnakkaissessio 3 klo:12.30-13.00 Ideas and practices: Data-driven approach to developing support processes for learning, teaching and management in higher education: Modeling factors affecting study success from large-scale study-related data

Nähdään Pedaforumissa!

Blogi

Palvelumuotoilu auttaa hahmottamaan oppimisanalytiikan käyttökontekstia

Oppimisanalytiikan hyödyntäminen osana opiskelijan opintopolkua on laaja kokonaisuus, ja analytiikan käyttökokemukseen voivat vaikuttaa myös monet ulkoiset seikat opiskelijan ympäristössä ja opintopolussa. AnalytiikkaÄly -hankkeessa on kevään 2020 aikana hyödynnetty palvelumuotoilun näkökulmaa oppimisanalytiikan hahmottamiseen osana opiskelijan opintopolkua.

Palvelumuotoilu keskittyy ihmislähtöisen näkökulman ja systeemisen muotoiluajattelun kautta kehittämään ja suunnittelemaan palveluita, järjestelmiä ja prosesseja. Palvelumuotoilun menetelmät auttavat hahmottamaan palveluita yksittäisistä palvelukohtaamisista aina laajojen palveluekosysteemien rakenteisiin. Palvelun ymmärtämisen ja suunnittelun keskiössä ovat ihmiset, kuten käyttäjät, palveluntarjoajat, partnerit ja muut sidosryhmät, sekä heidän tarpeensa ja toiveensa palvelua kohtaan. Erityisesti käyttäjätarpeita pyritään tarkastelemaan ja ymmärtämään syvällisesti, jotta kehitettävä palvelu vastaisi tarpeisiin mahdollisimman kattavasti.

Palvelumuotoiluprosessissa palvelun rakenteita tarkastellaan niihin linkittyvien ihmisten lisäksi myös palveluympäristöjen, toimintamallien, palveluprosessien sekä palvelukanavien, kuten käyttöliittymien kautta. Näistä palvelun ”kontaktipisteistä” voidaan rakentaa palvelukohtaamisten jatkumo eli palvelupolku, joka rakentaa mahdollisimman kattavan ja tarkoituksenmukaisen palvelukokemuksen käyttäjälle. Palvelupolku on työkalu tarkastella palvelukohtaamisia kriittisesti sekä arvioida, miten palvelun osia voidaan kehittää oikeaan suuntaan, jotta käyttäjien tarpeet tulee kohdattua koko palvelupolun aikana.

AnalytiikkaÄly -hankkeessa opiskelijan opintopolkua on hahmotettu palvelupolkuna ja pyritty siten ymmärtämään oppimisanalytiikan kontekstia opiskelijan silmin. Hankkeessa kerättyyn tarvekartoitukseen pohjautuva palvelupolku liittää AnalytiikkaÄly -sovelluksen opiskelijan opintopolkuun opintoihin hakemisesta lähtien aina valmistumisen jälkeiseen aikaan asti, ja nostaa esiin tarpeita ja haasteita, joihin sovelluksen toiminnot voivat polun aikana tuoda ratkaisuja.

Oppimisanalytiikan ihmislähtöinen tarkastelu osana opiskelijan opintokokemusta voi antaa paremman ymmärryksen oppimisanalytiikan kontekstista, sen sovellutusten käytöstä suhteessa opintopolkuun, sekä siihen vaikuttavista ulkoisista tekijöistä, kuten opinnoissa tapahtuvat aikataulumuutoksista esimerkiksi opintojen ohella tapahtuvan työskentelyn tai perhesyiden vuoksi. Tällaisia muutoksia on haasteellista ennakoida analytiikan keinoin, mutta ne ovat inhimillisiä tekijöitä, joita on hankkeessa havainnollistettu palvelumuotoilun keinoin osaksi opintojen aikaista palvelupolkua.   Palvelumuotoilun näkökulmaa oppimisanalytiikkaan avataan lisää AnalytiikkaÄlyn webinaarissa ”Opintopolku palvelupolkuna – analytiikan näkökulmia” tiistaina 18.8. klo 13-14. Lisätietoja hankkeen webinaarisarjasta saat täältä.

Titta Jylkäs

Lapin yliopisto