The European Commission’sscience and knowledge service

Joint Research Centre

Oppimisanalytiikka –Mahdollisuudet ja edessä olevat

haasteet Euroopan koulumaailmalle

Aulanko, Finland April 6 2017

Dr. Riina Vuorikari DG JRC – Directorate Innovation and Growth

Unit B4 Human Capital and Employment

2

Yhteinen tutkimuskeskus on komission oma tutkimusyksikkö

Sen riippumattomat, näyttöön perustuvat tieteelliset lausunnot tukevat EU:n toimintapolitiikan suunnittelua

The Joint Research Centre (JRC)

Directorate Growth &

Innovation Seville

Riina Vuorikari

• Tutkijana Sevillassavuodesta 2013

• 2000-2013 European Schoolnet as Senior Research Analyst and Project Manager

• Tausta: • Savonlinnan OKL (MEd)• Studying abroad (exchange

and postgraduate studies) e.g. hypermedia (DEA)web, use of ICT in education

• Doctoral 2009 from the Dutch School Information and Knowledge System

• https://www.slideshare.net/vuorikari

ulkosuomalainen

The European Commission’sscience and knowledge service

Joint Research Centre

. Osa 1: Oppimisanalytiikka, JRC:n uusin selvitys

. Osa 2: Mahdollisuudet

. Osa 3: Edessä olevat haasteet

.

Outline:

6

OppimisanalytiikallaTarkoitetaan oppijasta kertyvien tietojen keräämistä, mittaamista, analysointia ja raportointia siten, että tarkoituksena on ymmärtää ja optimoida oppimista ja oppimisympäristöjä. (source)

Learning analytics have their roots in many fields of educational and technical research, including assessment, personal learning and social learning, but also in business intelligence and data mining.

The field draws on theory and methodologies from disciplines as statistics, artificial intelligence and computer science (Dawson et al., 2014).

7

10

Mitä raportti sisältää?

• Inventaatio tämän hetkisistä käytänteistä, mitä on tarjolla ja miten sitä käytetään:• Työkaluja, käytänteitä, koulutusohjelmia (60

esimerkkiä)• 5 case studies

• Tavoite: kriittisesti miettiä oppimisanalytiikan vaikutuksia, potentiaalia ja haasteita koulutuksen alalla

• “The Action List for Learning Analytics”

The European Commission’sscience and knowledge service

Joint Research Centre

. Osa 1: Oppimisanalytiikka, JRC:n uusin selvitys

. Osa 2: Mahdollisuudet

. Osa 3: Edessä olevat haasteet

.

Outline:

13

Esimerrki 1: Inventory of Tools

1.

2.

3.

4.

5.

Specific models of domain knowledge

(in math) and on the learner

responses (cognitive models )

Stand aloneapplication that

generates its own data.

What does thisdata tell us about

learning?

Is it actionable?

14http://cloudworks.ac.uk/cloud/view/9633

1.

2.

3.

4.

5.

6.

Esimerkki 2: Inventory of Tools Data sources include

VLE; social media, “card swipes” (e.g. using

student card to go to library), libraries,

housing

15

Keskeyttämisuhan alla olevien oppilaiden identifiointi: Georgia State University At the university, predictive analytics have been used to tackle the achievement gap for low income and first-generation students. GSU graduation rate rose from 32% in 2003 to 54% in 2014.

In the process, the university claims to have removed the achievement gap between students from minority backgrounds or lower socioeconomic status and their peers.

Example 3: Inventory of Practices

Tasa-arvo,Oikeuden-mukaisuus

16

1.

2.

3.

4.

Esimerkki 4: Inventory of Tools

17

• “stand-alone” tools; add on to an existing VLE; custom-made solutions;

• Different target beneficiaries of analytics:• oppijat, • opettajat, • tuutorit, opinto-oppaat, koulutuksenohjaajat, • koulunjohto/hallintotyöntekijät, • Opetusvirasto, päättäjät,..

The Inventory: Tools (1)

18

The Inventory: Tools (2)• Different data sources:

• Student digital traces from the platform or outside of it, e.g. interaction data, social media, libraries

• Data from offline sources, e.g. evaluations by the learner, demographic data, nation-wide test data/evaluations

• Kuvaaminen ja tilastojen muodostaminen, visualisointi, tilastollisia päätelmiä;

• Actions on data: mallintaminen, jonka pohjalta mukauttamista (adaptation), tukea, varottaminen (alerting); suosituksia

• Action based on past behaviour, similarity in grades, domain knowledge, right answers, statistics, …

19

2.

1..

Esimerkki 5: Inventory of Tools

20

Mitä tuloksia ja perustuvatko ne tieteelliseen näyttöön (6)?

• Evidence of Impact: The research evidence documented in this study shows that there is little formal validation of tools

• e.g. whether the tools fulfil their intended purpose such as having a positive impact on learning; encouraging more efficient learning; or more effective learning,..

21

Do we see real improvements in learning outcomes for learners? 37 examples

22

Eettiset ja tietoturvaan liittyvät kysymykset (7)• Impact: The research evidence documented in

this study shows that currently, most impact of learning analytics in education and training seems takes place around issues, little impact on changing practices yet:

• Keskustelun teemana ovat eettiset ja tietotrvaan liittyvät kysymykset useimmin kuin esim. oppimisen prosessejen tukeminen ja uusien kehittäminen

The European Commission’sscience and knowledge service

Joint Research Centre

. Osa 1: Oppimisanalytiikka, JRC:n uusin selvitys

. Osa 2: mahdollisuudet

. Osa 3: Edessä olevat haasteet

.

Outline:

25

Haasteet Euroopan koulumaailmalle

• Haaste 1: Luodaan eurooppalainen visio oppimisanalyytikasta, joka pohjautuu meidän arvomaailmaan

• Luodaan toisenlaista tulevaisuutta, jossa pyritään luovuutta, innovaatiota, sosiaalisia taitoja ja ongelmanratkaisua tähtääviin oppimistuloksiin

• Entä aktiivinen kansalaisuus ja työllistyvyys?

• Syrjimättömyys ja kansalaistaitojen edistäminen?

26

Haasteet Euroopan koulumaailmalle

• Haaste 2: Kehittää oppimisanalytiikan työkaluja, jotka oikeasti auttavat opettajia ja oppijoita

• Nyt on tarjontaa, mutta onko kysyntää?

• Tuleeko käyttäjille se wow-efekti?

27

Do Learning Analyticswith dashboards andhalf-hearted visions of learning remain thelower hanging fruit of digital technology ? What about the visions

for empowering learning?

The European Commission’sscience and knowledge service

Joint Research Centre Check the research of our team at the JRC Science Hub:

https://ec.europa.eu/jrc/

New skills agenda: https://ec.europa.eu/education/ news/20160610-education-skills- factsheet_en

.

Thank you!