1

Evalueringer av LMS

Kan evalueringer av bruk av læringsstøttesystem lære oss noe i forhold til en ny anbudsprosess?

NTNU som utgangspunkt.

2

It’s learning - halleluja

3

EVALUERING AV IT’S LEARNING VED NTNURESULTATER, VURDERINGER OG ANBEFALINGER

Rambøll Management Consulting

4

IT’S LEARNING BRUKES MYE, OG STADIG MER

17 500 brukere innlogget i løpet av perioden fra 25.april til 25.mai

0

500

1000

1500

2000

2500

2003 2004 2005 2006 2007 2008 2009 2010

Samtidige brukere

mars

mai

oktober

november

5

BRUK AV IT'S LEARNING

47 %

44 %

4 %5 %

Hvordan vil du beskrive din bruk av it's learning? (N=2590)

J eg oppfatter it'slearning som et av hovedverktøyene i forbindelse med mine studier

J eg oppfatter it's learning som ett blant flere forskjellige I KT-verktøy jeg benytter i forbindelse med studiene mine

J eg bruker ikke it's learning, men et alternativt system

J eg bruker verken it's learning eller andre læringsstøttesystemer i forbindelse med undervisningen

50 %

32 %

7 %

11 %

Hvordan vil du beskrive din bruk av it's learning? (N=990)

J eg oppfatter it'slearning som et av hovedverktøyene i forbindelse med min undervisning

J eg oppfatter it's learning som ett blant flere forskjellige I KT-verktøy jeg benytter i forbindelse med undervisningen

J eg bruker ikke it's learning, men et alternativt system

J eg bruker verken it's learning eller andre læringsstøttesystemer i forbindelse med undervisningen

Hvor ofte bruker du it’s learning? (N=2333) StudenterMer enn 3 ganger per dag 12 %1-3 ganger per dag 49 %1-3 ganger per uke 31 %1-3 ganger per mnd 5 %Svært sjelden 3 %Usikker/Vet ikke 0 %

Hvor ofte bruker du it’s learning? (N=747) AnsatteMer enn 3 ganger per dag 6 %1-3 ganger per dag 28 %1-3 ganger per uke 48 %1-3 ganger per mnd 11 %Svært sjelden 5 %Usikker/  Vet ikke 2 %

Studenter

Ansatte

6

Læringsplattformene er i stor grad kun administrative støttesystemer for undervisning og læring; det handler stort sett om å holde oversikt over ressurser i tilknytning til undervisningen, få og gi beskjeder og levere oppgaver. (Kolås m. fl. 2008)

Men hva brukes it’s learning til?

7

It’s learning per i dag

Funksjonalitet

Inn

hold

EnkelKompleks

Adm

Fag

Enveis kommunikasjon, beskjeder om endringer i undervisning ..

Nedlasting av forelesningsfoiler,

Samarbeid via nett ifb. med oppgaveløsning, blogger, tilrettelegging for refleksjon rundt undervisning

Ukjent/ high end

Demonstrasjoner, film,

Storyline, digitale eksperimenter, kunstneriske/kreative aktiviteter, multimedieprosjekter, ..

?

?

Timeplan

Innlevering (med tilbakemelding?)

Oppgaveløsning/caseløsning via nett

Streaming av forelesning

Hvordan it's learning brukes i dag (Rambøll)

8

Kan ett og samme LMS brukes i alle emner og appellere til alle brukere?

9

HVEM ER MEST/MINST TILFREDS?

0 % 10 % 20 % 30 % 40 % 50 % 60 % 70 % 80 % 90 % 100 %

I alt

Arkitektur

Humanistiske studier og språkfag

Medisin og helsefag

Musikk og billedkunst

Pedagogikk og yrkesfag

Psykologi

Realfag og teknologi

Samfunnsvitenskapelige studier

Overordnet tilfredshet x Fagområde (N=2216)

Svært tilfreds Tilfreds Verken eller Utilfreds Svært utilfreds Vet ikke/ I ngen formening

Studenter

!

10

Informatikk-studentene er kritiske til it’s learning

Informatikkstudentene har sannsynligvis høyere forventninger til it’s learning enn studenter på andre emner. De er trolig også mer kritiske fordi har god kjennskap til alternativ til it’s learning og gode forutsetninger til å se muligheter for forbedringer i it’s learning. (Grønland 2010)

11

It’s learning per i dag

Funksjonalitet

Inn

hold

EnkelKompleks

Adm

Fag

Enveis kommunikasjon, beskjeder om endringer i undervisning ..

Nedlasting av forelesningsfoiler,

Samarbeid via nett ifb. med oppgaveløsning, blogger, tilrettelegging for refleksjon rundt undervisning

Ukjent/ high end

Demonstrasjoner, film,

Storyline, digitale eksperimenter, kunstneriske/kreative aktiviteter, multimedieprosjekter, ..

?

?

Timeplan

Innlevering (med tilbakemelding?)

Oppgaveløsning/caseløsning via nett

Streaming av forelesning

Har it's learning noe å gjøre i hjørnet øverst til høyre? (Rambøll)

12

Om aktivitet ”øverst til høyre” (faglig

innhold og kompleks funksjonalitet)

• IKT-støtte i undervisningen […] vil […] ikke kunne begrenses til en diskusjon om bruk av it's learning. Her vil også andre verktøy spille en rolle. Vi utelukker ikke at it's learning kan bidra til denne typen bruk, men gitt at dette i større grad er en åpen prosess, mener vi at it's learning i mindre grad kan ha en definert rolle her. (Rambøll)

13

STRATEGIANBEFALINGERStrategi for bruk av IKT i

undervisningen ved NTNU

Sentral strategi Lokal strategi

”Administrativ bruk”

”Behovsoversikt”

”Støtteressurser og kompetanseutvikling”

”Faglig bruk”

Rambøll

14

LMS primært for studie- og studentadministrasjon?• Skal vi da i fremtiden etterspørre LMS som er gode

på administrasjon og innføre ufravikelige institusjonelle eller nasjonale standarder på området - mens den faglige bruken bestemmes av fagmiljøene selv, dvs. at de 1000 blomstene skal få blomstre i den fagnære IKT-bruken?

15

Om lag 80 % har generelt godt utbytte av digitale verktøy ilæringsarbeid

Om lag 80 % har generelt godt utbytte av digitale verktøy i samarbeid med andre studenter

Om lag 2/3 har godt utbytte av digitale verktøy i kommunikasjon med ansatte

Studentenes mening om digitale verktøy

16

Populære digitale verktøy ved NTNU

Bruk av andre IKT verktøy enn it’s learning. Rambøll.

17

Disse verktøyene gir bedre muligheter for samarbeid på tvers av emner/institusjoner

Bør kjernefunksjonalitet dekkes av tilbud fra ”skyen”?

18

Studentene etterspør også større åpenhet i forhold til innhold enn det de finner i it’s learningBåde studenter og lærere ønsker at studenter utenfor emnet/ studenter ved andre institusjoner/ allmennheten skal får tilgang til læringsressurser i emnet.(Grønland 2010).

19

Summen av evalueringene: Ønsker vi oss…• …et system med en kjerne som er likedan for alle

og at denne kjernen håndterer studie- og studentadministrasjon

• …og systemet skal gi den enkelte bruker mulighet til å trekke inn og bruke et stort knippe andre verktøy

• …og hvor alle verktøyene spiller sammen innenfor rammen av systemet

• …og som kan invitere alle til å delta i samarbeid • … og som kan gi fri tilgang til læringsmateriell og

andre ressurser?

20

Men selv verdens beste system…

…vil ikke alene kunne løse alle utfordringer på IKT i læring- området…

21

2004

Despite massive investments in both hardware and software….…most faculty still teach as they were taught —that is, they stand in the front of a classroom providing lectures intended to supply the basic knowledge the students need

22

Åpenhet og samarbeid:Noen avklaringer som kan være nyttige:

• Ønsker institusjonene å åpne undervisningen sin for alle? Hva med personvern? Hva med rettighetsproblematikken? Hvilke ressurser vil åpenhet kreve?

• Ønsker institusjonene å brukes google docs, dropbox og facebook i utdanningen? Hvilke motforestillinger finnes?

23

Avslutningsvis:Flere ting å tenke på

• Organisering av arbeidet med IKT i læring• Institusjonens strategi• Ledelse med fokus på utdanning

24

Organisering

• Har institusjonene organisert arbeidet sitt med IKT i læring på best tenkelig måte? Finnes det er optimal måte å organisere arbeidet med IKT i læring på?

(Nordkvelle m. fl. Kunsten å ile langsomt, Et problemnotat om organisering av pedagogisk bruk av IKT i norsk høyere utdanning.

NUV. Under publisering)

25

Betydningen av å ha en strategi

• Högskoleverket peker på betydningen av å forankre den pedagogiske bruken av IKT i institusjonenes overordnede strategi for undervisning og læring.

26

Betydningen av å ha en ledelse med fokus på utdanning• Dersom strategiene skal få gjennomslag og omsettes

i praktisk arbeid, bør de forankres i ledelsen på alle nivå, fra sentral ledelse til de små enheter. Vi snakker her om en ledelse med fokus på utdanning. Et tydeligere pedagogisk lederskap i høyere utdanning synes å være en viktig forutsetning for suksess (Nordkvelle m. fl).

Prorektor for utdanning og læringskvalitet NTNU. Berit Kjeldstad

27

Bør vi løfte sammen?

28

…for å være forberedt på fremtidens student…

• http://www.youtube.com/watch?v=7_zzPBbXjWs