e-prüfungen mit dem online- prüfungssystem (ops) an der ... · exzellentes lehren und lernen in...

1

Daniela Janßen M.A.

Dipl.-Inform. Mazdak Karami

Dr. rer. nat. Esther Borowski

Prof. Dr. phil. Anja Richert

Univ.-Prof. Dr. rer. nat. Sabina Jeschke

apl. Prof. Dr. rer. nat. Dipl.-Ing. Martin

Baumann, MME

RWTH Aachen University

GML² 2014 Berlin, 14.03.2013

e-Prüfungen mit dem Online-Prüfungssystem (OPS) an der RWTH Aachen University

INHALTSVERZEICHNIS

2

1. EINFÜHRUNG E-PRÜFUNGEN

2. RAHMENBEDINGUNGEN AN DER

RWTH AACHEN UNIVERSITY

3. ONLINE-PRÜFUNGSSYSTEM (OPS)

4. PRAKTISCHE ANWENDUNG

5. SERVICEANGEBOTE

6. FAZIT UND AUSBLICK

INHALTSVERZEICHNIS

3






5. SERVICEANGEBOTE


INSTITUTSCLUSTER IMA/ZLW & IFU

4

apl.-Prof. Dr. habil. Ingrid Isenhardt

1. Stellvertr. Direktorin

Direktorin

2. Stellvertr. Direktor

Dr. rer. nat. Frank Hees

IMA

Lehrstuhl für Informationsmanagement im Maschinenbau Prof. Dr.-Ing. Daniel Schilberg

Geschäftsführer Juniorprofessur

ZLW

Zentrum für Lern- und Wissensmanagement

Prof. Dr. phil. Anja Richert

Geschäftsführerin Juniorprofessur

IfU

An-Institut für Unternehmenskybernetik

Dr. rer. nat. René Vossen

Geschäftsführer

Prof. Dr.-Ing. em. Klaus Henning

Senior Advisor

Verkehr und Mobilität Dr. phil. Max Haberstroh

Produktions-technik Dr.-Ing. Tobias Meisen

Knowledge Engineering Claudia Jooß M.A.

Didaktik der MINT-Wis-senschaften

Katharina Schuster M.A.

Karriere- forschung Dr. rer. nat. Esther Borowski

Technische Kybernetik

Dipl.-Inform. Daniel Ewert

e-Health Dipl.-Inform. Philipp Meisen

Wirtschafts- und Sozial-kybernetik Dr.-Ing. Katharina Tarnacki

Administration

IT & Medien- technik

Public Relations

Innovations- & Zukunfts- forschung Dr. rer. nat. Florian Welter

Prof. Dr. rer. nat. Sabina Jeschke

Exzellentes Lehren und Lernen in den

Ingenieurwissenschaften (ELLI)

Kooperationspartner:

Center of Excellence in Academic Teaching

(ExAcT)

BMBF-PROGRAMM „QUALITÄTSPAKT LEHRE“

5

Forschung zu fach- und

mediendidak-

tischen

Themenfeldern

exzellenter

Lehre

Qualifizierung aller Lehrenden

und

an der Lehre

beteiligten

MitarbeiterInne

n der RWTH

Aachen

University

Vernetzung der Anbieter

wissenschaftlicher

Dienstleistungen

und Weiter-

bildungsangeboten

im Themenfeld der

Hochschullehre

und Didaktik

Virtuelle Lernwelten

Mobilität und Internationali-

sierung

Student Life Cycle

Professionelle Handlungs-kompetenz

• Begriff e-assessment wird mit elektronischem Prüfen (e-Prüfungen) übersetzt

• formative, summative und diagnostische Funktionen von Prüfungen sind auch mit

e-Prüfungen möglich

• elektronisches Prüfen muss nicht rein summatives Prüfen sein

EINFÜHRUNG E-PRÜFUNGEN

Definition e-assessment

Leistungsbeurteilung, bei der in den Arbeitsschritten

der Erstellung, Durchführung und Auswertung von

Lehrenden und Lernenden ein Computer genutzt wird

(JISQ 2007)

6

• gestiegene Anzahl an Studierenden

• Einführung von Bachelor und Master: Modularisierung der Studiengänge

hohe Anzahl an studienbegleitenden Leistungsnachweisen notwendig

erhöhtes Prüfungsaufkommen und Prüfungsaufwand

• notwendig: effiziente Prüfungen in der Vorbereitung, Durchführung und Nachbereitung

Ansatz: e-Prüfungen zur Bewältigung

des erhöhten Prüfungsaufkommens!


Gründe für die Nutzung von e-Prüfungen

7

Chancen durch e-Prüfungen

• vereinfachte Verwaltung und

Wiederverwendung der Fragen durch

Verwendung von Fragepools

• standardisierte Abläufe

• für große Hörerzahlen geeignet

• Zeitersparnis durch automatisierte

Auswertbarkeit

• erweiterte Kompetenzabfrage durch

Medieneinbindung (Videos, Bilder…)

Herausforderungen bei e-Prüfungen

• (einmalig) hoher Aufwand zur Erstellung

der Klausurfragen

• einmaliger Zeitaufwand zur Einarbeitung

der Prüfungsfragen in die Software

• Verfügbarkeit der IT-Infrastruktur

(Räume, PC‘s)

• Stabilität und Zuverlässigkeit des Systems


8

INHALTSVERZEICHNIS

9






5. SERVICEANGEBOTE


• 2013: Start des 2-jährigen Pilotprojekts zur Etablierung von e-Prüfungen an der RWTH

• kostenfreie Nutzung des CIP-Pools der RWTH für alle Lehrenden

• Räume: vier klimatisierte Räume im gleichen Gebäude mit Beschallungsanalage

• Hardware: 316 gleichwertige PCs, ausfallsicherer Prüfungs-Server im gleichen Gebäude

• Software:

Online-Prüfungssystem (OPS 2.7) der Inside Unternehmensgruppe

RAHMENBEDINGUNGEN AN DER RWTH AACHEN UNIVERSITY

10

0

5

10

15

20

25

30

35

1 2 3

RAHMENBEDINGUNGEN AN DER RWTH AACHEN UNIVERSITY

11 WS 2012/2013

SS 2013 Start des Pilotprojekts WS 2013/2014

6000

4000

2000

0

Anzahl der e-Prüfungen im Semester

Anzahl der Studierenden im Semester

INHALTSVERZEICHNIS

12






5. SERVICEANGEBOTE


• 2003: erste e-Prüfung an der RWTH Aachen mit 12 Teilnehmenden

• Nutzung des Online-Prüfungssystem OPS

• seit 2001: Entwicklung des OPS an der RWTH Aachen University

• Entwicklung des Prototypens aus einer Dissertation heraus

• Weiterentwicklung und Support durch die Firma Inside Unternehmensgruppe

• webbasiert, plattform- und browserunabhängig

• Integration von didaktischen und technischen Anforderungen der RWTH in Updates

ONLINE-PRÜFUNGSSYSTEM (OPS)

13

• Stufe 3: Interpretieren und Beurteilen

• Transferleistung

• Stufe 2: Anwenden und Umsetzen

• Abfrage von Faktenwissen mit Tendenz zur Transferleistung

• Stufe 1: Kennen und Verstehen

• Abfrage von Faktenwissen


Lernzieltaxonomie im OPS

14

Interpretieren und Beurteilen

Anwenden und Umsetzen

Kennen und Verstehen

Gra

d d

er K

om

ple

xitä

t

Eingabe der Stufe des Lernziels


Funktionen des OPS

15

Aufgaben, Ressourcen, Lernziele, Klausuren, Tests

Entwicklung

Durchführung, Auswertung, Ergebnisse

Verwaltung

User-, Kontextverwaltung, interne Systemdokumentation

Administration

Einbinden von Medien, z.B. Audio (WAV, MP3), Video (AVI, MP4), Bilder (JPG, GIF), Flash-Animationen

Aufgabenerstellung

manuelle oder automatische Zusammenstellung über Parametrisierung von Klausuren auf Basis bestehender Aufgabenpools

Klausurerstellung

Einzelauswertung über Export von PDF, Gesamtauswertungen über Export von Excel oder CSV Dateien

Auswertung


Aufgabentypen im OPS

16

Mehrfachauswahl

Zuordnungsaufgabe

Ordnungsaufgabe

Ergänzungsaufgabe

Klassifikationsaufgabe

1. Mit Mehrfachauswahl: Antworten A und B stimmen, C nicht

2. Mit Einfachauswahl: Antwort A, B oder C stimmt

Ordnen Sie A, B und C den Bildern 1, 2 und 3 zu.

Bringen Sie die Begriffe in die richtige Reihenfolge!

Lückentext – Ergänzungsmöglichkeiten (Begriffe) werden vorgegeben

Ordnen Sie die Aussagen als richtig oder falsch zu!

INHALTSVERZEICHNIS

17






5. SERVICEANGEBOTE


PRAKTISCHE ANWENDUNG

18


19


20


21

• Elektronische Multiple-Choice Klausur

• WS 2013/2014: 1335 Studierende

• Durchführung an zwei Tage á zwei bis drei

Durchläufen mit je ca. 300 Studierenden

• Rahmenbedingungen:

• 120 Minuten Bearbeitungszeit

• je Vorlesungsmodul 7 Fragen

• insgesamt 77 zu bearbeitende Fragen

• 3 Fragekategorien mit unterschiedlichen

Schwierigkeitsstufen (3, 5 bzw. 8 Punkte)

• maximal 330 Punkte erreichbar


Beispiel-Klausur „Kommunikation- und Organisationsentwicklung“ (KOE)

22

INHALTSVERZEICHNIS

23






5. SERVICEANGEBOTE


• Initiative zur Einführung von e-Prüfungen an der RWTH Aachen University

• Electronic Assessment: allgemeine Bezeichnung für den Vorgang des Prüfens mit Hilfe

der Informationstechnologie

• Services: Schulung, Beratung, Coaching, organisatorischer Support

• Solutions: Erforschung neuer Methoden

• Systems: technischer Support, Administration, Weiterentwicklung

SERVICEANGEBOT

24

• Beratung

• Besuch und Beratung von Interessenten durch das eas³y-Team

• Vorstellung des Online-Prüfungssystems (OPS)

• Sichtung von Klausurinhalten auf Umsetzbarkeit

• Hinweise und Informationen zur Organisation und Durchführung

• Schulung

• Seminarangebot in Kooperation mit ExAcT und ELLI

• Einführung in die theoretischen Grundlagen von e-Prüfungen

• Entwicklung und Einstellung eigener Klausurfragen ins OPS

• individueller Support

• Unterstützung auf didaktischer, technischer sowie organisatorischer Ebene zur

Erstellung, Durchführung und Nachbereitung von e-Prüfungen

• Nachbereitung

• Sammeln von Feedback in Review-Sitzungen im Nachgang zur Optimierung der Prozesse

SERVICEANGEBOT

25

OPS Seminar: e-Prüfungen erfolgreich planen und durchführen

Lehrende, die ihre Prüfungen elektronisch umsetzen und das OPS der RWTH Aachen

kennenlernen und ausprobieren möchten

Einführung in die Grundlagen von e-Prüfungen

Relevanz und Formulierung von Lernzielen

Entwicklung und Einstellung eigener Klausurfragen ins OPS

Musterbeispiele für e-Prüfungen (Show-Case Klausur)

Auswahl und Einsatz verschiedener Aufgabentypen in e-Prüfungen

Rechtliche Grundlagen von e-Prüfungen

SERVICEANGEBOT

26

INHALTSVERZEICHNIS

27






5. SERVICEANGEBOTE


• Einsatz verschiedener Medien und externer Programme ermöglicht Variationen innerhalb einzelner Aufgabentypen

• Erweiterung des möglichen Aufgabenspektrums in e-Prüfungen

• bislang vorwiegend Überprüfung kognitiver Lernziele

• Potential psychomotorische Lernziele abzufragen

• verschiedene Aufgabentypen und Medieneinbindung helfen, die Motivation der Studierenden zu erhöhen

• Erhöhung des Praxisbezugs

• Möglichkeit des kompetenzorientierten Prüfens

FAZIT

28

• Technologie verändert Bildung: Veränderung des Lernbegriffs & Forderung nach adaptiven Konzepten

• Großes Interesse an alternativen Prüfungsformen, insbesondere in Studiengängen mit großen Hörerzahlen

• e-Prüfungen bereits als fester Bestandteil der Lehre, besonders in der Medizin

• Gezielte Begleitforschung zum Einsatz von e-Prüfungen an der Hochschule

• Mut und Bekenntnis zur Einführung von e-Prüfungen

• Problematik „e-Prüfungen als Schnittstelle zwischen Didaktik und IT-Maßnahmen“ thematisieren und aufarbeiten

• eLearning & e-Prüfungen als Service der IT-Dienste-Infrastruktur von Hochschulen implementieren

AUSBLICK E-PRÜFUNGEN

Wo stehen wir?

Was muss sich ändern?

29

• e-Prüfungen als Ersatz für traditionelle Prüfungsformen?!

• vermehrter Einsatz von e-Prüfungen als Selbstlerneinheiten, Zulassungstests, Self-

assessment

• Individuelle Key-Feature-Klausuren

• Einsatz von Hybrid-Klausuren

• Ausbau der Medieneinbindung

• Einsatz von Tablet-Computern

• Active-Audio-Input

• Gestenbasiertes Computing:

• Erkennen von Körperbewegungen durch den Computer

• Steuerung durch Hand- oder Armbewegungen

AUSBLICK E-PRÜFUNGEN

Was ist noch denkbar?

30

• Berendt, B. , Szczyrba, B., Wildt, J. (2006). Neues Handbuch Hochschullehre, 2. Aufl. Raabe Verlag.

• Bloom, B. ,u.a. (1976). Taxonomien von Lernzielen im kognitiven Bereich. Übersetzt von Eugen Füner und Ralf Horn. Mit einem Nachwort von Rudolf Messner. 5. Aufl. Beltz Verlag: Weinheim, Basel.

• JISC Joint Information Systems Comittee (2007). Effective Practice with e-Assessment. An Overview of technologies, policies and practice in further and higher education.

• Kratwohl, D. R., Bloom, B. S. & M., Masia B. (1975). Taxonomie von Lernzielen im affektiven Bereich. Weinheim und Basel: Beltz.

• Rohlfes, J. (1996). Theoretiker, Praktiker, Empiriker. In: GWU Jg. 47, 98-110.

• Rüdel, C.(2009). Was ist eAssessment? eAssessment ist eines der Schlagwörter der letzten Jahre, aber was wird darunter eigentlich verstanden? Hamburger e-Learning Magazin, 22-24.

• Universität Zürich. Bereich Lehre- Arbeitsstelle für Hochschuldidaktik (2008): Lernziele formulieren in Bachelor- und Masterstudiengängen.

• Vogt, M., Schneider, S., Koordinationsstelle Multimedia JLU Gießen (2009). E-Klausuren an Hochschulen. Didaktik, Technik, Systeme, Recht, Praxis. 1. Auflage. Gießen.

• OPS-Hilfebereich, © inside LuIS GmbH

• http://www.inside-online.de/

LITERATUR

31

32

http://www.exact.rwth-aachen.de

[email protected]

WEITERE INFORMATIONEN:

Daniela Janßen M.A.

[email protected]

0241-8091162

Vielen Dank für Ihre Aufmerksamkeit!

Dipl.-Inform. Mazdak Karami

[email protected]

0241-8085689

www.eas3y.hia.rwth-aachen.de

e-prüfungen mit dem online- prüfungssystem (ops) an der ... · exzellentes lehren und lernen in...

Documents