Weiterentwicklung kompetenzorientierter Prüfungen - Workshop bei der 7. Lehre-hoch-N-Netzwerkkonferenz

Weiterentwicklung kompetenz-
orientierter Prüfungen
Workshop bei der 7. Lehren
-Netzwerkkonferenz
Mathias Magdowski
Lehrstuhl für Elektromagnetische Verträglichkeit
Institut für Medizintechnik
Otto-von-Guericke-Universität, Magdeburg
20. April 2021
Lizenz: cb CC BY 4.0 (Namensnennung, Weitergabe unter gleichen Bedingungen)

Online Proctoring Take Home Exams Alternative Formate Offline-Prüfungen
Vorstellungsrunde
Quelle: https:
//pixabay.com/de/illustrations/
gruppe-diskussion-menschen-personen-1962592/
I Wer bin ich?
Weiterentwicklung kompetenzorientierter Prüfungen 2

Vorstellungsrunde
Quelle: https:
I Wer bin ich?
I Von welcher Hoch-
schule komme ich?

Vorstellungsrunde
Quelle: https:
I Wer bin ich?
I Von welcher Hoch-
schule komme ich?
I Was mache ich dort?

Vorstellungsrunde
Quelle: https:
I Wer bin ich?
I Von welcher Hoch-
schule komme ich?
I Wie nah bin ich an
den Studierenden
dran?

Vorstellungsrunde
Quelle: https:
I Wer bin ich?
I Von welcher Hoch-
schule komme ich?
I Wie nah bin ich an
den Studierenden
dran?
I Wie technisch-affin
bin ich?

Organisatorisches
Folien:
ja

Organisatorisches
Folien:
ja
Aufzeichnung:
nein

Organisatorisches
Folien:
ja
Aufzeichnung:
nein
Zwischenfragen:
gern

Zeitplan
Vorstellungsrunde:
13:00 Uhr bis 13:15 Uhr
Input:
13:15 Uhr bis 13:35 Uhr
Kleingruppenarbeit:
13:35 Uhr bis 14:10 Uhr
Plenum:
14:10 bis 14:30 Uhr

Die gute alte Zeit . . .
Quelle: https://twitter.com/LehrstuhlEMV/status/1157209267926999041

Mündliche Prüfungen – einfach digitalisierbar
Quelle: https://twitter.com/MMagdowski/status/1242060825030000641

Herausforderungen bei Online-Prüfungen
I Passung zur Lernmethode und den Lernzielen
(Constructive Alignment)

I Korrekturaufwand/Skalierbarkeit

I Authentizität & Originalität

I Datenschutz

I Datenschutz
I Rechtssicherheit

I Datenschutz
I Rechtssicherheit
I Transparenz

I Datenschutz
I Rechtssicherheit
I Transparenz
I Verfügbarkeit & Integrität

Traditionelle Prüfungsformen vs. reale Arbeitswelt
Source: https://pixabay.com/de/photos/
taschenrechner-notizblock-1687962/

Traditionelle Prüfungsformen vs. reale Arbeitswelt
Source: https://pixabay.com/de/photos/
taschenrechner-notizblock-1687962/
Source: https://pixabay.com/de/
arbeitsplatz-team-gesch%C3%
A4ftstreffen-1245776/

Zeitgemäße Prüfungen als Treiber von
Lehrinnovationen
Quelle: Adriano Montefusco, https://twitter.com/AdroMontefusco/status/1375400899745619968

Übersicht
Online Proctoring
Take Home Exams bzw. Open-Book-Prüfungen
Alternative Prüfungsformate
Offline-Prüfungen

Online Proctoring – Was ist das?
Proctor = Prüfungsaufseher*in
Quelle: John Samuel Agar (1773–1858) „History of the University of Cambridge“ (1815), Public Domain,
https://commons.wikimedia.org/w/index.php?curid=26564294

Wie sieht das dann in der Praxis aus?
Quelle: Juerg Widrig, „Sicheres Prüfen im Fernunterricht mit isTest2 und Zoom in drei Schritten“,
https://www.linkedin.com/posts/juerg-widrig-a66006125_
praesfen-fernunterricht-istest2-activity-6650033482833641473-Vlcr/

Anbieter
(a) https://examity.com (b) https://proctoru.com
(c) https://proctortrack.com (d) https://proctorio.com

Quelle: Ordnung zur Bewältigung der durch die Coronavirus SARS-CoV-2-Epidemie an den Betrieb der Bergischen
Universität Wuppertal gestellten Herausforderungen in Studium, Lehre und Prüfungen, „Sicheres Prüfen im
Fernunterricht mit isTest2 und Zoom in drei Schritten“,
https://www.qsl.uni-wuppertal.de/fileadmin/qsl/7_Newsletter/am20061.pdf

Diskussion der Vor- und Nachteile
Leitbild Lehre:
„Die Basis unserer Informations- und Kommunikati-
onskultur sind Vertrauen und Transparenz.“

Diskussion der Vor- und Nachteile
Leitbild Lehre:
„Die Basis unserer Informations- und Kommunikati-
onskultur sind Vertrauen und Transparenz.“
Offene Fragen:
I Warum per Post? (aufwendig, teuer, internationale
Studierende, Papierkrieg, Verlust von Briefen, . . . )
I dritte Personen im Raum, Knopf im Ohr
I Einspeisen vorproduzierter Videobilder und Töne
I Toilettenbesuch
I Bandbreite, Umgang mit Verbindungsabbrüchen
I Aufwand für die aufsichtsführende Person & Hotline

Mögliche Angriffsvektoren
Quelle: Jake Binstein, „The points of view of both of these webcams (at the top-center of the laptop) are the same.“,
https://jakebinstein.com/wp-content/uploads/2015/01/Notes-On-Laptop.jpg

Weitere Links
Studentische Meinungen:
I „Exam anxiety – how remote test-proctoring is creeping
students out“
I „On Knuckle Scanners and Cheating – How to Bypass
Proctortrack, Examity, and the Rest“
I Podcast BldgAltEntf E026
Handreichungen zur Recht und Datenschutz:
I „Was beim digitalen Prüfen rechtlich zu beachten ist“
I „Homeoffice, Klausuren und Videoüberwachung –
Datenschutz: 0 Punkte“
I „Handreichung zu Prüfungsformen im Sommersemester
2020 der HAW München“

Take Home Exams bzw.
Open-Book-Prüfungen

Take Home Exams
I eine oder mehrere komplexe Prüfungsaufgaben
I praktisch alle Hilfsmittel zugelassen
I knapper Zeitrahmen, aber zeitlich und örtlich ungebunden
I Eigenständigkeitserklärung der Studierenden

Take Home Exams
Vorteile:
I keine Aufsicht nötig, Technik-Einfluss minimiert
I kein Auswendiglernen nötig, freie Zeiteinteilung

Take Home Exams
Vorteile:
I keine Aufsicht nötig, Technik-Einfluss minimiert
I kein Auswendiglernen nötig, freie Zeiteinteilung
Nachteile:
I randomisierte Aufgaben nötig, aufwendige Korrektur
I kein Auswendiglernen nötig, dafür Absprachen möglich

Take Home Exams
Mögliche Fragestellungen:
I erworbenes Wissen anwenden
I Sachverhalte analysieren
I Situationen vergleichen
I Fakten bewerten
I neue Lösungswege für Probleme entwickeln
siehe: https://learn.wu.ac.at/open/distanzlehre/
remote-take-home-exam

Beispiel für randomisierte Aufgaben
C1
u1(t)
i1(t)
C2
u2(t)
L1
u3(t)
C3
u4(t)
i4(t)
L2
u5(t)
i5(t)
uq(t)
iq(t)
R1
u1(t)
i1(t)
C1
u2(t)
L1
u3(t)
i3(t)
R2
i4(t)
C2
u5(t)
i5(t)
uq(t)
iq(t)
R1
u1(t)
i1(t)
R2
u2(t)
L1
u3(t)
i3(t)
C1
u4(t)
i4(t)
R3
u5(t)
uq(t)
iq(t)
C1
u1(t)
i1(t)
C2
u2(t)
R1
u3(t)
L1
u4(t)
i4(t)
C3
u5(t)
i5(t)
uq(t)
iq(t)

Individuell zugehörige Musterlösungen
<
{û}
,
<

î

= {û} , =

î

î1
û1
û2
û3
û4
î4
î5
û5
ûq

{û}
,

î

= {û} , =

î

î1
û1
û2
û3
î3
î4
î5 û5
ûq

{û}
,

î

= {û} , =

î

û1
î1
û2
û3
î3
î4 û4
û5
ûq

{û}
,

î

= {û} , =

î

û1
î1
û2
û3
û4
î4
î5
û5
ûq

Abwandlungen von aufsichtslosen Online-Prüfungen
Prüfungsbogen zum Download:
I vorgefertigter Prüfungsbogen, weniger Bearbeitungszeit
I wenig Technikprobleme, schwieriges Aufgabendesign

Prüfungsbogen zum Download:
I vorgefertigter Prüfungsbogen, weniger Bearbeitungszeit
I wenig Technikprobleme, schwieriges Aufgabendesign
Schriftliche Prüfungen direkt in Moodle:
I mit der Aktivität Test direkt in Moodle, online bearbeitbar
I z. B. Freitextfragen, Zuordnungsfragen,
Drag-and-Drop-Fragen, Zahlenwert und Einheit
I halbautomatische Auswertung, stabile Technik erforderlich

Online-Multiple-Choice-Prüfungen in Moodle:
I vollautomatische Auswertung
I stabile Technik erforderlich, Moodle-Überlastung möglich
I benötigt großen Pool „nicht-googlebarer“ Fragen
I Fragen und Antwortmöglichkeiten mischen
siehe:
https://ctl.univie.ac.at/home-learning/pruefen/

Online-Multiple-Choice-Prüfungen in Moodle:
I vollautomatische Auswertung
I stabile Technik erforderlich, Moodle-Überlastung möglich
I benötigt großen Pool „nicht-googlebarer“ Fragen
I Fragen und Antwortmöglichkeiten mischen
siehe:
https://ctl.univie.ac.at/home-learning/pruefen/
Idee für große Aufgaben- und Fragenpools:
I Studierende entwickeln selbst Aufgaben
I PeerWise

Alternative Prüfungsformate in digitalen
Lehr-Lern-Umgebungen
Einteilung nach
überfachlichen
Kompetenzen:
I digitale Kooperation
Kollaboration
I wissenschaftliches Arbeiten
I Präsentation
Argumentation
I Medienkompetenz
Quelle: Pixabay
https://pixabay.com/illustrations/job-search-interview-job-search-1845954/

Digitale Kooperation Kollaboration
Mögliche Prüfungsformen:
I quantitative und qualitative
Bewertung der Aktivität in
Online-Foren
I Erstellung und gegenseitige
Begutachtung von digitalen
Projektarbeiten (inklusive der
Dokumentation des
Entstehungsprozesses)
I gemeinsame Anfertigung von
digitalen Modellen,
Simulationen oder Prototypen
Quelle: Pixabay https://pixabay.com/illustrations/social-media-personal-581783/

Beispiel: Personalisierbare Aufgaben und anonymer
Peer Review
Lightning Talk (5 min):
https://www.youtube.com/watch?v=LDw_Ifmg2WM

Wissenschaftliches Arbeiten
I Schreiben einer
(wissenschaftlichen)
Seminararbeit
I Erstellung eines
(elektronischen) Portfolios
von Lernartefakten bzw.
eines Lerntagebuches
I online-basierte
Simulationen und
Fallstudien
Quelle: Pixabay https://pixabay.com/vectors/portfolio-cv-business-job-work-2903909/

Beispiel: Sammelband studentischer Berichte
http://journals.ub.uni-magdeburg.de/ubjournals/index.php/LEGO

Präsentation Argumentation
I Online-Diskussionen
I Verfassen von öffentlichen
Meinungsbeiträgen
I digitale Postersessions
I Videovorträge
I mündliche Prüfungen per
Videokonferenz
Quelle: Pixabay
https://pixabay.com/illustrations/online-webinar-teacher-conferencing-3307293/

Beispiel: Video-Vorträge aus einem Seminar
https://twitter.com/MMagdowski/status/1264615811546824705

Medienkompetenz
I studentische Erstellung von
Erklärvideos
I Video-Dokumentationen
der Lösung von Aufgaben
I Aufzeichnungen von
Podcasts
I Wissenschaftskommunika-
tion in sozialen Medien
Quelle: Pixabay https://pixabay.com/vectors/internet-web-page-video-article-3738875/

Beispiel: Videolösung personalisierter Aufgaben
https://www.youtube.com/watch?v=8pKgmvlZG54

Offline-Prüfungen in einem Fußballstadion
Quelle: South Korean Jobseekers Take Written Exam In Football Stadium To Avoid Coronavirus
(https://www.ladbible.com/news/
news-south-koreans-take-exam-in-football-stadium-to-avoid-coronavirus-20200405)

Offline-Prüfungen in einer Messehalle
Quelle: Mathias Magdowski, https://twitter.com/LehrstuhlEMV/status/1284448510558056450

Einhaltung der Hygienemaßnahmen?
I viele Räume oder sehr große Räume, Lüftung?
I personalintensiv (Aufsicht, Einweisung, Kontrolle)
I schwierige Logistik (Wartebereich, Ausgeben der
Aufgaben, Abgabe der Lösungen, Zwischenfragen)
I Identifikation trotz Mund-Nasen-Schutz
Ablauf Verhalten bei Präsenzprüfungen für Studierende:
Quelle: www.iMooX.at (https://www.youtube.com/channel/UC4XmEpSP44Gi3kcfOt5GNVQ)

Arbeitsaufträge (Gruppe 1)
I Wie müssen Prüfungsformate aussehen, die intrinsisch
ohne Überwachung auskommen?
I Wie kann man die Kompetenzen des 4K-Modells
(Kreativität, Kommunikation, Kollaboration und kritisches
Denken) mit fachlichen Kompetenzen vereinbaren?

I Wie können individuelle und authentische Aufgaben auch
für große Kohorten ermöglicht werden?
I Lässt sich studentischer Peer Review auch für Prüfungen
nutzen?

I Inwieweit wirkt eine Reform der Prüfungskultur auch auch
Transformationsmotor für die Veränderung der Lehr- und
Lernkultur?
I Wie kann man formatives (semesterbegleitende
Prüfungen) und summatives Assessment (eine
Abschlussprüfung) kombinieren?

Fazit
weniger als 20 Prüflinge:
I mündliche Online-Prüfungen oder alternative Formate

Fazit
zwischen 20 und 100 Prüflingen:
I Take Home Exams mit randomisierten,
kompetenzorientierten Aufgaben

Fazit
mehr als 100 Prüflinge:
I Online-Prüfungen mit MC-Fragen aus großen Fragenpools
I Offline-Prüfungen in Sporthallen/Stadion/Messehalle

Fazit
mehr als 100 Prüflinge:
I Online-Prüfungen mit MC-Fragen aus großen Fragenpools
I Offline-Prüfungen in Sporthallen/Stadion/Messehalle
Kein aufwendiges und wenig nutzbringendes Online-Proctoring!

Vielen Dank für Eure/Ihre Aufmerksamkeit!
Gibt es weitere Fragen?

Weiterentwicklung kompetenzorientierter Prüfungen - Workshop bei der 7. Lehre-hoch-N-Netzwerkkonferenz

Empfohlen

Empfohlen

Weitere ähnliche Inhalte

Ähnlich wie Weiterentwicklung kompetenzorientierter Prüfungen - Workshop bei der 7. Lehre-hoch-N-Netzwerkkonferenz

Ähnlich wie Weiterentwicklung kompetenzorientierter Prüfungen - Workshop bei der 7. Lehre-hoch-N-Netzwerkkonferenz (20)

Mehr von Mathias Magdowski

Mehr von Mathias Magdowski (20)

Weiterentwicklung kompetenzorientierter Prüfungen - Workshop bei der 7. Lehre-hoch-N-Netzwerkkonferenz