Online Proctoring: Unterschied zwischen den Versionen

Aus E-Assessment-Wiki
Wechseln zu:Navigation, Suche
(Links)
 
(14 dazwischenliegende Versionen desselben Benutzers werden nicht angezeigt)
Zeile 1: Zeile 1:
 
== Beschreibung ==
 
== Beschreibung ==
Die meisten LMS haben Test-Komponenten, die ein ortsunabhängiges Testen (z. B. bequem von zuhause aus) erlauben. Dieses Testen erfolgt dann i. d. R. unbeaufsichtigt, d. h. die Prüflinge sind auf sich alleine gestellt. Für benotete Prüfungsleistungen sind diese Rahmenbedingungen oftmals nicht ausreichend, da z. B. unerlaubte Hilfestellungen oder unerlaubter Mitteleinsatz ausgeschlossen werden müssen. Hierzu gibt es die Möglichkeit einer Online-Beaufsichtigung, auch Online Proctoring genannt. Voraussetzung dazu ist ein Rechnerarbeitsplatz (z. B. Laptop) mit Webcam und ausreichender Internetverbindung. Während der Prüfung werden dann in zufälligen Abständen Bilder des Prüflings (von der Webcam) und Bildschirmfotos des Desktops gemacht und zusätzlich zur Prüfungsleistung gesichert. Diese sind dann vollautomatisiert oder manuell im Nachhinein analysierbar.
+
Die meisten LMS haben Test-Komponenten, die ein ortsunabhängiges Testen (z. B. bequem von zuhause aus) erlauben. Dieses Testen erfolgt dann i. d. R. unbeaufsichtigt, d. h. die Prüflinge sind auf sich alleine gestellt. Für benotete Prüfungsleistungen sind diese Rahmenbedingungen oftmals nicht ausreichend, da z. B. unerlaubte Hilfestellungen oder unerlaubter Mitteleinsatz ausgeschlossen werden müssen. Hierzu gibt es die Möglichkeit einer Online-Beaufsichtigung, auch Online Proctoring genannt. Voraussetzung dazu ist ein Rechnerarbeitsplatz (z. B. Laptop) mit Webcam und ausreichender Internetverbindung. Während der Prüfung werden dann in zufälligen Abständen z. B. Bilder des Prüflings (von der Webcam) und Bildschirmfotos des Desktops gemacht und zusätzlich zur Prüfungsleistung gesichert. Diese sind dann vollautomatisiert oder manuell im Nachhinein analysierbar.
 +
 
 +
Beaufsichtigt werden sollen also:
 +
* '''Prüfling''': Videoüberwachung des Gesichts, Screencast des Bildschirms, Audio-Mitschnitt (zur Verhinderung von Vorsagern)
 +
* '''Rechner''': Full Screen Modus, Verhinderung weiterer Fenster, Analyse von Tipp- und Mausaktivitäten, Verhinderung mehrerer Monitore
 +
* '''Netzwerke''': Protokoll der Aktivitäten, Logging der aufgesuchten Webseiten, Analyse des Standortes
  
 
== Ziele ==
 
== Ziele ==
Zeile 6: Zeile 11:
 
* Sicherstellen von Chancengleichheit
 
* Sicherstellen von Chancengleichheit
 
* Verhindern bzw. Erkennen von Manipulationen
 
* Verhindern bzw. Erkennen von Manipulationen
 
  
 
== Organisation ==
 
== Organisation ==
Zeile 14: Zeile 18:
 
* '''Record & Review''': Aufzeichnung von Prüfling / Desktop mit folgender manueller Kontrolle (z. B. durch Hochschulpersonal), zeitunabhägig durchführbar, dafür aber keine Live-Unterstützung möglich, größerer Speicheraufwand für die Aufzeichnungen
 
* '''Record & Review''': Aufzeichnung von Prüfling / Desktop mit folgender manueller Kontrolle (z. B. durch Hochschulpersonal), zeitunabhägig durchführbar, dafür aber keine Live-Unterstützung möglich, größerer Speicheraufwand für die Aufzeichnungen
 
* '''Vollautomatisches Proctoring''':  Aufzeichnung von Prüfling / Desktop mit i. d. R. vollautomatischer Kontrolle, oft KI-gestützt, entsprechend leichter skalierbar als manuelle Lösungen, aber dafür sind deutlich mehr Daten zu erheben und zu speichern
 
* '''Vollautomatisches Proctoring''':  Aufzeichnung von Prüfling / Desktop mit i. d. R. vollautomatischer Kontrolle, oft KI-gestützt, entsprechend leichter skalierbar als manuelle Lösungen, aber dafür sind deutlich mehr Daten zu erheben und zu speichern
 
  
 
== Recht ==
 
== Recht ==
 +
Für das Land Nordrhein-Westfalen hat die Rechtsinformationsstelle der Digitalen Hochschule NRW ein Gutachten zur datenschutzrechtlichen Zulässigkeit von Überwachungsfunktionen bei Online-Klausuren unter Leitung von Thomas Hoeren erstellt.<ref>Thomas Hoeren, Malin Fischer & Julian Albrecht: ''Gutachten zur datenschutzrechtlichen Zulässigkeit von Überwachungsfunktionen bei Online-Klausuren'', Projekt Rechtsinformationsstelle Digitale Hochschule NRW, 10.06.2020, [https://www.itm.nrw/wp-content/uploads/RiDHnrw_11.06.20_Gutachten-zur-datenschutzrechtlichen-Zul%C3%A4ssigkeit-von-%C3%9Cberwachungsfunktionen-bei-Online-Klausuren.pdf Download als PDF]</ref>
  
 
== Technik ==
 
== Technik ==
 +
Europäische Lösungen
 
* [https://proctorexam.com/ ProctorExam]
 
* [https://proctorexam.com/ ProctorExam]
* Test Reach
+
* [https://www.testreach.com/ Test Reach]
* RP Now
+
* [https://www.psionline.com/en-gb/platforms/rpnow/ RP Now]
* TeSLA
+
* [https://tesla-project-eu.azurewebsites.net/ TeSLA]
* SMOWL
+
* [https://smowl.net/en/ SMOWL]
* Proctorio
+
* [https://proctorio.com/ Proctorio]
 +
* [https://managexam.com/en/ Manage Exam]
 +
* [https://europe.wiseflow.net/ WiseFlow]
  
 +
Internationale (US) Lösungen
 +
* [https://www.proctoru.com/ ProctorU]
 +
* [https://mettl.com/de/online-remote-proctoring Mettl Proctor Plus]
 +
* [https://examity.com/ Examity]
 +
* [https://www.verificient.com/proctortrack/ Verificient Proctortrack]
 +
* [https://examsoft.com/ ExamSoft]
 +
* [https://proview.io/ Proview]
  
 
== Beispiele ==
 
== Beispiele ==
An der TU München existiert seit 2018 das Projekt "Fernprüfungen", das sich mit der Online-Beaufsichtigung von Prüflingen beschäftigt. Informationen zum Projekt sind hier zu finden:  
+
An der TU München existiert seit 2018 das Projekt "Fernprüfungen", das sich mit der Online-Beaufsichtigung von Prüflingen beschäftigt. Informationen zum Projekt sind hier zu finden: [https://www.prolehre.tum.de/angebote/infrastrukturen/e-pruefungen/fernpruefungen/ Fernprüfungen an der TU München]
* [https://www.prolehre.tum.de/angebote/infrastrukturen/e-pruefungen/fernpruefungen/ Fernprüfungen an der TU München]
+
 
 +
An der Rechts- und Wirtschaftswissenschaftlichen Fakultät der Uni Bayreuth wurde den Studierenden freigestellt, ob sie an der Präsenzklausur oder an der zeitgleich stattfindenden Online-Klausur mit Proctoring (mittels WiseFlow) teilnehmen wollten.<ref>Jannica Budde: ''Dem Schummeln einen Riegel vorschieben'', DUZ Wissenschaft & Management 8/2020, S. 18-23, 2020, [https://www.che.de/download/dem-schummeln-einen-riegel-vorschieben/ Download als PDF]</ref>
  
 
== Bewertung ==
 
== Bewertung ==
Zeile 38: Zeile 53:
 
* Zeitabhängigkeit auch bei Zeitverschiebung
 
* Zeitabhängigkeit auch bei Zeitverschiebung
 
* Keine sichere "Laborumgebung" zur Prüfung herstellbar
 
* Keine sichere "Laborumgebung" zur Prüfung herstellbar
 
=== Kombination mit weiteren Szenarien ===
 
  
 
== Links ==
 
== Links ==
*  
+
* [http://dgwf.net/webinare.html 01.04.2020 - Fernprüfungen (Online-Proctored Exams): Grundlagen, Einsatzszenarien und bisherige Erfahrungen an der TU München mit Dr. Matthias Baume]
 +
* [https://hochschulforumdigitalisierung.de/de/blog/online-proctoring Online Proctoring Interview mit Literaturliste] des Hochschulforums Digitalisierung
 +
* [https://haxko.space/themen/datenschutz/proctoring/ Kritische Analyse von Online-Proctoring-Diensten]
 +
* Armin Himmelrath: [https://www.spiegel.de/panorama/bildung/studium-online-ueberwachung-von-pruefungen-ist-moeglicherweise-rechtswidrig-a-204f1942-da74-4b97-9d46-123513bbf7e7 Laut Gutachten: Online-Überwachung von Studienprüfungen ist möglicherweise rechtswidrig] (Artikel auf Spiegel Online)
  
 
== Literatur ==
 
== Literatur ==

Aktuelle Version vom 19. Juli 2021, 07:48 Uhr

Beschreibung

Die meisten LMS haben Test-Komponenten, die ein ortsunabhängiges Testen (z. B. bequem von zuhause aus) erlauben. Dieses Testen erfolgt dann i. d. R. unbeaufsichtigt, d. h. die Prüflinge sind auf sich alleine gestellt. Für benotete Prüfungsleistungen sind diese Rahmenbedingungen oftmals nicht ausreichend, da z. B. unerlaubte Hilfestellungen oder unerlaubter Mitteleinsatz ausgeschlossen werden müssen. Hierzu gibt es die Möglichkeit einer Online-Beaufsichtigung, auch Online Proctoring genannt. Voraussetzung dazu ist ein Rechnerarbeitsplatz (z. B. Laptop) mit Webcam und ausreichender Internetverbindung. Während der Prüfung werden dann in zufälligen Abständen z. B. Bilder des Prüflings (von der Webcam) und Bildschirmfotos des Desktops gemacht und zusätzlich zur Prüfungsleistung gesichert. Diese sind dann vollautomatisiert oder manuell im Nachhinein analysierbar.

Beaufsichtigt werden sollen also:

  • Prüfling: Videoüberwachung des Gesichts, Screencast des Bildschirms, Audio-Mitschnitt (zur Verhinderung von Vorsagern)
  • Rechner: Full Screen Modus, Verhinderung weiterer Fenster, Analyse von Tipp- und Mausaktivitäten, Verhinderung mehrerer Monitore
  • Netzwerke: Protokoll der Aktivitäten, Logging der aufgesuchten Webseiten, Analyse des Standortes

Ziele

  • Entfernte Beaufsichtigung von Prüflingen
  • Sicherstellen von Chancengleichheit
  • Verhindern bzw. Erkennen von Manipulationen

Organisation

Matthias Baume unterscheidet in seinem Webinar zu Fernprüfungen verschiedene Stufen des Online Proctoring:

  • Videokonferenzsysteme: Bei mündlichen Fernprüfungen, bieten keinen zusätzlichen Schutz vor Manipulation
  • Live Proctoring: Direkte Beaufsichtigung von Prüflingen / Desktop während der Prüfung durch Firmen oder Hochschulpersonal, personalintensiv (und damit teuer), nur wenig Daten müssen gespeichert werden
  • Record & Review: Aufzeichnung von Prüfling / Desktop mit folgender manueller Kontrolle (z. B. durch Hochschulpersonal), zeitunabhägig durchführbar, dafür aber keine Live-Unterstützung möglich, größerer Speicheraufwand für die Aufzeichnungen
  • Vollautomatisches Proctoring: Aufzeichnung von Prüfling / Desktop mit i. d. R. vollautomatischer Kontrolle, oft KI-gestützt, entsprechend leichter skalierbar als manuelle Lösungen, aber dafür sind deutlich mehr Daten zu erheben und zu speichern

Recht

Für das Land Nordrhein-Westfalen hat die Rechtsinformationsstelle der Digitalen Hochschule NRW ein Gutachten zur datenschutzrechtlichen Zulässigkeit von Überwachungsfunktionen bei Online-Klausuren unter Leitung von Thomas Hoeren erstellt.[1]

Technik

Europäische Lösungen

Internationale (US) Lösungen

Beispiele

An der TU München existiert seit 2018 das Projekt "Fernprüfungen", das sich mit der Online-Beaufsichtigung von Prüflingen beschäftigt. Informationen zum Projekt sind hier zu finden: Fernprüfungen an der TU München

An der Rechts- und Wirtschaftswissenschaftlichen Fakultät der Uni Bayreuth wurde den Studierenden freigestellt, ob sie an der Präsenzklausur oder an der zeitgleich stattfindenden Online-Klausur mit Proctoring (mittels WiseFlow) teilnehmen wollten.[2]

Bewertung

Vorteile

  • Ortsunabhängigkeit

Nachteile

  • Zeitabhängigkeit auch bei Zeitverschiebung
  • Keine sichere "Laborumgebung" zur Prüfung herstellbar

Links

Literatur

  1. Thomas Hoeren, Malin Fischer & Julian Albrecht: Gutachten zur datenschutzrechtlichen Zulässigkeit von Überwachungsfunktionen bei Online-Klausuren, Projekt Rechtsinformationsstelle Digitale Hochschule NRW, 10.06.2020, Download als PDF
  2. Jannica Budde: Dem Schummeln einen Riegel vorschieben, DUZ Wissenschaft & Management 8/2020, S. 18-23, 2020, Download als PDF