Technik

Marktüberblick

System (alphabetisch) und bekannter Einsatzort	E-Unterstützung von Prüfungs-			Hauptsächlich eingesetzt bei					Spezielle Hardware nötig?
	Vorbereitung	Durchführung	Auswertung	Info	Auswahl	Formativ	Summativ	QS
CASUS MH Hannover TiHo Hannover	+	+	+			+
CLIX Testing and Assessment	+	+	+			+	+
C-Test Uni Münster	+	+	+	+
DoIT (Stud.IP) Uni Bremen	+		+ (Peer Review)			+
EvaExam	+	auf Papierbogen	+ (nach Scan)				+		+
EvaSys MH Hannover TU Clausthal	+	+ (auch auf Papier)	+					+	+
HN Navigator HS Niederrhein	+	+	+	+
Interactive Voting System TU Clausthal		+				+			+
LON CAPA HS Ostfalia	+	+	+			+	+
mobiTED		+				+			+
Online eXam (ILIAS) Uni Mainz	+	+	+			+	+
OpenMark (moodle) Open University	+	+	+			+
PowerVote TED-System TiHo Hannover		+				+			+
Questionmark Perception	+	+	+			+	+
Q[kju:]-Exam (Codiplan) MH Hannover TiHo Hannover	+	+	+				+	+	+
Respondus (WebCT)	+	+	+			+	+
SAMigo (Sakai)	+	+	+			+	+
testMaker LU Hannover		+		+
TestStudio (LPLUS) Uni Bremen Uni Duisburg/Essen	+	+	+				+
Virtuelles Prüfungssystem (Stud.IP) HS Osnabrück Uni Osnabrück	+	+	+			+	+
Visopoly Uni Oldenburg		+		+
Vista Quiz (Blackboard/WebCT)	+	+	+			+	+

Adaptive Ansätze

• Adaptives Testen; die aufgeführten Systeme arbeiten derzeit ausschließlich mit MC-Fragen.
  • SIETTE
  • Personalized Achievement Summary System (PASS)
  • COMPASS
• Adaptive Fragen; aufgeführte Systeme stammen aus wissenschaftlichen Veröffentlichungen, befinden sich also im Experimentalstadium und liegen i.d.R. nur als Prototyp vor.
  • CosyQTI
  • iAdaptTest

Betrugssicherheit

Sicherheit bei E-Klausuren, mgl. Angriffspunkte und Maßnahmen

Idealer Prozess

1. Prüfling arbeitet mit vorgesehener Hardware, z.B. Terminal, Tastatur, Headset etc.
2. Hardware gestattet Zugriff auf lokale Prüfungssoftware, z.B. den Client eines Assessment-Systems, ein Arbeitsmittel oder einen Browser
3. Lokale Software ermöglicht Zugang zum Prüfungsserver, auf dem sich z.B. E-Klausur-System oder ein Lernmanagementsystem mit entsprechender Funktionalität befindet
4. Der Prüfungsserver übermittelt Aufzeichnungen an ein digitales Hochschularchiv und/oder Prüfungsergebnisse an ein Prüfungsverwaltungssystem

Angriffspunkte

• Fremde Personen: Prüfungen sind i.d.R. Einzelleistungen, entsprechend sind ein Austausch mit anderen Prüflingen, die Weitergabe von Ergebnissen oder Rücksprache mit Experten zu vermeiden.
• Fremdhardware: Ebenso ist darauf zu achten, dass nur zugelassene Materialien eingesetzt werden. So können Vorlesungsaufzeichnungen oder Nachschlagewerke Lösungen vorweg nehmen, ebenso Mobiltelefone Rücksprache mit Experten ermöglichen oder Netbooks eine Online-Recherche ermöglichen. Gleiches gilt für elektronische Hilfsmittel wie Taschenrechner oder USB-Sticks, auf denen sich vorbereitete Lösungen befinden können.
• Fremdsoftware: Auf einem Prüfungs-PC befinden sich i.d.R. typische Anwendungen des zugrunde liegenden Betriebssystems. Dazu gehören z.B. eine Dateiablage, in der man relevante Informationen hinterlegen hinterlegen kann, aber auch Chatprogramme zur Online-Kommunikation mit anderen, Twitter-Clients zur Veröffentlichung von Prüfungsaufgaben, Instant Messenger für Rückfragen an Experten, digitale Taschenrechner uvm. Zugriff auf entsprechende Software sollte eingeschränkt werden, um einen Austausch oder ähnliches zu vermeiden.
• Fremdserver: Ebenso bieten die meisten Betriebssysteme Standard-Browser, mit denen Prüflinge auf das WWW zugreifen können. Hier ist dafür zu sorgen, dass nur Zugriff auf den Prüfungsserver möglich ist, um Recherchen in Online-Nachschlagewerken wie z.B. Wikipedia oder Messaging-Dienste wie ICQ bzw. Twitter zu verhindern.
• Fremd-Erfassung: Prüfungsergebnisse und die dadurch möglichen Rückschlüsse auf die Qualität der Prüflinge können durchaus wirtschaftliche Begehrlichkeiten wecken. So wäre z.B. der Aufbau einer Absolventen-Schufa möglich, die späteren Arbeitgebern kostenpflichtig Informationen zu ihren Bewerbern bieten kann - entsprechende Auskunfteien versuchen die Arbeitsagenturen derzeit als ELENA aufzubauen. Im Sinne des Datenschutzes und der wirtschaftlichen Ausbeutung von Studierenden- bzw. Arbeitnehmerdaten ist dies auf jeden Fall zu verhindern. Weiterer Punkt ist die Selbstdarstellung via E-Portfolio oder auf den eigenen Profilseiten z.B. im Facebook. Hier ist abzuklären, inwiefern entsprechende Informationen veröffentlicht werden dürfen - automatisierte Veröffentlichung durch Zugriff Dritter auf das Prüfungsverwaltungssystem ist jedoch in jedem Fall auszuschließen.

Lösungsansätze

• Kontrolle vor Ort durch geschulte Aufsichten
• Voreinstellungen der Hardware, z.B. USB-Anschluss deaktivieren (um USB-Sticks mit vorbereiteten Lösungen zu vermeiden)
• Einschränken der Funktionalität des Prüfungssystems
  • Installation nur der notwendigen Software
  • Bereitstellen eines Secure Browsers für den Zugriff (z.B. Safe Exam Browser)
  • Internetzugriff (z.B. auf externe Webseiten wie Wikipedia, Twittern von Prüfungsfragen) einschränken
  • Chat zwischen Prüflingen (oder externen Experten) ausschließen
• Einschränken der Zugriffsmöglichkeiten
  • Voreinstellung des Secure Browsers auf den Server des Prüfungssystems
• Einschränken der serverseitigen Möglichkeiten z.B. durch Aktivieren eines Kiosk-Modus im LMS während der Prüfung
• Vermeiden der Fremderfassung der Prüfungsergebnisse, z.B. durch Karrierebörsen, Headhunter, zur Darstellung auf eigenen Profilseiten oder für Informationsdienste zu Absolventen
• IT-Sicherheit herstellen nach IT-Grunschutzhandbuch

Konnektivität

• Im- und Export von Prüfungsfragen
• Standards wie IMS QTI
• Austauschbarkeit von und Recherche nach Fragepools
• evtl. Unterstützung von Lehrverbünden durch zentrale Repostories
• Einbettung in Hochschulsystemlandschaft
  • Anbindung an Nutzerverwaltung zwecks Authentifizierung
  • Anbindung an Prüfungsverwaltungssystem zwecks Import von Prüflingen und Export von Ergebnissen

Zuverlässigkeit der Systeme

• Störungsfreiheit, Strategien zur Pannenvermeidung (evtl. BSI Grundschutzhandbuch einbinden)
• Fehlertoleranz berücksichtigen (z.B. bei Buchstabendrehern, fehlerhaft festgelegten Wertebereichen, etc.)

Links

• Gegenüberstellung der Funktionen verschiedener Systeme