Einsatzszenarien: Unterschied zwischen den Versionen

Aus E-Assessment-Wiki
Wechseln zu:Navigation, Suche
Zeile 1: Zeile 1:
 +
[[Datei:Campusassessmentkategorien.png|thumb|400px|Kategorien des Campus Assessments]]
 +
Bereits vor Beginn eines Studiums können Studieninteressierte mit Hilfe von Online Self Assessments die Bearbeitung typischer Fragestellungen des gewünschten Studienbereichs erproben. Studienberatungsstellen können mit elektronischen Tests die Stärken und Schwächen ihrer Kandidaten identifizieren und auf dieser Grundlage passende Ratschläge für die Wahl eines geeigneten Studienfachs geben. E-Prüfungen müssen traditionelle mündliche oder schriftliche Prüfungen aber nicht zwingend ersetzen, sondern können die Hochschullehre im Sinne von Blended Learning sinnvoll ergänzen und damit zur Steigerung ihrer Qualität beitragen. Zulassungstests können z.B. Kenntnisse sicherstellen, die für weiterführende Veranstaltungen unerlässlich sind, Einstufungstests helfen hingegen bei der Auswahl geeigneter Kurse. Formatives Prüfen begleitet den Lernprozess kontinuierlich und kann z.B. im Übungsbetrieb dazu beitragen, das Lernen in eine gewünschte Richtung zu lenken. Summatives Prüfen dient auf der anderen Seite der abschließenden Bewertung des Lernerfolgs, z.B. durch elektronische Klausuren. Zur begleitenden Qualitätssicherung ist weiterhin der Einsatz elektronischer Lehrevaluationen denkbar oder der Aufbau elektronischer Klausurenschränke, die bei der Prüfungsvorbereitung helfen können. Die folgenden Abschnitte gehen auf die einzelnen Szenarien näher ein.
 +
 
== Einsatzkategorien ==
 
== Einsatzkategorien ==
[[Datei:Campusassessmentkategorien.png|thumb|400px|Einsatzkategorien im Campus Assessment]]
 
 
Verschiedene Einsatzbereiche sind für elektronische Prüfungen an Hochschulen vorstellbar. I.d.R. sind diese Verfahren nicht dazu gedacht, traditionelle (mündliche oder schriftliche) Prüfungen zu ersetzen, sondern werden zur Steigerung der Qualität im Sinne eines ''Blended Assessment'' didaktisch sinnvoll in die Hochschullehre eingebunden. Es folgt eine Übersicht über Möglichkeiten des Einsatzes elektronischer Prüfungs- und Assessment-Verfahren sowie deren Beschreibung.
 
Verschiedene Einsatzbereiche sind für elektronische Prüfungen an Hochschulen vorstellbar. I.d.R. sind diese Verfahren nicht dazu gedacht, traditionelle (mündliche oder schriftliche) Prüfungen zu ersetzen, sondern werden zur Steigerung der Qualität im Sinne eines ''Blended Assessment'' didaktisch sinnvoll in die Hochschullehre eingebunden. Es folgt eine Übersicht über Möglichkeiten des Einsatzes elektronischer Prüfungs- und Assessment-Verfahren sowie deren Beschreibung.
  

Version vom 25. Juni 2010, 06:16 Uhr

Kategorien des Campus Assessments

Bereits vor Beginn eines Studiums können Studieninteressierte mit Hilfe von Online Self Assessments die Bearbeitung typischer Fragestellungen des gewünschten Studienbereichs erproben. Studienberatungsstellen können mit elektronischen Tests die Stärken und Schwächen ihrer Kandidaten identifizieren und auf dieser Grundlage passende Ratschläge für die Wahl eines geeigneten Studienfachs geben. E-Prüfungen müssen traditionelle mündliche oder schriftliche Prüfungen aber nicht zwingend ersetzen, sondern können die Hochschullehre im Sinne von Blended Learning sinnvoll ergänzen und damit zur Steigerung ihrer Qualität beitragen. Zulassungstests können z.B. Kenntnisse sicherstellen, die für weiterführende Veranstaltungen unerlässlich sind, Einstufungstests helfen hingegen bei der Auswahl geeigneter Kurse. Formatives Prüfen begleitet den Lernprozess kontinuierlich und kann z.B. im Übungsbetrieb dazu beitragen, das Lernen in eine gewünschte Richtung zu lenken. Summatives Prüfen dient auf der anderen Seite der abschließenden Bewertung des Lernerfolgs, z.B. durch elektronische Klausuren. Zur begleitenden Qualitätssicherung ist weiterhin der Einsatz elektronischer Lehrevaluationen denkbar oder der Aufbau elektronischer Klausurenschränke, die bei der Prüfungsvorbereitung helfen können. Die folgenden Abschnitte gehen auf die einzelnen Szenarien näher ein.

Einsatzkategorien

Verschiedene Einsatzbereiche sind für elektronische Prüfungen an Hochschulen vorstellbar. I.d.R. sind diese Verfahren nicht dazu gedacht, traditionelle (mündliche oder schriftliche) Prüfungen zu ersetzen, sondern werden zur Steigerung der Qualität im Sinne eines Blended Assessment didaktisch sinnvoll in die Hochschullehre eingebunden. Es folgt eine Übersicht über Möglichkeiten des Einsatzes elektronischer Prüfungs- und Assessment-Verfahren sowie deren Beschreibung.

Freiwillige Quizzes zur Wiederholung/Vertiefung

Fragesammlungen wie z.B. einfache Multiple-Choice-Tests können im Rahmen einer Veranstaltungsreihe zur Verfügung gestellt werden und noch einmal auf wesentliche Inhalte der vorangegangenen Veranstaltung eingehen. Diese Quizze sind i.d.R. freiwillig, teilnehmende Studierende bleiben dabei anonym. Auf diese Weise werden zwei Dinge erreicht: auf der einen Seite können sich motivierte Lernende noch einmal intensiver mit der Thematik beschäftigen und erhalten einen weiteren Ansatzpunkt zur Vertiefung. Auf der anderen Seite erhält der Dozent durch die statistische Auswertung des Tests ein erstes (und aufgrund der Anonymität und Freiwilligkeit auch ehrliches) Feedback zum Verständnis der Inhalte. Entsprechende Quizzes sind darum einfach und somit auch effizient erstellbar. Zudem sind sie bei regelmäßigen Veranstaltungen problemlos wiederverwendbar, da ein Kopieren oder Abschreiben der Antworten von Quizzes aus vorangegangenen Veranstaltungen keinen nennenswerten Vorteil mit sich bringt. Durch den Einsatz dieses Szenarios stellt ein Lehrender den Studierenden verschiedene Kanäle (schriftlich/elektronisch) zur Aufnahme bereit, so dass diese den für sie sinnvollsten Kanal selbst aussuchen können. Entsprechende Quizzes werden gerne angenommen, da sie gleichsam motivierend wirken. Ein Feedback erfolgt unmittelbar im Anschluss, da korrekte Antworten auf einfachen Fragen bereits komplett vorgegeben werden, eine Auswertung automatisiert erfolgt und keine Notenskala eingestellt werden muss.

Ansprechpartner an den Standorten...

Regelmäßige Aufgaben im Übungsbetrieb

Bei regelmäßigen Veranstaltungen mit Übungsbetrieb, z.B. der klassischen Kombination aus Vorlesung und Übung, hat es sich bewährt, von den Studierenden Übungsaufgaben bearbeiten zu lassen, um die Inhalte der Veranstaltung zu vertiefen und den Lehrenden Feedback zu geben, welche Inhalte verstanden wurden und welche Inhalte in einer der folgenden Veranstaltungen vielleicht noch einmal wiederholt werden sollten.

Es handelt sich bei der regelmäßigen Bearbeitung von Übungsaufgaben um eine formative Form der Prüfung, da sie kontinuierlich im Rahmen einer Veranstaltungsreihe erfolgt, das jeweils bestehende Wissen abzuprüfen versucht, so dass der Lehrende die damit gewonnenen Erkenntnisse z.B. zur Vertiefung oder Wiederholung in den folgenden Veranstaltungen einsetzen kann. Ein großer Vorteil elektronischer Verfahren ist das schnelle Feedback, sowohl für Lehrende als auch für Studierende. Die Studierenden erhalten eine direkte Rückmeldung, welche Fragen sie richtig und welche falsch beantwortet haben und können - falls Inhalte unklar bleiben - diese direkt in der folgenden Veranstaltung ansprechen. Die Lehrenden hingegen erhalten bereits zur nächsten Veranstaltung entsprechende Ergebnisse im Überblick und können diese dort einfließen lassen. Bei der "traditionellen" Bearbeitung durch Tutoren war sonst i.d.R. immer eine Woche Verzug aufgetreten, bis Papier-basierte Übungsaufgaben kontrolliert und mit den Studierenden im Rahmen der Tutorien (mit den Studierenden) oder der Tutorenbesprechung (mit den Lehrenden) durchgesprochen wurden.

Zudem hat sich gezeigt, dass auch öffentliche und freiwillige Quizze, in denen im Umfang von z.B. 10 Multiple-Choice-Fragen wesentliche Inhalte der letzten Veranstaltung abgefragt wurden, aufgrund ihrer Kompaktheit von den Studierenden gerne angenommen und bearbeitet wurden.

Ansprechpartner an den Standorten...

Selbstlerneinheiten mit Zwischenstandskontrollen

Im "reinen" Selbstlern-E-Learning ist der Lernende auf sich alleine gestellt beim Durcharbeiten von Inhalten. Hier hat sich als sinnvoll herausgestellt, dem Lernenden ein Feedback zu geben, welche Inhalte bereits verstanden bzw. erlernt wurden und wo noch Schwächen sind. Dies kann man über Zwischentests erreichen, die thematisch und didaktisch an die Lerneinheiten angelehnt sind und einzelne Lerneinheiten z.B. abschließen können.

So ist es z.B. sinnvoll, aufbauende Lerneinheiten erst bearbeiten zu lassen, wenn vorangehende und grundlegende Inhalte bereits bearbeitet und verstanden wurden. Dieses Verständnis kann beispielsweise durch didaktisch sinnvoll eingefügte Tests geprüft werden, deren Bestehen im Folgenden dann automatisch den Zugang zu weiteren Lerneinheiten freischalten kann.

Neben dem Lernenden erhält auf diese Weise auch der Lehrende Feedback und kann z.B. Problembereiche identifizieren, auf die er verstärkt eingehen oder weiter vertiefen sollte.

Elektronische Klausurschränke

Spezialisierung dieses Einsatzszenarios sind elektronische Klausurschränke. Dabei handelt es sich um eine Sammlung bereits bekannter Prüfungsfragen mit den jeweils zugehörigen korrekten Antworten. Studierende tragen solche Fragen und die passenden Antworten z.B. per Gedächtnisprotokoll aus Klausuren oder mündlichen Prüfungen zusammen und machen sie auf diese Weise anderen Studierenden zur Prüfungsvorbereitung zugänglich. Durch Zusammenarbeit der Studierenden und jahrelanges Zusammentragen entsprechender Aufgaben können komplexe Klausurschränke entstehen, die zur Vorbereitung einen guten Einblick in das Prüfungsgebiet bieten.

Wesentliches Merkmal (und von den Studierenden gewünscht) ist, dass Lehrende oder Prüfer keinen Zugriff auf Klausurschränke haben. Ein möglicher Nachteil dabei ist dann aber auch, dass sie kein Feedback zu ihren Veranstaltungen bzw. Prüfungen erhalten und damit ihrerseits weder die Lehre entsprechend identifizierter Defizite anpassen oder Hinweise auf fehlerhafte Antworten geben können.

Beispiele sind:

Ansprechpartner an den Standorten...

Online Self Assessments zur Studienorientierung

Über das Studium hinaus nutzen die zentralen Studienberatungsstellen der Hochschulen häufig die Möglichkeit, z.B. Studieninteressierten Orientierung bei der Studien- und Berufswahl zu geben. So können Schulabgägnger über extra zu diesem Zweck bereitgestellte Studierfähigkeitstests ihr Talent für verschiedene Fachrichtungen selbst prüfen. Ein entsprechendes System kann dann als Orientierung oder Entscheidungshilfe dienen, um zu einer guten und tragfähigen Studien- und Berufswahl zu kommen - oder aber als Grundlage zur psychologischen Profilbildung dienen, der eine komplexe Analyse der Stärken und Schwächen des Schulabgängers folgt und die dann als Grundlage für eine Beratung zur Studien- bzw. Berufswahl genutzt werden kann. Mit Hilfe zusätzlicher elektronischer Testverfahren können Studieninteressierte studiengangsnahe Aufgaben selbst ausprobieren, um so z.B. festzustellen, ob sie Spaß an der Bearbeitung dieser oder ähnlicher Themenstellungen haben. Permanente Rückmeldungen können zudem über das Verhältnis von Eignung und Neigung informieren. Ein entsprechendes Szenario bietet sich z.B. an, wenn eine Hochschule ihr Profil bezogen auf die gute Betreuung von Studienbewerbern und Studierenden schärfen will.

Beispiele sind:

Ansprechpartner an den Standorten...

Zulassungstests zu Studiengängen oder Modulen

Verschiedene Veranstaltungen, Module oder Studiengänge können beschränkt sein, weil z.B. einer großen Zahl an interessierten Lernenden eine geringere Zahl an Betreuungsplätzen zur Verfügung steht, so dass eine Vorauswahl getroffen werden muss. Beispiel hierfür ist der klassische Medizinertest, dessen Ergebnisse (neben der Abiturnote etc.) in die Vergabe der Studienplätze eingeflossen ist. Gleichzeitig darf sich eine Hochschule aufgrund ihrer Autonomie Studierende nach eigenen Kriterien wie z.B. dem Abschneiden in Tests, die thematisch zum späteren Studienfach passen, auswählen. Entsprechende Tests können natürlich in elektronischer Form abgewickelt werden.

Darüber hinaus existieren Veranstaltungen wie z.B. "Advanced Business English", die bestimmtes Grundlagenwissen oder sprachliche Grundkenntnisse zwingend voraussetzen, damit die Lernenden den Inhalten folgen bzw. mitarbeiten können. Mit Hilfe solcher Tests kann das Vorhandensein dieses Wissens bereits vorab als Voraussetzung für die Teilnahme an der Veranstaltung abgeprüft werden.

Im Bereich der Sprachzentren haben sich sogenannte C-Tests durchgesetzt, bei denen die Probanden nach einem bestimmten Verfahren (C-Prinzip) beschädigte Texte als Lückentext korrekt innerhalb einer bestimmten Zeit ergänzen müssen. Die Zahl der richtig rekonstruierten Lücken ergibt einen Gesamtpunktwert, den man entweder in einen Normwert transformieren (normorientierte Leistungsmessung) oder auf einen maximal möglichen Punktwert beziehen (kriterienorientierte Leistungsmessung) kann. Das Ergebnis sagt etwas über die "allgemeine Sprachfähigkeit" der getesteten Person in der jeweiligen Sprache in Relation zum Gruppendurchschnitt oder zu einem "native speaker" aus. Eine Demo-Version eines solchen C-Tests hat z.B. die Uni Münster bereitgestellt.

Auswahlverfahren für Ausbildungsplätze

Hochschulen bilden neben Studierenden auch "traditionelle" Auszubildende aus. Hier steht eine große Zahl an Bewerbern einer eher geringen Zahl an Ausbildungsplätzen gegenüber, die entsprechend vergeben werden können. Aufgrund der Menge der Bewerber darum eine Auswahl getroffen werden, wer für diese Plätze in Frage kommen könnte und wer davon zu einem Bewerbungsgespräch eingeladen wird. Entsprechende elektronische Testverfahren können einen ersten Eindruck liefern und damit zu dieser Auswahl beitragen.

Ansprechpartner an den Standorten...

Direkte Rückmeldung aus dem Hörsaal

Anhand der Ergebnisse von Übungsaufgaben zu inhaltlichen Themen einer Veranstaltung können Lehrende erkennen, welche Inhalte besonders gut verstanden wurden und welche Themen vielleicht in einer der nächsten Veranstaltungen noch einmal aufgegriffen oder wiederholt werden sollten. Die direkte Rückmeldung aus dem Hörsaal ist eine konsequente Weiterentwicklung dieser Idee. Hintergrund ist, dass Lehrende bereits in der Veranstaltung diese Rückmeldung erhalten möchten, um so direkt auf entsprechende Probleme eingehen zu können (und nicht erst in einer der nächsten Veranstaltungen).

Ansprechpartner an den Standorten...

Benotete elektronische Klausuren

Beispiel: Möglicher Prozess zur Durchführung benoteter Klausuren

Wie die schriftliche Klausur dienen elektronische Klausuren der Leistungsfeststellung, jedoch unter Beteiligung von Informations- und Kommunikationstechnologien. Es handelt sich dabei um eine summative Form der Prüfung, da sie abschließend und i.d.R. am Ende einer Veranstaltungsreihe das damit aufgebaute Wissen festzustellen versucht. E-Klausuren haben genau wie traditionelle Klausuren auch Auswirkungen auf den weiteren Studienverlauf, da bei mehrmaligem Scheitern an einer entsprechenden Prüfung (je nach Prüfungsordnung) evtl. das gesamte Studium erfolglos beendet sein kann. Daher werden an elektronische Klausuren besondere Anforderungen an Sicherheit und Nachvollziehbarkeit gestellt und ihre Verwendung muss in den jeweils gültigen Prüfungsordnungen verankert sein.

Bei der Einführung elektronischer Prüfungen und Assessments an den Hochschulen sollten daher elektronische Klausuren, wenngleich sie bei den Lehrenden einen besonderen Reiz durch die mögliche Aufwandsersparnis bei der Kontrolle bedeuten, nicht an vorderster Stelle stehen, sondern nur als eine von vielen Maßnahmen eingesetzt werden.

Voraussetzungen sind eine verlässliche Technik und Studierende, die bereits den Umgang mit entsprechenden Systemen gewohnt sind, so dass sie diese nicht bei der studienverlaufskritischen Prüfung das erste Mal zu sehen bekommen und ausprobieren müssen. Einige Standorte wie Bremen oder Duisburg/Essen haben zu dem Zweck Testcenter eingerichtet, in denen unter Begleitung von Technikern und Didaktikern entsprechende Prüfungen unter Aufsicht abgenommen - die aber auch zu Übungszwecken benutzt werden können.

Beispiele für Softwaresysteme, mit denen elektronische Klausuren durchgeführt werden, sind:

  • Q-Exam von Codiplan, z.B. an der MH Hannover
  • Virtuelles Prüfungssystem (ViPS), z.B. an der Uni Osnabrück
  • LPLUS, z.B. in den Testzentren der Unis Bremen und Duisburg/Essen
  • ILIAS, z.B. an der Uni Mainz und geplant an der Uni Göttingen

Ablauf

Übersicht: Zahlen benoteter Klausuren an der Uni Mainz

Wie eine elektronische Klausur im neu eingerichteten Prüfungscenter der Universität Duisburg/Essen ablaufen kann, wurde von Jörg Stratmann während eines Online-Podiums beschrieben:

  1. Beratungsgespräch
  2. Raumbuchung
  3. Softwareschulung
  4. Erstellen der Klausur
  5. Erstellen spezieller Medien
  6. Testen der Klausur
  7. Studierende melden sich zur Prüfung an/ab
  8. Lehrender erhält Excel-Liste mit Prüfungsteilnehmern
  9. Import der Teilnehmer in die Prüfungssoftware
  10. Tischkarten: Matrikelnummer und PIN
  11. Prüfungsdurchführung
  12. Sicherung der Antworten in einem PDF
  13. Bewertung der Klausuren in Prüfungssoftware
  14. Übergabe der Prüfungsergebnisse ans Prüfungsamt
  15. Import der Daten in Prüfungsverwaltungssoftware
  16. Klausureinsicht

Das Vorgehen im Prüfungscenter der Uni Bremen bei der Erstellung von Fragekatalogen mit den jeweils daran Beteiligten wurde bei einer Online-Schulung von Jens Bücking dargestellt:

Schritt E-Learning-Service Editoren Autoren
Erstberatung x x
Festlegung Deadlines x
Schulung x x
Produktion Vorlagen x
Digitalisierung (TM-Editor) x
Lokale Kontrolle 1 x x
Lokale Kontrolle 2 x
Upload Erstversion x
Katalogtest (LTS) x x
Überarbeitung (TM-Editor) x
Upload Endversion x
Einstellungstest (LTS) x x x
Registrierung der Teilnehmer x
Zugangstest/Endabnahme x x x


Unterstützende Services

Existieren E-Learning- oder gar E-Prüfungs-Zentren an einer Hochschule, können diese die Durchführung elektronischer Klausuren unterstützen. Dafür bereitgestellte Services an der FU Berlin wurden von Nicolas Apostolopoulos während eines Online-Podiums aufgeführt:

Basic

  • Raumbuchungen
  • Gewährleisten der technischen Sicherheit
  • Anlegen der Studierenden im System

Advanced (kostenpflichtig)

  • Erstellen von Klausuren aus Rohdokumenten
  • Anlegen der Studierenden im System
  • Freischalten der Studierenden
  • Bereitstellen von Matrikellisten zum Aushang am Fachbereich
  • Bereitstellen eines pers. Ansprechpartners bei der Prüfung
  • Bereitstellen von Matrikel-Notenlisten nach der Prüfung

Weitere Informationen sind in der Beschreibung des E-Examinations-Projekts der FU Berlin zu finden.

Ansprechpartner an den Standorten...

Sichere Prüfungen auf Distanz

Die Frage ist bislang unbeantwortet, ob es möglich ist, dass man Prüflinge an entfernten Orten so gut elektronisch überwachen kann, dass eine benotete Klausur ohne Anwesenheit einer Aufsicht auf Entfernung möglich ist.

Beispiel: Das C3L in Oldenburg bildet im Studiengang "BWL für Spitzensportler" Athleten aus, die sich während ihres Studiums in verschiedenen Trainingslagern weltweit aufhalten. Da sich die Zeiten für den entsprechenden entfernten Aufenthalt sowie die Prüfungszeiten überschneiden, wäre es wünschenswert, wenn man Möglichkeiten schaffen könnte, mit Hilfe von Informations- und Kommunikationstechnologien sichere Distanzprüfungen abzunehmen.

Beurteilung auf Entfernung

Eine Spezialisierung dieses Szenarios bezieht sich auf die Auswertung von Prüfungen oder Prüfungsleistungen, die vor Ort bzw. in längerer Arbeit angefertigt werden müssen, aber aufgrund des entfernten Aufenthaltsorts eines Prüfenden nur auf Distanz zu bewerten sind.

Beispiel: Die HBK Braunschweig beschäftigt viele Reiseprofessuren. Dabei handelt es sich um Künstler, die weltweit von Ort zu Ort reisen, um ihre Veranstaltungen abzuhalten. Abschlussarbeiten und Prüfungsleistungen sind längere Projekte der bildenden Kunst (z.B. Bildhauerei, Malerei, etc.), die nicht wie Klausuren unter Aufsicht im Hörsaal geschrieben werden. Hier müssten den Studierenden Möglichkeiten geschaffen werden, diese Arbeiten online zu präsentieren, damit die entfernten Prüfenden die erbrachte Leistung auf diese Weise möglichst objektiv bewerten können.

Ansprechpartner an den Standorten...