Tests bewerten
Hier erfahren Sie, wie man Bewertungen für Tests mit Hilfe des OpenOlat "Bewertungswerkzeugs" vornimmt.
Gehen Sie in das Bewertungswerkzeug und wählen Sie in der linken Übersicht, die die Kursstruktur widerspiegelt, den Test aus, den Sie bewerten möchten. Hier finden Sie zwei Tabs: Übersicht und Teilnehmer.
Im Tab Übersicht erhalten Sie eine Übersicht zur Bewertung dieses Kursbausteins, z.B. wie viele Personen diesen Kursbaustein schon bestanden haben. Im Tab Teilnehmer werden die Teilnehmenden angezeigt und die eigentliche Bewertung von Teilnehmenden kann gestartet werden.
Tab Teilnehmer
Generelle Aktionsmöglichkeiten
Kursbetreuer:innen und Kursbesitzer:innen haben über die entsprechenden Buttons die Möglichkeit:
- Sich die Test Statistiken anzuschauen,
- die Resultate aller angezeigten Lernenden als ZIP file zu exportieren,
- Tests einzuziehen, die sich aktuell in Bearbeitung befinden
- die Ergebnisse (Daten) aller bisherigen Tests zurückzusetzen.
- die Bewertung für alle oder mehrere ausgewählte Teilnehmenden auf den Status "abgeschlossen" zu setzen und damit die Bewertung final zu beenden.
- die Bewertungen der Tests für alle oder mehrere ausgewählte Teilnehmenden auf einen Schlag sichtbar bzw. unsichtbar zu setzen (freigeben).
- die Zeit für die Bearbeitung des Tests zu verlängern.
- eine E-Mail an einen oder mehrere Teilnehmende zu versenden
- die Tests fragenweise zu korrigieren (Button "Korrekturwerkzeug")
- auch die zuvor eingerichtete Bewertungsskala kann noch einmal angepasst werden.
Hinweis
Welche Optionen im Detail angezeigt werden, hängt teilweise von der Konfiguration des Kursbausteins ab.
Die Buttons und Optionen im Detail:
Test Statistiken
Aufrufen der detaillierten Statistik zu jeder Frage eines Tests. Sämtliche Antworten der Lernenden werden dabei berücksichtigt.
Resultate exportieren
Hier können die kompletten Testresultate als ZIP file exportiert und somit archiviert werden. Der Titel der ZIP Datei zeigt den Namen des Tests, den zugehörigen Kurs sowie Datum des Downloads an. Der Ergebnisdownload beinhaltet eine Teilnehmendenübersicht als HTML-Seite, Ordner mit den Ergebnissen der Teilnehmenden sowie weitere Dateien. Wenn die Testquittung aktiviert wurde, wird auch diese exportiert.
Tests einziehen
Sofern gestartete aber noch nicht abgegebene Tests vorliegen, können diese eingezogen und somit angeschaut werden. Die Tests können auch einmalig nach Ende des Testdurchlaufs eingezogen werden.
Korrekturwerkzeug
Über diesen Button können manuelle Bewertungen pro Testfrage vorgenommen werden. Hier können Punkte vergeben und Kommentare hinzugefügt werden. Die Option erscheint nur bei manueller Bewertung.
Testquittung validieren
Wenn diese Option angewählt wird, wird nach Beenden des Tests eine Testquittung erstellt, welche als XML-File heruntergeladen werden kann. Es dient der Verifizierung des Tests. Das erstellte XML-File kann zusätzlich per Mail an den Teilnehmer verschickt werden, wenn die Option "Testquittung per Mail schicken" aktiviert wird.
Alle Daten zurücksetzen
Hiermit werden die Daten des aktuellen Tests zurückgesetzt. Das bedeutet, alle Daten aller Teilnehmenden inklusive Resultate werden unwiderruflich gelöscht. Es ist aber auch möglich, nur einzelne Tests von bestimmten Personen zurückzusetzen. Dies erfolgt direkt in den Einstellungen der jeweiligen Person.
Verlängern
Hier kann die voreingestellte Testzeit verlängert werden.
Bewertungsskala anpassen
Über diesen Button kann die Bewertungsskala geändert oder ein Wechsel zu einem anderen Bewertungssystem vorgenommen werden.
Manuelle Bewertung von Testfragen
Für die manuelle Bewertung der Fragen eines Tests sind grundsätzlich folgende Vorgehensweisen möglich:
a) Bewertung aller Teilnehmenden ausgehend von einem einzelnen Test-Item
b) Bewertung aller manuellen Fragen des Tests ausgehend von einer Person
c) Bewertung einer einzelnen Person
Hinweis
Für die Bewertung von a) und b) nutzen Sie den Button "Korrekturwerkzeug".
a) Manuelle Bewertung pro Test-Item - Tab Fragen
Wählen Sie den gewünschten Test in der linken Navigation aus und klicken Sie auf "Korrekturwerkzeug". Es erscheint eine Übersicht aller Fragen des Tests mit dem Bewertungsstand.
Die Spalten geben darüber Auskunft an welchen Stellen noch etwas zu tun ist:
- Auto: Fragen, die automatisch vom System korrigiert wurden, erst einmal kein Handlungsbedarf aber die Punkte können hier auch überschrieben werden.
- Manuell: Fragen, die manuell korrigiert werden müssen
- Nicht korrigiert: Fragen, die noch nicht korrigiert sind. Hier sollte man aber erst mal prüfen ob für diese Frage auch Antworten eingereicht wurden (Spalte "Beantwortet").
- Überprüfen: Fragen, die für eine weitere Überprüfung markiert wurden.
Sortieren Sie die Test-Items (Fragen) für die Spalte "Manuell" oder "Nicht korrigiert" um sich einen Überblick über die ausstehenden Bewertungen zu verschaffen.
Klicken Sie dann auf den Fragentitel des zu korrigierenden Items und Sie gelangen in das Bewertungsformular. Hier können sie nun Punkte und Kommentare hinterlassen und bei Bedarf die Korrektur auch "Zur Überprüfung markieren". Für automatisiert auswertbare Items können Sie sich auch die Lösungen anzeigen lassen oder die Punkte überschreiben.
Mehrere Korrektor:innen können gleichzeitig Bewertungen für einen Test vornehmen. Ist eine Frage durch eine:n Korrektor:in bereits in Bearbeitung, wird diese automatisch für andere gesperrt. In der Administration kann für diesen Korrekturprozess festgelegt werden, ob die Teilnehmenden dabei anonym aufgeführt werden. Statt des Namens erscheint dann die Teilnehmendenkennung.
Abschliessend speichern Sie die Eingaben und können zur nächsten Person wechseln oder zurück in die Itemübersicht des Korrekturwerkzeug gehen und das nächste Item auswählen.
b) Manuelle Bewertung pro Person - Tab Teilnehmer:innen
Wählen Sie den gewünschten Test in der linken Navigation aus und klicken Sie auf "Korrekturwerkzeug". Es erscheint eine Übersicht aller Fragen des Tests mit dem Bewertungsstand.
Im Tab Teilnehmer:innen sehen Sie eine (anonymisierte) Übersicht der zu bewertenden Personen sowie deren aktuellen Bewertungsstand für den gewählten Test.
Wählen Sie hier die erste Person aus und Sie gelangen in die Bewertungsübersicht dieser Person für einen Test. Hier wählen Sie die gewünschte Frage aus und nehmen die Bewertung im Bewertungswerkzeug vor (siehe a)). Anschliessend wählen Sie die nächste Person, bis alle Bewertungen erledigt sind.
c) Manuelle Bewertung ausgehend von einer einzelnen Person
Falls nur eine einzelne Person bewertet werden soll bietet sich folgender Weg an:
Wählen Sie den gewünschten Test in der linken Navigation aus und wählen Sie den Tab "Teilnehmer". Klicken Sie dann auf den Namen der zu bewertenden Person. Es erscheint eine Liste mit allen Testversuchen dieser Person. Wählen Sie hier den aktuellen Versuch aus und klicken auf "Korrigieren".
Man landet wieder in der Test-Item Übersicht mit allen Fragen des Tests und kann sich einen Überblick über den Bearbeitungsstand verschaffen und die Bewertungen vornehmen (siehe a).
Freitextantworten als PDF herunterladen
Antworten auf Freitextfragen können Sie als PDF herunterladen, einzeln oder gesammelt. Für eine einzelne Antwort öffnen Sie im Korrekturwerkzeug die Antwort einer Person auf eine Freitextfrage. Über den Button "Als PDF herunterladen" oben rechts laden Sie diese Antwort als PDF herunter.
Für alle Antworten einer Frage öffnen Sie im Tab "Fragen" das Menü mit drei Punkten am Ende der Zeile. Über "Als PDF-Dateien für alle Teilnehmer:innen herunterladen" erhalten Sie eine zip-Datei mit je einem PDF pro Teilnehmer:in.
Das PDF enthält im Kopfbereich Angaben zu Kurs, Kursbaustein und Test, damit eine eindeutige Zuordnung möglich ist. Wird der Test anonym korrigiert, werden die persönlichen Angaben der Teilnehmenden weggelassen und stattdessen die "Teilnehmendenkennung" angezeigt.
Der Download steht im Korrekturwerkzeug eines Kurses zur Verfügung sowie im Korrektur-Workflow für externe Korrektor:innen.
Voraussetzung
Der Download setzt voraus, dass in der Administration ein PDF-Service konfiguriert ist.
Tests zurücksetzen oder annullieren
Von Lernenden durchgeführte Test-Versuche können auch rückgängig gemacht werden. Dafür wird der entsprechende Test einer Person aufgerufen und dann die Option "Annullieren" oder "Testdaten zurücksetzen" gewählt.
Beim Annullieren wird ein einzelner Versuch als ungültig markiert. Das bedeutet, der Versuch erscheint weiter in der Liste und kann vom Lehrenden eingesehen und sogar wieder aktiviert werden, wird aber nicht mehr als Ergebnis für den Lernenden berücksichtigt. Hat der Lernende mehrere Versuche durchgeführt, wird der zeitlich nächste Versuch als Ergebnis berücksichtigt. Die Anzahl der angezeigten Versuche ändert sich dadurch aber nicht. Ist also ein Test z.B. auf drei Versuche eingeschränkt und hat der Lernende drei Versuche unternommen, stehen ihm keine weiteren Versuche zur Verfügung, auch wenn einer oder mehrere der Versuche annulliert wurden.
Liegt nur ein Versuch vor und wird dieser annulliert, ändert sich die Tabellenanzeige im Bewertungswerkzeug nicht. Der annullierte Versuch mit den zugehörigen Punkten wird weiterhin angezeigt.
Im Gegensatz zum Annullieren führt "Testdaten zurücksetzen" dazu, dass alle Versuche komplett gelöscht werden, die Anzahl der Versuche somit auf 0 gesetzt wird.
Bewertung im Kursrun
Neben der Bewertung im Bewertungswerkzeug können auch einzelne Tests im Kursrun bei geschlossenem Editor bewertet werden. Die Bewertungsmöglichkeiten in den Tabs "Übersicht" und "Teilnehmer" sind überwiegend identisch. Allerdings gibt es im Kursrun noch die Tabs "Kommunikation", "Vorschau" und "Erinnerungen".
Die Vorschau zeigt die Perspektive der Teilnehmenden an und im Tab "Erinnerungen" besteht die Möglichkeit eine Erinnerungsmail für bestimmte Bedingungen der Test-Bearbeitung z.B. bei einer bestimmten Punktzahl, bestimmter Anzahl der Versuche oder beim bestehen/nicht bestehen zu verschicken (siehe Erinnerung). Der Tab "Kommunikation" ist für die Kommunikation während eines laufenden Tests z.B. im Rahmen von Online-Klausuren gedacht.
Weiterführende Informationen
Coaching - Bewertungsaufträge >
Externe Werkzeuge: Übersicht >
Erinnerungen >
Bewertungswerkzeug - Übersicht >
Kursbaustein "Test" >