Aufgabe mit Peer-Review
Beim Peer-Review beurteilen sich die Teilnehmenden einer Aufgabe gegenseitig. Diese Seite richtet sich an alle drei Rollen des Kursbausteins "Aufgabe": Kursbesitzer:innen richten das Peer-Review im Kurseditor ein, Teilnehmende führen die Reviews durch, und Betreuer:innen begleiten die Reviews und ergänzen sie mit eigenen Reviews oder einer Rubrik-Bewertung.
Das Peer-Review ist eine Art des Feedbacks. Kursbesitzer:innen wählen es im Tab "Workflow" unter "Feedback" mit der Option "Mit Peer-Review", siehe Aufgabe einrichten.
Regeln eines Peer-Reviews
Bei einem Peer-Review geben sich die Teilnehmer:innen eines Kurses gegenseitig ein Feedback oder eine Bewertung. Das Feedback kann allgemeiner Art sein, zum Beispiel in einem Textfeld, oder zusätzlich eine Bewertung mit Punkten umfassen.
Nicht jede Person muss die Abgaben aller anderen beurteilen. Kursbesitzer:innen legen fest, wie viele Reviews jede Person erledigt.
Ebenso legen sie fest, welche Namen sichtbar sind, vom Doppelblind-Review mit anonymen Namen bis zum offenen Review, siehe Review-Form.
Als Betreuer:in überwachen Sie die gegenseitigen Reviews und greifen bei Bedarf ein.
Einstellungen im Tab "Rückgabe und Feedback"
Wurde im Tab "Workflow" die Option "Mit Peer-Review" gewählt, legen Sie im Tab "Rückgabe und Feedback" die Regeln fest, nach denen andere Teilnehmer:innen Feedback geben. Die Reviewer:innen geben ihr Feedback in einem Formular, meist mit Hilfe einer Rubrik. Als Kursbesitzer:in geben Sie dieses Review-Formular vor.
Ist im Tab "Workflow" auch die Bewertung eingeschaltet und sollen die Punkte für das Peer-Review automatisch aus dem Formular übernommen werden, muss das Formular mindestens ein Rubrik-Element enthalten. Nur über ein Rubrik-Element vergibt OpenOlat automatisch Punkte.
Rubrik-Beurteilung - Peer-Review
Für Peer-Reviews wird ein geeignetes Rubrik-Formular benötigt. Solange keines gewählt ist, zeigt der Bereich "Kein Rubrik-Formular ausgewählt.". Mit "Auswählen" übernehmen Sie ein bestehendes Formular, mit "Erstellen" legen Sie ein neues an, mit "Import" importieren Sie ein Formular. Hier finden Sie ein Musterformular (zip-Datei zum Import in Ihr OpenOlat).
Betreuer:innen können dieses Formular zusätzlich selbst ausfüllen, mit "Eigenes Review erstellen". Unabhängig davon bewerten sie die Aufgabe mit der "Rubrik-Bewertung", wenn Kursbesitzer:innen diese im Tab "Bewertung" einschalten. Die Rubrik-Bewertung kann ein anderes Rubrik-Formular verwenden.
- Betreuer:innen können so zum Beispiel ein Review erstellen, wenn eine teilnehmende Person zu wenige Reviews erhalten hat.
- Ist ein Review als "nicht gültig" markiert, füllen Betreuer:innen bei Bedarf ein Formular als Ersatz aus.
- Das Formular der Rubrik-Bewertung kann andere Kriterien enthalten als das Formular des Peer-Reviews. Auch in diesem Fall ist es sinnvoll, wenn Betreuer:innen beide Formulare verwenden.
Wichtig
Kursbesitzer:innen legen im Tab "Bewertung" unter "Gesamtpunkte aus" fest, welche Punkte zählen: "Rubrik-Bewertung", "Rubrik-Peer-Review", "Abgegebene Reviews" oder eine Kombination davon. Berücksichtigen Sie diese Einstellung beim Planen eines Peer-Reviews. Siehe auch Wie führe ich ein Peer-Review durch? >
Weitere Informationen
Musterformular für Peer-Review (zip-Datei zum Import in Ihr OpenOlat) >
Wie erstelle ich eine Formular-Lernressource? >
Wie führe ich ein Peer-Review durch? >
Unter "Einstellungen - Peer-Review" legen Sie das Verfahren mit den folgenden Feldern fest.
Review-Form
Hier legen Sie fest, welche Namen sichtbar sind:
- Doppelblind-Review: Alle Namen sind anonym (ausgenommen Betreuende).
- Einfachblind-Review: Der Name des Reviewers/der Reviewerin ist anonym.
- Offenes Review: Alle Namen sind ersichtlich.
Zuweisung
Hier bestimmen Sie, welche Aufgabenstellungen die Reviewer:innen zum Review erhalten:
- Dieselbe Aufgabenstellung: Wenn eine Person z.B. Aufgabe 1 gezogen und bearbeitet hat, erhält sie auch nur Aufgabe 1 zum Review. Sie muss sich dann nicht in eine andere Thematik einarbeiten.
- Andere Aufgabenstellung: Das Review gilt einer anderen Aufgabenstellung als der, die man selbst gezogen hat. Sind mehrere Reviews zu erledigen, gelten sie alle derselben Aufgabenstellung.
- Zufällige Aufgabe: Die Reviewer:innen erhalten zufällige Aufgaben zum Review.
Beziehung
Ist "Gegenseitige Beurteilung" gewählt, können sich Teilnehmer:innen gegenseitig beurteilen, müssen es aber nicht.
Anzahl Reviews
Hier geben Sie an, wie viele Reviews für jede teilnehmende Person vorgesehen sind. Zur Wahl stehen 1 bis 5 Reviews, voreingestellt sind 3. Je nach Anzahl der Teilnehmer:innen kann die tatsächlich zu erledigende Zahl der Reviews abweichen. Im Idealfall entspricht die Anzahl der zu erledigenden Reviews der Anzahl Reviews, die man selbst von anderen erhält.
Qualitäts-Feedback für Reviewer:in
Hier geben Sie den Teilnehmer:innen die Möglichkeit, ihren Reviewer:innen nach dem Erhalt eines Reviews eine Rückmeldung zu geben. Ob das erhaltene Review hilfreich war, zeigen sie mit dem Daumensymbol oder mit Sternen an.
Form des Feedbacks
Ist "Qualitäts-Feedback für Reviewer:in" eingeschaltet, erscheint dieses Feld. Wählen Sie, mit welchen Symbolen die Teilnehmer:innen den Reviewer:innen dieses Feedback geben: "Hilfreich - Ja/Nein" oder "Sterne Bewertung". Bewährt hat sich "Hilfreich - Ja/Nein" mit Daumen hoch und Daumen nach unten.
Auslösung automatische Review-Zuweisung
Dieses Feld steht im Bereich "Berechtigungen". Autor:innen sehen alle Teilnehmer:innen eines Kurses, Betreuer:innen sehen aber eventuell nur ihre betreute Gruppe.
Damit Betreuer:innen die Reviews der betreuten Teilnehmer:innen ansehen können, muss die Zuweisung von Reviews innerhalb ihrer Gruppen erfolgen. (Nur dann können Betreuer:innen alle Reviews mitverfolgen.)
Wird die automatische Review-Zuweisung ausgelöst, sehen Betreuer:innen zwar jeweils nur ihre Gruppe, die Zuweisung von Review-Aufträgen erfolgt aber unter allen Teilnehmer:innen. Betreuer:innen sehen dann, dass eine betreute Person von jemand aus der anderen Gruppe ein Review erhalten hat. Der Name der Person, die das Review gemacht hat, ist aber nicht ersichtlich.
Damit neben Kursbesitzer:innen auch Betreuer:innen die automatische Review-Zuweisung auslösen können, wählen Sie unter "Auslösung automatische Review-Zuweisung" die Option "Betreuer:innen".
Peer-Review durchführen
Ist für die Aufgabe ein Peer-Review eingerichtet, erhalten Sie als Teilnehmer:in Review-Aufträge: Sie beurteilen die abgegebenen Dokumente anderer Kursmitglieder. Wessen Dokumente Sie beurteilen, legt OpenOlat automatisch fest, oder Betreuer:innen teilen sie Ihnen zu.
Haben Sie alle Reviews erledigt, schliessen Sie den Schritt mit dem Button "Review abschliessen" ab.
Ergebnisse des Peer-Reviews ansehen
In den Schritten "Peer-Review - Vergebene Beurteilungen" und "Peer-Review - Erhaltene Beurteilungen" sehen Sie als Teilnehmer:in, welche Beurteilungen Sie abgegeben und welche Sie erhalten haben.
Peer-Review betreuen
Kursbesitzer:innen legen den Ablauf des Peer-Reviews fest. Danach richten sich die Möglichkeiten, die Sie als Betreuer:in haben:
- Im Tab "Workflow" zeigt der Schritt "Peer-Review" den Stand aller Peer-Reviews, mit den Listen "Vergebene Beurteilungen" und "Erhaltene Beurteilungen".
- Im Tab "Teilnehmer:innen" öffnen Sie eine Person. Im Schritt "Peer-Review" zeigen die Reiter "Vergebene Beurteilungen" und "Erhaltene Beurteilungen" ihre Reviews mit Status.
- Sie weisen Reviewer:innen auch manuell zu, siehe Manuelle Zuweisung von Peer-Reviewer:innen.
Hinweis
Betreuer:innen sehen nur Gruppen, in denen sie selbst Mitglied sind. Reviewen Mitglieder anderer Gruppen, sind die Bewertungen dieser Teilnehmer:innen für Betreuer:innen nicht vollständig ersichtlich.
Review durch Betreuer:in
Als Betreuer:in erstellen Sie ein eigenes Review, sobald eine Person abgegeben hat, auch schon vor Ablauf der Abgabefrist.
Der "Peer-Review-Zeitraum", den Kursbesitzer:innen im Tab "Workflow" setzen, gilt nicht für Betreuer:innen: Sie erstellen ein eigenes Review auch vor Beginn und nach Ende des Zeitraums. Dazu öffnen Sie die Person, im Schritt "Peer-Review" den Reiter "Erhaltene Beurteilungen" und in der Zeile der Person unter "Weitere Aktionen" den Eintrag "Eigenes Review erstellen".
Manuelle Zuweisung von Peer-Reviewer:innen
Wenn Sie als Betreuer:in bestimmen wollen, wer von wem ein Review erhält, ordnen Sie die Reviewer:innen selbst zu.
Im Reiter "Erhaltene Beurteilungen" heisst der Button "Reviewer:in zuweisen", im Reiter "Vergebene Beurteilungen" heisst er "Reviews zuweisen".
Eine manuelle Zuweisung ist auch in der Tabelle möglich. Klicken Sie dazu in der Zeile der Person auf das Drei-Punkte-Menü.
Automatische Zuweisung von Peer-Reviewer:innen
OpenOlat ordnet Peer-Reviewer:innen auch automatisch zu, nach den eingestellten Regeln, zum Beispiel der Anzahl Reviews je Person. Manuelle Zuordnungen, die Betreuer:innen schon getroffen haben, berücksichtigt OpenOlat bei den übrigen Zuordnungen.
Die automatische Zuordnung lösen Kursbesitzer:innen oder Betreuer:innen im Tab "Workflow" mit dem Button "Review-Zuweisung auslösen" aus.
Wichtig
Damit auch Betreuer:innen die automatische Review-Zuweisung auslösen können, müssen Kursbesitzer:innen im Tab "Rückgabe und Feedback" unter Auslösung automatische Review-Zuweisung die Option "Betreuer:innen" gewählt haben.
Wichtig
Der Button "Review-Zuweisung auslösen" bleibt nach einer Zuweisung verfügbar, weil später noch Teilnehmende hinzukommen oder eine Verlängerung erhalten können.
Peer-Reviews abschliessen
Haben Teilnehmer:innen alle ihre Reviews erledigt, geben sie die Reviews mit "Review abschliessen" ab. Erst dann zählen sie. Beurteilt werden die anderen Teilnehmer:innen nur mit abgeschlossenen Reviews.
Ist der Peer-Review-Zeitraum abgelaufen, können Teilnehmer:innen keine Reviews mehr erstellen.
Haben Teilnehmer:innen Reviews begonnen, aber nicht abgeschlossen, können Betreuer:innen diese Reviews nicht einziehen. Der Grund: Betreuer:innen können nicht wissen, ob ein nicht abgeschlossenes Review bereits final sein sollte und welche Qualität es zum aktuellen Zeitpunkt hat.
Betreuer:innen können die Reviews nicht für alle abschliessen. Sie warten, bis der Peer-Review-Zeitraum abgelaufen ist.
Nach einem Peer-Review ist keine Überarbeitung mit einem zweiten Review möglich.
Betreuer:in nimmt an Peer-Review teil
Betreuer:innen können am Peer-Review teilnehmen wie Teilnehmer:innen. Sie verwenden dann dieselben Kriterien, und ihr Review zählt wie die Reviews der übrigen Teilnehmer:innen.
Beispiel 1:
Eine Reviewerin fällt wegen Krankheit aus, und ein Betreuer springt als Reviewer ein. So erhalten alle die gleiche Anzahl Reviews.
Beispiel 2:
Eine Betreuerin sieht, dass ein Reviewer ein Review falsch oder mangelhaft erstellt hat. Sie markiert dieses Review als ungültig und erstellt selbst ein Review, damit die beurteilte Person wieder gleich viele Reviews erhält.
Beispiel 3:
Aus dem Peer-Review liegen zwei völlig gegensätzliche Reviews vor. Ein Betreuer ergänzt deshalb ein vermittelndes oder korrigierendes Review. Anders als bei der Rubrik-Bewertung verwendet er dabei dasselbe Bewertungsraster wie die Teilnehmer:innen.
Rubrik-Bewertung durch Betreuer:innen
Ist im Tab "Bewertung" die "Rubrik-Bewertung" eingeschaltet, bewerten Betreuer:innen die Aufgabe zusätzlich zum Peer-Review mit einem eigenen Rubrik-Formular.
Sie funktioniert wie beim Kursbaustein "Bewertung", mit einem hinterlegten Rubrik-Formular. Dieses Formular kann sich vom Formular der Peer-Reviewer:innen unterscheiden.
Bewertung der Aufgabe
Die Ergebnisse eines Peer-Reviews müssen nicht in die Bewertung einfliessen, Reviews und Peer-Reviews ohne Bewertung sind ebenso möglich. Kursbesitzer:innen legen im Tab "Bewertung" unter "Gesamtpunkte aus" fest, welche Punkte zählen:
- "Rubrik-Bewertung": die Punkte aus der Rubrik-Bewertung durch Betreuer:innen,
- "Rubrik-Peer-Review": die Punkte aus den Peer-Reviews, welche die Person erhalten hat,
- "Abgegebene Reviews": Punkte für die Reviews, welche die Person selbst abgegeben hat.
Kombinationen sind möglich. Ist nur "Rubrik-Bewertung" gewählt, fliessen die Peer-Reviews nicht in die Bewertung ein.
Weiterführende Informationen
Auf dieser Seite erwähnt
Kursbaustein "Aufgabe" >
Aufgabe einrichten >
Das Formular-Element Rubrik >
Wie führe ich ein Peer-Review durch? >
Wie erstelle ich eine Formular-Lernressource? >
Kursbaustein "Bewertung" >
Formular als Rubrik-Bewertung >
Weiterführend
Aufgabe bearbeiten (Teilnehmende) >
Aufgabe betreuen >