Im Fragenpool besteht eine Frage respektive ein Item aber nicht nur aus der Frage selbst. Zusätzlich können noch weitere Informationen über die Frage selbst, sogenannte Metainformationen oder auch Metadaten, vorhanden sein. Sie beschreiben ein Item genauer und ermöglichen und vereinfachen Testautoren dadurch die Auswahl und Zusammenstellung. Der Grossteil der Metadaten muss von einem Autor eingetragen werden.
Insgesamt stehen im Fragenpool mehr als 20 Metadatenfelder gemäss den Learning Objects Metadata zur Beschreibung zur Verfügung. Wenn Sie das Recht zur Bearbeitung besitzen, können Sie diese unter den Punkten Allgemein, Lebenszyklus, Rechte, Freigabe / Autoren, Didaktik, Itemanalyse und Technik anpassen. Bitte beachten Sie jedoch, das insbesondere Änderungen unter Didaktik und Itemanalyse nur mit diesbezüglichen Vorkenntnissen vorgenommen werden sollten.
In der Detailansicht finden Sie zuoberst die Fragenvorschau sowie Informationen zu den Einstellungen aus dem Testeditor. Über die Schaltfläche „Editieren“ rechts oben können Sie die Frage im Testeditor bearbeiten. Weitere Informationen zum Testeditor finden Sie im Kapitel "Tests und Fragebögen erstellen" unter dem Punkt „Test- und Fragebogeneditor im Detail".
Die zugehörigen Metadaten befinden sich unter den Einstellungen und werden in 7 Bereiche unterteilt.
Metadaten
Allgemein
Enthält Informationen zur Kategorisierung wie Sprache und Fachbereich sowie die Verschlagwortung. Abdeckung beschreibt das Themengebiet und grenzt dieses zusammen mit den Schlagworten ein. Unter Zusatzinformationen können weitere Metadaten eingegeben werden. Die Auswahl an Fachbereichen sollte die Bereiche Ihrer Institution abdecken. Nehmen Sie Kontakt mit Ihrem Poolverwalter auf falls Fachbereiche fehlen.
Lebenszyklus
Gibt an in welcher Versionsnummer das Frageitem vorliegt, sowie dessen Status der Verfügbarkeit, wie z.B. "in Überarbeitung" oder "Nicht verfügbar".
Rechte
Enthält Informationen über den Urheber bzw. den Verfasser des Frageitems, und ob das Item mit einem Copyright versehen wurde. Standardmässig stehen 6 Creative Commons Lizenzen zur Auswahl zur Verfügung. Informationen zu Creative Commons finden Sie in der Wikipedia und unter www.creativecommons.org.
Werden weitere zusätzliche Lizenzen benötigt, kontaktieren Sie ihren Pool-Administrator.
Freigaben
Listet die Autoren sowie alle Pools und Gruppen auf, für die das Frageitem freigegeben wurde.
Didaktik
Hier finden Sie Informationen zur primären Zielgruppe dieser Frage, der Stufe, die vor allem der Einordnung und Zurordnung dient, sowie zur durchschnittlichen Bearbeitungszeit. Beide Angaben unterstützen Sie dabei, Wissenstufen-gerechte Tests zusammen zu stellen.
Itemanalyse
Enthält Informationen zur Itemanalyse und der Verwendung in Tests. Die Itemanalyse ist ein Satz an (statistischen) Verfahren, mit dem einzelne Fragen im Hinblick auf ihre Eignung zur Wissensmessung respektive Wissensabfrage des Untersuchungszieles bewertet und beurteilt werden. Typische Kennwerte sind die Itemschwierigkeit und die Trennschärfe.
Die Itemschwierigkeit drückt mit einem Wert zwischen 0 und 1 aus, wie schwer eine Frage zu beantworten ist, und gibt damit an wie viele Personen einer Kandidatengruppe die Frage korrekt lösen im Verhältnis zur maximal erreichbaren Punktzahl. Zweck des Schwierigkeitsindexes ist die Unterscheidung von Personen mit hoher Merkmalsausprägung und Personen mit niedriger Merkmalsausprägung. Unbrauchbar sind demzufolge alle Items, die von allen Personen, bzw. Items, die von keiner Person gelöst werden konnten oder bejaht wurden (Index-Wert nahe 1 bzw. 0). Items mit Werten nahe 1 sind zu einfach und unterscheiden nicht zwischen den Leistungen von Personen und Items mit Werten nahe 0 sind zu schwierig. Beachten Sie, dass bei einer Multiple Choice Frage mit 5 Antwortalternativen (4 Distraktoren) die Ratewahrscheinlichkeit bereits 20% beträgt. Für eine gute Leistungsdifferenzierung eignen sich Items im Bereich 0.4-0.9 oder 40-90%.
Die Standardabweichung (der Itemschwierigkeit) gibt mit einem Index-Wert zwischen 0 und 1 an, wie stark sich die Antworten auf eine Frage zwischen mehreren Personen unterscheiden, wie hoch die Antworten um den Mittelwert streuen (Schwankungsbreite). Eine Standardabweichung umfasst etwas mehr als 68% aller Werte um den Mittelwert, zwei Standardabweichungen umfassen knapp 95.5% aller Werte in der Werteverteilung. Je kleiner die Standardabweichung ist, desto "stabiler" ist die Itemschwierigkeit über eine oder auch mehrere Testkandidatenpopulationen, je grösser, desto "instabiler" ist sie. Items mit einer hohen Standardabweichung sind demzufolge mit etwas Vorsicht auszuwählen.
Die Trennschärfe gibt mit einem Wert zwischen -1 und +1 die Fähigkeit eines Items an, Kandidaten mit guter und schlechter Leistung in der Gesamtprüfung zu trennen. Sie gibt an, ob eine Frage etwas Ähnliches abfragt wie der übrige Test. Die Trennschärfe ist daher der wichtigste Kennwert in der Itemselektion. Sie wird berechnet als Korrelationskoeffizient zwischen der erreichten Punktzahl in diesem Item und der Gesamtpunktzahl in der Prüfung ohne dieses Item. Für eine gute Leistungsdifferenzierung sind Items mit klar positiver Trennschärfe erforderlich, wenn möglich grösser oder gleich 0.2, sicher aber grösser als 0.1. Items mit Trennschärfen um 0 tragen nichts zur Differenzierung bei, solche mit negativer Trennschärfe laufen sogar dem Differenzierungsziel entgegen und sollten in Folgetests nicht mehr verwendet werden.
Weiterhin können hier Angaben zu den Distraktoren gemacht werden, also wieviele Antwortalternativen zur Verfügung stehen, sowie festgelegt werden ob sich das Frageitem für summative (bewertende), formative (diagnostische) oder beide Arten von Tests eignet. Ob das Item bereits in einem Test verwendet wird, wird vom System automatisch festgelegt. Sie finden hier die genaue Anzahl. Dies wird bei Einbindung in einen Test automatisch erhöht.
Technik
Unter Technik finden Sie Informationen zum Editor in der die Frage erstellt wurde, sowie dessen Version. Das Format gibt an, welches technische Format die Frage hat. Erstellt und letzte Änderung geben an, wann die Frage erstellt bzw. importiert wurde und ob z.B. anschliessend noch Änderungen daran vorgenommen wurden.
