Seminar 1.3 Flashcards
3 Gütekriterien
Objektivität
Reliabilität
Validität
Objektivität und die drei Unterkategorien
Gibt an, in welchem Maß die Testergebnisse vom Testanwender unabhängig sind
-> Durchführungsobjektitvität (Instruktionen, Außmaß an Hilfestellung)
-> Auswertungsobjektivität (Kodierscheme, Itemart)
-> Interpretationsobjektivität (abhängig davon, ob Nomierung vorliegt oder nicht)
Beurteilungsfehler (Ungleichmäßige Ausschöpfung des Beurteilungsspektrums)
Tendenz zur Mitte
Tendenz zu extremen Urteilen
Strenge-Fehler
Milde-Fehler
Beurteilungsfehler (Voreingenommenheit)
Reihungsfehler
Halo-Effekt
Logischer Fehler
Ungleichmäßige Ausschöpfung des
Beurteilungsspektrums (Gegenmaßnahmen)
Bewusstmachen der eigenen Urteilstendenzen
Bewusstmachen von Urteilsfehlern in Abhängigkeit von Fach/Shulart/Schulstufe
Informieren über alterstypische Leistungsfähigkeit
Suchen nach Stärken und Schwächen in jeder Leistung
Bewertung durch mehrere Beurteiler
Voreingenommenheit (Gegenmaßnahmen)
Anonymisieren
Reihenfolge bei der Korrektur variieren
Aufgabenweise korrigieren
Bewusstmachen des Bildes über SuS und Infrage stellen
Differenzierte Beurteilungspunkte
Reliabilität
Zuverlässigkeit/Genauigkeit der Messung
Reliabilität - Retest
Zweimalige Erfassung des gleichen Merkmals
-> für zeitstabile Merkmale
-> Problme: STabilität, Lerneffekte
Reliabilität - Paralleltest
Zweimalige Erfassung des gleichen Merkmals
-> zwei tests mit identischer operationalisierung
-> Probleme: Parallele versionen?, Positionseffekte
Reliabilität - Testhalbierung
Zweimalige Erfassung des gleichen Merkmals
-> Aufteilung der Items eines Tests in zwei Hälften
-> Probleme: Aufteilung, Unterstest selbst messfehlerbehaftet
Validität und drei Unterkriterien
Gültigkeit der Messung (wie gut misst der test was er vorgibt zu messen?)
-> Inhaltsvalidität = Passung Konstrukt
-> Kriteriumsvalidität = Außenkriterium
-> Konstruktvalidität = Passung nomologischer Netzwert
Interpretation Reliabilität
<0.7 unakzeptbel
>0.7 akzeptabel
> 0.8 gut
> 0.9 sehr gut
Interpretation Validität
Über Korrelationen geprüft aber insgesamt sehr schwer zu beurteilen
Möglichkeit zur Verbesserung der Objektivität
Prozeduren präzise beschreiben, mit Kollegen abstimmen und fixieren
Auswertung und Interpretation trennen
Verglechsarbeiten und Jahrgangsstufentests einsetzen
-> standardisieren
Möglichekit zur Verbesserung der Reliabilität
Umso geringere Reliabilität, je weniger Aufgaben sie umfassen
-> Erhöhung der Aufgabenzahl