VL 1.5 Auswahl diagnostischer Instrumente III Flashcards
Wofür bieten Testtheorien eine Erklärung?
Testtheorien bieten eine Erklärung bzw. ein Grundprinzip, wie gezeigtes Verhalten in einem Test mit dem dahinterliegenden Konstrukt in Beziehung steht
Testtheorien bieten eine Erklärung bzw. ein Grundprinzip, wie gezeigtes Verhalten in einem Test mit dem dahinterliegenden Konstrukt in Beziehung steht.
Wie lautet diese Erklärung im Sinne der Klassischen Testtheorie?
- Die Summe bzw. der Mittelwert der Antworten auf die Items eines Tests ist die Schätzung des wahren Wertes einer Person im dem vom Test gemessenen Konstrukt
- Der wahre Wert der Person im Konstrukt befindet sich innerhalb eines Konfidenzintervalls um diesen Summen- bzw. Mittelwert.
Kurze Begriffsbestimmung: Was beudeten diese Buchstaben bei der KTT?
* X
* T
* E
- X = beobachteter Wert
- T = true score = wahrer Wert
- E = error score = Messfehler
Was beutet folgendes Axiom der KTT?
Xi =Ti +Ei
Der beobachtete Wert einer Person (Xi) ergibt sich aus dem wahren Wert der Person (Ti) und dem Messfehler bei der Messung dieser Person (Ei)
Was beutet folgendes Axiom der KTT?
Ti = E(Xi)
(E = Erwartungswert ≠ Ei = Fehlerwert)
Für jede Person existiert in einem Test ein wahrer Wert
Was beutet folgendes Axiom der KTT?
E(Ei) = 0
Der Erwartungswert des Messfehlers ist null
* Für jede Testperson i stellt der Messfehler Ei eine Zufallsvariable mit dem Erwartungswert null dar
Das heißt, wenn man einen Test unendlich oft durchführen würde, würde sich der Messfehler zu Null mitteln, da es beim beobachteten Wert mal Abweichungen vom wahren Wert nach oben und mal nach unten gibt.
Was beutet folgendes Axiom der KTT?
Corr (Ei, Ti) = 0
Die Messfehler sind unabhängig vom wahren Wert, Messfehler sind zuällig
Was beutet folgendes Axiom der KTT?
Corr (EA, EB) = 0
Die Messfehler zweier Tests A und B sind unkorreliert, weil Messfehler sind zuällig
Was beutet folgendes Axiom der KTT?
Corr (EA, TB) = 0
Die Messfehler in einem Test A sind unabhängig von den wahren Werten in Test B, weil Messfehler sind zuällig
Wie helfen die Axiome der KTT, die Reliabilität (Messgenauigkeit) eines Tests zu bestimmen?
- Reliabilität entspricht dem Anteil der Varianz der wahren Werte an der Varianz der beobachteten Werte Var (T)/Var (X)
- Da Messfehler unsystematisch sind, entsprechen alle gefundenen Zusammenhänge zwischen den beobachteten Werten dem Zusammenhang der wahren Werte
- Reliabilität eines Tests kann daher zB über Zusammenhang von Testwerten bei einer Messwiederholung geschätzt werden
Welche Arten/Schätzmethoden der Reliabilität hast du kennengelernt?
- Retest-Reliabilität
- Paralleltestmethode
- Split-half-Reliabilität
- Interne Konsistenz
Auf welche Art der Reliabilität wird hier getestet?
- eine Stichprobe von Versuchspersonen bearbeitet den Test, dessen Reliabilität bestimmt werden soll, einmal
- Der Zusammenhang aller Items eines Test wird dann z.B. mit Cronbachs Alpha berechnet -> Reliabilitätskoeffizient
- Interne Konsistenz
Auf welche Art der Reliabilität wird hier getestet?
- eine Stichprobe von Versuchspersonen bearbeitet den Test, dessen Reliabilität bestimmt werden soll, zu zwei verschiedenen Zeitpunkten
- Korrelation der Testwerte zu den beiden Messzeitpunkten ist der Reliabilitätskoeffizient
Retest-Reliabilität
Auf welche Art der Reliabilität wird hier getestet?
- eine Stichprobe von Versuchspersonen bearbeitet zwei Testversionen (nicht identische, aber inhaltlich äquivalente Testversionen) eines Tests
- Korrelation der Testwerte der beiden Testversionen ist der Reliabilitätskoeffizient
Paralleltestreliablität
Auf welche Art der Reliabilität wird hier getestet?
- eine Stichprobe von Versuchspersonen bearbeitet den Test, dessen Reliabilität bestimmt werden soll, einmal die Testitems werden in zwei Hälften aufgeteilt (z.B. gerade vs. ungerade)
- Korrelation der Testwerte der beiden Testhälften ist der Reliabilitätskoeffizient
Splithalf-Reliabilität
Welche Einflussfaktoren auf die Höhe von Reliabilitätskoeffizienen haben Sie kennengelernt?
- Art des Merkmals (State vs. Trait..)
- Art des Tests (Power- vs. Speed..)
- Länge des Retestintervalls
- Anzahl der Items/Testlänge
- Stichprobenzusammensetzung (homogene vs. heterogene)
- Itemqualität
- Objektivität
Wovon ist die Empfehlung abhängig wie hoch die Reliabilität sein sollte?
- Art des Merkmals (z.B. bei Leistung höher als bei Persönlichkeit)
- Vergleich mit konkurrierenden Messinstrumenten (sollte besser sein)
- Individual- vs. Kollektivdiagnostik (Einzelfall sollte höher sein)
- Einsatzbedingungen des Messinstruments (z.B. Screening oder “genaue” Diagnostik)
- Kosten-Nutzen-Abwägung (länger ist besser, aber auch teurer)
