VL11 - Messen und Testen Flashcards
Ist jede Zuordnung von Zahlen zu einer Merkmalsauprägung eine Messung?
Diese Frage muss eindeutig mit “nein” beantwortet werden.
Es handelt sich erst dann um eine Messung, wenn es eine Zuordnungsregel gibt.
Zuordnungsregel
Die Zuordnungsregel legt fest, dass bestimmte Beziehungen, die zwischen den Zahlen existieren, auch analoge empirische Relationen aufweisen müssen.
Def.: Test
Ein Test ist ein wissenschaftliches Routineverfahren zur Erfassung eines oder mehrerer empirisch abgrenzbarer psychologischer Merkmale mit dem Ziel einer möglichst genauen quantitativen Aussage über den Grad der individuellen Merkmalsausprägung.
Gütekriterien von Tests
- Objektivität
- Reliabilität
- Validität
Wichtig bei Gütekriterien
- Gütekriterien bauen aufeinander auf d.h. Objektivität ist z.B. die Voraussetzung für reliable Messungen, etc.
- Neben diesen (Haupt-) Gütekriterien gibt es auch noch eine Reihe von Nebengütekriterien (z.B. Ökonomie, Unverfälschbarkeit, Fairness, Interpretierbarkeit etc.)
Objektivität
Ein Test ist dann objektiv (sachlich, neutral, unparteiisch, tatsächlich), wenn das Testergebnis möglichst unabhängig ist von Meinungen, Vorlieben und Fähigkeiten des Testleiters oder anderen Randbedingungen.
Arten von Objektivität (3)
- Durchführungsobjektivität
- Auswertungsobjektivität
- Interpretationsobjektivität
Durchführungsobjektivität
Alle Teilnehmer werden unter vergleichbaren, standardisierten Bedingungen getestet.
Auswertungsobjektivität
Die Auswertung erfolgt automatisiert und ist unabhängig von den Fähigkeiten des Testleiters
Interpretationsobjektivität
Die Interpretation erfolgt nach klaren, nachvollziehbaren Regeln
Validität
Aussagekraft, Vorhersagekraft; es lassen sich wichtige und treffende Aussagen und Vorhersagen aus den Ergebnissen ableiten
Reliabilität
Unter Reliabilität versteht man die Genauigkeit einer Messung. Ein Testverfahren ist perfekt reliabel, wenn die damit erhaltenen Testwerte frei von zufälligen Messfehlern sind.
Anzustrebende Höhe der Reliabilität
- Rel ≥ .70 ➔ ausreichend
- Rel ≥ .80 ➔ gut
- Rel ≥ .90 ➔ sehr hoch
Arten von Reliabilität (3)
- Interrater-Reliabilität
- Retestreliabilität
- Interne Konsistenz
Interrater-Reliabilität
Einschätzung derselben Person durch zwei unabhängige Beobachter – ähnliche Ergebnisse?
Retestreliabilität
Bei zweifacher Befragung derselben Person innerhalb kurzer Zeit – ähnliche Ergebnisse?
Interne Konsistenz
Cronbachs alpha-Wert, der die Beziehung der einzelnen Fragen/Items im Fragebogen zueinander beschreibt – messen die Items ähnliche Konzepte?
Validitätsaspekte (3)
Inhaltsvalidität
Kriteriumsvalidität
Konstruktvalidität
Inhaltsvalidität
ist gegeben, wenn der Inhalt der Test-Items das zu messende Konstrukt repräsentativ erfasst, d.h. die Test-Items sollten eine repräsentative Stichprobe aus der Population aller Items darstellen.
Die Inhaltsvalidität…
… kann nicht numerisch bestimmt werden, sondern wird oft quantifiziert über Expertenurteile
… wird oft als gegeben angesehen, wenn das Getestete und das zu erfassende identisch erscheinen
Kriteriumsvalidität
liegt vor, wenn vom Verhalten der Testperson innerhalb einer Testsituation auf ein Kriterium geschlossen werden kann (z.B. Auswahlverfahren soll berufliche Leistung vorhersagen). Formal ist die Kriteriumsvalidität definiert als Zusammenhang zwischen Testwerten und Kriteriumswerten einer Stichprobe
Unterformen der Kriteriumsvalidität
in der Gegenwart = Übereinstimmungsvalidität (konkurrente Validität)
in der Zukunft = Vorhersagevalidität (prognostische / prädiktive Validität)
Konstruktvalidität
Übereinstimmung zwischen Testwerten und einem Netz weiterer theoretisch verwandter Konstrukte, die mit dem durch den Test gemessenem Konstrukt „irgendwie“ in Zusammenhang stehen sollen (= nomologisches Netzwerk).
r < 0 bedeutet negativer Zusammenhang
r > 0 bedeutet positiver Zusammenhang
r = 0 bedeutet kein Zusammenhang
Weitere Gütekriterien (3)
Veränderungssensitivität
Interpretierbarkeit
Angemessenheit
Veränderungssensitivität
- Können mittels des Instruments relevante
Veränderungen im Zustand der Person erfasst werden? - Nacherfolgter Behandlung/Training
- Bei Voranschreiten einer Erkrankung
- Entspricht die Veränderung im Instrument dem, was der Trainer als relevante Veränderung ansieht?
- Bildet das Instrument Veränderungen ab, die auch in anderen Maßen erkannt werden? (z.B. Funktionsfähigkeit)
Interpretierbarkeit
- Wie sind die Ergebnisse zu interpretieren?
- Was ist ein klinisch auffälliger Wert?
- Ab wann besteht Handlungsbedarf?
- Bei Diagnose: Was ist der cutoff-Wert für ein bedeutsames Symptom?
- Interpretierbarkeit:
- Vergleich der Werte zu einer Referenzgruppe
- Vergleich relevanter Gruppen und ihrer Werte
Altersgruppen, Stadium der Erkrankung, Leistungssportler - Werte vor und nach einem Training