VL11 - Messen und Testen

Question 1

Ist jede Zuordnung von Zahlen zu einer Merkmalsauprägung eine Messung?

Answer 1

Diese Frage muss eindeutig mit “nein” beantwortet werden.
Es handelt sich erst dann um eine Messung, wenn es eine Zuordnungsregel gibt.

Question 2

Zuordnungsregel

Answer 2

Die Zuordnungsregel legt fest, dass bestimmte Beziehungen, die zwischen den Zahlen existieren, auch analoge empirische Relationen aufweisen müssen.

Question 3

Def.: Test

Answer 3

Ein Test ist ein wissenschaftliches Routineverfahren zur Erfassung eines oder mehrerer empirisch abgrenzbarer psychologischer Merkmale mit dem Ziel einer möglichst genauen quantitativen Aussage über den Grad der individuellen Merkmalsausprägung.

Question 4

Gütekriterien von Tests

Answer 4

• Objektivität
• Reliabilität
• Validität

Question 5

Wichtig bei Gütekriterien

Answer 5

• Gütekriterien bauen aufeinander auf d.h. Objektivität ist z.B. die Voraussetzung für reliable Messungen, etc.
• Neben diesen (Haupt-) Gütekriterien gibt es auch noch eine Reihe von Nebengütekriterien (z.B. Ökonomie, Unverfälschbarkeit, Fairness, Interpretierbarkeit etc.)

Question 6

Objektivität

Answer 6

Ein Test ist dann objektiv (sachlich, neutral, unparteiisch, tatsächlich), wenn das Testergebnis möglichst unabhängig ist von Meinungen, Vorlieben und Fähigkeiten des Testleiters oder anderen Randbedingungen.

Question 7

Arten von Objektivität (3)

Answer 7

• Durchführungsobjektivität
• Auswertungsobjektivität
• Interpretationsobjektivität

Question 8

Durchführungsobjektivität

Answer 8

Alle Teilnehmer werden unter vergleichbaren, standardisierten Bedingungen getestet.

Question 9

Auswertungsobjektivität

Answer 9

Die Auswertung erfolgt automatisiert und ist unabhängig von den Fähigkeiten des Testleiters

Question 10

Interpretationsobjektivität

Answer 10

Die Interpretation erfolgt nach klaren, nachvollziehbaren Regeln

Question 11

Validität

Answer 11

Aussagekraft, Vorhersagekraft; es lassen sich wichtige und treffende Aussagen und Vorhersagen aus den Ergebnissen ableiten

Question 12

Reliabilität

Answer 12

Unter Reliabilität versteht man die Genauigkeit einer Messung. Ein Testverfahren ist perfekt reliabel, wenn die damit erhaltenen Testwerte frei von zufälligen Messfehlern sind.

Question 13

Anzustrebende Höhe der Reliabilität

Answer 13

• Rel ≥ .70 ➔ ausreichend
• Rel ≥ .80 ➔ gut
• Rel ≥ .90 ➔ sehr hoch

Question 14

Arten von Reliabilität (3)

Answer 14

1. Interrater-Reliabilität
2. Retestreliabilität
3. Interne Konsistenz

Question 15

Interrater-Reliabilität

Answer 15

Einschätzung derselben Person durch zwei unabhängige Beobachter – ähnliche Ergebnisse?

Question 16

Retestreliabilität

Answer 16

Bei zweifacher Befragung derselben Person innerhalb kurzer Zeit – ähnliche Ergebnisse?

Question 17

Interne Konsistenz

Answer 17

Cronbachs alpha-Wert, der die Beziehung der einzelnen Fragen/Items im Fragebogen zueinander beschreibt – messen die Items ähnliche Konzepte?

Question 18

Validitätsaspekte (3)

Answer 18

Inhaltsvalidität
Kriteriumsvalidität
Konstruktvalidität

Question 19

Inhaltsvalidität

Answer 19

ist gegeben, wenn der Inhalt der Test-Items das zu messende Konstrukt repräsentativ erfasst, d.h. die Test-Items sollten eine repräsentative Stichprobe aus der Population aller Items darstellen.
Die Inhaltsvalidität…
… kann nicht numerisch bestimmt werden, sondern wird oft quantifiziert über Expertenurteile
… wird oft als gegeben angesehen, wenn das Getestete und das zu erfassende identisch erscheinen

Question 20

Kriteriumsvalidität

Answer 20

liegt vor, wenn vom Verhalten der Testperson innerhalb einer Testsituation auf ein Kriterium geschlossen werden kann (z.B. Auswahlverfahren soll berufliche Leistung vorhersagen). Formal ist die Kriteriumsvalidität definiert als Zusammenhang zwischen Testwerten und Kriteriumswerten einer Stichprobe

Question 21

Unterformen der Kriteriumsvalidität

Answer 21

in der Gegenwart = Übereinstimmungsvalidität (konkurrente Validität)
in der Zukunft = Vorhersagevalidität (prognostische / prädiktive Validität)

Question 22

Konstruktvalidität

Answer 22

Übereinstimmung zwischen Testwerten und einem Netz weiterer theoretisch verwandter Konstrukte, die mit dem durch den Test gemessenem Konstrukt „irgendwie“ in Zusammenhang stehen sollen (= nomologisches Netzwerk).
r < 0 bedeutet negativer Zusammenhang
r > 0 bedeutet positiver Zusammenhang
r = 0 bedeutet kein Zusammenhang

Question 23

Weitere Gütekriterien (3)

Answer 23

Veränderungssensitivität
Interpretierbarkeit
Angemessenheit

Question 24

Veränderungssensitivität

Answer 24

• Können mittels des Instruments relevante
  Veränderungen im Zustand der Person erfasst werden?
• Nacherfolgter Behandlung/Training
• Bei Voranschreiten einer Erkrankung
• Entspricht die Veränderung im Instrument dem, was der Trainer als relevante Veränderung ansieht?
• Bildet das Instrument Veränderungen ab, die auch in anderen Maßen erkannt werden? (z.B. Funktionsfähigkeit)

Question 25

Interpretierbarkeit

Answer 25

• Wie sind die Ergebnisse zu interpretieren?
• Was ist ein klinisch auffälliger Wert?
• Ab wann besteht Handlungsbedarf?
• Bei Diagnose: Was ist der cutoff-Wert für ein bedeutsames Symptom?
• Interpretierbarkeit:
• Vergleich der Werte zu einer Referenzgruppe
• Vergleich relevanter Gruppen und ihrer Werte
  Altersgruppen, Stadium der Erkrankung, Leistungssportler
• Werte vor und nach einem Training