W12: Standards für psychologisches Testen Flashcards
Weshalb braucht es Standards für psychologisches Testen?
Um die Qualität zu sichern!
Was sind Teststandards?
Vereinheitliche Leitlinien, allgemein anerkannte Zielsetzungn zur Entwicklung, Adaption, Anwendung und Qualitätsbeurteilung psychologischer Tests.
Welche Bereiche betreffen Teststandards?
- Testkonstruktion
- Testadaption (Übersetzung / Anpassung)
- Testanwendung (Durchführung, Auswertung / Interpretation)
- Qualitätsbeurteilung
Von welchen psychologischen Organisationen wurden Standards erarbeitet?
American Educational Research Association (AERA), American Psychological Association (APA), National Council on Measurement in Education (NCME), Testkuratorium der Föderation Deutscher Psychologievereinugugen (TK), International Test Commission (ITC)
Lösung einer europäischen Lösung ist in Ausarbeitung…
Was sind wichtige Test-Kompendien?
Bspw. Objektivität, Validität, Reliabilität, Skalen, Normen, Fairness in testing (alle einigermassen die gleichen Möglichkeiten), Rechte, Ethik etc.
Was kann zur Validität im Zusammenhang mit Standards gesagt werden?
- Bei Testentwicklungen sollten ausreichend aktuelle Validitätsbelege vorgelegt werden (nicht älter als 8 Jahre!).
- bei Expertenurteilen muss die Qualifikation des Experten dargelegt werden
- Inhalts- Konstrukt- und Kriteriumsvalidität sollten gegeben sein.
- Bei der Konstruktvalidität muss belegt werden können, das ein Test nicht in hohem Masse von anderen Konstrukten abhängt. Zudem muss das interessierende Konstrukt klar von anderen Konstrukten abgrenzbar und in einen theoretischen Rahmen eingebettet sein.
Was kann zur Reliabilität im Zusammenhang mit Standards gesagt werden?
- Auch hier sollten Kennwerte spätestens nach 8 Jahren auf ihre Geltung untersucht werden.
- Zuverlässigkeitsschätzungen sollten für Gesamt- und auch für Subtestwerte vorliegen. Zudem muss die Methode der Bestimmung von Zuverlässigkeitskennwerten angegeben werden.
- Verschiedene Reliabilitätskennziffern müssen bereitgestellt werden (interne Konsistenz alleine ist nicht ausreichend)
Was kann zur Itemgenerierung und Testentwicklung im Zusammenhang mit Standards gesagt werden?
- Beschreibung des interessierten Inhaltsbereich
- Tests werden auf einer fundierten wissenschaftlichen Basis etwickelt
- Beschreibung der repräsentativen Items für jeden Subtest
- Sammlung empirisch fundierter Nachweise, welche mit dem Test zusammenhängen
- Subtests stehen im Einklang mit dem Zweck des Tests
Was kann zu Normen und Testdokumentation im Zusammenhang mit Standards gesagt werden?
- Normen sollten für die betroffenen Testgruppe erhoben werden
- Normierungsstudien müssen repräsentativ erhoben werden
- Normwerte sollte alle 8 Jahre auf Gültigkeit überprüft werden
- Welche Qualifikationen für die Testanwendung erforderlich sind (für Testleiterin und Helferinnen)
- Testmanual dokumentiert den psychologischen Test
Was kann zur Testadaption im Zusammenhang mit Standards gesagt werden?
Dabei geht es um die Adaption von psychologischen Tests über Sprachen und Kulturen hinweg. Achtung: nicht nur Übersetzungsarbeit! Berücksichtigung sprachlicher und kulturellen Hintergrund.
–> Test Adaption Guidelines (TAG)
- Äquivalenz der verschiedenen Testversionen sicherstellen
- Identifizierung von Testkomponenten, die für eine oder mehrere der interessierenden Populationen ungeeignet sind
Beispiel: was ist die Hauptstadt von Albanien? Ist nicht für alle gleich einfach zu beantworten
Welche Schritte beschreiben Test Adaption Guidelines (TAG)?
1) Konstruktäquivalenz: Handelt es sich beim Konstrukt um ein sprach- und kulturübergreifendes Konstrukt?
2) Thematisierung der Übersetzung, Datenerhebung und statistische Überprüfung
3) Klärung der Fragen zur Testdurchführung bei sprachlich und kulturell unterschiedlichen Gruppen
4) Notwendigkeit einer ausführlichen Testdokumentation (z.b. mittels Testhandbuch) zur Gewährleistung zufriedenstellender Validität - Vermeidung diagnostische Fehlentscheidungen
Was kann zur Testdurchführng im Zusammenhang mit Standards gesagt werden?
Der Testanwender muss über ausreichend fachliche Qualifikationen und Erfahrungen verfügen bezüglich:
- Fragestellung
- zugrundeliegenden Theorien und Konzepte
- technische Handhabung
- zur testender Probandengruppe
- Probanden müssen ausreichend über Ziele der psychologischen Testung aufgeklärt werden
- Sorgfältige Planung Ablauf der Testung
- Instruktionen gemäss Testmanual
- exalte Einhaltung der Bearbeitungszeit usw.
- Einhaltung Instruktionen
- Identität von Probanden sichern
- Zustimmung von Probanden einholen
Testdurchführung besteht aus den Phasen Vorbereitungsphase und Testphase.
Was kann zur Testauswertung im Zusammenhang mit Standards gesagt werden?
- Anwendung standardisierte Methoden, dies bedingt statistisch-methodische Kenntnisse
- Bei der Interpretation sollen Testergebnisse nicht überbewertet werden.
- Alle Testdaten sichern und aufbewahren
Testauswertung besteht aus den Bereichen Testergebnisse, Interpretation und Sicherung
Was ist SEPT?
Standards for educational and psychological testing - dabei handelt es sich um “Anforderungen an Verfahren und deren Einsatz bei berufsbezogenen Eignungsbeurteilungen”. Erstmals 1954 erschienen, per 1999 liegt die fünfte Fassung vor. Die SEPT thematisieren vor allem die Konstruktvalidität, Item-Response-Theore und Kriterien für die Verwendung kritischer Trennwerte.
Welches sind Zweck und Zielsetzung der “Internationalen Richtlinien für die Testanwendung”?
-Fachliche und ethische Standards beim Testen
- Rechte des Probanden und anderer am Testprozess Beteiligter
- Auswahl und Evaluation alternativer Tests
- Testvorgabe, Bewertung und Interpretation
- Anfertigung von Testberichten und Rückmeldung der Ergebnisse
