Fragenkatalog Flashcards
Welcher Intelligenztest ermöglicht adaptives Testen?
Adaptives Intelligenz Diagnostikum - 3 (AID-3)
Fehlerquellen bei Verhaltensbeobachtung
Haloeffekt/Hofeffekt: ein Merkmal überstrahlt andere Merkmale
Logische Fehler: implizite Annahmen ü logische Zsmgehörigkeit best. Merkmale beeinflussen d Beurteilung
Primacy/ Recency Effect: übermäßiger Einfluss v Beobachtungen am Anfang/Ende der Beobachtungsphase
Beobachterdrift: schwankende Genauigkeit der Beobachtung
Reaktivität: Anwesenheit oder Auftreten des Beurteilers beeinflusst das Verhalten der zu beobachtenden Person
Mildefehler: Neigung zu positiven Beurteilungen vs.
Strengefehler:Neigung zu negativen Beurteilungen
zentrale Tendenz: Bevorzugung mittlerer Skalenpositionen
Tendenz zu Extremurteilen
Geringe Itemvarianz für Trennschärfe Bedeutung
Je niedriger die Varianz eines I., desto unwahrscheinlicher ist es, dass ein I. noch eine hohe Trennschärfe aufweist.
Zusammenhänge zwischen den drei Itemkennwerten
Nennen zuerst
Item mit extrem hoher oder niedriger Schwierigkeit kann nur noch eine eingeschränkte Varianz haben.
Bei P=0 oder P=100 muss die Varianz null sein.
Alle P haben gleich geantwortet.
Varianz & Trennschärfe
Ein Item mit einer Varianz von null kann keinen Zsmhang mehr mit dem Gesamttest aufweisen.
Was macht die Itemanalyse?
Steigert Reliabilität
Betrachtet die Eigenschaften der Messungen xvi eines Items mit einem einzelnen Item
Itemkennwerte nennen
Itemschwierigkeit
Itemvarianz
Itemtrennschärfe WICHTIGSTES
Selektionsdiagnostik
Auswahl von geeigneten Personen oder Bedingungen mit dem Ziel der Optimierung eines Kriteriums (z.B. Berufliche Leistung)
-> zwei Formen den Implementierung von SD
1 Personenselektion: Bedingungen sind vorgegeben
Z.b. Das Qualifikationsmerkmal: qualifiziertesten werden ausgewählt (Konkjrrenzauslese)
- Beispiel: Personalauswahl , Aufnahmeprüfung
2 Bedingungsselektion: hier sind Personen vorgegeben
Z.b. Schulabgänger: es wird für jede Person nach einer geeigneten Bedingung im Hinblick auf ein Optimierungskriterium, z.B. Beruflichen Erfolg gesucht
- Beispiel: Berufsberatung
Modifikationsdiagnostik
Im Mittelpunkt klinisch-psychologischer Fragestellung
Externe Bedingungen verändern, um Problemverhalten zu reduzieren
Verhaltensdiagnostische Prinzipien
Eigenschaftsmodell welche Diagnostik?
Selektionsdiagnostik
Ziel Faktorenanalysen
Zusammenhänge einer Reihe manifester Variablen durch eine kleinere Zahl latenter Variablen zu beschreiben
Konstruktvalidität Unteraspekte
Faktorielle V.
Konvergente V.
Discriminate V.
Validitätsaspekte
a) Inhaltsval.
b) Augenscheinval.
c) Konstruktval.
d) Kriteriumsval.
Gelbe Felder MTMM-Analyse Bedeutung
Blaue Felder
Konvergente Validität.
Discriminate Validitat
= Konstruktvalidität
Was ist das Goldberg-Paradox?
Phänomen, das sagt:
Formalisierte diagnostische Entscheidungsmodelle (Paramorphe Modelle), die auf Daten von Diagnostikern beruhen, höhere Validität der Entscheidungen aufweisen können, als Entscheidung der Diagnostiker selbst.
Gründe Goldberg-Paradox.
Höhere Validität
Konsistenz (1) diagnostiker verändern Gewichtungen von Prädiktorinformationen von Fall zu Fall
Interindividualität und Zuverlässigkeit (2) formal. Diagnost. Entscheidungsmodelle identifizieren Prädiktoren, die über viele Fälle stabil
Transparenz (3) Diagnostiker sind zum Teil nicht in der Lage ihre Entscheidungsregeln zu explizieren bzw. Sind sich dieser nicht bewusst
Zu stark gewichtet (4) Ausprägungsmuster
Vorteile von objektiven Persönlichkeitstests
- Verschleierung des Messprinzips
2. Messung impliziter Verfahren
Intelligenztest für Personen mit geringen Deutschkenntnissen
Ravens Progressive Matrices
Culture Fair Test
Brogden-Cronbach-Gleser-Modell ermöglicht was?
Inkrementeller nutzen = nutzenzuwachs
Nutzen von personalauswahlverfahren
Grundannahmen KTT
Nach der KTT setzt sich der gemessene Testwert aus 2 Komponenten zusammen,
- dem „wahren Wert“ (True Score; tau) des Individuums
- dem Messfehler (error; ETA)
Zentral dabei ist, den Anteil des Messfehlers zu bestimmen (= Messfehlertheorie)
Elemente der Diagnostik (und erklären)
Erhalt der Fragestellung Erhebung der Daten Integration der Daten Diagnostische Entscheidung Darstellung und Kommunikation Beantwortung der Fragestellung
Verlauf der 2. Periode (Intelligenztests)
Erster Intelligenztest Binet und Simon Berechnung eines intelligenzalters Staffeltests IA und LA im Durchschnitt identisch - Stern prägte den Begriff „Intelligenzq.“ IQ IA und LA Beziehung IQ= (IA/LA) x100 - Entwicklung Army Alpha und Beta Gruppentests - Wechsler Wechsler Bellevue Intelligence scales Neu: Ermittlung IQ über Abweichungswert WAIS IQ=100+15(x-M)/SD - Rorschachtest Projektives Verfahren
Wie misst ein Test ein Personenmerkmal?
Persönlichkeitsmerkmal beeinflusst Verhlaten im Test, anhand Testauswertung auf Persönlcihkeitsmerkmal schließen
Axiome nennen und erklären
3 Axiome und Zusatzannahmen
- Existenzaxiom
- Verknüpfungsaxiom
- Unabhängigkeitsaxiom
- es existiert ein wahrer Testwert True Score tau als erwartungswert einer Messung Xvi
- jede Messung xvi setzt sich aus einem wahren Wert tauvi und einem zufälligen Fehlerwert evi zusammen
Aus der Verbindung des Existenz-und Verknüpfungsaxioms zeigt sich, dass der Zufallsfehler evi den Erwartungswert 0 hat - Unabhängigkeitsaxiom
Korrelation zwischen den Messfehlern e und den wahren Werten tau bei beliebigen Personen und items ist 0
Worum handelt es sich bei der Reliabilität in der KTT?
Die R bezeichnet die Messgenauigkeit eines Tests und ist als Anteil der Varianz der wahren Werte tau an der Varianz der beobachteten Testwerte x definiert
R=Var(tau)/Var(X)
Reliabilitätskoeffizient Wertebereich [0-1]
Reliabilität worum handelt es sich hierbei?
1 Hauptgütekriterium
Ein Test ist dann zuverlässig(reliabel), wenn er das Merkmal, das er musst, exakt, d.h. Ohne Messfehler,misst.
Reliabilitätskoeffizient von 0?
-von 1
Mininalwert 0 gibt ab dass die Testwertevarianz keine wahre Varianz enthält sondern nur aus Fehlervarianz besteht Var(X)=Var(e)
Nicht reliabel!
1 Testwertevarianz nur aus aus wahrer Varianz enthält und der Test Fehlerfrei misst Var(X)=Var(e)
Nennen Sie die Nachteile der KTT
Annahmen sind nicht testbar
-Der Testwert setzt sich aus wahren Wert und Testwert zusammen
-Unkorreliertheit der Messfehler
-Homogenität der Items
-Intervallskalenniveau der Messwerte
Kennworte
-Die Kwerte der KTT sind stichprobenabhängig
—> Verallgemeinerung fraglich
Keine Theorie über den Zusammenhang zwischen Testwert und einer (latenten) Eigenschaft
Vorteile der KTT
Die Testentwicklung und -Auswertung im Rahmen der KTT ist relativ ökonomisch und praktisch umsetzbar
Die KTT ist gut erweiterbar durch neue Konzepte
Die KTT wurde in vielen Bereichen verbessert und Nachteile ausgeglichen! z.B. Im Rahmen KFAnalysen
Die KTT ist in zahlreichen Arbeiten untersucht worden
Welche Faktorenanalytischen Verfahren gibt es?
Exploratorische Faktorenanalyse (EFA):
Welche latente Struktur ist in den Daten?
Konfirmatorische FA engl. (CFA): ob eine postulierte Struktur in den Daten tatsächlich anzunehmen ist?
FAM Modelle nennen
Faktoren-Modelle: (A) zwei unabhängige Faktoren,
(B) Independent-Cluster-Modell,
(C) Hierarchisches Modell,
(D) explorative Faktorenanalyse
Beschreiben Sie die Schritte einer Faktorenanalyse
- Aufstellen des Modells
- Es werden Hypothesen aufgestellt, wie viele F
welche Beziehung diese Faktoren haben und - Überprüfung des Modellfits
- Es wird getestet, ob die Annahmen über die Zusammenhänge im Modell (Itemhomogenität) tatsächlich auf die Varianz-Kovarianz-Matrix der empirischen Daten zutreffen
- Statistiken
•SRMR (Standardized Root Mean Square Residual) _< .05
•RMSEA (Root Mean Squared Error of Approximation) same
•Chi^2-Test: nicht signifikant (abhangig von Stichprobengröße)
-Wenn Modelk angenommen, dann Schritt 3 - Interpretation der geschatzten Modellparameter
- Wie hoch sind die Faktorladungen? (ist ein Item ein guter oder schlechter Indikator?)
- Schatzung der Reliabilitat des Tests (McDonalds w)
Vergleich KTT mit der FA
KTT: Es wird angenommen, dass Items parallel zueinander sind, also dass die Varianzen gleich sind, się gleich Mittekwerte haben und alle gleich Gute Indikatoren fur die Eigenschaft sind
Xi = tau + ei
FA Modelle
- Die Items konnen unterschiedliche Varianzen, unterschiedliche MW haben und unterschiedlich Gute Indikatoren fur den Faktor sein
Xi = hi + y*t + ei
Gemeinsamkeiten
Die Zusatzannahmen der Unkorrelierthwjt der Fehler unterejnander und mit dem wahren Wery der KTT gelten ebenfalls im Faktorenmodell
Was musst die Item-Response-Theorie?
Probabilistischen Zsmhang zwischen Auspragung des latenten Merkmals und der Wahrscheinlichkeit einer Itemantwort
Wird żur Testkonstruktion und Testanwendung eingesetzt
Probleme linearer Modelle bei binären Items
- Schwierigkeitsfaktoren: Ähnlich schwierige Items werden in einem Faktor abgebildet (Artefakt)
- Modellierung von Lösungswahrscheinlichkeiten: Lineare Modelle produzieren Wahrscheinlichkeiten >1 oder
Beschreiben Się den Ablauf einer Analyse nach der IRT
- Modellspezifikation (Aufstellen des Modells)
Und schatzung des Modells (Parameter) - uberprufung des Modellfits
- interpretation der Parameter
(Fast gleich wie FAM)
Wann sind Messungen spezifisch objektiv?
Wenn,
• Vergleiche zwischen den gemessenen Objekten nicht Davon abhangen, welche Instrumente zur Messung herangezogen werden und
• Vergleiche zwischen Instrumenten nicht von den Objekten abhangen, die fur den Vergleich verwendet werden
Was ist adaptives Testen?
Beim a.T. Werden zur Steigerung der Testökonomie nur diejenigen Testitems eingesetzt, die fur das Fahigkeitsniveau umgedrehtes B eine bije Iteminformatiin Iiv aufweisen
Es wirden also solche Items ausgewählt, dereń Schw. mit der Fahigkeit des Probanden hinreicgend ubereinstimmen
Es beatbeiten verschiedene Persinen versch. Items, wobei aufgrund der IRT Skalierung moglich ist, fur die versch. personen vergleichbate Testwerte zu ermitteln
• Branched testing; Paper-Pencil
• Tailored testung: Computerisiert
Vorteile vom Adaptiven Testen / IRT
Kürzere Testdauer oder genauere Testung und weniger Übungseffekte durch Austausch der Items
Voraussetzung für IRT - Adaptives Testen
Ein Rasch-homogener Itempool, bestehend aus kalibrierten Items (=die Schwierigkeitsparameter sind aus Voruntersuchungen bekannt)
Nennen sie die Hauptgütekriterien diagnostischer Verfahren
1 Objektivitat
2 Reliabilität
3. Validitat
Beschreibe die Aspekte Objektivität
Durchführungs
Auswertung
Interpretations
Objektivität
Nennen die drei Methoden wie man Reliabilität Schätzen kann und erklären sie eine genauer
- Retestreliabilität
- Paralleltestreliabilität
- Split-Half-Reliabilität
- Interne Konsistenz
a. paralleltestreliabilität
Voraussetzung:
• Existenz von Parallelen Tests
Corr(Xp, Xq)= Cov(same)/SDp*SDq = r = Rel(X)
Xp = TW 1. Paralleler Test Xq = TW 2. paralleler Test
b. Split-Half-Reliabilität
Zwei Parallele Hälften a und b (Odd-Even-Methode, Zufall, Beatbeitungszeut, Schwierigkeit/Trennschärfe)
c. Retestreliabilität
Der „Parallele Test“ wird durch eine zweite Bearbeitung des Tests produziert
rtt = Rel(X)
d. interne Konsistenz
Der Test wird in so viele Testteile zerlegt, wie es Itens enthält
Erklären Augenscheinvalidität
Gibt an, inwieweit der Validitätsanspruch eines Tests einem Laien vom bloßen Augeschein her gerechtfertigt erscheint d.h. Auf Seiten der Testperson der Test Akzeptanz genießt
Aspekte der Kriteriumsv.
- Konkurrente Validität (Übereinstimmungsv.)
* Prognostische Validität (Vorhersagevalidität)
Testökonomie was versteht man darunter?
Wenn er gemessen am diagnostischen Erkenntnisgewinn, relativ wenig Ressourcen wie Zeit, Geld oder andere Formen beansprucht
Was versteht man unter Unverfälschbarkeit
Wenn das Kriterium derart konstruiert ist, dass die zu testende Person durch gezieltes Testverhalten die konkreten Ausprägungen ihrer Testwerge nicht steuern bzw. Verzerren kann.
Erläutern sie Das Cleary-Modell
Testfairness
Ein Test ist dann fair, wenn bei seiner Anwendung für keine der miteinander verglichenen Gruppen eine systematische Über- oder Unterschätzing der Kriteriumswerte entsteht d.h. Wenn die zur Vorhersage des Kriteriums verwendeten gruppenspezifischen Regressionsgeraden identisch sind
Nenne die Konstruktionsstrategien
- Intuitive Konstruktion
- rationale
- Kriteriumsorientierte
- Faktorenanalytische
Externals Konstruktion erläutern
= Kriteriumsorientierte Konstruktion
Vorgehensweise:
- Itempool generieren
- der Itempool wird den Personengruppen vorgelegt, zwischen welchen der FB später trennen soll
- Auswahl der Items, die am besten zwischen den Gruppen trennen (statistisch)
Beispielfragebogen: MMPI-2 Minnesota
Multiphasic Personality Inventory
