Brainscape's Knowledge GenomeTM

Browse over 1 million classes created by top students, professors, publishers, and experts.


See full index

M10: Diagnostik & Testtheorie > 06 Nebengütekriterien > Flashcards

06 Nebengütekriterien Flashcards

1
Q

Welche 8 Nebengütekriterien gibt es?

A
  • Skalierung
  • Normierung
  • Vergleichbarkeit
  • Ökonomie
  • Nützlichkeit
  • Zumutbarkeit
  • Fairness
  • Nicht-Verfälschbarkeit
How well did you know this?
1
Not at all
2
3
4
5
Perfectly
2
Q

Was ist Normierung?

A

Einordnung der individuellen Leistung eine Person in eine Referenzgruppe. D.h. als Nebengütekriterium müssen solche Normen vorliegen, damit eine solche Einordnung gemacht werden kann.

-> Die normen müssen aktuell sein und für verschiedene Personengruppen vorliegen (z.B. Alter)

How well did you know this?
1
Not at all
2
3
4
5
Perfectly
3
Q

Wann ist eine Normierung nicht erforderlich?

A
  • bei kriterienorientierten Tests (hier werden Tests mit einem vorher gesetzten Kriterium verlichen, z.B. informelle Schulleistungstests)
How well did you know this?
1
Not at all
2
3
4
5
Perfectly
4
Q

Was ist Vergleichbarkeit?

A

Wenn ein oder mehrere Parallelformen oder Tests mit denselben Gültigkeitsbereichen vorhanden sind.
-> Eine Person muss in zwei Tests, die ähnliches messen, ähnlich abschneiden.

How well did you know this?
1
Not at all
2
3
4
5
Perfectly
5
Q

Wann ist ein Test ökonomisch?

A
  • kurze bzw. angemessene Durchführungszeit
  • wenig Material
  • einfach zu handhaben
  • Gruppentest möglich
  • schnelle und bequeme Auswertung

-> ökönomisch ist nicht immer gut

How well did you know this?
1
Not at all
2
3
4
5
Perfectly
6
Q

Was ist adaptives Testen?

A

Test wird auf Schwierigkeitsniveau der Versuchsperson angepasst.

How well did you know this?
1
Not at all
2
3
4
5
Perfectly
7
Q

Was ist Nützlichkeit?

A

Wenn der Test ein Persönlichkeitsmerkmal oder eine Verhaltensweise misst, für deren Untersuchung ein praktisches Bedürfnis besteht. (Mehr Nutzen als Schaden!)

-> Tests die das gleiche wie andere Tests, nur mit neuen Bezeichnungen messen, brauchen nicht entwickelt zu werden.

How well did you know this?
1
Not at all
2
3
4
5
Perfectly
8
Q

Was ist Zumutbarkeit?

A

Der Getestete darf nicht unnötig durch die Testung belastet werden. (körperlich oder psychisch)

How well did you know this?
1
Not at all
2
3
4
5
Perfectly
9
Q

Was ist Fairness?

A
  • Keine für die Testung relevante Gruppen werden diskriminiert (z.B. Aufgrund Geschlecht)
How well did you know this?
1
Not at all
2
3
4
5
Perfectly
10
Q

Was ist Nicht-verfälschbarkeit?

A
  • Getestete Personen dürfen nicht willentlich oder unwillentlich den Test in die gewünsche Richtung verfälschen können.

-> Kann fast nicht vermieden werden, deswegen soll im Manual stehen, wie stark ein Test verfälscht werden kann und ob man die Verfälschung aufdecken kann.

How well did you know this?
1
Not at all
2
3
4
5
Perfectly
11
Q

Was ist Skalierung?

A

Die numerischen Unterschiede in den Testergebnissen sollen die tatsächlichen Unterschiede zwischen Testpersonen korrekt abbilden.

How well did you know this?
1
Not at all
2
3
4
5
Perfectly
12
Q

Welches Skalenniveau ist für das Umsetzen des Gütekriteriums Skalierung mindestens notwendig?

A

Ordinalskala

How well did you know this?
1
Not at all
2
3
4
5
Perfectly
13
Q

Zwischen welchen Normen (bei der Normierung) wird unterschieden?

A
  • Äquivalenznormen: Zuordnung der Rohwerte zu Zeitabschnitten, z.B. Intelligenzalter nach Binet
  • Variabilitätsnormen: Prozentrangnormen (Abstand eines Testwerts vom Mittelwert)
How well did you know this?
1
Not at all
2
3
4
5
Perfectly
14
Q

Was ist der Staffeltest nach Binet?

A

Kind erhält so lange Aufgaben, bis es sie nicht mehr lösen kann.

How well did you know this?
1
Not at all
2
3
4
5
Perfectly
15
Q

Wann sollte umbedingt auf Prozentrangnormen zurückgegriffen werden?

A

Wenn ein Merkmal in der Population NICHT normalverteilt ist.

How well did you know this?
1
Not at all
2
3
4
5
Perfectly
16
Q

Was begünstigt die Verfälschbarkeit eines Tests?

A

Hohe Augenscheinvalidität

How well did you know this?
1
Not at all
2
3
4
5
Perfectly
17
Q

Welche Tests sind besonders anfällig auf Verfälschbarkeit?

A

Persönlichkeitstests

How well did you know this?
1
Not at all
2
3
4
5
Perfectly
18
Q

Welche problematischen Aspekte im Zusammenhang mit Fairness gibt es?

A
  • Item-Bias
  • Durchführungsfairness
  • Testroutine
How well did you know this?
1
Not at all
2
3
4
5
Perfectly
19
Q

Was ist Item-Bias?

A

Wenn Aufgaben systematisch für verschiedene Personengruppen unterschiedlich schwierig sind. (z.B. Augrund Geschlecht)

How well did you know this?
1
Not at all
2
3
4
5
Perfectly
20
Q

Wie kann bei Item-Bias abhilfe geschafft werden?

A
  • Culture-Fair-Tests, welche ein geringes Mass an sprachlicher Kompetenz verlangen.
How well did you know this?
1
Not at all
2
3
4
5
Perfectly
21
Q

Was ist Durchführungsfairness?

A

Art und Weise der Durchführung muss für alle Fair sein (z.B. benutzen von Computern bei älteren Personen)

How well did you know this?
1
Not at all
2
3
4
5
Perfectly
22
Q

Was ist Testroutine?

A

Testpersonen haben unterschiedliche Testerfahrung, Vertrautheit mit der Testsituation kann das Ergebniss beinflussen.

How well did you know this?
1
Not at all
2
3
4
5
Perfectly
23
Q

Welche Fairnessmodelle gibt es?

A
  • Modell proportionaler Repräsentation (Quotenmodell)
  • Regressionsmodell (Modell einer fairen Vorhersage)
  • Modell konstanter Verhältnisse
24
Q

Wie funktioniert das Modell proportionaler Repräsentationen?

A

z.B. bei Bewerbern ist die Proportion der ausgewählten Bewerbern gleich wie in der gesamten Bewerberpopulation?

25
Q

Was ist das Regressionsmodell?

A
  • Bei keiner Gruppe liegt eine systematische Über- oder Unterschätzung vor
  • gleiche Regressionsgerade ist vorhanden
26
Q

Was ist das Modell konstanter Verhältnisse?

A

z.B. Verhältnis zwischen der Zahl der durch Test ausgewählten Bewerber und Zahl im Kriterium potentiell Erfolgreicher in den Gruppen ist gleich.

-> z.B. bisher wurden 200 Männer und 100 Frauen ausgewählt, in Zukunft 400 Männer und 200 Frauen

27
Q

Welche Arten von Normen gibt es?

A
  • Äquivalenznormen
  • Variabilitäts- und Abweichungsnormen
  • Prozentrangnormen
28
Q

Was sind Äquivalenznormen?

A

Orientieren sich an den Mittelwerten von Gruppen

-> Nicht die beste Normierung!

(z.B. frühe Intelligenztests, Staffeltest nach Binet)

29
Q

Was sind Variabilitäts- und Abweichungsnormen

A

Orientiert sich an Abweichungen vom individuellen Testwert vom Mittelwert der Stichprobe (Standardabweichung)

-> heute die Norm

(z.B moderne Intelligenztests)

30
Q

Was sind Prozentrangnormen?

A

Wo liegt die Person innerhalb einer Stichprobe (50% -> in der Mitte der Vergleichsstichprobe)

-> können leicht zu falschen Interpretationen führen

31
Q

Warum können Prozentränge leicht falsch interpretiert werden?

A

Die Veränderungen in den Normwerten sind nicht linear zu den Prozentrangnormen. d.h.

z.B. im Durchschnittsbereich liegen viele Werte, so dass ein kleiner Anstieg schon zu einem starken Anstieg in den Prozenträngen führt. In den Extrempositionen führt ein gleich grosser Anstieg nur zu einem kleinen Anstieg in den Prozenträngen.

32
Q

Wann verwendet man welche Normwerte?

A

Normalverteilung -> Äquivalenznormen

keine Normalverteilung -> Prozentrangnormen

33
Q

Welche Bezugsysteme für den Vergleich von Testwerten gibt es? (Normierung)

A
  • Testergebnisse anderer Personen einer Bezugsgruppe (Normstichprobe)
  • Testergebnisse derselben Person in anderen psychologisch-diagnostischen Verfahren
  • Testergebnisse derselben Person in demselben Test zu einer anderen Messgelegenheit
  • Vergleich mit einem externen Standard (Kriterium)
34
Q

Was sind Beispiele für Normorientierte Bezüge?

A
  • Ausbildungseignung (Vergleich mit Gruppe von erfolgreichen Berufsausübenden)
  • Eignung für Führungsaufgaben
35
Q

Was sind Beispiele für Kriterienorientierte Bezüge?

A
  • Hochbegabtendiagnostik (IQ grösser als 130)
  • Vorliegen einer Lese- und Rechtschreibeschwäche
  • Bei diagnostizieren von Depression

-> Cut off Werte

36
Q

Wie geht man bei der Normierung eines Tests vor?

A
  • Ausgangspunkt: Skalenrohwerte (Durchschnittswert oder Summenwert)
  • Prüfen, ob die Daten normalverteilt sind
  • Bei Normalverteilung: Skalenrohwerte werden in z-Werte transformiert
  • z-Werte können in verschiedene Normwerte transformiert werden
37
Q

Wann machen IQ-Werte Sinn?

A

Nur bei Leistungstests (weil dort auch kleinere Zahlen Leistungsunterschiede repräsentieren, was bei Persönlichkeitstests nicht der Fall ist)

38
Q

Wann werden Stanine- und Sten-Werte verwendet?

A

Häufig bei Persönlichkeitsfragebogen (mitunter dort auch T-Werte, aber obige häufiger)

39
Q

Wann werden T-Werte verwendet?

A

Häufig bei Leistungstests, oder Fragebögen mit vielen Items (weil eine numerische Differenzierung besser möglich ist)

40
Q

Wann werden Prozentränge verwendet?

A

Wenn keine Normalverteilung vorliegt

41
Q

Sind Normwertdifferenzen wirklich Leistungsdifferenzen?

A

Standardmessfehler muss berücksichtigt werden, deswegen: nicht ganz

42
Q

Ist es sinnvoll, für verschiedene Gruppen getrennte Normen zu entwickeln?

A

Nur, wenn es Unterschiede gibt in der Grundgesamtheit.

43
Q

Warum sind Effektstärken wichtig für die Entscheidung, ob es für verschiedene Gruppen getrennte Normen braucht?

A

Weil die Signifikanz eines Unterschieds noch nichts über seine Grösse aussagt, dies kann man mit Effektstärken bestimmen.

44
Q

Wie kann ein Cut-Off-Wert bei der kriteriumsorientierten Testauswertung festgelegt werden?

A

Vergleich zweier Stichproben, z.B. Menschen mit und Menschen ohne Depression, dort wo sie sich schneiden könnte ein Cut-Off-Wert sein, oder dort wo die Kurve beginnt, bzw. dort wo die Kurve aufhört.

(In einem Grenzbereich wird es immer falsch-negative und falsch-positive geben)

45
Q

Was sind Vorgaben für Normstichproben?

A
  • Müssen alle 8 Jahre erneuert werden.
  • Daumenregel: Mindestgrösse 300 Probanden
  • Genaue Angaben zur Stichprobe sollte vorliegen.
46
Q

Wie können verschiedene Testkennwerte beurteilt werden?

A

Daumenregel, hängt aber von vielem ab:

47
Q

Welche Normskalen gibt es?

A
48
Q

Inwiefern kann ein Test verfälscht werden? (Kriterium Nicht-Verfälschbarkeit)

A
  • Absichtliche Verstellung (faking good, faking bad, “typischer” Buchhalter)
  • Soziale Erwünschtheit
  • Akquieszenz (Ja-Sage-Tendenz)
  • Tendenz zu(r) Mitte/Extremurteilen
49
Q

Was ist kriterienorientiertes testen?

A
  • Vergleich mit einem bestimmten Kriterium (z.B bestehen / nicht bestehen)
  • Vorliegen eines cut-off-Wertes
50
Q

Was ist normorientiertes testen?

A

a) Vergleich mit anderen Personen
b) Vergleich mit ähnlichen Tests der gleichen Person
c) Vergleich im Verlaufe der Zeit (z.B. vor einer Therapie und nach einer Therapie)

51
Q

Wie geht man bei der Normierung eines Tests vor?

A
  1. Skalenrohwert als Ausgangspunkt
  2. Prüfung, ob Normalverteilung der Daten vorliegt (mithilfe von Histogramm)
  3. Skalenrohwerte in z-Werte umformen (wenn Normalverteilung JA)
  4. Transformieren von z-Werten in verschiedene Normwerte
52
Q

Welche Normwerte können verglichen werden?

A
  • z-Werte
  • Z-Werte
  • IQ
  • T-Werte
  • C-Werte
  • Stanine Werte
  • Sten-Werte
  • Wertpunkte
  • Prozentränge
53
Q

Welche Fehler kann es bei der Normierung geben?

A
  • Fehler 1. Art: alpha-fehler
  • Fehler 2. art: beta-fehler
54
Q

Was ist der Alpha-Fehler?

A
  • Nullhypothese wird zu unrecht abgelehnt -> man nimmt Mittelwertsunterschiede an, die in der Grundgesamtheit tatsächlich aber nicht vorliegen
  • typischerweise mit 5% ode 1% angenommen
55
Q

Was ist der Beta-Fehler?

A
  • Alternativhypothese wird zu unrecht abgelehnt -> man nimmt keine Mittelwertsunterschiede an, obwohl in der Grundgesamtheit tatsächlich Unterschiede vorliegen
  • typischerweise mit 5% ode 1% angenommen
56
Q

wie kann ich den Betafehler klein halten?

A

Wenn man den Alpha-Fehler grösser wählt.

M10: Diagnostik & Testtheorie (14 decks)

Brainscape helps you reach your goals faster, through stronger study habits.
© 2024 Bold Learning Solutions. Terms and Conditions