Hoorcollege 7: Verbeteren van de Betrouwbaarheid

Question 1

Wat zijn manieren om de betrouwbaarheid te verbeteren?

Answer 1

1. Item-restscore correlatie
2. Gedichotomiseerde item-restscore correlatie
3. Item-discriminatie index D
4. Item-discriminatie parameter in item-respons model

Question 2

Wat is de restscore?

Answer 2

De testscore (score op alle items) min de score van het item waar je naar kijkt. R(-i)

Question 3

Wat is de Item-restscore correlatie?

Answer 3

De correlatie tussen het item waar je naar kijkt en de restscore

Question 4

Wat moet de item-restscore correlatie minimaal zijn? (selectieregel)

Answer 4

Minimaal 0.3 of zelfs 0.4

Question 5

Wat is de phi-coëfficiënt? (o met streep er verticaal doorheen)

Answer 5

De overeenkomst tussen twee variabelen (ook te gebruiken bij selectie)

Question 6

Hoe ziet de tabel eruit bij selectie?

Answer 6

Y-as staat het criterium waar je op selecteert.
X
0 1
Y 1 A B
0 C D

Question 7

Wat geef je mensen die je wilt selecteren?

Answer 7

Een gedichotomiseerde restscore van 1

Question 8

Wat doe je bij de Item-discriminatie index D?

Answer 8

Deel mensen in in drie groepen: laag, midden, hoog (vaak 30% laagste en 30% hoogste)
D = phigh - plow

Question 9

Wat is phigh en plow?

Answer 9

phigh = p-waarde (proportie correct) van de groep die het hoogst scoort (hoogste 30%)
plow = p-waarde (proportie correct) van de groep die het laagst scoort (laagste 30%).
We willen D het liefst zo hoog mogelijk!
Hogere D –> item discrimineert beter –> hogere betrouwbaarheid

Question 10

Wat betekent attenuatie van correlaties?

Answer 10

We schatten lagere correlaties in door meetfout; ieder observatie X bevat meetfout E, deze meetfout vertroebelt de meting.
Het gemeten construct (T) kan sterk samenhangen met iets anders –> de geobserveerde score X zal een zwakkere samenhang vertonen doordat deze een vertroebelde weergave van T levert.
Lage betrouwbaarheid attenueert geobserveerde correlaties.

Question 11

Wat zijn TX/TY en wat is X

Answer 11

TX/TY zijn op constructvlak en X is de geobserveerde testscore

Question 12

De correlatie tussen 2 constructen RTXTY is hoger dan?

Answer 12

1. De correlatie tussen geobserveerde testscores rXY
2. Hoger dan de correlatie testscore X en ware score Y rXTY

Question 13

Welke soort attenuatie correlaties zijn er?

Answer 13

1. rXY
2. rXY
3. rTXTY
   4.rXTY