Week 4 (H4) Flashcards
Wat is de Item Response Theory? (IRT)
De IRT is een alternatief voor de Klassieke Test Theorie. De IRT identificeert en analyseert de metingen binnen gedragswetenschappen. De reactie per individu op een bepaald test item wordt beïnvloed door karaktereigenschappen (trait level) en eigenschappen van het item (difficulty level).
Hoe is de kans op een goed antwoord bepaald door het trait level?
IRT-analyse heeft een verdeling van (0;1), met een gemiddelde van 0 en een standaarddeviatie van 1.
Dus als een item een moeilijkheidsniveau van 0 heeft:
- Heeft een individu een gemiddeld trait level (dus 0) = 50% kans op een goed antwoord.
- Heeft een individu een hoog trait level (hoger dan 0) = > 50% kans op goed antwoord.
- Heeft een individu een laag trait leven (lager dan 0) = < 50% kans op goed antwoord.
Wat zijn de discriminatiewaardes van een item?
de relevantie van het desbetreffende item ten opzichte van het gemeten trait level. Hierbij is:
· Positieve discriminatie ≥ 0 = de relatie tussen item en trait, waarbij hoge trait scores een hoge kans hebben.
· Negatieve discriminatie ≤ 0 = inconsistentie tussen item en trait, hoge trait scores > kleinere kans.
Discriminatiewaarde = 0 = geen relatie item en trait
Met welke componenten houdt de IRT rekening?
- de discriminatiewaarde
- het traitlevel
- gokkans (bij mc/dichotoom)
Welk verband drukt een meetmodel uit?
Een meetmodel drukt het wiskundig verband uit tussen de uitkomst en de componenten die de uitkomst beïnvloeden.
(hierbij is de uitkomst: de reactie van iemand op een bepaald item & de componenten: de vaardigheden van de proefpersoon en de kwaliteit van het item)
Wat meet het één-parameter model (1PL)?
Rasch model heeft de beïnvloedbare componenten:
- de eigenschappen van het individu
- de eigenschappen van het item
Wat meet het twee-parameter model (2PL)?
Hierbij zijn drie componenten aanwezig die de scores beïnvloeden, namelijk:
- de eigenschappen van het individu
- de eigenschappen van het item
- itemdiscriminatie.
Wat meet het drie-parameter model (3PL)?
Volgens het 3PL model wordt de kans om juist te antwoorden beïnvloed door:
1. De eigenschappen van het individu (het trait level) Ө
2. De item moeilijkheid β
3. De item discriminatie α
4. De gok parameter
De gokkans wordt verwezen met ci = de ondergrenskans op het juist beantwoorden van item i.
Wat is het Graded Response Model?
Het is hetzelfde als het 2PL model, maar GRM is gemaakt voor testen waarbij meer dan twee antwoordmogelijkheden zijn.
Bij een m aantal categorieën wordt er m-1 keer een onderscheid gemaakt tussen categorieën. (vijf antwoorden zijn er 4 verschillen).
Welke parameters zijn te schatten?
Proportie correct beantwoorde items per respondent = proportie goed beantwoorde items / het totaal aantal beantwoorde items.
· Proportie correcte reacties van elk item:
Aantal respondenten dat het antwoord goed heeft / het totale aantal respondenten die geantwoord.
Wat is een Item karakteristieke curve (ICC)?
Een ICC geeft de kans dat een persoon met een bepaald trait level het correcte antwoord geeft.
x-as = trait level (0: gemiddelde) y-as = kans op een goed antwoord (tussen de 0 en 1)
Wat is het verschil tussen de KTT en de IRT wat betreft betrouwbaarheid?
Perspectief van de Klassieke Test Theorie: één enkele betrouwbaarheid van de test.
Perspectief van de Item Response Theorie: meer dan één betrouwbaarheid. De psychometrische kwaliteit van een test is beter bij sommige mensen dan anderen. Een test geeft misschien betere informatie bij sommige trait levels.
Voor welke doeleindenkanIRT worden toegepast?
· Evaluatie/verbetering van psycho test items.
· De aanwezigheid vandifferential item functioning(DIF) evalueren.
· Analyseren vanPerson Fit. Dit is de identificatie van reactiepatronen die niet passen bij de verwachting.
* Computerized Adaptive Testing(CAT). CAT is een methode die bedoeld is om accuraat en efficiënt iemand zijn trait level vast te stellen, door computergestuurd testen af te nemen.
