C5 - Validiteit (H5 + artikelen) Flashcards
Wat is ‘validiteit’?
= dat de test/meetinstrument daadwerkelijk meet wat het bedoelt te meten.
Met andere woorden: hoe goed en accuraat is de meting?
Bestaan er soorten validiteit?
Testontwikkelaars zijn het er over eens dat er maar 1 vorm van validiteit is: constructvaliditeit
Wat is het verband tussen betrouwbaarheid en validiteit?
Betrouwbaarheid is een noodzakelijke, maar onvoldoende voorwaarde voor validiteit (niet betrouwbaar is automatisch niet valide)
Welke bedreigingen zijn er voor validiteit? (3)
- Construct onderrepresentatie (bijv. rekentoets die alleen optellen omvat)
- Construct-irrelevante variantie (bijv. rekentoets die een uitgebreide leesvaardigheid vereist)
- Externe factoren
Wat zijn de 5 vormen van validiteitsbewijs? (=evidential basis of validity)
- Inhoudsgerelateerd Bewijs - sluit testinhoud aan bij construct?
- Criteriumgerelateerd Bewijs - voorspelt test externe uitkomst?
- Bewijs Gerelateerd aan Interne Structuur - klopt opbouw/factoren van test?
- Bewijs Gerelateerd aan Antwoordprocessen - past denkproces bij wat je meet?
- Bewijs Gerelateerd aan gevolgen van Testen - leidt test tot juiste beslissingen?
Wat is ‘gelijktijdige validiteit’?
Correlaties tussen tests die gelijktijdig worden afgenomen
Wat is ‘voorspellende validiteit’?
Correlaties tussen testscores en toekomstige criteria
Wat is Convergent bewijs?
Hoge correlatie tussen tests die hetzelfde construct meten
Wat is Discriminant bewijs?
Lagere correlatie tussen tests die verschillende constructen meten
Wat is de ‘MultiTrait-MultiMethod Matrix’ (MTMM)?
= Meten van twee of meer traits (constructen) met twee of meer methods (instrumenten)
Welke 4 MTMM relaties zijn er?
- Monotrait-Monomethod (MM):
Dezelfde traits, dezelfde method (betrouwbaarheid) - Monotrait-Heteromethod (MH):
Dezelfde traits, verschillende methods (validiteit) - Heterotrait-Monomethod (HM):
Verschillende traits, dezelfde method - Heterotrait-Heteromethod (HH):
Verschillende traits, verschillende methods
Wat doen Exploratieve en Confirmatieve factoranalyses?
- Exploratieve factoranalyse = Test hoeveel factoren er ongeveer zijn
- Confirmatieve factoranalyse = Test of een specifiek model correct is
Wat is de correlatie tussen stigma en prosociaal gedrag?
Een negatieve correlatie
Welke criteria stelt COTAN om validiteit te beoordelen? (7)
- Uitgangspunten van de testconstructie (omvat inhoudsgerelateerd validiteitsbewijs)
- Kwaliteit van het testmateriaal
- Kwaliteit van de handleiding
- Normen
- Betrouwbaarheid
- Begripsvaliditeit (convergente/discriminante validiteit, groepsverschillen, factorstructuur)
- Criteriumvaliditeit (retrospectief, gelijktijdig, voorspellend)
Wat is ‘meetpretentie’?
= waarvoor we deze test willen gaan gebruiken (intentie)
Wat is Inhoudsgerelateerd bewijs?
Meet de testinhoud wat het moet meten?
📌 Kijkt of de inhoud van de items goed aansluit bij het construct (bijv. spelling bij een spellingstoets).
💡 Voorbeeld: Kloppen de toetsvragen met het curriculum?
Wat is Criteriumgerelateerd bewijs?
Hoe goed voorspelt de test een extern criterium?
📌 Vergelijk testscore met bestaande uitkomst of gedrag.
💡 Voorbeeld: Scoort iemand hoog op een sollicitatietest én goed op het werk?
Wat is bewijs gerelateerd aan Interne structuur?
Sluit de statistische structuur van de test aan bij het theoretisch model?
📌 Factoranalyse: meten subtests wel echt één of meerdere onderliggende factoren?
💡 Bijv. meten 3 subschalen van een burn-outtest ook echt 3 verschillende dingen?
Wat is bewijs gerelateerd aan Antwoordprocessen
Hoe denken/motiveren mensen hun antwoord?
📌 Sluit het denkproces van de respondent aan bij wat de test meet?
💡 Bijv. gebruikt een kind bij rekentoets echt rekenstrategieën, of raadt het maar wat?
Wat is bewijs gerelateerd aan Consequenties/gevolgen van testen?
Wat zijn de gevolgen van het gebruik van de test?
📌 Zowel bedoelde als onbedoelde effecten tellen mee.
💡 Voorbeeld: Leidt een toets tot juiste plaatsing of tot onterechte uitsluiting?
Wat is ‘Common Method Variance’?
Common Method Variance (CMV)
= Een hoge correlatie door gebruik van dezelfde meetmethode, niet door een echte relatie tussen variabelen
