College 6

Question 1

Wat voor meetfout gaat KTT vanuit?

Answer 1

-toevallige meetfouten

Question 2

Standaardmeetfout (SEM)

Answer 2

-de standaarddeviatie van alle mogelijke scores als iemand oneindig vaak getest zou worden
-gebruikt om de toevallige meetfout in te schatten
-het gemiddelde van de verdeling van oneindige scores is de werkelijke score (T) en SEM=SD
-hoe kleiner het betrouwbaarheidsinterval, hoe minder SEM, hoe betrouwbaarder de scores

Question 3

Hoe optimaliseer je betrouwbaarheid?

Answer 3

-minimaliseren van de variantie van de meetfout
-maximaliseren variantie ware scores

Question 4

Standaard error of estimates (SE)

Answer 4

-schattingsfout/SE
-gebruik je om systematische meetfouten in te schatten
-regressielijn: range rondom de voorspelde score van test A bij een bepaalde score op test B
-bij systematische testfout is test niet meer valide
-hoe smaller betrouwbaarheidsinterval rond regressielijn, hoe smaller de precieze voorspelde score

Question 5

Met welke meetfout hangen betrouwbaarheid en validiteit samen?

Answer 5

-toevallige meetfout (SEM): betrouwbaarheid
-systematische meetfout (SE): validiteit

Question 6

Cultural test bias hypothesis (CTBH)

Answer 6

-verschillen in gemiddeldes tussen verschillende groepen worden veroorzaakt door biases van de test of het meetproces en zijn niet te vinden in het echte leven
-het zou een grote maatschappelijke impact hebben als deze theorie waar is
-als de betrouwbaarheid van een test omlaag gaat, gaat de kans op aanwezigheid van biases in de test omhoog

Question 7

Culturele bias

Answer 7

-witte mensen scores op IQ testen gemiddeld 1 sd hoger dan zwarte mensen

Question 8

etiologie

Answer 8

-als verschillen in gemiddelden tussen groepen echt bestaan kan je etiologie bestuderen

Question 9

eerlijkheid/fairness van een test

Answer 9

-persoonlijke eigenschappen die niet van belang zijn voor de te meten eigenschappen mogen geen invloed hebben op de testresultaten of op de interpretatie ervan

Question 10

Differential predictive validity

Answer 10

-suggereert dat een test een construct nauwkeuriger meet en een betere voorspelling maakt voor de groep waarop deze test gebaseerd is een niet voor de andere groep

Question 11

Cultural loading

Answer 11

-de mate waarin culturele specificiteit in een test of individueel testitem aanwezig is.
-hoe meer geladen, hoe groter de kans op biases

Question 12

Mean difference definition of test bias

Answer 12

-als er verschillen zitten in groepsgemiddeldes zegt dit niet meteen dat de test gebased is.

Question 13

Egalitarian fallacy

Answer 13

-dat de verdelingen van gemiddeldes voor alle groepen gelijk zijn
-niet altijd juist

Question 14

Content bias

Answer 14

-bv. wanneer bij MC vragen een afleider vaker wordt gekozen door de ene groep dan door de andere groep

Question 15

Differential item functioning (DIF)

Answer 15

-IRT techniek die bias kan opsporen
-vergelijk ICC van twee verschillende groepen, met een DIF index: trek vanaf een P van 0,5 een lijn en lees af welke vaardigheid nodig is om te kijken of het item moeilijker is voor een bepaalde groep
-je kunt gedeelde correlatie uitrekenen

Question 16

Decision-theory models

Answer 16

-helpen personen om vast te stellen hoeveel informatie een predictor test nodig heeft om beslissingen te nemen over classificaties
-het hangt af van een cut-off point of wel of geen sprake is van een problematische testcore

Question 17

Hoe bepaal je een optimaal cut-off point?

Answer 17

-kijk naar jou conclusie en de scores van andere gevalideerde testen
-sensitief genoeg, dat iemand met een probleem een positieve uitslag krijgt
-specifiek genoeg, dat iemand zonder probleem een negatieve uitslag krijgt
-positief voorspellend; iemand met een positieve uitslag moet het probleem ook echt hebben
-negatief voorspellend; als iemand een negatieve uitslag heeft moet die het probleem niet hebben
-twee perspectieven: je kan bereden vanuit het probleem en vanuit de test

Question 18

Wat zijn een wenselijk en onwenselijk scenario van de decision -theory model?

Answer 18

-wenselijk: true positive (A), true negative (D)
-onwenselijk: false negative (C), false positive (B)

Question 19

Formule sensitiviteit

Answer 19

-aantal true positives tov van iedereen met probleem
-A/(A+C)=…%

Question 20

Formule specifiviteit

Answer 20

-aantal true negatieven tov van iedereen zonder het probleem
-D/(B+D)=…%

Question 21

Formule positief voorspellende waarde

Answer 21

-A/(A+B)=…%

Question 22

Formule negatief voorspellende waarde

Answer 22

-D/(C+D)=…%

Question 23

Zeldzame conditie decision theory model

Answer 23

-probleem komt weinig voor
-lage positieve voorspellende waarde, doordat er veel mensen zijn met een positieve testuitslag zonder probleem
-multiple-gating procedure: meerdere screeningstesten met dezelfde meetpretentie afnemen en kijken of het testresultaat hetzelfde is
-bij screening: sensitiviteit>specificiteit

Question 24

Assesment accomodations

Answer 24

-veranderingen in standaard procedure/testen die worden doorgevoerd om de impact van de beperkingen van personen te minimaliseren, die irrelevant zijn voor het construct dat wordt gemeten
-ondersteuningsbehoefte
-doel van aanpassingen is om zo valide en accuraat mogelijk de metingen te verrichten van de score op het construct

Question 25

3 situaties waarin testen aanpassen niet nodig is

Answer 25

-als aangetaste vaardigheid direct gerelateerd is aan construct
-als doel van de test is om aan- of afwezigheid van ondersteuningsbehoeften te meten
-aanpassingen moeten uniek een op maat zijn om de behoeften van elk individu tegemoet te komen, dus hoeft niet bij elke test

Question 26

ELL

Answer 26

-English language learner

Question 27

Flags

Answer 27

-sterretjes zetten bij het onderzoeksresultaat als er voor sommige mensen aanpassingen zijn gedaan
-is niet elke onderzoeker het mee eens

Question 28

Europese ethische code met 4 principes

Answer 28

-respect voor individuele rechten en waardigheid van anderen
-professionele competentie (expertise)
-verantwoordelijkheid
-professionele integriteit