Bijdrage van de test in het beslissingsproces

Question 1

Bijdrage test aan beslissingsproces

Answer 1

Niet: predictieve validiteit
Wel: ‘incremental validity’ of toegevoegde waarde test in vergelijking met beslissingen o.b.v. apriori informatie

gevolg: toegevoegde waarde groter als niet-overlappende informatie test en apriori informatie en als geen hoge of lage toevalskans

Question 2

beslissingsstrategie

Answer 2

Normatief of ‘feitelijk gevolgd’

Één- of meerstapsprocedure

Question 3

Plaatsing

Answer 3

Aantal kandidaten (aanbod) en aantal plaatsingen (vraag); numerus fixus

Vaste of variabele behandeling

Question 4

bij gebruik van een selectieproef zijn er steeds vier groepen van deelnemers

Answer 4

Correcte beslissingen of treffers:

• B: positieve treffer
• C: negatieve treffer
• A: vals negatief
• D: vals positief

Question 5

Belangrijke begrippen bij evaluatie kwaliteit selectie

Answer 5

Selectie ratio: (B+D)/(A+B+C+D)
Toevalskans: (A+B)/(A+B+C+D)
Succesratio: B/(B+D)

Question 6

sensitiviteit

Answer 6

𝐵/(𝐴+𝐵)

proportie afwijkende testscores (‘positieve uitslagen’) binnen de groep van afwijkende (zieke) personen

Question 7

specificiteit

Answer 7

𝐶/(𝐶+𝐷)

proportie niet-afwijkende testscores (‘negatieve uitslagen’) binnen de groep van normale personen

Question 8

D > 0

Redenen

Answer 8

r(test, criterium) laag

Lage kwaliteit kandidaten

Weinig kandidaten

Question 9

Relatie D en A

Answer 9

Als je D wil beperken, dan stijgt A

Question 10

Focus op vermijden van D

Answer 10

vb dure opleiding

Question 11

Focus op vermijden van A

Answer 11

screening bevolking op ernstige ziekte

Question 12

Focus op beide

Answer 12

zoek optimaal kritische testscore i.f.v. utiliteit

Question 13

relatie tussen sensitiviteit en specificiteit

Answer 13

Kritische testscore stijgt sensitiviteit daalt, specificiteit omhoog

kritische testscore daalt: Sensitiviteit stijgt, specificiteit daalt

Question 14

Basislijn toegevoegde waarde: wat indien geen selectie

Answer 14

Als de selectieratio = 1,

dan is de succesratio = toevalskans

Question 15

Bij hoge toevalskans

Answer 15

heeft zelfs een test met hoge validiteit weinig toegevoegde waarde.

De succesratio van die test stijgt weinig uit boven de toevalskans

Bovendien heb je dan een grote A-groep

Question 16

Bij lage toevalskans

Answer 16

kan zelfs een test met lage validiteit toch een toegevoegde waarde hebben

De succesratio is groter dan de toevalskans

Bovendien heb je dan een grote groep C al terecht afgewezent.o.v. kleine groep A (maar wel een grote D groep)

Question 17

validiteit en selectieratio

Answer 17

Bij zeer hoge selectieratio is
een test met hoge validiteit nodig opdat de succesratio groter zou worden dan de toevalskans

Bij zeer lage selectieratio kan een test met een lage validiteit al zorgen dat de succesratio groter wordt dan de toevalskans.

Question 18

conclusie

Answer 18

De waarde van een selectie-instrument hangt af van context

Daarnaast blijft ook predictieve waarde belangrijk

Question 19

Oordelen en waardebepalingen

Answer 19

Bepaling kritische criteriumscore door opdrachtgever cf. toevalskans

aantal kandidaten dat moet worden aangenomen (cf. selectieratio)

Na te streven succesratio

Keuze voor type fout (A of D) dat vermeden moet worden