Sensitivitet och specificitet Flashcards
Validitet och Faktoranalys
Validitet av ett test kan undersökas genom att korrelera det med ett annat test som mäter samma begrepp (begreppsvaliditet) eller med ett uppsatt kriterie som relaterar till testresultatet (prognostisk / prediktiv validitet).
Faktoranalys kan användas för att ta reda på hur items i ett test relaterar till varandra – finns olika analysmetoder. Kan kopplas till teori om fenomenet.
Reliabilitet & Validitet
Reliabilitet: “Förmåga hos ett test att (i en given population) mäta det som testet mäter”
Fokus på skalan, är den sammanhållen / är det ett bra mätinstrument (de frågor som vi har – hänger de ihop).
Validitet: “Förmåga hos ett test att (i en given population) mäta det som testet avser mäta”
En fördjupad förståelse för om begreppet som skalan mäter är det som vi vill mäta. Dvs finns det någon meningsfullhet i det som vi mäter (kopplat till en teori / det vi vill förstå mer om).
Liknelse: validitet är att vi faktiskt mäter en cm, medan reliabilitet är linjalen vi använder för att mäta.
Gränsvärden eller cut-offs
Gränsvärden/cut-offs definierar brytpunkt mellan meningsfulla tillstånd (sjuk/frisk, tillräcklig kunskap/otillräcklig kunskap). Sjuk/frisk: är du över gränsvärdet = du är sjuk, är du under värdet = frisk
Gränsvärden behövs för att exempelvis kunna tolka om en individs testresultat är:
högt eller lågt,
om det betyder att individen har symtom på klinisk nivå
Dessa gränsvärden kan tas fram antingen baserat på
Hur distributionen ser ut i populationen (distrubution based/norm-referenced)
Problem: i alla populationer kommer det alltid finnas en grupp som ligger högt, blir det meningsfullt att ha ett gränsvärde då (förstod inte riktigt vad hon menade här)
En bedömning av vad som anses vara en rimlig gräns (anchor based/criterion-referenced)
Ett resultat på ett test = inget bevis, men det kan vara en indikation på en problematik som bör undersökas vidare.
Konsekvenser av olika gränsvärden
På grafen betyder det att man har mycket av något om man har låga värden (alltså A).
Gränsvärde vid A fångar få cases (t.ex. de som har depression) och få (inga) non-cases
B fångar fler case (t.ex. depressiva) och några non- cases (dvs icke-depressiva)
C fångar nästan alla case (depressiva) men också många non-cases (icke-depressiva)
Eftersom grupperna överlappar kommer vi att få med både cases och non-cases i princip oavsett var vi sätter gränsen – var man sätter sitt gränsvärde får alltså många olika konsekvenser
Sensitivitet och Specificitet
Sensitivitet är förmågan hos ett test att identifiera ”sant positiva”, det vill säga personer som genom mätinstrumentet identifierats som personer med problem och som i ”verkligheten” också har problem.
Specificitet är förmågan hos ett test att identifiera ”sant negativa”, det vill säga personer som genom mätinstrumentet identifierats som personer utan problem och som i ”verkligheten” inte har problem.
Sensitivitet och specificitet varierar från 0 till 1 där högre värden innebär bättre sensitivitet och specificitet
Vad ska olika test diskriminera mellan?
Screeningtest – ska skilja ut de som är i riskzon att utveckla svårigheter från de som inte är det.
Diagnostiskt test – ska diskriminera mellan de som sannolikt uppfyller kriterier för en klinisk diagnos från de som inte gör det.
Positivt Prediktivt Värde (PPV) och Negativt Prediktivt Värde (NPV)
En variant av sensitivitet & specificitet.
- För praktiskt bruk kan dessa mått snarare än sensitivitet och specificitet vara att föredra.
- PPV anger sannolikheten för att de som kommer att få ett positivt testresultat verkligen kommer att ha tillståndet eller behovet
- NPV anger sannolikheten för att de som kommer att få ett negativt testresultat inte kommer att ha tillståndet eller behovet
- PPV och NPV relaterar till den förväntade prevalensen av ett tillstånd i olika verksamheter
Resp senitivitet och specificitet:
- PPV och NPV kan användas när man har data om prevalens i populationen
- Specificitet och Sensitivitet kan beräknas med test- och kontrollgrupp
- Anger hur stor proportion av positiva och negativa resultat som är sant positiva resp sant negativa. Man tar inte hänsyn till de falsk negativa.
- PPV= A/A+B (jmf tidigare slide)
- NPV= C/C+D
- Fokus är på proportionen av positiva resultat som är sanna?
Mäta förändring med hjälp av test
Ibland praktiskt ointressant om ett en grupp förbättras statistiskt signifikant, om inte förändringen innebär en meningsfull förändring
Gränsvärden kan vara till hjälp för att avgöra om det skett en meningsfull förändring
Beskriva förändring i testpoäng
Ostandardiserad effekt beskriver förändring i råpoäng
Standardiserad effekt omvandlar till en effektstorlek med standardiserad betydelse
Cohen’s effektstorlek
Det vanligaste måttet på effektstorlek
Är ett mått på hur stor förändring som skett/skillnad mellan / inom grupper i relation till spridningen (sd) vid baseline (vid start)
Kan användas för
Enskilda grupper, från pre – post
Skillnader mellan grupper post
Skillnader i förändring mellan test och kontroll
𝑑 = (𝑚𝑥 − 𝑚𝑦) / 𝑠
Klinisk signifikans
Undersöker det praktiska värdet eller betydelsen av behandlingseffekten – innebär det någon skillnad för individen eller anhöriga?
Jacobson och Truax(1991) skapade kategorier där patienter kategoriserades som
Försämrade
Oförändrade
Förbättrade
Återställda
Alternativt mått på klinisk signifikans kan vara att inte längre uppfylla kriterier för en diagnos
Regression mot medelvärdet
Om man väljer en grupp individer med de högsta eller de lägsta värdena i en population så kommer de att ha ett mindre extremt värde nästa gång man mäter dem.
Varför? Förklara med hjälp av den klassiska testteorin (= mätfel)
X = t + e
