Reliability Flashcards
Definisjon av reliabilitet
Andelen av total varians i en skåre som kan tilskrives varians i den sanne skåren
Klassisk testteori
Observert variasjon = variasjon i sann skåre + målefeil
X = T+e
Usystematiske målefeil
Misforståelse, omgivelsene, dagsform, feil hos administrator, slurv
Systematiske målefeil
Motivasjon, løgn, bias hos administrator, favoriserende test
Er usystematiske eller systematiske feil lettest å måle?
Usystematiske feil
Det er disse som er «e» i klassisk testteori
Reliabilitetstester avdekker _____ feil
Usystematiske/tilfeldige feil
Kommer denne eksamenen til å gå bra?
Ja
Formel standardfeil
SEM = SD * sqrt(1-r)
Hva skjer med standardfeil når standardavvik øker?
Standardfeil øker
Fordi større variasjon i skårene
Hva skjer med standardfeil når reliabiliteten øker?
Standardfeilen minker
2 eksempler på Stabilitetstester
- Test-retest
- Parallelle former
3 eks. På intern konsistensbaserte tester
- Split-half
- Inter-rater
- Cronbach’s alpha
Test-retest reliabilitet
Samme personer, samme test, ulike tidspunkt
Finn korrelasjon mellom målingene
Feilkilder test-retest
- Kanskje det skjer en endring mellom testene
- Personen kan huske svar fra forrige måling
Parallelle tester
Samme personer, 2 ulike versjoner av en test
Skal måle nøyaktig samme fenomen
Feilkilder parallelle tester
- Kanskje det skjer en endring mellom testene
- Vet ikke sikkert om testene måler samme fenomen
Split-half reliabilitet
Én test deles i 2
Finn korrelasjon mellom delene (administreres samme dag)
Feilkilder split-half
- Vet ikke om halvdelene er like nok
- Korrelasjonen varierer etter hvilke items du velger til hver halvdel
Cronbach’s alpha
Gjennomsnittlig reliabilitet ut fra alle mulige split-half-kombinasjoner
Inter-item reliabilitet
Korrelasjonen mellom items i testen
Høy korr = måler samme ting = god reliabilitet
Hva er laveste akseptable reliabilitet?
0.60
Hva betyr det at standardfeil for differanse er 10?
Det er 68% sikkerhet på at en forskjell på 10 poeng representerer en forskjell i sanne skårer.
95% sikkert at 20 poeng forskjell=sann
99% sikkert at 30 poeng forskjell=sann
