Læringsmål 1 - Reliabilitet Flashcards
Gjengi Mellenbergs definisjon av reliabilitet.
Reliabilitet er en populasjonsavhengig indeks som sier noe om presisjonen til et måleinstrument.
Vite hva O, T og E står for i klassisk testteori (CTT).
Ifølge klassisk testteori (CTT) så er:
O = Observert skåre
T = Sann skåre
E = Feilskåre
Den observerte skåren er skåren vi observerer når vi samler inn data, men denne kan avvike fra den sanne skåren pga feilvariabler/feilskåre.
Den sanne skåringen er skåren som faktisk er tilfellet.
Feilskåren er alt som påvirker nøyaktigheten av målingen, som tilfeldige faktorer eller måleinstrumentets unøyaktighet.
Gjengi de grunnleggende forutsetingene for CTT.
Det er to grunnleggende forutsetninger for CTT:
1) En observert skåre er en lineær kombinasjon av en sann skåre og en feilskåre: O = T + E. Det vil si at den observerte skåren er det samme som summen av den sanne skåren og feilskåren.
2) Feilskåren tilhører feilvariabelen (E) som er randomisert, og der gjennomsnittet er 0 (i feilvariabelen) og korrelasjonen med T og E er 0.
Beregne variansen i O, basert på informasjon om relevante paramnetere for T og E.
For å beregne variansen av O, altså den observerte skåren, så kan man summere variansen til de sanne skåren og variansen til feilskåren. For utregning av variansen av populasjonen så brukes formelen VarO = VarT + VarE
Hvordan regner man ut variansen?
- Man starter med å regne ut gjennomsnittet av den innsamlede dataen. Det gjør man ved å dele summen av den innsamlede dataen på antallet deltakere/innsamlede data.
- Deretter så trekker man enhver skåre/verdi med gjennomsnittet. Dette gir oss avvikskårene.
- Deretter så skal vi opphøye hver avvikskåre i andre, slik at man ganger avvikskåre med avvikskåre. Dette gir oss avvikskvadrater.
- Deretter så regner man summen av avvikskvadratene, og denne blir telleren i formelen for å regne ut variansen.
- Ut ifra om man skal regne ut variansen i populasjonen eller utvalget, så deler man enten kun på antallet data eller på antallet data minus frihetsgradene.
Hva er forskjellen i utregningen av varians i et utvalg og i populasjonen?
Det å regne ut variansen i en populasjon og i et utvalg gjøres på litt ulikt vis.
Når man regner ut variansen i populasjonen så deler man telleren med antall deltakere/innsamlet data.
Når man regner i et utvalg, så deler man telleren på antall deltakere/innsamlede data minus frihetsgradene.
Hvordan beregner man varians ut ifra info om standardavvik og omvendt?
For å gjøre om et standardavvik til varians, så opphøyer man standardavviket i andre, altså ganger standardavvik med standardavvik.
For å gjøre variansen til standardavvik så tar man kvadratroten av variansen.
Kjenne det statistiske uttrykket for en reliabilitetskoeffisient.
Det statistiske uttrykket for en reliabilitetskoeffisient er RXX.
Reliabilitetskoeffisienten sier hvor mye av variansen i et måleinstrument som er «sann» varians.
Mengden sann/reliabel varians i et måleinstrument kan tallfestes som en reliabilitetskoeffisient og regnes ut som andelen av sann i forholds til total varians, eller som korrelasjonen mellom to såkalte parallelle tester.
Et eksempel på en reliabilitetskoeffisient er Cronbach’s alpha.
Hvordan beregne RXX utfra relevant informasjon om varians og korrelasjoner?
Basert på varians: RXX = VarT/VarO
Basert på korrelasjoner: RXX= r2ot
Vite hva standardfeilen til målingen (SEm) er, og vite hva den betyr for reliabiliteten. Gjøre enkle beregninger knyttet til SEm.
Standardfeilen til målingen er det samme som standardavviket (SD) til feilvariabelen (E).
For å finne SEm trenger vi SD til E. Det finner vi ved å først finne variansen til feilvariabelen (E).
Dette gjør vi ved å trekke VarT fra VarO, altså VarO - VarT. Da får vi variansen til E fordi: VarO = VarT + VarE.
Så tar vi kvadratroten av VarE fordi da får vi standardavviket til E, som er det samme som standardfeilen til målingen.
Den estimerer spredningen rundt en sann skåre.
Lav SEm gir høy reliabilitet.
Hva er psykometri?
Psykometri er en gren innenfor psykologi som forsøker å kvantifisere attributter ute i virkeligheten, f.eks. mentale egenskaper, ferdigheter, evner og personlighetstrekk.
Målet med psykometri er å utvikle valide og reliable målemetoder for å kvantifisere psykologiske egenskaper, slik at forskere kan forstå og beskrive menneskelig atferd på en systematisk måte.
Hva er forskjellen mellom reliabilitetskoeffisienten og reliabilitetsindeksen?
Hvis man kjenner O og T så kan man beregne korrelasjonen mellom O og T (reliabilitetsindeksen), så kan man opphøye denne i 2 og man får da reliabilitetskoeffisienten (Rxx).
