Reliabilitet og validitet Flashcards
Reliabilitet
- Hvor stabilt det vi måler er
- Hvor pålitelig det er
- Om det har en konsistens om vi utfører flere målinger
Validitet
- Handler om sannhet, nøyaktighet, autentisitet og riktighet
- Om vi måler det vi ønsker å måle
Test-retest reliabilitet
- Man undersøker om man får samme resultat ved mer enn én anledning
- Man bruker samme deltakere, noe som kan skape problemer
- Mennesker kan huske ting og utvikle en tendens til å svare på spørsmål på en bestemt måte
Split-half-reliabilitet
- Alternativ til test-retest reliabilitet
- Man deler en undersøkelse i to
- Den ene halvparten av spørsmålene blir stil først, den andre halvparten senere
- Blir dermed to separate tester for deltakerne
- Løser ikke problemet på at man kan svare på bestemte måter (sosial ønskverdighet)
Parallelltest-reliabilitet
- Omformulering av spørsmål slik at vi får alternative former av den samme testen
- Man kan kalkulere en korrelasjonskoeffisient for tester
Overflatevaliditet
- Enkleste formen for validitet
- Man tar en subjektiv vurdering av hvorvidt man måler det man ønsker å måle
Kriteriumsvaliditet
- Hvorvidt testen gir resultater som er i overensstemmelse med andre målemetoder for samme ting
- Deles inn i samtidig- og prediktiv validitet
- Samtidig validitet sammenligner en ny test med etablerte målemetoder (IQ)
- Prediktiv validitet handler om hvorvidt man kan predikere fremtidige hendelser (å få barn?)
Begrepsvaliditet
- Hvor godt et måleinstrument måler det begrepet eller konseptet det er ment å måle
- Spørreskjema om angst
- Undersøke om spørreskjemaet gir konsistente resultater over tid, ved å teste pasientene med spørreskjemaet flere ganger over en periode
- Kan gi en indikasjon på at spørreskjemaet måler angst på en pålitelig måte
Økologisk validitet
- Hvorvidt testen kan predikere atferd utenfor laboratoriet
- Deltakere har en annen atferd i laboratorier (i motsetning til hvis ingen observerte dem)
Populasjonsvaliditet
- Ikke særlig nevnt innenfor forskning
- Handler om generaliserbarhet
- Om man kan si noe om populasjonen ut ifra forsøk på en mindre gruppe
Generaliserbarhet
- Om resultater er representativt for populasjonen
Hvorfor har vi forskjellige utvalgsstrategier?
- Ofte upraktisk, om ikke umulig å forske på alle personene i en bestemt populasjon
Randomiserte utvalg
- Velger hvilken som helst person i populasjonen
- Den gyldne standarden for utvalg
- Ingen skjevheter i resultatene
Systematisk utvalg
- Liste over personer i en populasjon, velger personer i gitte intervaller
- Kan få skjevheter i resultatene om det er et system i listen
- Lettere å utføre enn randomiserte utvalg
Stratifisert utvalg
- Kan være randomiserte eller systematiske
- Utvalget gjenspeiler hvor mange representanter det finnes for hver gruppe i en populasjon
- F.eks. 100 og 500 for totalt 1000 og 5000
- Gjør det lettere å generalisere utover populasjonen
Klyngeutvalg
- Velger ut grupper av mennesker og ikke individer
- Gunstig for forskning på skoleklasser, men vanskelig å generalisere resultater fra én klasse til en annen
Trinnvis utvalg
- Kommer frem til et utvalg gjennom flere trinn
- Bra metode for å generalisere, men svært ressurskrevende
Bekvemmelighetsutvalg
- Man velger det som er mest bekvemmelig
- Hva som er lettest å utføre
- Kan være minimale skjevheter i funn
Snøballmetoden
- Et mindre antall potensielle deltakere rekrutterer andre deltakere
- Fungerer godt på forskning på ungdomsgjenger
- Kan være lite representativt for den større populasjonen
Forskningsdesign
- Forskningsdesign omhandler hvordan vi strukturerer og konstruerer forskningsarbeidet
- Undersøkelser avhenger av situasjoner
- Observasjon, intervju, spørreskjema eller eksperiment?
“Et ekte eksperiment”
- Laboratoriebasert
- Dobbeltblinde studier
- Eksperiment- og kontrollgrupper
- Randomisert fordeling
- Kan replikeres
- Svekket økologisk validitet
Enkeltblinde studier
Hypotese blir tilbakeholdt fra deltakere
Dobbeltblinde studier
- Hypotese blir tilbakeholdt fra både deltakere og forskere slik at de hverken spekulerer eller har enn innflytelse på resultatene
Tredje variabel
- En variabel som kan påvirke både UVer og AVer
- Kan forårsake feilaktige resultater og tolkninger når man prøver å identifisere årsakssammenhenger mellom variabler
- Hvis man gjennomfører en studie som undersøker effekten av røyking på lungekreft, kan alder være en tredje variabel
Forholdet mellom struktur, kontroll og økologisk validitet i observasjon som datainnsamlingsmetode
- Observasjonen må være strukturert og kontrollert
- Foregår systematisk og kan replikeres
- Omgivelsene er konstante
- Man har kontroll over variablene for å øke validiteten, men kan svekke økologisk validitet
- Økologisk validitet svekkes på grunn av stive og unaturlige omgivelser
Kvasieksperiment
- Ligner på et eksperiment, men oppfyller ikke de samme kravene
- Deltakere velges ikke tilfeldig
- Det er ingen kontrollgruppe
- Brukes når det er uetisk eller umulig å gjennomføre et fullt eksperiment
- Kan brukes for sammenligning av to grupper; en får behandling, den andre får ikke
- Kan gi nyttig informasjon for å støtte beslutninger
Tverrsnittstudie
- Samler inn data fra en bestemt populasjon eller utvalg på et bestemt tidspunkt
- Kan omfatte spørreskjemaer, intervjuer eller observasjon som datainnsamlingsmetoder
Longitudinelle studier
- Følger deltakerne over tid og samler inn data på flere tidspunkter
- Formålet med en longitudinell studie er å se på endringer som skjer over tid
Hva kjennetegner et godt spørreskjema?
- Så kort som mulig
- Formuleringer er tilpasset de som skal svare på undersøkelsen
- Introduserer hva som forskes på
- Klar informasjon om hva den går ut på og hvorfor folk bør ta seg tid til å delta
- Bør inneholde forsikring om konfidensialitet og etiske prinsipper forbeholdes
- Spørsmål er formulert i henhold til hva man er ute etter
- Åpne eller lukkede spørsmål
- Har gjennomgått en pilottest
- Unidimensjonalitet
- Verdinøytralitet
- Responsbias
Åpne spørsmål
- Om man ønsker rikholdigere data
- Begrenser ikke deltakere med egen tenkemåte
- Man kan få svar på ting man ikke trenger
Lukkede spørsmål
- Lettere å analysere raskt og enkelt
- Må være formulert på en presis måte og ikke tvetydig
Unidimensjonalitet
- Man spør om én ting om gangen
Verdinøytralitet
- Spørsmål er ikke-ledende
Responsbias
- Man formulerer spørsmål på en måte som får deltakere til å tenke seg om og ikke svarer “svært enig” på alle ledd (når de egentlig ikke mener det)
Hva er de fire hovedtypene eksperimentelle feil?
- Feil på grunn av utvalg
- Fordelingsfeil av deltakere
- Administreringsfeil av eksperimentet
- Målefeil
Utvalgsfeil
- Et ikke-representativt utvalg
Fordelingsfeil av deltakere
- Ideelt sett trenger man to uavhenige grupper eller utvalg
- Vanskelig å oppnå, man kan da bruke kvasi-eksperimentelle metoder
- ABBA-motbalansering
Feiladministrasjon av eksperiment
- Omhandler laboratorieforhold og forventningseffekter
- Laboratorieforhold kan ha en effekt på den økologiske validiteten
- Forventningseffekter (bl.a. forskerbias) kan elimineres gjennom enkeltblinde og dobbeltblinde studier
Målefeil
- Unøyaktig måling av det som studeres