Forelesning 2: Kap 3,4,5 Reliabilitet, validitet og utvalg Flashcards
Hva er reliabilitet og hvordan måles det?
Handler om pålitelighet, konsistens og stabilitet ved målene
reliabilitetskoeffisient .r (-1.00 til 1.00)
Test-retest, parallelltest, split-half
Hvordan fungerer test-retest, parallelltest og split-half tester?
Test-retest tester det samme igjen og sjekker om svarene er like
split-half deler spørsmålene i to og gir de til to forskjellige grupper i forskjellig rekkefølge og sjekker om de er like
Parallelltest to omtrent like tester, men med nye spørsmål sånn at deltagerne ikke hukser spørsmålene
Hva er indre konsistens, hvordan måles det og hva er god nok indre konsistens?
relevant for variabler med mer en 3 spørsmål
regner ut hvor mye samsvar det er mellom items i en variabel
Ofte brukt ove .70 for god
Hva er validitet og hvilke typer validitet finnes?
Om vi måler det vi tenker å måle
refererer til resultat ikke test
Overflatevaliditet, innholdsvaliditet, kriterievaliditet, begrepsvaliditet
Hva er overflatevaliditet?
En subjektiv vudering av validitet
enkel vurdering, men ofte blir forskere så hengt opp i det de holder på med at det mangler overflatevaliditet
Hva er kriterievaliditet?
Gir forskningen resultater som samsvarer med andre målemetoder for det samme
Samtidig: sammenligner en ny test med etablerte tester for samme fenomen
prediktiv: hvor vit testen gir grunnlag for å predikere noe
Hva er begrepsvaliditet?
Undersøker vi faktisk det konseptet vi ønsker?
Hvordan henger reliabilitet og validitet sammen (og ikke)?
Reliabilitet garanterer ikke validitet, men validitet forutsetter reliabilitet
feil kan føre til uriktig aksept eller avvisning av en forskningshypotese
Hvilke typer målingfeil finnes?
Tilfeldige feil
Systematiske feil - konstante skjevheter, foreksempel gjennom utenforliggende variabler
Tilfeldige feil forstyrrer og systematiske feil vrir og forskyver
Hvilke utvalgsmetoder finnes (7) ?
Randomisert
Systematisk
Stratifisert
Klyngeutvalg
Trinnvis
Bekvemmelighetsutvlag
Snøballmetode
Hva er randomisert utvalg?
Sett på som den gylne standar
hvilken som helst person i populasjonen har like stor sjanse for å bli valgt
Valg av en person påvirker ikke valg av andre
vanskelig å få til i praksis
Hva er systematisk utvalg?
trekker personer fra en liste med gitte intervaller mellom hver person
ulempe er at lista kan ha et system
Hva er et stratifisert utvalg?
velger tilfeldig fra grupper innad i en populasjon
eks. jevne etter alder, kjønn, studieretning
Hva er klyngeutvalg?
velger en klynge av popluasjonen
naturlig forekommene grupper
eks. skoleklasse
Hva er trinnvis utvalg?
Kommer frem til utvalget i trinn
eks. først randomisert utvalg skoleklasser, så randominsert utvlag elever i skoleklassene
Hva er bekvemmelighetsutvalg?
Vanligste strategien i dagens samfunnsvitenskap
bruker det som er tilgjengelig / bekvemmelig for oss
Hva er snøball metoden for valg av utvalg?
en form for bekvemmelighetsstartegi
man har en person i en gruppe og får den til å rekrutere flere
nyttig i sårbare grupper eller grupper det er vanskelig å få tak i
Hva kjennetegner ikke-eksperimentelle forskningsdesign?
Ingen manipulerng av variabler
Kan være tverrsnittsure eller longituindelt
deskriptiv - beskriver den aktuelle statusen
Observasjon, spørrekjema, kvalitativ
Hva er kjennetegner observasjon som datainnsamlingsmetode?
systematisk registering av indeivider for å beksirve atferd
må vite hva man skal observere, koding av data, varier i grad av kontroll og struktur, notater, video, tidsutvalg og utvalgte hendelser/atferd
Hva kjennetegner labratorieobservasjon?
Systematisk, kan replikeres, kontroll over variabler
lite økologisk validitet
Hva kjennetegner naturalistisk observasjon?
Økologisk validitet, realistisk
lite kontroll over 3. variabler
vanskelig å replisere
Hva må man tenke på innen reliabilitet og validitet i observasjon?
Økologisk validitet
Inter-rater reliabilitet
observatør-bias
kontroll over variabler
Hva er viktig i utformingen av et spørreskjema?
Åpne vs. lukkede spørmål
Unidimensjonalitet
Verdinøtral
Forsåelig og ikke tvetydig
sosial ønskelighet kan endre svar
Hvilke skalaer finnes som kan brukes i spørreskjema?
Likert-skala
svært uenig- svært enig (5/7 punkter)
Osgoods semantiske differensial skala
bruker adjektiver på skala
spennede - kjedelig
avslappende - skremmende
Hva er hovedtypene eksperimentelle feil?
Utvalg, fordeling, administering, måling
Hva kjenneteger eksperimentelle administeringsfeil?
Forventningseffekten
- forventninger skapt av å være deltager i et eksperiment
Enkeltbilde og dobbeltbilde studier
- kontrollgrupper og skjult hensik med studien
Forskerbias
- forskeren sine egne forventninger, holdninger og meninger
Hva kjennetegner et ekste eksperiment?
Kontroll gjennom
- randomisering
- manipulering
- standarisering av variabler
- flere grupper og kontrollgruppe
- flere målinger
- kontroll av tredjevariabler
Konsekvenser?
- økonoligsk validiet
- ytrevaliditet
Hva kjennetegner kvasi-eksperimentelle design?
Felteksperimenter med face og økologisk validitet, men mindre kontroll og flere mulige feilkilder
Naturlige eksperimenter med ingen manipulering av variabler
Posttest av en enkelt gruppe
Kan sammenligne grupper overtid og gå tilbake i tid for å hente data
Hva er forskjellene mellom ekte og kvasi eksperimentelle design?
Ekte eksperimenter foregår i kontrolerte rom ofte i et labratorie med sterk kontroll over variabler, men lav økologisk validitet
Kvasi eksperimenter foregår naturlige omgivelser og kan ta i bruk posttesting, innhenting av tidligere data og har høy grad økologisk validitet, men lav grad av kontroll av variabler