Introduktion s.17-28 Flashcards

1
Q

Vad är det som avgör om man kan lita på slutsatserna som dras från en viss undersökning?

A

Jo, det är om undersökningen har god eller dålig validitet.

How well did you know this?
1
Not at all
2
3
4
5
Perfectly
2
Q

Vad är intern validitet?

A

Intern validitet handlar om med vilken säkerhet vi kan lita på slutsatsen att det verkligen var OV (och ingenting annat) som påverkade BV, dvs att vi kan dra slutsatser om ett orsakssamband och i vilken riktning detta går. OV –> BV.

How well did you know this?
1
Not at all
2
3
4
5
Perfectly
3
Q

Vad är extern validitet?

A

Den externa validiteten handlar om giltigheten i att göra generaliseringar från det samband mellan OV och BV som man påvisat. Det finns framförallt 3 typer av generaliseringar man vill kunna göra:

  • Generaliseringar till andra sätt att manipulera/mäta OV och BV
  • Generaliseringar till andra miljöer än den använda
  • Generaliseringar till andra individer än de undersökta
How well did you know this?
1
Not at all
2
3
4
5
Perfectly
4
Q

Vad innebär population?

A

Med population brukar man mena den, ofta mkt stora, mängd individer som man i undersökningen är intresserad av att få veta ngt om. Det skulle exempelvis kunna vara så att populationen är den totala mängden av alla högskolestudenter i Sverige

How well did you know this?
1
Not at all
2
3
4
5
Perfectly
5
Q

Vad innebär stickprov?

A

Delmängd, ett stickprov, av individer som vi dragit från populationen. Vi kan dock inte välja vilka individer i populationen som ska få ingå i stickprovet på vilket sätt som helst, eftersom vi vill att stickprovet ska vara representativt för populationen.

How well did you know this?
1
Not at all
2
3
4
5
Perfectly
6
Q

Kan vi välja vilka som ska få ingå i stickprovet?

A

Nej, vi vill ju att stickprovet ska vara representativt för populationen och då kan vi inte välja vilka som ska få ingå i stickprovet på vilket sätt som helst

How well did you know this?
1
Not at all
2
3
4
5
Perfectly
7
Q

Vad innebär reliabilitet?

A

Reliabilitet handlar om hur mkt slumpen kan förvränga resultatet, än hit och än dit. Stålmåttband hög reliabilitet för att mäta längden.

How well did you know this?
1
Not at all
2
3
4
5
Perfectly
8
Q

Vad innebär validitet?

A

Så validitet hos mätinstrument handlar alltså om att man verkligen mäter det man avser att mäta. T.ex. inte mäter vikt med stålmåttband = låg validitet av mätinstrument

How well did you know this?
1
Not at all
2
3
4
5
Perfectly
9
Q

Definiera vad psykometri är

A

Psykometri är mätning av psykologiska fenomen. Teorin om mätning och metoder för att mäta –> kvantifiera. Psykometri efterliknar naturvetenskapliga forskningsmetoder. Abstrakta fenomen operationaliseras till konkreta, mätbara konstruktion.

How well did you know this?
1
Not at all
2
3
4
5
Perfectly
10
Q

Psykometri - identifiera möjligheter psykometrisk testning och bedömning.

A

Möjligheter: I och med kvantifiering får vi siffror. I och med resultat i form av siffror kan vi använda oss av väl utvecklade teorier för att statistiskt pröva och jämföra våra data. Med statistisk interferens kan vi dra slutsatser om huruvida vi kan generalisera våra resultat från stickprov till målpopulationen och med samplingsteorin kan vi göra estimeringar av hur generaliserbart vårt resultat är till det större universum vi är intresserade av. Vid psykometrisk testning testar vi hypoteser. Kvantifiering ger oss precision och vi kan dra tydliga slutsatser och presentera resultat och tillvägagångssätt så att andra kan replikera vår forskning. Vi kan använda oss av väl utvecklade teorier för att utvärdera våra mätinstruments kvalitet och därmed göra bedömningar av hur tillförlitliga våra resultat är.

How well did you know this?
1
Not at all
2
3
4
5
Perfectly
11
Q

Psykometri - identifiera begränsningar psykometrisk testning och bedömning

A

Det kan vara svårt att fånga in hela, komplexa, psykologiska fenomen. Kunskapen vi får m.h.a siffror riskerar att bli ytlig och ofullständig.
Kräver i förväg uppsatta hypoteser. Nyanser från olika respondenter göms lätt i siffror.

How well did you know this?
1
Not at all
2
3
4
5
Perfectly
12
Q

Förklara vad reliabilitet är

A

Reliabilitet handlar om mätinstrumentets replikerbarhet –> tillförlitlighet
Teorin bakom är grundat i klassisk testteoris grundformel om det sanna värdet. Reliabilitet handlar om mätfelet. Ju mer lika resultat vi får vid upprepade mätningar desto mindre mätfel –> högre reliabilitet
Hög reliabilitet säger inget om betydelse utan bara replikerbarhet

How well did you know this?
1
Not at all
2
3
4
5
Perfectly
13
Q

Ge exempel på psykometrisk reliabilitet.

A

Inom psykometri mäter vi reliabilitet som korrelation mellan mätningar eller bedömningar, t.ex. interbedömarreliabilitet
Vid observationsstudier –> testar korrelation mellan olika bedömare. För att testa reliabiliteten i ett test kan vi göra test-retest på en del av respondenterna (upprepa testet och mäta korrelationen mellan de olika svaren). Vill vi vara säkra på att vi inte får upprepningseffekt kan vi göra pararelltestning –> version A och B som mäter samma sak. Tid 1–> A
Tid 2–> B

Har vi flera items som avser mäta samma sak, i t.ex. en enkät, testar vi intern kongruens med t.ex. Cronbachs alfa. Har vi flera dimensioner av ett kontrakt gör vi en faktoranalys.

How well did you know this?
1
Not at all
2
3
4
5
Perfectly
14
Q

Förklara vad validitet är

A

Validitet handlar om hur väl vi mäter det vi avser mäta, och till vilken grad vi kan koppla det till “verkligheten”

Intern validitet - hur säker jag kan vara på att de resultat jag fått kommer av min manipulation och inte andra orsaker? Hur jag gör mitt urval påverkar detta (obundet slumpmässigt urval från målpopulation till stickprov påverkar den interna validiteten positivt) Har jag strikta inklusions- och exklusionskriterier får jag bättre kontroll på andra faktorer inte påverkar resultatet, men jag får istället problem med min externa validitet –> resultatets generaliserbarhet. Ett bredare urval ger sämre intern validitet men bättre externt. Viktigt balansera. En kontrollgrupp och slumpmässig randomisering till betingelser ger hög intern validitet.

How well did you know this?
1
Not at all
2
3
4
5
Perfectly
15
Q

Ge exempel på validitetsbegrepp inom psykometri

där man använder sig av kvantitativt mått.

A

Konstruktvaliditet - hur väl stämmer mitt mått överens med redan etablerade instrument?
- Concurrent validity –> samstämmighet mellan t.ex. ny skattningsskala för depression och en klinikers bedömning
- Prognostisk validitet –> hur väl kan måttet förutsäga? t.ex. skattning på hopplöshetsskala och framtida suicidförsök.
Viktigt att det mått vi jämför med har hög validitet. “Golden standard”. Om det inte finns något mått av tillräckligt hög kvalitet att jämföra med bör man istället titta på begreppsvaliditet.
Viktigt inom konstruktvaliditet är också att måttet kan urskilja om en testperson har eller inte har klinisk problematik.
Instrumentets känslighet handlar om hur väl det skiljer ut klinisk problematik, instrumentets specificitet handlar om hur väl det skiljer ut de som inte har klinisk problematik. Viktigt att hitta en bra balans mellan dessa.

Begreppsvaliditet –> hur väl stämmer vårt kontrakt med teoretiska begrepp? Korrelerar våra items med det de bör göra (t.ex. sömnproblem och utmattning vid depression) och inte med det de inte bör korrelera med (iq vid depression) samla ihop studier och information. Mät korrelation mellan items och underliggande konstrukt och bilda en samlad uppfattning.

How well did you know this?
1
Not at all
2
3
4
5
Perfectly
16
Q

Vad finns det för två hot mot intern validitet?

A
  • Riktningsproblemet - om man har kontroll över OV har man inget riktningsproblem. Riktningsproblemet är inget problem i varken experiment eller kvasi-experiment för där har man kontroll på OV, men i icke-experiment är riktningsproblemet ett allvarligt hot. Speciellt vid en tvärsnittsstudie, men gör man en longitudinell studie kan man bemästra riktningsproblemet ändå.
  • Bakomliggande-variabel-problemet - t.ex. varmt väder, drunkningsolyckor, mer glassförsäljning. Inte glassförsäljningen som leder till drunkningsolyckor, utan det varma vädret som gör att fler människor badar. Bakomliggande variabel hanteras med randomisering.
17
Q

Gällande extern validitet, vad kan vi säga om Generaliseringar till andra sätt att manipulera/mäta OV och BV?

A

Kan vi ge goda argument för att resultatet i vår undersökning kan generaliseras till att gälla även för andra sätt att operationalisera OV och BV - då stärks den externa validiteten i undersökningen.

18
Q

Gällande extern validitet, vad kan vi säga om Generaliseringar till andra miljöer än den använda?

A

Man kanske beter sig på ett sätt i ett psykologiskt laboratorium, men beter man sig på samma sätt på sin arbetsplats? Hemma? osv.

19
Q

Gällande extern validitet, vad kan vi säga om Generaliseringar till andra individer än de undersökta?

A

Vi säger undersökningen var på psykologstudenter i Karlstad, skulle det bli samma resultat på de som valde att inte skriva upp sig på listan för frivillighet av deltagande? Psykologstudenter i andra städer? osv. Kan vi ge goda argument för att resultatet i vår undersökning kan generaliseras till att gälla även i andra populationer än i den undersökta - då stärks den externa validiteten i en undersökning

20
Q

Vad är viktigt att tänka på gällande att undvika snedvridning av resultatet?

A

Lösningen är att välja individerna till stickprovet osystematiskt, dvs helt slumpmässigt. Slumpmässigt urval är den optimala metoden för att välja individer till sitt stickprov. Dock är den slumpmässiga urvalet ingen garanti för att få ett representativt stickprov.

21
Q

Vad har man statistiken till för hjälp?

A

Med statistikens hjälp kan man beräkna exakt hur stor sannolikheten är för att man ska ha fått ett snedvridet stickprov och att någon egenskap hos stickprovet (t.ex. medelvärdet) ska avvika med ett visst antal enheter från motsvarande egenskap i populationen (se t.ex. konfidensintervall)

22
Q

Vad är bortfall?

A

Bortfall är sådana personer som är utvalda till stickprovet som man inte lyckas undersöka. Det är viktigt att göra en bortfallsanalys. Detta innebär att man försöker redovisa det man vet om de personer som inte har svarat. Hur många var det? Vilken könsfördelning? Var de från något visst område? Någon speciell åldersgrupp? Om de som inte har undersökts skiljer sig från dem som undersökts kan deras uteblivna svar innebära missad information som snedvrider resultatet och påverkar validiteten.

23
Q

Exemplifiera och förklara etiska aspekter av psykometrisk testning och forskning

A

Inom psykometrisk testning gäller såklart de 4 grundprinciperna (information, samtycke, nyttjande och konfidentialitet). Förutom det är det viktigt att komma ihåg Helsingforsdeklarationens grundregel –> omsorg om individen kommer alltid i första rummet. Detta låter självklart men kan ställa till lite problem för forskaren. Vill vi ha så stor säkerhet som möjligt på våra resultat ska vi ha slumpmässig randomisering till betingelser. Men gör vi behandlingsforskning kan det i vissa fall vara mer etiskt korrekt att de dem som är i mest akut behov behandling först och sätta dem med mindre akut behov på väntelista. BALANSERA NYTTA VS RISK.
Vi måste också balansera t.ex. kostnader mot mängd ny forskning vi tillför fältet med vår studie. Vi måste bedriva vår forskning på ett sätt som gör att vi kan dra slutsatser som är meningsfulla för samhället. Detta kräver TYDLIGA FORMULERINGAR och bra instrument (hög reliabilitet och validitet, poweranalys) Inom all forskning bör vi ha mkt på fötterna innan vi drar stora slutsatser. Vad betyder ett signifikant resultat? Inom behandlingsforskning behöver vi titta på klinisk signifikans utöver statistisk. Även om vi har fått ett signifikant resultat av en viss behandling kanske det inte betyder att individen bytt “allvarlighetsgrad” eller gått från klinisk problematik till ickeklinisk. I hur stor utsträckning har t.ex. funktionsnivån förbättrats? Viktigt att titta på innan en behandling anses vara effektiv. I vissa fall kanske en lägre effekt ändå påverkar svårt sjuka så mkt att den generella funktionsnivån ökar betydande. I andra fall kanske en hög effektstyrka av en behandling som testas ändå inte innebära klinisk signifikans, och då kanske dem inte bör “marknadsföras” som effektiv

24
Q

Vad innebär CUDOS-kraven?

A

CUDOS-kraven innebär att forskning ska vara tillgänglig för alla. Vi ska ha en öppenhet. Forskare ska inte styras av egenintresse (personligt eller organisatoriskt) utan behålla sin objektivitet och endast styras av vetenskapliga intressen (kan vara svårt att leva upp till. Forskarens rätt att t.ex. arbeta för en god arbetssituation och anställning. Forskning ska inte bedömas utifrån något annat än vetenskaplig kvalitet (t.ex. ej bedömas utifrån forskarens ursprung, kön eller samhällsstatus). Forskare måste vara organiserat skeptiska - öppna, problematiserande och utvärderande. Att enas kring etiska grundkrav kan ge en gemensam moralisk praktik –> moraliska beteenden. Ju mer forskningsvärlden har en samstämmig moralisk konsensus desto bättre utbyte kan forskare ha av varandra och det innebär större möjlighet att ta sig framåt i forskningsfälten.

25
Q

Vad innebär Cohens d?

A

Cohens d mäter effektstyrka (t-test). Hur stor effekt har vår manipulation? Vill vi t.ex. kolla på hur stor effekt en behandling har på individer och gör beroende mätning, tittar vi på differensen mellan innan/efter behandling, och differensmedelvärdet i förhållande till standardavvikelsen för differensen och får då fram en effektstyrka av behandlingen. Cohens d används vid beräkning av power. Viktigt för att se hur stort stickprov vi behöver för att kunna hitta en signifikant skillnad och även för att uppmäta en viss effekt i vår studie.

26
Q

När du har en skillnad, med en oberoende variabel, med 3 eller fler betingelser, med samma individer, vad kan du använda då för metod?

A

Parametrisk: envägs ANOVA beroende

Icke-parametrisk: Friedmans

27
Q

När du har en skillnad, med 2 eller fler oberoende variabler, med samma individer, vad för metod kan du använda då?

A

ANOVA beroende

Mixed ANOVA

28
Q

När använder du mixed ANOVA?

A

Används när undersökningsdeltagarnas värden på den beroende variabeln mäts vid flera tillfällen. Dessutom har man en eller flera oberoende variabler som varierar mellan personer.

29
Q

Vad är fördelen med beroende mätningar framför oberoende?

A

Fördelen med beroende mätningar framför oberoende är att man i allmänhet får högre power, dvs mindre risk för typ II-fel

30
Q

Vad är nackdelen med beroende anova?

A

Nackdelen är att det kan förekomma ordningseffekter, iallafall om man använder upprepade mätningar

31
Q

Vad kräver beroende ANOVA?

A

Kräver sfäricitet, dvs homogena populationsvarianser (inom nivåer) och homogena populationskovarianser (mellan nivåer).

32
Q

Vad händer om sfäricitet inte kan antas?

A

Då bör frihetsgraderna korrigeras med t.ex. Huynh-Feldts metod

33
Q

Vad för allmänna regler har vetenskapsrådet kommit fram till?

A

Du ska tala sanning om din forskning
Du ska medvetet granska och redovisa utgångspunkterna för dina studier
Du ska öppet redovisa metoder och resultat
Du ska öppet redovisa kommersiella intressen och andra bindningar
Du ska inte stjäla forskningsresultat från andra
Du ska hålla god ordning i din forskning, bland annat genom dokumentation
och arkivering
Du ska sträva efter att bedriva din forskning utan att skada människor, djur
eller miljö
Du ska vara rättvis i din bedömning av andras forskning