Improving your statistical inferences (kap 1) Flashcards
Hva er en hypotesetest?
For å komme med ordinale påstander, stoler forskere vanligvis på en metodisk prosedyre kjent som en hypotesetest . En del av en hypotesetest består av å beregne en p -verdi og undersøke om det er en statistisk signifikant forskjell.
Hva betyr at det er en statistisk signifikant forskjell?
‘Betydende’ betyr at noe er verdig oppmerksomhet. En hypotesetest brukes til å skille et signal (som er verdt å være oppmerksom på) fra tilfeldig støy i empiriske data.
Hva er forskjellen mellom statistisk signifikans og praktisk signifikans?
Det er verdt å skille statistisk signifikans , som kun brukes til å påstå om en observert effekt er et signal eller støy, fra praktisk signifikans , som avhenger av om størrelsen på effekten er stor nok til å ha noen verdifulle konsekvenser i det virkelige liv. Forskere bruker en metodisk prosedyre for å avgjøre om de skal fremsette et ordinalkrav eller ikke som en sikring mot bekreftelsesskjevhet .
Hva er en typisk feil når forskere driver med testing og hypotesetesting?
Avhengig av deres ønsker, kan forskere bli fristet til å tolke data som støtte for deres hypotese, selv når det ikke er det. Som Benjamini ( 2016 ) bemerker, gir en p -verdi “en første forsvarslinje mot å bli lurt av tilfeldighet, som skiller signal fra støy”.
Hva er definisjonen av en p-verdi (kort og ikke tolkning)?
Definisjonen av en p -verdi er sannsynligheten for å observere prøvedataene, eller mer ekstreme data, forutsatt at nullhypotesen er sann.
Hvem publiserte ‘Statistical Methods for Research Workers’ i 1925 og hva fortalte den?
Ronald Fisher.
populariserte bruken av p -verdier.
I et Fisherian-rammeverk tolkes en p -verdi som et beskrivende kontinuerlig mål på kompatibilitet mellom de observerte dataene og nullhypotesen (eller nullmodellen). Nullhypotesen er en modell av dataene som forventes dersom det ikke er noen effekt. Hvis vi for eksempel antar at skårene fra to grupper av elever er like, og en intervensjon i en av de to gruppene ikke har noen effekt på skårene, er nullmodellen at forskjellen mellom skårene er fordelt rundt null med en viss standard avvik. I en statistisk test vil en forsker undersøke om denne nullhypotesen kan forkastes basert på de observerte dataene, eller ikke.
Hva er en Fisherian p-verdi også kjent som signifikanstesting?
En Fisherian p -verdi beskriver inkompatibiliteten til dataene med en enkelt hypotese, og er kjent som signifikanstesting .
Hovedårsaken til at en signifikanstest er begrenset er fordi forskere bare spesifiserer en nullhypotese (H0), men ikke den alternative hypotesen (H1).
Neyman og Pearson ( 1933 ) bygde på innsikt om p -verdier av Gosset og Fisher, og utviklet hva?
en tilnærming kalt statistisk hypotesetesting.
Hovedforskjellen med tilnærmingen til signifikanstesting utviklet av Fisher er at i en statistisk hypotesetest er både en nullhypotese og en alternativ hypotese spesifisert. I et Neyman-Pearson-rammeverk er målet med statistiske tester å veilede forskernes oppførsel med hensyn til disse to hypotesene.
Hvor mye mindre må den observerte p-verdien være enn det valgte alfa nivået for at man kan forkaste H0?
Hvis for eksempel et alfanivå på 0,01 brukes, vil både a p = 0,006 og a p = 0,000001 føre til at forskere bestemmer seg for å handle som om verdens tilstand best beskrives av den alternative hypotesen.
Dette skiller seg fra en Fisherian-tilnærming til p -verdier, der jo lavere p -verdi, desto større er den psykologiske motviljen hos en forsker til å akseptere nullhypotesen de tester.
Hva er Ishihara testen (bare greit å vite, men trolig ikke viktig)?
Fargesynstest
Hva står N og n for?
Antall med i testen/prosjektet ( N )
Antall score mulig å gi (n)
F.eks:
20 mennesker skal rangere en film fra 1-10.
Da er N de 20 menneskene og n er den mulig rangeringen mellom 1-10
Hva vil tilfeldig støy og varians mene?
forventet variasjon i observerte data, kommer på grunn av tilfeldig støy. Med en nullmodell kan den fortelle oss hva som er en rimelig forventning om hvor mye forskjellene mellom grupper kan variere dersom det ikke er forskjell i befolkningen.
Hva er t-fordelinger?
En versjon av en nullmodell for forskjeller er t -fordelingen, som kan brukes til å beskrive hvilke forskjeller som bør forventes når man trekker prøver fra en populasjon. En slik nullmodell er bygget på forutsetninger.
Når det gjelder t -fordelingen, er antakelsen at skårene er normalfordelte. I virkeligheten blir forutsetningene som statistiske metoder er bygget på aldri oppfylt perfekt, og det er grunnen til at statistikere undersøker virkningen av brudd på antagelser på metodiske prosedyrer
Hva er forskjellen mellom en sann effekt og en ikke sann effekt?
Når det ikke er noen sann effekt, og testforutsetninger er oppfylt, er p -verdier for en t -test jevnt fordelt.
Dette betyr at hver p -verdi er like sannsynlig å bli observert når nullhypotesen er sann. Med andre ord, når det ikke er noen sann effekt, er en p -verdi på 0,08 like sannsynlig som en p -verdi på 0,98. Jeg husker at jeg trodde dette var veldig motintuitivt da jeg først lærte om uniforme p -verdifordelinger (etter fullført doktorgrad). Men det er fornuftig at p -verdier er jevnt fordelt når vi husker det, når
er sant, bør alfa % av p -verdiene falle under alfanivået, uansett hvilket alfanivå vi setter. Derfor, hvis vi setter alfa til 0,01, bør 1 % av de observerte p -verdiene falle under 0,01, og hvis vi setter alfa til 0,12, bør 12 % av de observerte p -verdiene falle under 0,12. Dette kan bare skje hvis p -verdier er jevnt fordelt når nullhypotesen er sann.
