4 Interná a externá validita Flashcards
Čo je cieľom výskumu?
„Cieľom empirického výskumu je odkrývať vzťahy medzi premennými,
ktoré by inak neboli zachytiteľné a verifikovať hypotézy.“
Interná validita
- Vypovedá o tom ako kvalitný je experiment (výskum) z
metodologického pohľadu a ako je nezávislý od rôznych iných
premenných. - Nakoľko zmeny v závislej premennej boli spôsobené zmenami v
premennej, ktorou bolo manipulované. - Náhodné vplyvy na výsledok.
- Hovorí o tom, nakoľko sme boli schopní kontrolovať nami určené premenné
- Kombinácia ľudí vo výskume – je to reálna vzorka? Čo o týchto ľuďoch viem povedať? Napríklad ak chcem robiť experiment s úzkostnými ľuďmi tak som asi v pipke rybke lebo takí sa mi sami dobrovoľne do výskumu hlásiť nebudú
- Trendy v zmenách duševného zdravia – skúmania o zmenách v čase, potom príde kovid – ako to ovplyvní dáta?
Čo ohrozuje internú validitu?
História
* Ak sa udalosť, iná ako nezávislá premenná, udeje počas experimentu
a táto udalosť môže mať vplyv na výsledky.
* Efekt by mal postihovať všetky subjekty, je pre nich spoločný.
* Skúste uviesť príklady udalostí, mimo a v experimentálnej situácií.
* Mimo experimentu - správa v novinách a meranie postojov ľudí.
* V rámci experimentu - krízové situácie počas zberu dát (horí, niekto
odpadne a pod.)
Maturácia - Zrenie
- O maturácii hovoríme vtedy, ak zmeny počas času nie sú spôsobené
len špecifickou udalosťou, ale aj v dôsledku zmien u jednotlivých
subjektov. - Deti vyrastú, niekto sa stane silnejší, múdrejší, únava počas vyšetrenia
a pod. - Niekedy je náročne od seba oddeliť, čo je maturácia a čo vplyv
histórie.
Príklad
* Porovnanie tehotných žien.
* Má vplyv špecifický tréning na redukciu anxiety z pôrodu?
* Dizajn – dve rôzne intervencie (metóda A a metóda B).
* Obidve intervencie viedli k signifikantnej redukcii úzkosti. Navzájom sa od seba nelíšili.
* Môžeme urobiť záver, že tréningy sú efektívne? Skúste uviesť dôvody.
* Aké sú metodologické limity tejto štúdie?
Testovanie
- Pre test vs post test.
- Cieľ je určenie na koľko sa osoba zlepšila.
- Efekt zoznámenia sa s úlohou.
- Oddelenie efektov a zaradenie kontrolnej skupiny.
Inštrumentácia
- Zmena v nástroji merania alebo procedúrach merania.
- Príklad zmeny úloh v longitudinálych výskumoch.
- DSM-III, DSM-IV, DSM-5 a prevalencia porúch.
- Ktoré zmeny v závislej premennej sú v dôsledku skutočných zmien a
ktoré len ako dôsledok zmeny „skórovania“ - Opakované výskumy vo viacerých vlnách – dochádza k reformulácii
položiek vynechaniu, alebo je konštrukt inak definovaný - Vplyv poznámok experimentátora na výsledky – nedodržanie
štandardných postupov
Regresia k priemeru
- Ľudia s extrémnym skóre v prvom meraní majú tendenciu pri
opakovanom meraní dosahovať hodnoty viac smerujúce k priemeru. - Pri opakovanom testovaní nezistíme rovnako extrémne hodnoty
- Identifikujeme ľudí s vysokou mierou depresie (dosiahli extrémne
vysoké hodnoty). Zaradíme ich do dvoch skupín a každej poskytneme inú intervenciu. Pri post teste vidíme významné zlepšenie u obidvoch
intervencií, ktoré sa od seba významne nelíšia. - Môžeme pozorované výsledky vysvetliť regresiou k priemeru?
Neekvivalentnosť skupín
- Najčastejší problém internej validity!!!
- Problém nastáva ak porovnávané skupiny nie sú na začiatku výskumu
rovnocenné. - Ktoré psychologické premenné by mohli mať potenciálne nejaký
efekt? - Náhodné prideľovanie do skupín.
- Zaslepenie a klinické štúdie.
- Single blind, double blind, triple blind???
- Výskum v psychoterapii – náhodné prideľovanie vs. výber pacientov
na waiting list
príklad
mám napríklad porovnávaciu skupinu detí z úplných rodín a z detského domova. Môžem ich spárovať do skupín na základe veku a pohlavia? Nie, pretože sú ovplyvňované socioekonomickým statusom, pozadím, etnikom …. ako sa bude merať socioekonomický status? Mesačný príjem, adresa, vzdelanie. To že ja si zrovnovážnim niektoré skupiny v rovnakej miere pre mňa, neznamená že to bude tak aj odrážať naozaj skutočnosť.
Úbytok testovaných osôb
- Prirodzený úbytok testovaných osôb – longitudinálne výskumy
- Porovanie imipramínu a KBT pre depresiu – Výskum Rush et al. (1977)
- Randomizovaná štúdia
- KBT bolo viac efektívne ako AD.
- Väčší úbytok testovaných osôb bol v skupine, ktorá dostávala AD.
- Kto sú tí, ktorí sa rozhodli prerušiť participáciu na výskum?
- Aké boli ich dôvody? Boli to depresívnejší alebo menej depresívni
pacienti. - Skúste vymyslieť vysvetlenie!
Prídu nám nejakí ľudia – väčšinou viacej žien, viac extravertovaných ľudí – meranie opakujem po roku, po 2, 3 a 5 – koľko ľudí z prvého merania mi ostalo aj v poslednom? Treba na toto dbať ohľad, čo nám to povie o našom výskume? Niektorá skupina môže mať viacej nežiaducich účinkov … ak nám odpadávajú rôzne typy ľudí z rôznych typov skupín hovorí to o našom výskume niečo.
Reaktivita výskumných subjektov a špeciálne
zaobchádzanie
- Jedna skupina dostane klasický program a druhá podstúpi inovatívnu novú
procedúru. - Aké sú očakávania participantov?
- Typické a atypické odpovede.
- Skúmané osoby si uvedomujú, že sú skúmané a snažia sa odhadnúť zámer
výskumu. - Snaha o spoluprácu a správanie sa tak, ako od nás očakáva výskumník.
- Dve školské triedy – Jedna nová intervencia, druhá kontrolná skupina – časť participantov v kontrolnej skupine bude mimoriadne aktívna (viac ako
zvyčajne), lebo chce ukázať, že oni sú rovnako dobrí - Reaktivita výskumných subjektov a špeciálne zaobchádzanie → lieky. Je nejaký liek prirodzene efektívnejší alebo je to tým, že na začiatku liečby musí pacient dochádzať častejšie (1x týždne) k lekárovi a má potom viacej starostlivosti, ktorá mu pomáha viacej ako samotný liek?
Prezradenie manipulácie s nezávislou
premennou
- Príklad z Kazdina
- V 80 rokoch bol realizovaný veľký výskum s cieľom znížiť riziko srdcovo
cievnych chorôb. - Intervencia obsahovala: plány na diétu, lieky na kontrolu hypertenzie,
odporúčanie prestať fajčiť a aktívne cvičiť. - Po 6 rokoch programu overili efektivitu. Došlo k zníženiu rizikových faktorov
ale mortalita bola identická ako v kontrolnej skupine. - Prečo je tomu tak?
- Skúste uviesť iný príklad prezradenia exp. manipulácie.
Čo ohrozuje internú validitu? - všetky pojmy
- Maturácia
- Testovanie → pre test vs post test
- Inštrumentácia
- Regresia k priemeru
- Neekvivalentnosť skupín
- Úbytok testovaných osôb
- Reaktivita výskumných subjektov a špeciálne zaobchádzanie
- Prezradenie manipulácie s nezávislou premennou
Vzťah medzi internou a externou validitou
- Treba nájsť zdravý balans, niektoré dizajny výskumu kladú lepší dôraz na to že chcedme dáta zovšeobecniť na všetkých a iné asi idú nejakým opačným smerom
- Experimenty majú často striktný dizajn a kontrolné skupiny, čo niekedy spôsobí že nie všetci participanti sú potom dobrý výskumný súbor, lebo to v konečnom dôsledku nie sú ľudia ktorých by som chcela vo svojom výskume
Externá validita
- Vieme veľmi veľa o študentoch a myšiach a ostatnom vieme veľmi
málo (Goodwin, 2005). - Chceme, aby sme výskum mohli zovšeobecniť na iné populácie,
prostredie a iný čas (dobu). - Externá validita – vypovedá o tom, do akej miery môžeme výskumné
zistenia zovšeobecniť nad rámec špecifický kontext, v ktorom bol
realizovaný výskum.