Hoofdstuk 11: More on experiments: confounding and obscuring variables Flashcards
Bedreigingen voor de interne geldigheid
Heeft de onafhankelijke variabele echt het verschil veroorzaakt?
Bedreigingen voor de interne geldigheid, verklaard met Design Confound
Het experiment is slecht ontworpen. Een andere variabele is systematisch gaan variëren, samen met de beoogde onafhankelijke variabele.
Bedreigingen voor de interne geldigheid, verklaard met een Selectie Effect
Een Confound bestaat omdat de verschillende onafhankelijke variabele groepen systematisch verschillende soorten deelnemers hebben.
Bedreigingen voor de interne geldigheid, verklaard met een Order Effect
We weten niet of de onafhankelijke variabele echt een effect heeft, of dat de deelnemers gewoon moe of verveeld worden, of goed geoefend hebben.
(De uitkomst kan worden veroorzaakt door de onafhankelijke variabele, maar ook door de volgorde waarin de niveaus van de variabele worden gepresenteerd.)
Zes potentiële interne geldigheidsbedreigingen in één-groep, Pretest/Posttest ontwerp:
Maturation Threats, History Threats, Regression Threat, Attrition Threats, Testing Threat, Instrumentation Threat.
Maturation Threats
Een verandering in gedrag dat in de loop van tijd meer of minder naar voren komt. Mensen passen zich aan aan veranderde omgevingen.
Spontane remissie
Symptomen van bijvoorbeeld depressie verdwijnen zonder reden, met de tijd.
Maturation vermijden
Als de behandelingsgroepen significant meer verbeterden dan de vergelijkingsgroepen, zouden deze onderzoekers het effect van rijping in wezen kunnen aftrekken wanneer ze hun resultaten interpreteren.
History Threats
Zijn het gevolg van een externe factor die de meeste leden van de behandelingsgroep systematisch tegelijk met de behandeling zelf treft, waardoor het onduidelijk is of de verandering wordt veroorzaakt door de ontvangen behandeling.
Voorkomen van historische bedreigingen
Het gebruiken van een vergelijkingsgroep.
Regression threat
Verwijst naar een statistisch begrip dat regressie naar het gemiddelde wordt genoemd.
(Wanneer een groepsgemiddelde (gemiddelde) ongewoon extreem is op Tijd 1, is de volgende keer dat die groep wordt gemeten (tijd 2) waarschijnlijk minder extreem - dichter bij de typische of gemiddelde prestatie.)
Dagelijkse regressie naar het gemiddelde
Met behulp van real-world situaties.
Regressiebedreigingen voorkomen
Vergelijkingsgroepen, Een zorgvuldige inspectie van het patroon van resultaten.
Attrition Threats
Een experimentele groep verandert in de loop van de tijd, maar alleen omdat de meest extreme gevallen systematisch zijn uitgevallen en hun scores niet worden meegenomen in de posttest.
Attrition Threats voorkomen
Alleen kijken naar de scores van degenen die beide onderdelen van het onderzoek afgerond hebben.
De pretestscores van de drop-outs controleren.
Testing threat
Een bepaald soort volgorde-effect, verwijst naar een verandering in de deelnemers als gevolg van het meer dan eens afleggen van een test.
Testbedreigingen voorkomen
Een pretest-altogehter verlaten en een posttest-only ontwerp gebruiken.
Een vergelijkingsgroep zal ook helpen.
Instrumentation threat
Treedt op wanneer een meetinstrument in de loop van de tijd verandert.
(In observationeel onderzoek zijn de mensen die gedrag coderen het meetinstrument.)
Wanneer een onderzoeker verschillende vormen gebruikt voor de pretest en posttest, maar de twee vormen niet voldoende gelijkwaardig zijn.
Intrumentatiebedreigingen voorkomen
Overstappen op een posttest-only design, of stappen ondernemen om ervoor te zorgen dat de pretest en posttest maatregelen gelijkwaardig zijn.
Instrumentatie vs. testbedreigingen
Bij een instrumentatiebedreiging is het meetinstrument van tijd 1 naar tijd 2 veranderd. Bij een testbedreiging zijn de deelnemers in de loop van tijd veranderd van eerder getest te zijn.
Gecombineerde bedreigingen
Selectiebedreigingen combineren met voorgeschiedenis of uitputtingsbedreiging.
Selectiegeschiedenisbedreiging
Een externe gebeurtenis of factor beïnvloedt alleen die op één niveau van de onafhankelijke variabele.
Drie potentiële interne validiteitsbedreigingen in elk onderzoek
Observer bias, Demand characteristics, Placebo-effecten.
Observer bias
Observer bias kan een bedreiging vormen voor de interne validiteit in bijna elk onderzoek waarin sprake is van een gedragsafhankelijke variabele. Observer bias doet zich voor wanneer verwachtingen van onderzoekers hun interpretatie van de resultaten beïnvloeden.
