H11: confounding & obscuring variables Flashcards
Waarom is geen controlegroep hebben of een one-groep, pretest posttest design een slecht experiment?
Omdat er zo potentiële bedreigingen ontstaan voor de interne validiteit.
Wat betekent de bedreiging maturatie?
= een spontane verandering in de uitkomst
Wat is de oplossing tegen maturatie?
= een vergelijkingsgroep/controlegroep
Wat zijn history threats?
= een externe gebeurtenis in de tijd dat het gevolg is van een verandering en niet de manipulatie
Kunnen history threats optreden in een onderzoek met 1 meting?
Nee, kan enkel optreden in een onderzoek met meerdere metingen.
Wat is de oplossing voor history threats?
= een controlegroep
Wat houdt de bedreiging regressie naar het gemiddelde in?
= door een extreem resultaat op de pretest kan het volgende resultaat dichter bij het gemiddelde liggen
Wat is de oplossing voor regressie naar het gemiddelde?
= een controlegroep
Wat houdt de bedreiging attrition in?
= systematische uitval, veranderingen doordat mensen niet meer deelnemen aan het vervolgonderzoek
Wat is de oplossing voor attrition?
= pretest verwijderen van deelnemers die niet deelnemen aan de posttest
Wat houdt de bedreiging testing in?
= het effect van herhaaldelijk een test in te vullen kan een effect hebben
Wat zijn oplossingen voor testing?
- pretest weglaten
- verschillende meetinstrumenten gebruiken
- controlegroep toevoegen
Wat is een Solomon 4 Group design?
- alternatief voor de bedreiging testing
- een experimenteel ontwerp dat helpt om zowel het effect van de behandeling als de mogelijke invloed van een pretest te beoordelen
Wat betekent de bedreiging instrumentatie?
= verandering door het gebruik van verschillende instrumenten bij pre- en posttest
Wat is de oplossing voor de bedreiging instrumentatie?
- pretest weglaten
- pilootstudie om gelijkwaardigheid van tests aan te tonen
- counterbalancing
Wat is observer bias?
= verwachtingen van de onderzoekers beïnvloeden de resultaten
Wat zijn oplossingen voor Observer bias?
- double-blind design
- masked-design
Wat is double blind design?
Beiden partijen weten niet in welke conditie ze zitten.
Wat is masked-design?
De onderzoeker weet niet in welke conditie de participant zit.
Wat is demand characteristics?
De overtuiging van deelnemers over de doelen van het onderzoek beïnvloeden hun eigen gedrag
Wat is de oplossing voor demand characteristics?
- double blind design
- masked design
Wat is het placebo effect?
= effect veroorzaakt doordat deelnemers geloven dat ze een behandeling krijgen
Wat is design confound?
= een variabele die systematisch mee varieert met de onafhankelijke variabele
Wat zijn selection effects?
= toevallige verschillen die we creëren in ons experiment omdat de controlegroep en experimentele groep mensen bevatten die van elkaar verschillen
Wat is een nul effect?
= je vindt geen effect in de studie
Wat zijn mogelijke verklaringen voor nul effecten?
Kleine verschillen tussen groepen:
- zwakke of mislukte manipulatie van OV
- ongevoelige maatstaven van AV
- ceiling and floor effects
Grote verschillen binnen groepen: bron van niet-systematische variantie
- meetfout
- individuele verschillen
- situationele variabiliteit/ruis
Wat is een type 1 fout?
Wanneer men concludeert dat er een effect is in de studie maar niet in de realiteit.
Wat is een type 2 fout?
Wanneer men concludeert dat er geen effect is in de studie en wel een effect is in de realiteit.
Welke statistische waarde geeft de kans op type I weer?
p-waarde
Wat is het fishing and error-rate problem?
Een probleem dat zich voordoet wanneer onderzoekers verschillende analyses uitvoeren op een dataset zonder vooraf gedefinieerde hypothesen, met als doel significante resultaten te vinden.
Wat is een oplossing voor het fishing and error-rate problem?
Correctie uitvoeren zoals bijvoorbeeld een Bonferroni correctie.
Welke statistische variabele geeft de kans weer op geen type II fout te maken?
Power
Waarvan hangt power af?
- sample size
- effect size
- alfa
- noise
Wat is de cut-off score voor power?
.80
