TOETS Flashcards
Kenmerken van een wetenschappelijk onderzoek
Empirisch
- Controleerbaar
- Probabilistisch
Kenmerken van een goed wetenschappelijk onderzoekOndersteund door data
- Falsifieerbaar
- Spaarzaam
Onderzoeksvragen
Fundamenteel: gericht op het verkrijgen van meer kennis in het algemeen
Toegepast: gericht op een specifiek probleem
Theorie-data cyclus
Theorie > onderzoeksvraag > onderzoeksontwerp > hypothesen > dataverzameling > data analyse
Stappenplan data analyse
Data management en voorbereiding
- Doornemen en reduceren van de data
- Coderen van de data
- Memo’s schrijven
- Modellen construeren en toetsen
Voorwaarden van causaliteit
Covariance (verband)
- Temporal precedence (oorzaak voorafgaand aan het gevolg)
- Internal validity (alternatieve verklaringen uitsluiten)
Acroniemen Kwalitatief:
SPICE (setting, population, interest, comparison, evaluation)
Correlationeel acroniem
PAC (population, association, constructs)
Experimenteel acroniem
PICO (population, intervention, comparison, outcome)
Doelgericht:
Doelgericht: de onderzoeker gaat op zoek naar specifieke individuen die belangrijke informatie kunnen geven (case study logic)
Gemak:
Gemak: de onderzoeker benadert participanten die eenvoudig te bereiken zijn (convenience sample
Quota:
de onderzoeker heeft voorwaarden voor aantallen (bv. mannen en vrouwen)
Sneeuwbal:
de onderzoeker gaat op zoek naar een respondent die andere mogelijke participanten met hem in contact kan brengen
Sequentieel:
Sequentieel: de onderzoeker past tijdens het onderzoek de criteria aan om doelgerichter te werken
Enkelvoudig:
elke participant heeft dezelfde kans om geselecteerd te worden en elke combinatie van participanten heeft dezelfde kans
Gestratificeerd:
Gestratificeerd: een combinatie van meerdere steekproeven getrokken uit subgroepen in de populatie
Cluster:
op basis van een lijst van clusters kunnen onderzoekers at random bepalen welke clusters worden opgenomen in de steekproef. Alle subjecten van de cluster vormen de steekproef.
Getrapte:
er wordt eerst een cluster steekproef getrokken en vervolgens wordt uit de cluster een enkelvoudige aselecte steekproef getrokken
Sample for range:
breed scala aan ervaringen
Steekproevenspreiding:
het feit dat de waarden van de steekproefcorrelatie van steekproef tot steekproef variëren.
Steekproeffout
het verschil tussen de waarde in de steekproef en de waarde in de populatie
Standaardfout
de standaardafwijking van de steekproeffout
Biased sample:
sommige mensen in de populatie hebben een grotere kans om voor de steekproef geselecteerd te worden
Unbiased sample:
alle mensen in de populatie hebben een even grote kans om voor de steekproef geselecteerd te worden
Dekkingsfouten
kunnen een vertekening van de werkelijkheid veroorzaken
Non-response fouten:
het niet meedoen of niet beantwoorden van vragen
Triangulatie
Doel:
aanvullende ondersteuning voor theorie en vinden van tegenstrijdige resultaten om theorie eventueel aan te passen.
Data triangulatie
verschillende soorten kwalitatieve gegevens worden gecombineerd
Methoden triangulatie :
kwalitatieve en kwantitatieve methoden worden gecombineerd
Theoretische triangulatie :
verschillende invalshoeken worden gecombineerd
Onderzoeker triangulatie
de data van verschillende onderzoekers worden gecombineerd
Confirmation bias:
resultaten die niet overeenkomen met de verwachting worden (on)opzettelijk genegeerd door de onderzoeker > file-drawer probleem
Directe replicatie:
originele onderzoek reproduceren
Conceptuele replicatie:
dezelfde onderzoeksvraag maar andere methodes
Replicatie + uitbreiding:
voorwaarden of variabelen toevoegen aan het originele onderzoek
Impactfactor:
geeft een indicatie hoe vaak een tijdschrift geciteerd wordt
Nominaal meetniveau:
geen ordening (categorische variabelen)
Ordinaal meetniveau:
logische ordening (kwantitatieve of kwalitatieve variabelen)
Interval meetniveau:
natuurlijke ordening (kwantitatieve variabelen)
Ratio meetniveau:
natuurlijk ordening met absoluut nulpunt (kwantitatieve variabelen)
Test-hertest:
consequente scores bij herhaling van het meetinstrument
Interbeoordelaars
consequente scores wanneer meerdere onderzoekers het meetinstrument gebruiken
Interne: betrouwbaarheid
mate waarin respondenten soortgelijke antwoorden geven op vragen over hetzelfde theoretische begri
Interne:
kunnen alternatieve verklaringen worden uitgesloten?
Externe:
hoe goed kunnen de resultaten gegeneraliseerd worden?
Begripsvaliditeit:
hoe goed is een construct geoperationaliseerd?
Indruksvaliditeit:
hoe beoordelen onderzoekers een vragenlijst?
Inhoudsvaliditeit:
worden alle aspecten van het construct gemeten?
Criterium:
hangen de scores samen met de mate van concreet gedrag waarmee je samenhang verwacht?
Convergente:
hangen de scores samen met scores van een ander meetinstrument dat hetzelfde construct wil meten?
Divergente:
hangen de scores niet samen met scores op een ander meetinstrument dat een ander construct wil meten?
Statistische validiteit:
hoeverre ondersteunen de data de causale claim?
Bedreigingen van interne validiteit
- Design confounds
- Contaminatie
- Selectie effect
Reactiviteit
-
Kwalitatief onderzoek: gedrag wordt beïnvloed door aanwezigheid onderzoeker en het feit dat participanten weten dat ze geobserveerd worden
- Kwantitatief onderzoek: sociale wenselijkheid > bedreiging begripsvaliditeit
- Experimenteel onderzoek: afhankelijk van de setting zal de participant zijn gedrag aanpassen > bedreiging interne validiteit en ecologische validiteit
Eenzijdige hypothese:
hierin staat een specifieke richting en er is een specifieke, gerichte verwachting. Je kunt deze herkennen aan een < of een > in de hypothese.
Tweezijdige hypothese:
geen specifieke richting of verwachting. Je kunt deze herkennen aan een ≠ in de hypothese.
Type 1 fout:
foutief de nulhypothese verwerpen; zeggen dat er een verband/verschil/effect is terwijl die er niet is.
Type 2 fout:
onterecht de nulhypothese niet verwerpen; zeggen dat er geen verband/verschil/effect is terwijl die er wel is.
Bij een kleinere steekproef wordt de kans op een type 2 fout
hoger.
Grotere steekproeven voorkomen een type
2 error en zijn vaker reproduceerbaar.
P waarde
De kans dat je een soortgelijk of extremer resultaat vindt, als je aanneemt dat de nulhypothese waar is.
Bij een grote p waarde is het waarschijnlijk dat het resultaat door
toeval wordt veroorzaakt. Er is dus weinig ondersteuning voor de theorie.
Bij een kleine p waarde
minder waarschijnlijk dat het resultaat door toeval wordt veroorzaakt. Er is dus veel ondersteuning voor de theorie.
Alfa (significantieniveau)
Alfa is de kans op een type 1 fout.
Als de p waarde gelijk is aan of kleiner is dan alfa,
mag de nulhypothese verworpen worden. Als de p waarde groter is dan alfa mag de nulhypothese niet verworpen worden.
Cronbach’s alpha meet de
de samenhang tussen twee constructen
Power is de
kans dat de nulhypothese terecht verworpen wordt; je concludeert dat er een verband/ effect/verschil is in de populatie en die is er ook daadwerkelijk.
Hoe groter de steekproef,
hoe hoger de power
Hoe groter het verschil tussen groepen,
hoe hoger de power
Hoe groter alfa,
hoe hoger de power
Een eenzijdige test heeft
een hogere power dan een tweezijdige test
Een eenzijdige test heeft
een hogere power dan een tweezijdige test
Betrouwbaarheidsinterval
Wordt gebruikt om de grootte van het verschil tussen twee groepen te beschrijven. De breedte van het interval zegt iets over de nauwkeurigheid van de schatting.
Een grotere steekproef zorgt
voor een smaller interval
Een grotere spreiding in scores zorgt voor
een breder interval
Een hoger betrouwbaarheidsniveau zorgt
breder interval
Betrouwbaarheidsniveau
Onderzoekers kiezen een betrouwbaarheidsniveau dat past bij het significantieniveau. Als alfa 0.05 is kiezen onderzoekers voor een betrouwbaarheidsniveau van 95%.
Bij 99% is het waarschijnlijker dat de
populatiewaarde in het interval ligt dan bij 90%.
Met de t-toets bepalen we
of het verschil in groepsgemiddelden statistisch significant is grond van verschil in gemiddelden, spreiding en grootte van de groepen.
T = M1 – M2 / SF
Bij een groter verschil in gemiddelden wordt t
groter
Bij meer spreiding wordt t
kleiner
Bij grotere steekproeven wordt t
groter want als de steekproef groter wordt, wordt de standaardfout kleiner.
Voorwaarden T toets
-
Aselecte steekproef
- Afhankelijke variabele interval/ratio meetniveau
- Twee groepen zijn onafhankelijk
- Scores beide groepen normaal verdeeld
- Scores beide groepen gelijke spreiding
Cohen’s d
Drukt het verschil tussen de twee gemiddelden uit in standaardafwijkingen.
D = M1 – M2 / SD
Richtlijnen voor interpretaties Cohens D
- 2 = kleine sterkte
- 5 = medium sterkte
- 8 = grote sterkte
Als het effect (d) groter wordt zie je
nog minder vaak een grote p waarde en wordt de power hoger
Correlatiecoëfficiënt r
Wordt gebruikt om de sterkte van de relatie tussen twee variabelen te meten
- 1 = zwakke correlatie
- 3 = medium correlatie
- 5 = sterke correlatie
Test-hertest betrouwbaarheid Vuistregel =
0.5
Interbeoordelaars betrouwbaarheid Vuistregel
= 0.7
Interne betrouwbaarheid Vuistregel
= 0.7
Pearson correlatiecoëfficiënt
meet de sterkte en de richting tussen twee interval/ratio variabelen.
Spearman correlatiecoëfficiënt meet
de sterkte en richting tussen twee ordinale variabelen.
Voorwaarden bij een correlatie toets
-
Aselecte steekproef
- Beide variabelen interval/ratio meetniveau
- Lineaire relatie
Dataverzamelingsmethoden kwalitatief onderzoek
-
(semi-gestructureerde) interviews
- Focusgroepen
- Bestaande gegevens
- Observatie onderzoek
Verschillen in Observaties
- Participerend (klassiek etnografisch) vs. Niet participerend
- Verhuld vs. Onverhuld
- Systematisch vs. Niet-systematisch
Complete participant/participant observers
staan vaak dicht bij de bestudeerde mensen
Covert observers
hebben meer afstand
Gatekeeper:
iemand die toestemming geeft om ergens onderzoek te doen
Key informant:
lid van de gemeenschap die onderzocht wordt (geeft belangrijke informatie)
Saturatie:
er zijn voldoende gegevens verzameld en geen nieuwe inzichten
Dataverzamelingsmethoden correlationeel onderzoek
-
Observatiestudies
- Bestaande gegevens
- Vragenlijsten
Stappen NHST
- Formuleren hypothesen
- Keuze en berekenen toetsingsgrootheid
- Kans bepalen op resultaat gegeven H0
- Beslissing nemen over H0
H0 verworpen > resultaat (statistisch) significant
Significantie wordt bepaald door
t en p
Beoordeling Relevantie aan de hand van :
Cohen’s d
- Beoordeling Nauwkeurigheid aan de hand van
: betrouwbaarheidsinterval
-
Beoordeling Geschiktheid aan de hand van
: controleren van assumpties
Voorwaarden voor goede en integere wetenschapsbeoefening
Eerlijkheid
- Zorgvuldigheid
- Transparantie
- Onafhankelijkheid
- Verantwoordelijkheid
Data fabricatie:
verzinnen van data > bedreiging eerlijkheid
-
Plagiaat:
kopiëren > bedreiging eerlijkheid
Data falsificatie:
niet rapporteren/aanpassen/foutief interpreteren van data
Opzettelijke falsificatie
> bedreiging eerlijkheid
Onopzettelijke falsificatie
> zorgvuldigheid
P-hacking:
zoeken naar significante verbanden in de data zonder vooraf hypotheses op te stellen > bedreiging transparantie
- HARKing
achteraf formuleren van hypotheses > bedreiging eerlijkheid
Oplossingen Questionable Research Practice:
retractie, post publication peer review, pre-registratie en replicatie
Anoniem onderzoek:
bij data verzameling worden geen persoonsgegevens verzameld
Vertrouwelijk onderzoek:
onderzoekers voorkomen dat persoonlijke data van respondenten bekend worden
Informed consent:
deelnemer wordt vooraf geïnformeerd over het onderzoek, welke gegevens wel en niet worden verzameld, mogelijke risico’s en/of voordelen er zijn bij deelname
Deceptie:
het weerhouden van details van het onderzoek
Availability heuristic:
dingen die gemakkelijk in ons opkomen bepalen onze gedachtegang > verkeerd inschatten van hoe vaak een situatie voorkomt
-
Present/present bias:
de verkeerde groepen gebruiken zodat je iets aan kunt tonen dat aanwezig is
-
Confirmation bias:
resultaten die niet overeenkomen met de verwachting worden (on)opzettelijk genegeerd door de onderzoeker
-
Bias blind spot:
de overtuiging dat we geen slachtoffer zullen worden van onze bias
Attribute codes:
achtergrond of demografische informatie van de participant
Index codes:
vertegenwoordigen grote stukken tekst en geven algemene onderwerpen aan
Analytic codes:
beschrijven de betekenis van specifieke stukken tekst
