HC 9 - Boek HS 18/19 Flashcards
evaluatie onderzoek: goal definition
> 2 stappen
- needs assessment
> identificatie probleem - vial enquetes, sociale indicatoren etc
> ontwikkelen oplossing - bepaal client populatie en inhoud programma
- evaluation assessment - wat heb je nodig om impact te bepalen
> je moet doelen kennen
> wat zijn de gevolgen van bereikde doelen?
> theorie over hoe interventie werkt
> richtlijnen voor uitvoering programma
evaluatie onderzoek:
> hoe gevolgen per doel specificeren?
> hoe impact per doel specificeren?
gevolgen per doel:
- kennis client
- houding client
- gedrag client
impact per doel:
- wanneer treedt effect op
- hoe groot is het effect
- hoe lang duurt het effect
evaluatieonderzoek: 2 soorten uitkomstmaten
- proximale uitkomsten
> uitkomsten tijdens programma
- distale uitkomsten
> indirecte effecten, treden pas na afloop van het programma op
> worden ook social impact outcomes genoemd
evaluatie onderzoek: wat houdt process evaluation in?
process evaluation: tijdens uitvoering monitoren hoe goed het gaat
- bereikt het programma de target populatie
- wordt het uitgevoerd zoals bedoeld?
- zijn en onbedoelde bijwerkingen?
evaluatieonderzoek:
program package design
vs
comparative outcome design
program package: impact van het programma vergeleken met een controle groep/waiting list
comparative outcome: vergelijkt impact van programmas met elkaar inclusief controle conditie
evaluatie onderzoek:
dismantling design
vs
client and program variation design
om te bepalen welke factoren bijdragen aan impact van programma
dismantling design: meerdere onderzoeksgroepen, variatie programonderdelen per groep
client and program variation design: variatie van steekproef en onderdelen programma
> wat werkt bij wie en wat niet?
evaluatie onderzoek:
constructive design
vs
parametric design
designs om het programma te verbeteren
constructive: voeg iets toe aan het programma en kijk of het werkt
parametric: varieer hoeveel manipulatie clienten ervaren
> bv 1 keer per week vs 2 keer per week
aan welke eisen moet een evaluatieonderzoeksdesign minimaal voldoen?
2x3 factorieel design
> 2 condities: treatment en controle
> 3 metingen: voor, treatment, en follow up
gebruiken van quasi experiment design voor evaluatie onderzoek:
> 4 effecten van control group contamination
control group contamination:
- treatment diffusion: controlegroep heeft door wat treatment is en kopieert
- controle group proefpersonen krijgen compensatie door team
- proefpersonen hebben door dat ze in controle groep zitten met reactiviteit als gevolg
- local history: impact door evenement alleen in treatment of controle
wat houdt een pre experimental design in?
pre experimental design: geen gebruik van controle conditie
> alleen pre en posttest
evaluatie onderzoek: 3 bronnen van null results
- het programma werkt niet - true null result
- programma verkeerd uitgevoerd - Type 2 fout
- evaluatie niet goed uitgevoerd - Type 2 fout
wanneer ook bij nul resultaat belangrijke conclusies mogelijk?
hoe?
als bv twee verschillende treatment groepen hetzelfde resultaat opleveren
> er kan gekegen worden naar verschil in kosten tussen de treatments
- cost benefit - puur financieel
- cost effectiveness - kosten vergeleken met impact van programma
literature review:
conceptueel vs integratief
conceptueel: samenvatten en interpreteren literatuur
> historische analyse
integratief: toetsen hypothese aan hand van onderzoeken
> meta analyse
2 approaches meta analyse
- main effects approach: wat is het gemiddeld hoofdeffect
> niet kijken naar verschillen tussen studies
- moderator analysis: welke factoren modereren het effect?
> onder welke omstandigheden treedt het effect op? (boundary conditions)
> in welke mate is het effect generaliseerbaar
meta analyse: wat zijn de 2 dimensies om vraagstelling te bepalen?
- scope - hoe breed of smal is de vraagstelling
- approach - exploratief of toetsend
