Thème 4: Évaluation De Programmes Flashcards
Qui suis-je?
○ Ensemble d’activités planifiées dans le temps conçu pour
atteindre des objectifs précis
Un programme!
Qui suis-je? Une démarche rigoureuse de collecte et d’analyse d’informations, à partir de plusieurs sources de données.
Une évaluation!
Que vise une évaluation?
vise à porter un jugement structuré et objectif sur tous types d’interventions, et ce, afin d’aider les gestionnaires et les autorités à prendre des décisions éclairées.
Quel est le but ultime de l’évaluation de programme?
Amélioration-justification-documentation des programmes offers
(À quoi) L’évaluation fournit des renseignements qui permettent d’apprécier:
d’apprécier:
○ la pertinence d’une intervention (ou son utilité),
○ son efficacité (liens entre les objectifs et les résultats)
○ ou son efficience (liens entre les effets et les ressources utilisées).
À Quoi et à Qui: L’évaluation élabore des recommandations ou des pistes de réflexions en vue d’éclairer les décideurs concernant:…
○ l’implantation,
○ la mise en œuvre
○ la poursuite
○ l’amélioration ou la révision de l’intervention soumise à son jugement.
À Quoi: Une évaluation peut répondre, entre autres, à une ou plusieurs des questions suivantes :
○ L’intervention a-t-elle été implantée comme prévu?
○ Quels sont les éléments qui favorisent ou entravent sa mise en œuvre?
○ Les objectifs fixés au départ ont-ils été atteints?
○ Quels sont les effets attribuables à l’intervention?
○ Est-ce que l’intervention contribue à maintenir ou à améliorer l’état de santé ou de bien être de la population qu’elle vise?
- est-ce que des enseignements peuvent-être tiré de l’évaluation pour d’autres interventions?
Ultimement: L’évaluation permet aux décideurs de …
Mieux adapter ses réponses en matières de santé et de services sociaux aux besoins toujours en évolution de la population
À quel moment du processus la démarche d’évaluation doit être considérée?
Au moment même de la CONCEPTION d’une intervention
À quel moment s’effectue l’évaluation durant le processus d’intervention?
L’évaluation s’effectue TOUT AU LONG des phases de la planification d’un programme et de sa mise en oeuvre
Améliorer et développer les activités en même temps qu’elles se réalisent
Quels sont les éléments importants de l’évaluation?
○ Indicateurs à utiliser
○ Outils d’évaluation
○ Quoi évaluer?
○ Qui évalue?
○ Étapes de l’évaluation
○ Défis liés à l’évaluation
Qu’est-ce qu’un indicateur?
Mesure utilisée comme point de repère dans l’appréciation de l’état ou de l’évolution d’une problématique
Par quoi est déterminé un indicateur?
Par des mesures spécifiques (nombre, pourcentage, degré de satisfaction…)
Qu’est-ce que permet un indicateur?
- Surveiller l’évolution des problématique reliées à la nutrition
- Signaler la nécessité de réviser nos programmes (ou planifier
- informer les groupes d’intérêt et les bailleurs de fonds
Quelles sont les qualités d’un indicateur?
Mesurable, valide, précis, se prêter facilement à la collecte d’informations
Donner des exemple d’indicateurs pour une évaluation de type processus:
- Taux de participation
- degré de satisfaction par rapport aux activités
- sommes $ consacrée à l’implantation du programme
- nombre d’heure consacrées au programme par le personnel
Donner des exemples d’indicateurs pour une évaluation de type résulats
- niveau de connaissances acquis
- proportions de participants ayant atteint l’un des objectifs
Type d’évaluation de type retombées
- proportion des participants ayant augmenté leur qualité de vie
Quels sont des outils pour l’évaluation?
Outils validés et fiables
- questionnaires
- sondages
- discussions
- mesures directes
L’approche qualitative produit et analyse quelles types de données?
Données non numériques, comme les paroles ou le comportement observables des personnes
= Elle permet donc de traiter des données difficilement quantifiables telles que comptes rendus d’entrevues, observations, photos et vidéos;
Vrai ou Faux L,approche qualitative vise uniquement des données non quantifiables
Des données qualitatives peuvent néanmoins en venir à être parfois quantifiées! ○Par exemple, le nombre de fois où un échantillon de personnes a mentionné
un élément X dans une entrevue, etc.;
Vrai ou Faux; l’approche qualitative vise un très grand échantillonage
FAUX; Elle NE VISE PAS nécessairement l’atteinte d’un échantillon de grande taille ou la représentativité sur le plan statistique, et peut s’intéresser à des échantillons plus restreints mais étudiés plus en profondeur.
L’approche qualitative s’intéresse à l’observation de quel type de phénomène?
Phénomène ayant des composantes SOCIALES et au sens de ces phénomènes
Nommez quelques exemples de méthodes qualitatives
◉Entrevue (ou entretien) semi‐structurée ou semi‐directive
◉Focus group (ou groupe de discussion)
◉Enquête Delphi
Quels sont les 3 éléments principaux à évaluer dans l’évaluation?
- évaluation du processus
- évaluation des résultats
- évaluation de l’impact/retombées
L’évaluation du processus s’intéresse à …
Déroulement réel du programme, aux facteurs qui influencent sa mise en oeuvre
Nommer des exemples de questions pertinentes lors de l’évaluation du processus?
Qu’est-ce qui est arrivé?
○ Comment on s’y est pris pour réaliser le programme ?
○ Moyens, stratégies et activités mis en oeuvre
○ Ressources physiques et matérielles utilisées
○ Ressources humaines
○ Est-ce que ce qui était prévu a pu être réalisé?
○ Participants satisfaits?
Quelles sont les questions fondamentales de l’évaluation du processus?
◉QUOI? Et COMMENT?
«Avons-nous accompli ce que nous avions prévu de faire?» ○ Description des activités (relations avec objectifs)
marche pas?»
◉POURQUOI?
«Qu’avons-nous appris sur ce qui marche et sur ce qui ne
■ incluant le déroulement
○ Quelles stratégies ont contribué à encourager la population visée à participer au projet?
○ Raisons de la réussite … à reproduire!
Que faut-il se demander dans une évaluation des résultats?
◉ Est-ce que le programme est efficace?
○ Évaluer l’atteinte des objectifs pré-définis (i.e. généraux et spécifiques)
■ Dans quelle mesure les objectifs ont-ils été atteints?
■ Effets des activités sur la connaissance, l’attitude et les comportements des personnes ou sur les éléments environnementaux
■ A quel coût?
Que faut-il se demander dans une évaluation des retombées?
◉Est-ce que le programme a des retombées positives dans la communauté?
- À moyen terme
- Étaient-elles anticipées ou non?
- effets du programme sur la qualité de vie de la population ?
◉L’état de santé est-il amélioré? (Ex. Impact sur la prévalence des MCV, l’obésité etc)
Prenons comme exemple une évaluation des retombées d’une recherche sur la sécurité alimentaire. Quelles avenues à explorer?
○ Pistes concrètes aux organismes
○ Faciliter la recherche de solutions
○ Ancrage pour guider les efforts de planification régionale
○ Mise à profit des résultats à divers niveaux décisionnels
