Cours 8 - Évaluation de programmes Flashcards
Quels sont les 3 raisons pour lesquelles un programme n’aurait pas les effets escomptés?
- Les hypothèses sous-jacentes à la théorie du programme ne sont pas correctes
- La théorie du programme est fausse
- La mise en oeuvre du programme est insuffisante, pas correcte
Quelles sont les 10 questions d’imputabilité selon le modèle de qualité globale de programmation?
- Pourquoi est-ce que l’intervention est requise?
- Quels sont les buts du programme, la population visée et les effets escomptés?
- Est-ce que le programme repose sur des données probante et sur les meilleures pratiques?
- Comment ce programme s’ajuste-t-il aux autres programmes existants?
- Quelles sont les habiletés nécessaires pour la mise en place d’un programme de qualité?
- Comment le programme sera-t-il implanté?
- Comment l’implantation s’est-elle passée?
- Jusqu’à quel point le programme a-t-il bien fonctionné?
- Que pouvez-vous faire pour améliorer le programme pour la prochaine fois?
- Si le programme s’est avéré efficace, que faites-vous pour l’instutionnaliser?
Quelles sont les 10 stratégies du modèle de qualité globale de programmation?
- Évaluation des besoins et des acquis
- Identification des buts et des effets escomptés
- Recension de la littérature scientifique
- Rétroaction de la communauté et planification
- Augmentation des capacités du milieu
- Planification, implantation
- Évaluation du processus
- Résultats et évaluation d’impact
- Amélioration continue du programme
- Stratégies d’institutionnalisation, de pérennité
Question d’imputabilité: Pourquoi est-ce que l’intervention est requise?
Stratégie: Évaluation des besoins et des acquis
Question d’imputabilité: Quels sont les buts du programme, la population visée et les effets escomptés?
Stratégie: Identification des buts et des effets escomptés
Question d’imputabilité: Est-ce que le programme repose sur des données probantes et sur les meilleures pratiques?
Stratégie: Recension de la littérature scientifique
Question d’imputabilité: Comment ce programme s’ajuste-t-il aux autres programmes existants?
Stratégie: Rétroaction de la communauté et planification
Question d’imputabilité: Quelles sont les habiletés nécessaires pour la mise en place d’un programme de qualité?
Stratégie: Augmentation des capacités du milieu
Question d’imputabilité: Comment le programme sera-t-il implanté?
Stratégie: Planification, implantation
Question d’imputabilité: Comment l’implantation s’est-elle passée?
Stratégie: Évaluation du processus
Question d’imputabilité: Jusqu’à quel point le programme a-t-il bien fonctionné?
Stratégie: Résultats et évaluation d’impact
Question d’imputabilité: Que pouvez-vous faire pour améliorer le programme pour la prochaine fois?
Stratégie: Amélioration continue du programme
Question d’imputabilité: Si le programme s’est avéré efficace, que faites-vous pour l’institutionnaliser?
Stratégie: Stratégies d’institutionnalisation, pérennité
Stratégie: Évaluation des besoins et des acquis
Question d’imputabilité: Pourquoi est-ce que l’intervention est requise?
Stratégie: Identification des buts et des effets escomptés
Question d’imputabilité: Quels sont les buts du programme, la population visée et les effets escomptés?
Stratégie: Recension de la littérature scientifique
Question d’imputabilité: Est-ce que le programme repose sur des données probantes et sur les meilleures pratiques?
Stratégie: Rétroaction de la communauté et planification
Question d’imputabilité: Comment ce programme s’ajuste-t-il aux autres programmes existants?
Stratégie: Augmentation des capacités du milieu
Question d’imputabilité: Quelles sont les habiletés nécessaires pour la mise en place d’un programme de qualité?
Stratégie: Planification, implantation
Question d’imputabilité: Comment le programme sera-t-il implanté?
Stratégie: Évaluation du processus
Question d’imputabilité: Comment l’implantation s’est-elle passée?
Stratégie: Résultats et évaluation d’impact
Question d’imputabilité: Jusqu’à quel point le programme a-t-il bien fonctionné?
Stratégie: Amélioration continue du programme
Question d’imputabilité: Que pouvez-vous faire pour améliorer le programme pour la prochaine fois?
Stratégie: Stratégies d’institutionnalisation, pérennité
Question d’imputabilité: Si le programme s’est avéré efficace, que faites-vous pour l’institutionnaliser?
Quelles sont les 4 étapes de création d’un programme?
- Identification du problème et de ses causes
- Développement du programme
- Implantation du programme
- Pérennisation
Quelles sont les 4 étapes de l’évaluation des programmes?
- Évaluation des besoins / identification des buts et des résultats escomptés
- Évaluation de l’implantation / du processus
- Évaluation des effets
- Évaluation de l’impact
Quelles sont les 3 éléments pris en compte dans l’identification des buts et des résultats escomptés?
- Qu’est-ce qu’on veut accomplir avec le programme?
- Qui veut-on rejoindre?
- Quels sont les effets escomptés?
Quel est le but de l’évaluation du processus?
Description des activités et de leur mise en oeuvre
Quel est le but de l’évaluation des effets?
Effets mesurables
Quel est le but de l’évaluation de l’impact?
Effets ultimes du programme (à long terme) et dans l’ensemble de la communauté
Quelles sont les 4 questions essentielles à se poser lors de l’évaluation des besoins?
- Pourquoi est-il nécessaire de développer ce programme?
- À quel problème s’adresse le programme? Quelle est la situation souhaitée?
- Qui sont les personnes concernées par ce problème?
- Quelles sont les solutions possibles et réalistes?
Quels sont les 4 concepts à la base de l’évaluation de besoins?
- Problème
- Ressource
- Besoin
- Solution
Quels sont les 2 éléments favorisés par l’étude de besoin participative?
- Reconnaissance des besoins prioritaires
2. Consensus sur les solutions prioritaires
Qu’est-ce qui permet d’intégrer les données de différentes sources pour assurer la validité des résultats?
Triangulation des perspectives
Quelles sont les 6 sources de données utilisées par l’évaluation des besoins?
- Recherches
- Entrevues auprès des personnes concernées
- Forums et consultations
- Données existantes dans les organisation de services
- Bases de données (recensement)
- Observations et autres
Quels sont les 4 types de besoins dans une communauté?
- Ressenti
- Exprimé
- Normatif
- Comparatif
Comment définit-on un besoin ressenti?
État perçu par les personnes concernées
Comment définit-on un besoin exprimé?
Utilisation des services
Comment définit-on un besoin normatif?
Normes en vigueur
Ex.: seuil de pauvreté
Comment définit-on un besoin comparatif?
Situer les besoins en comparant avec d’autres groupes
Quels sont les 6 objets et objectifs qui concernent le processus?
- Défaire la boite noire
- Ce qui est en cause dans les effets observés
- Assurer une bonne implantation de l’intervention
- Vérifier si le programme rejoint les clientèles
- Vérifier si les besoins des clientèles sont bien ceux ciblés par le programme
- Augmenter l’appropriation et autonomisation
Quelles sont les 3 grandes composantes de l’évaluation d’implantation?
- Environnement et contexte entourant l’implantation
- Organisation des ressources et des services
- Clientèles
Quel élément est important quand on évalue l’environnement et contexte entourant l’implantation?
Influence des éléments externes sur le programme
Quelles sont les 2 étapes dans l’évaluation de l’environnement et du contexte entourant l’implantation?
- Identifier et décrire les éléments du contexte externe qui peuvent influencer le déroulement du programme (positif/négatif)
- Documenter ce qui survient
Quelles sont les 2 questions auxquelles on veut répondre quand on évalue l’organisation des ressources et des services (implantation)?
- Est-ce que le programme dispense les services prévues?
2. Quels sont les éléments essentiels de la mise en oeuvre? Sont-ils implantés?
Quels sont les 4 éléments essentiels de la mise en oeuvre?
- Mise en oeuvre du programme (intégrité-couverture-intensité)
- Formation
- Ressources
- Intervention
Quelles sont les 2 questions auxquelles ont veut répondre quand on évalue les clientèles (implantation)?
- Le programme rejoint-il la clientèle cible?
2. Des besoins nouveaux sont-ils présents?
Quels sont les 4 éléments à évaluer par rapport à l’évaluation de la clientèle-cible? (implantation)
- Caractéristiques
- Accès
- Maintien
- Participation/réceptivité
Quels sont les 5 buts de l’évaluation de programme?
- Évaluation des effets vise à évaluer la performance du programme
- Capacité d’atteindre les changements ou améliorations visés
- Ce qu’il engendre comme effets par rapport à ses objectifs
- Quels sont les impacts sur la communauté?
- Quelles sont les retombées pour la société, sur la problématique sociale?
Comment peut-on définitif l’évaluation des effets? (composantes)
Évaluation des effets concerne la relation entre l’état initial (problème), l’intervention (objectif et solution) et les changements observés par rapport à l’état initial
Quelles sont les 7 conclusions à tirer de l’évaluation des programmes?
- Il faut avoir une bonne théorie du programme
- Il faut avoir une bonne implantation
- Le modèle met en relation les besoins de la communauté avec les activités, les effets et l’impact
- Le modèle d’évaluation de programme en 4 étapes consiste en l’identification des buts, des effets escomptés, l’évaluation du processus (mise en oeuvre), l’évaluation des effets et de l’impact
- L’évaluation de programme est utilisée comme une intervention
- Favorise approche participative et le consensus sur des besoins et des solutions communautaires
- Les programmes dans les communautés sont souvent des situations uniques dont il faut comprendre le contexte
