cours 10 Flashcards
Quelles sont les questions les plus fréquentes qui justifient la mise en place d’une évaluation de programmes? Nommez-en 4.
1) Pertinence de la mise en œuvre du programme.
2) Conceptualisation du programme.
3) Opérations et la dispensation des services.
4) Effets du programme.
5) Coût-bénéfice du programme.
Approche développée par le psychologue communautaire Howard Bloom visant à mieux encadrer sa profession, les principes de Bloom sont des propositions qui visent à créer des communautés résilientes, saines et inclusives en promouvant le bien-être individuel et collectif. À partir de ce qui fut mentionné dans le cours, rapportez 4 de ces propositions (vous pouvez formuler celles-ci dans vos propres mots).
1-Dépendamment de la provenance de votre salaire, considérez que vous travaillez pour la communauté.
2-Si vous voulez connaître les besoins d’une communauté en matière de santé mentale, demandez à la communauté.
3-Si vous recueillez des informations sur une communauté, vous avez la responsabilité de leur communiquer les informations.
4-Aidez la communauté à établir ses propres priorités.
Quelles sont les caractéristiques d’un programme efficace? Pour répondre à cette question, donnez 6 des 9 caractéristiques d’un programme pour qu’il soit considéré comme efficace.
1- Utilisent une approche globale (interviennent de diverses façons dans de multiples milieux)
2- Procèdent à une analyse en profondeur du contexte d’implantation et des répercussions possibles
3- Assurent un « Dosage » suffisant; l’action dans la durée
4- Donnent des opportunités de relations positives et l’établissement de relais
5- Se basent sur la recherche et la théorie: Référence à un modèle logique d’action fondé sur des concepts et des connaissances solides et des exemples inspirants
6- Incluent l’évaluation des résultats
Dans un contexte d’évaluation de programmes, en quoi consiste l’évaluation des besoins? Pour répondre à cette question, assurez-vous d’expliquer les principaux objectifs de l’évaluation des besoins puis nommez les 4 catégories de besoins rencontrés dans une évaluation de programmes.
- L’évaluation des besoins est un processus systématique afin d’identifier des problèmes sociaux, déterminer leur étendue, définir avec précision la population-cible à desservir et la nature des services requis par ses besoins. Du point de vue de l’évaluation de programmes, l’évaluation des besoins est le moyen par lesquels l’on détermine la pertinence du programme et, dans l’affirmative, les services les plus appropriés en réponse aux besoins.
1. Identifier et décrire la clientèle-cible du programme;
2. Identifier et décrire les problèmes prioritaires qui affectent la clientèle-cible;
3. Déterminer les solutions nécessaires et des alternatives afin de répondre aux besoins;
4. Prioriser des solutions en réponse aux besoins de la clientèle-cible du programme.
Dans la taxonomie en lien avec l’évaluation des programmes, nous avons vu qu’il existait 4 types de besoins auxquels les programmes peuvent répondre. À partir ce qui fut présenté dans le cours, dites quels sont les 4 types de besoins rencontrés en les définissant.
- Besoin ressentis = aussi besoin perçu, qui réfère à l’état des besoins reconnu par les personnes, s’apparentent aux attentes des personnes qu’on estime généralement dans des enquêtes auprès des populations, comme des sondages, des forums ou des groupes cibles. « on a entendu parler de »
- Besoins exprimés = correspond à la notion d’utilisation ou la demande de service, se fait à partir des fréquences des demandes et de l’utilisation des services chez une population donnée. Ces besoins ne correspondent qu’à une partie de la population générale
- Besoins normatifs = repose sur les jugements d’experts. Il implique l’utilisation de normes et de seuils en dessous et au-delà lesquels les besoins apparaissent. Normes établies à partir de la connaissance de la problématique et se traduit sous forme d’indice, de facteurs de risque, des indicateurs, etc. ex: seuil de pauvreté
- Besoins comparatifs = se base sur les jugements d’expert. N’implique pas de niveau absolu, il repose davantage sur l’utilisation des normes. Il implique la comparaison entre les caractéristiques de 2 populations et les ressources dont elle dispose
Pourquoi l’utilisation de modèles logique est-elle aussi importante en évaluation de programmes? À partir de ce que nous avons vu dans le cours, expliquez ce qu’est un modèle logique et définissez ce que devrait être un bon modèle logique (son utilité et son usage)
- Le modèle d’analyse logique est un outil visuel visant à décrire un programme dans sa logique (ou sa théorie) fondamentale. Malgré leur diversité, les programmes ont en partage certains éléments, et le modèle logique est un diagramme de ces éléments communs qui illustre le contenu (quoi ?), les destinataires (qui ?) et la raison d’être (pourquoi ?) du programme. Il est essentiel d’avoir une vision commune de la logique d’un programme avant d’élaborer des mesures de surveillance et d’évaluation.
- Un bon modèle théorique devrait tenir compte des éléments suivants :
(1) les différentes activités du programme mis en œuvre, ainsi que la théorie du changement – la logique d’action – selon laquelle ces activités produiront les effets attendus;
(2) les effets attendus à court, moyen et long terme;
(3) les différents facteurs pouvant entraver ou favoriser l’implantation des activités du programme et, par conséquent, l’atteinte des effets attendus.
Qu’est-ce qu’un bon programme devrait obligatoirement comporter pour être considéré comme « évaluable »? Pour répondre à cette question, rapportez les 4 critères.
- Les buts et objectifs du programme sont bien définis
- Les buts et objectifs sont plausibles en fonction des activités mises en œuvre
- Des données pertinentes sont accessibles concernant l’application du programme
- Les utilisateurs potentiels de l’évaluation s’entendent sur les buts poursuivis par l’évaluation
Dans le contexte de l’évaluation de programmes, plus particulièrement lors de la troisième étape (étape de l’évaluation), nous avons vu que l’évaluation pouvait porter sur plusieurs aspects d’un programme (catégories d’évaluation). Quels sont ces aspects? Pour répondre à cette question, rapportez les trois catégories, en vous assurant de mentionner tout autre aspect optionnel pouvant être évalué.
1-L’évaluation des besoins
2-L’évaluation de l’implantation et l’évaluation des processus
3-L’évaluation des effets et l’évaluation du rendement
= L’aspect optionnel est l’évaluation de l’empowerment
Dans un contexte de conception et d’évaluation de programmes, à quoi fait-on référence lorsque l’on parle d’implantation et pourquoi est-il est important de l’évaluer? Pour répondre à cette question, assurez-vous de rapporter quels sont les objectifs et l’utilité derrière l’évaluation de l’implantation de programmes.
- L’implantation du programme clientèle est l’étape où l’on procède à la mise en œuvre du programme selon les moyens et les objectifs spécifiques décrits lors de la planification. L’implantation est une étape particulièrement critique puisqu’elle concrétise la planification par la dispensation des services
Quelles sont les 5 catégories de facteurs qui peuvent nuire à l’implantation d’un programme?
1- Caractéristiques de la communauté : Financement, politiques, culture de recherche, etc.
2- Caractéristiques des intervenants: Besoin et avantages perçus, ouverture au changement
3- Caractéristiques du programme: Compatibilité, adaptabilité, etc.
4- Capacité organisationnelle: Climat de travail, type de leadership, etc.
5- Soutien offert: Formation, encadrement, assistance technique, etc.
Dans un contexte d’évaluation de programmes, nous avons vu que la sélection d’indicateurs reposait principalement sur 6 critères. À partir de ce qui fut présenté dans le cours, rapportez ces 6 critères en donnant une brève explication pour chacun d’entre eux.
1- La validité. Un indicateur est valide lorsqu’il mesure efficacement le phénomène étudié; c’est-à-dire qu’un indicateur valide permet de bien capter les résultats du programme évalué.
2- L’utilité. Un indicateur est utile lorsqu’il peut directement servir à la planification, au suivi ou à l’évaluation des activités d’un programme. Un indicateur est également utile quand il est simple d’utilisation et qu’un grand nombre de personnes peuvent facilement le comprendre, y compris les non-spécialistes.
3- L’accessibilité (ou facilité d’accès). L’accessibilité d’un indicateur dépend de la disponibilité des sources de données pour le mesurer, mais aussi de la facilité et du coût des moyens à employer pour collecter et analyser les données.
4- Objectivité. L’indicateur doit permettre de juger sans ambiguïté du changement attendu. Il doit permettre à différents observateurs de s’entendre sur l’atteinte ou non du changement.
5- Sensibilité. L’indicateur doit être suffisamment sensible pour permettre de discerner les changements dans l’état de la clientèle-cible. Ce degré de sensibilité est relatif à chaque situation selon l’ampleur du changement attendu.
6- Fidélité: La fidélité de l’indicateur réfère à sa stabilité au fil du temps. Afin d’être utile à juger des changements provoqués par l’intervention l’indicateur doit permettre d’obtenir des observations constantes tout au cours de la mise en œuvre du programme. « Une mesure est considérée comme fiable, si elle produit des résultats constants lorsqu’elle est appliquée de façon répétitive sur le phénomène dans le même état »
L’une des principales valeurs de la psychologie communautaire est sans doute la collaboration. En effet, l’une des grandes forces des psychologues communautaires est d’être toujours en mesure de tisser des liens très étroits entre eux et les communautés desservies. Il n’y a donc rien d’étonnant à ce que cet aspect se retrouve dans chaque aspect de l’évaluation de programmes et ce, du début à la fin. En ce sens, il est donc important que le.la psychologue communautaire soit sensible à la communauté desservie lorsque vient le temps de communiquer les résultats. À partir de ce qui fut présenté dans le cours sur l’évaluation de programmes, rapportez au moins 6 conseils pour bien communiquer les résultats.
- Utiliser un langage clair et simple, éviter le jargon
- Faire ressortir l’information importante
- Placer l’information la plus importante au début et à la fin
- Combiner des images et des mots, ou des graphiques et chiffres
- Organiser l’information avec clarté
- Aller du concret à l’abstrait
- Présenter l’information menaçante avec tact
Lors du cours sur l’évaluation de programmes, nous avons vu que les évaluations bien conçues devaient tenir compte de 4 points essentiels. Rapporter ces 4 points.
1) Identification des besoins, thèmes et questions d’évaluation
2) Élaboration du modèle logique
3) Évaluation de l’implantation et des effets
4) Diffusion des résultats
À quoi fait référence le cadre de Kelly? Répondez brièvement à cette question puis rapportez quelles sont les 5 valeurs fondamentales à la base de ce cadre.
= La collaboration: la confiance comme élément clé
1- Fiabilité
2- Crédibilité
3- Intégrité
4- Réceptivité
5- Réciprocité
À partir de cette mise en situation qui fut beaucoup trop longue à lire (et à écrire), expliquez à Eric (pas votre enseignant, mais le gars fictif de la mise en situation dont le prénom, qui ressemble étrangement à celui de votre enseignant, relève d’une coïncidence fortuite), deux erreurs qu’il a commises dans la conception de son évaluation.
1- La rigueur méthodologique n’a pas réellement été respectée puisque le cadre d’analyse du programme n’était pas très rigoureux. Par exemple, Éric aurait du s’assurer que les ressources étaient suffisantes et qu’il y aurait suffisamment de superviseurs présents lorsque les participants remplissaient leur questionnaire.
2- Les contraintes liées aux ressources n’ont pas été suffisamment pris en compte. Par exemple, le fait qu’il ait attendu un an avant de faire la collecte de donnée laisse beaucoup plus la chance à l’erreur.
