Cours 11 - Évaluation de programme Flashcards
La psychologie communautaire vise le changement social et une manière est de mettre sur pied, d’______ et d’améliorer les ________
La psychologie communautaire vise le changement social et une manière est de mettre sur pied, d’évaluer et d’améliorer les programmes
Kagan et al., 2011 :
________ is a key component of an action cycle and a form of reflection. It can also be an intervention in itself
Evaluation is a key component of an action cycle and a form of reflection. It can also be an intervention in itself
3 Rôles de l’évaluation de programmes sociaux :
1- Façon de montrer la _______ et la _______ des programmes sociaux
2- Façon de _______ et _______ les _______
3- Dépasser un rôle _______ et devenir un instrument d’_______ et de transformation des _______
1- Façon de montrer la valeur et la pertinence des programmes sociaux
2- Façon de développer et améliorer les pratiques
3- Dépasser un rôle technique et devenir un instrument d’amélioration et de transformation des pratiques
Approche d’évaluation de programme est basée sur la théorie de programme :
- Saisir la ______ du programme et analyser les différentes ______ sur lesquelles sont basées les ______;
- Outil de réflexivité, de communication, d’apprentissage, de ______ et d’application des ______.
- Saisir la complexité du programme et analyser les différentes hypothèses sur lesquelles sont basées les interventions;
- Outil de réflexivité, de communication, d’apprentissage, de transfert et d’application des connaissances.
QU’EST-CE QU’UN PROGRAMME ?
- Un programme est une _______, un système _______ d’________
- On emploie le terme « programme » pour une grande variété d’interventions, des plus petites aux plus grosses (Grinnell et al., 2016)
- Un programme est une intervention, un système organisé d’activités
- On emploie le terme « programme » pour une grande variété d’interventions, des plus petites aux plus grosses (Grinnell et al., 2016)
Vrai ou faux
Selon Champagne et al. 2011 : Une intervention peut être conçue comme un système organisé d’action qui vise, dans un environnement donné et durant une période de temps donnée, à modifier le cours prévisible d’un phénomène pour corriger une situation problématique.
Vrai
Vrai ou faux
Évaluer est une action courante dans la vie de tous les jours et dans le monde professionnel
vrai
Vrai ou faux
Évaluer signifie porter un jugement
Vrai
QU’EST-CE QUE L’ÉVALUATION DE PROGRAMME ?
Selon Patton (1997), cité dans Champagne et al. (2011) : l’évaluation des programmes consiste dans la \_\_\_\_\_\_\_\_ systématique d'\_\_\_\_\_\_\_\_ sur les \_\_\_\_\_\_\_\_, les \_\_\_\_\_\_\_\_ et les \_\_\_\_\_\_\_\_ de ces programmes afin de porter un \_\_\_\_\_\_\_\_ sur eux, d’\_\_\_\_\_\_\_\_ leur \_\_\_\_\_\_\_\_ et d’\_\_\_\_\_\_\_\_ les décisions concernant de nouveaux programmes.
Selon Patton (1997), cité dans Champagne et al. (2011) : l’évaluation des programmes consiste dans la collecte systématique d’information sur les activités, les caractéristiques et les résultats de de ces programmes afin de porter un jugement sur eux, d’améliorer leur efficacité et d’éclairer les décisions concernant de nouveaux programmes
Qu’est-ce que l’Évaluation sommative ? Donnez un exemple.
Évaluation sommative: informations pour porter un ______ sur l’______, le ______ ou la ______ d’un programme.
Exemple :
Évaluation sommative: informations pour porter un jugement sur l’interruption, le maintien ou la transformation d’un programme.
Exemple : Examen de mi-session avec note. Chef qui goutte à une soupe pour savoir si elle est bonne. Note das un bulletin.
Qu’est-ce que l’Évaluation formative ? Donnez un exemple.
- Évaluation formative: fournir une ________ pour ________ un programme.
Exemple :
- Évaluation formative : fournir une information pour améliorer un programme.
Exemple : exercice dans la classe pour mettre en pratique de la matière.
L’évaluation ________ et l’évaluation ________ sont des finalité de l’évaluation comme le sont ces autres finalités :
- ________: accumulation/création de savoir
- ________: planification et élaboration d’un programme
- ________: levier pour transformer une
situation/problématique injuste
Fomative et sommative
- Fondamentale: accumulation/création de savoir
- Stratégique: planification et élaboration d’un programme
- Transformatrice: levier pour transformer une
situation/problématique injuste
Le type d’évaluation est dépendant des 4 étapes de vie d’un programme (Chen, 2015) :
1 - ________ du programme
Avant la mise en place d’un programme
2 - ________ initiale
Premiers balbutiements, plus fluide et instable
3 - Implantation ________
Activités deviennent routinières
4 - ________, ________ et ________
Quand le programme a atteint une certaine maturité, les parties prenantes veulent tester si celui-ci remplit ces rôles. Si oui, une volonté de systématiser et de ________ le programme émergent parfois.
1 - Planification du programme
Avant la mise en place d’un programme
2 - Implantation initiale
Premiers balbutiements, plus fluide et instable
3 - Implantation mature
Activités deviennent routinières
4 - Validation, amélioration et diffusion
Quand le programme a atteint une certaine maturité, les parties prenantes veulent tester si celui-ci remplit ces rôles. Si oui, une volonté de systématiser et de DIFFUSER le programme émergent parfois.
Vrai ou faux
Le type d’évaluation est dépendant des “étapes de vie” d’un programme.
Le type d’évaluation est dépendant des “étapes de vie” d’un programme.
Vrai ou faux
Il est possible de faire l’évaluation des besoins avant qu’un programme soit en place
vrai
Nommez 4 types d’évaluations de programme :
1- Évaluation des ______
2- Évaluation d’______ et de ______
3- Évaluation des ______, évaluation des ______
4- Évaluation des ______ et de l’______
Cette hiérarchie d’évaluation est proposée par Rossi, Lipsey et Freeman, 2004.
- Évaluation des besoins
- Évaluation d’implantation et de processus
- Évaluation des effets, évaluation des impacts
- Évaluation des coûts et de l’efficience
Exemple :
1. combien y a t’il d’itinérant à Mtl ?(quatifie besoins). 2. Quelles sont les caractéristiques des personnes fréquentant les refuges ?. 3. Quels changements pouvons nous observer à court, moyen et long terme suite à cette intervention/programme. 4.Quels est le retour sur investissement de X programme ?
Quelles sont les évaluations correspondant aux # ?
1. combien y a t’il d’itinérant à Mtl ?(quatifie besoins). 2. Quelles sont les caractéristiques des personnes fréquentant les refuges ?. 3. Quels changements pouvons nous observer à court, moyen et long terme suite à cette intervention/programme. 4.Quels est le retour sur investissement de X programme ?
1- Évaluation des besoins
2- Évaluation d’implantation et de processus
3- Évaluation des effets, évaluation des impacts
4- Évaluation des coûts et de l’efficience
3 TYPES D’ÉVALUATION DES EFFETS :
Approche ______ :
- ______ expérimental ou quasi-expérimental
- ______ groupes, assignation aléatoire
- “boite noire”
Approche basée sur la ______ de ______
- Élaborer la ______ du ______
- Identifier les ______
- Mise à l’______ empirique
Approche sur les ______
- Responsive evaluation (Stake), Stakeholder-based evaluation (Weiss), Utilizationfocused evaluation (Patton) ou encore Practical evaluation (Patton)
- Analyse en milieu ______
- Accent mis sur l’______ des résultats par les ______ acteurs
Approche classique :
- Devis expérimental ou quasi-expérimental
- 2 groupes, assignation aléatoire
- “boite noire”
Approche basée sur la théorie de programme
- Élaborer la théorie du programme
- Identifier les questions
- Mise à l’épreuve empirique
Approche sur les utilisateurs
- Responsive evaluation (Stake), Stakeholder-based evaluation (Weiss), Utilizationfocused evaluation (Patton) ou encore Practical evaluation (Patton)
- Analyse en milieu naturel
- Accent mis sur l’utilisation des résultats par les différents acteurs
L’APPROCHE GUIDÉE PAR LA THÉORIE DE PROGRAMME peut se comprendre comme la _______des_______ de l’intervention.
L’APPROCHE GUIDÉE PAR LA THÉORIE DE PROGRAMME peut se comprendre comme la modélisation des composantes de l’intervention.
APPROCHE GUIDÉE PAR LA THÉORIE DE PROGRAMME :
- Popularisée par _______
- Stratégies d’évaluation : qui intègre explicitement et utilise les théories des _______, des sciences sociales ou de toutes autres sources pour la conceptualisation, la _______, la conduite, l’interprétation ou l’application d’un programme.
- Théorie de programme
- — Modélisation des _______ de l’intervention
- — Classiquement: théorie du _______, théorie des _______, théorie des _______.
- Popularisée par CHEN (2005, 2015)
- Stratégies d’évaluation : qui intègre explicitement et utilise les théories des participants, des sciences sociales ou de toutes autres sources pour la conceptualisation, la conception, la conduite, l’interprétation ou l’application d’un programme.
- Théorie de programme
- — Modélisation des composantes de l’intervention
- — Classiquement: théorie du problème, théorie des processus, théorie des effets.
L’approche participative en psy communautaire :
- vise à travailler de concert avec les _____
- en les impliquant à toutes les _____ de la _____ à l’_____ et la _____ des résultats.
- permet une co-construction des _____, ce qui
- —ancre ceux-ci dans la perspective des participants,
- —favorise leur appropriation
- —et, idéalement, favorise une meilleure _____ de ces _____
- permet un partage des _____ ainsi que
le développement des capacités et du _____ d’_____ des _____
- vise à travailler de concert avec les acteurs
- en les impliquant à toutes les étapes de la conceptualisation à l’interprétation et la diffusion des résultats.
- permet une co-construction des savoirs, ce qui
- —ancre ceux-ci dans la perspective des participants,
- —favorise leur appropriation
- —et, idéalement, favorise une meilleure utilisation de ces savoirs
- permet un partage des pouvoirs ainsi que
le développement des capacités et du pouvoir d’agir des acteurs
L’approche participative en psy communautaire :
- Il s’agit plutôt d’une _____, d’un _____, plutôt que d’une méthode _____.
- Deux axes
1) Approche _____ : - vise à travailler de ______ avec les _______ en les _______ à toutes les étapes de l’évaluation: conceptualisation, mise en place, interprétation,
diffusion des résultats - favorise une co-construction, l’appropriation et l’utilisation des savoirs
- permet un partage et un développement des pouvoirs d’agir
2) Recherche-_____ :
Volonté d’_____ une problématique déterminée, dans un _____ spécifique.
L’approche participative en psy communautaire :
- Il s’agit plutôt d’une volonté, d’un processus, plutôt que d’une méthode spécifique.
- Deux axes
1) Approche participative - vise à travailler de concert avec les acteurs en les impliquant à toutes les étapes de l’évaluation: conceptualisation, mise en place, interprétation,
diffusion des résultats - favorise une co-construction, l’appropriation et l’utilisation des savoirs
- permet un partage et un développement des pouvoirs d’agir
2) Recherche-action :
Volonté d’influencer une problématique déterminée, dans un contexte spécifique.
Vrai ou faux
L’approche participative en psy communautaire s’agit plutôt d’une volonté, d’un processus, que d’une méthode spécifique.
Vrai
Quelle sont les deux axes de l’approche participative en psy comm ?
1) Approche participative
2) Recherche-action : Volonté d’influencer une problématique déterminée, dans un contexte spécifique
Vrai ou faux
L’approche participative en psy communautaire a de nombreuses appellation différentes.
vrai
Approche participative en psy communautaire :
- vise à travailler de _____ avec les _____ en les _____ à toutes les étapes de l’_____: _____, mise en place, _____, _____ des résultats
- favorise une _____, l’_____ et l’_____ des savoirs
- permet un partage et un développement des _____ d’_____
- vise à travailler de concert avec les acteurs en les impliquant à toutes les étapes de l’évaluation: conceptualisation, mise en place, interprétation,
diffusion des résultats - favorise une co-construction, l’appropriation et l’utilisation des savoirs
- permet un partage et un développement des pouvoirs d’agir
Approche guidée par la théorie de programme = modélisation de ce qui se passe dans le programme
- Stratégie d’évaluation “qui intègre explicitement et utilise les théories des _______, des sciences sociales ou de toutes autres sources pour la conceptualisation, la _______, la conduite, l’interprétation ou l’application d’un programme”
- Stratégie d’évaluation “qui intègre explicitement et utilise les théories des participants, des sciences sociales ou de toutes autres sources pour la conceptualisation, la conception, la conduite, l’interprétation ou l’application d’un programme”
Vrai ou faux
L’approche guidée par la théorie de programme peut être comprise comme une modélisation de ce qui se passe dans un programme donné.
vrai
La mise en place d’un programme que les auberges du coeur a permis de trouver plusieurs choses et de mettre en évidence plusieurs impact sur la vie des gens qui y ont participés :
- Rôle _______
Aide à prévenir une situation bien pire comme
l’itinérance, « vie de débauche », une institutionnalisation (hospitalisation, thérapie, emprisonnement) ou un suicide. - _______ à soi
Amélioration de leur estime et confiance en eux, ainsi que leur attitude. - _______ d’habiletés et de relations interpersonnelles.
- \_\_\_\_\_\_\_ Trois différentes conceptions de l’\_\_\_\_\_\_\_ sont identifiables dans les données : 1. Habiletés de la vie \_\_\_\_\_\_\_ 2. \_\_\_\_\_\_\_ sociale 3. \_\_\_\_\_\_\_
- Rôle préventif
Aide à prévenir une situation bien pire comme
l’itinérance, « vie de débauche », une institutionnalisation (hospitalisation, thérapie, emprisonnement) ou un suicide. - Rapport à soi
Amélioration de leur estime et confiance en eux, ainsi que leur attitude. - Développement d’habiletés et de relations interpersonnelles.
- Autonomie Trois différentes conceptions de l’autonomie sont identifiables dans les données : 1. Habiletés de la vie quotidienne 2. Insertion sociale 3. Citoyenneté