examen 1 Flashcards
reconnu surtout dans le domaine communautaire, pourquoi
- argumentaire du financement
- permet de soutenir leurs actions
- mesure du changements opéré
- développer une science du changement social
pourquoi est-ce souvent des psychologues qui s’en chargent ?
- ils sont les plus aptes à évaluer le programme
- ils ont une formation académique en recherche
- habitué aux demandes de subvention et leur expertise est de poids.
disciplines de l’évaluation de programme
psychologie communautaire
éducation
administration publique / privée
un rapport d’évaluation peut être lu par plusieurs personnes, qu’Est-ce que ça implique ?
il faut penser que tout le monde n’a pas la même formation ou une expertise dans le domaine, donc il faut penser à cela durant la rédaction et créer un lexique.
définition d’un programme (conseil du trésor)
ensemble cohérent et structuré d’objectifs, d’Activités et de ressources financières, humaines matérielles et informationnelle regroupées pour offrir des produits et des services particuliers qui satisfassent les besoins ciblés d’une population prédéterminée.
définition d’un programme- ajout de Nadeau
dans le but d’en changer l’état
définition d’un programme- Potvin
système d’action conçu et exécuté pas des acteurs sociaux informés par des connaissances scientifiques, visant à réguler la transformation et susciter un changement.
qu’est-ce qu’un programme d’intervention
programme visant un changement social planifié, qui n’a de sens que dans le context où il se situe
(valeur, culture, parties prenantes, contexte social)
Fonction d’un programme
- donner des services
- levées de fonds
- relations publiques/ lien avec la communauté
- formation de personnel et embauche
- achat de matériels
- déffendre sa mission
programme vs service
un programme est une structure qui assure un changement social planifié
alors que
un service est une activité d’intérêt général, assuré par un organisme public ou privé.
à quoi sert l’évaluation
but
2 composantes
déterminer la valeur , le prix ou l’importance d’un progamme, bref savoir ce qu’il vaut.
description de la réalité + jugement de valeur
selon quels critère s’effectue une évaluation
il s’Agit d’un jugement de valeur établie selon des critères qui sont déterminés par le modèle théorique
ex: roue de prochaska
que mesure-t-on en premier dans une évaluation de programme.
généralement, on commence par mesurer des attitudes car ça change beaucoup plus vite qu’un comportement
un plan d’intervention est-il individualisé ou global
un plan d’évaluation de programme est individualisé selon les besoins identifiés.
comment décrivons nous la réalité d’un prgramme
données faits observations/entretiens témoignages mesures
sur quoi se base le jugement de valeur d’un programme
critères des experts
normes -loi, test, règles
valeurs
précédents
la mesure est-elle quantitative ou qualitative -jugement de valeur d’un programme
ce sont des aspects quantitatifs
- test
- statistiques des organismes
- profil de la clientèle
*** mais les chiffres ont besoin d’être qualifiés !
danger de mesurer le programme- jugement de valeur d’un programme
le danger est d’utilisé des outils qui existent déjà ou de se fier à la littérature… ce qui simplifie la tâche, mais parfois ça nous éloigne de la réalité du programme
sur quoi se base les valeurs -jugement de valeur d’un programme
les valeurs sont basées sur la philosophie, des conceptions morale et des paradigmes
= ce qui génère un idéal humain
qu’est-ce qu’un paradigme
loi ou règlement qui établissent les limites à l’intérieures desquelles se trouve les moyens de réussir . Ce sont des acquis sur lesquesl on base notre vie/travail
de quoi dépend l’idéal humain et qu’Est-ce qu’il engendre
l’idéal humain dépend de la culture,
il engendre des enjeux moraux, sociaux et économique
- il s’agit d’une normalisation ou valorisation des rôles sociaux.
mesure d’utilité
efficacité et efficience
question d’efficacité
savoir si tu atteins tes objectifs
question d’efficience
est-ce que le pris pour atteindre l’objectif est réaliste
rapport qualité /coût
pourquoi évaluer ?
source d’information pour orienter la prise de décision- fonction de gestion
raffiner le programme
constituer un corpus scientifique en recherche sociale : données probantes
constituer un corpus de pratiques préventives et donne l’accès à des informations stratégiques sur les effets à court terme
utile pour les parties prenantes : bailleurs de fonds
exigence d’accréditation ou de demande de subvention, ça augmente la crédibilité de l’organisme et donne une apparence de rationalité - limite le darwinisme sociale
quel est la caractéristique d’une défense
elle doit être rationnelle : qui, comment, résultats
ça doit être facile à concevoir pour les gens externes au programme
4 facteurs d’évaluation selon Lesemann
la science
la gestion publique
la profession
les ressources communautaires
leur importance respective dépend de la culture
questionnement actuel sur les programmes . justifiant leur évaluation
la gestion de l’argent
surtout basé sur l’efficacité
investigation des programmes selon Charest
répond t-il à une mission de l’état
atteint-il ses objectifs
est-ce qu’il peut être moins couteux et aussi efficace
qui doit en assumer la prestation
est-ce que nous avons les moyens de le conserver
pourquoi l’évaluation est menaçante pour les intervenants
le processus d’évaluation peut être menaçant pour les intervenants , car le personnel se sent souvent évaluer, ils ont l’impression d’être le programme, il ne s’en dissocie pas.
est-ce seulement monétariste
non, on ne peut pas le résumer seulement à sa valeur en argent, mais aussi à son impact dans la communauté … un pogramme implique des gens
qu’arrive t-il lors d’une crise
on voit souvent ressurgir des programmes qui avaient déjà été testé et abolie… le tout est souvent cyclique … ce n’est pas efficient
en quoi consiste la difficulté à délimiter les fonctions de gestion
évaluation de programme: efficacité
vs
vérification interne : efficience
sur quoi repose le jugement de l’évaluateur
le jugement repose sur la pertinence et l’impact des programmes … s’il faut le modifier, le maintenir ou l’éliminer ( efficacité : atteinte des objectifs)
que fait un vérificateur
il procède à l’évaluation des risques et l’analyse des contrôles, l’examen de la pertinence et de la fiabilité de l’information de gestion (économie, efficacité des opérations)
(efficience : ressources vs objectifs)
comment raffine-t-on un programme
réajuster par rapport aux objectifs
réorienter
évaluation du processus
en quoi est-ce que l’évaluation vient en aide aux intervenant
elle guide les intervenants en leur fournissant les moyens de démontrer la valeur de ce qu’il font.
elle permet aussi de protéger contre les groupes de pression/ politique, contre un mauvais jugements
amène les intervenant à s’interroger sur leur propre travail, à réfléchir sur la qualité de ce qu’ils font et à l’Efficacité de leurs interventions
classification des évaluations
-4 façons
1- selon les fondement épistémologique
quanti vs quali
2- selon les renseignements désirés
formatif (avancement du programme) vs Sommatif (efficacité)
3- selon les moments de l’évaluation
analyse d’intervention (sur le papier)
suivi d’avancement (implantation)
estimation de l’utilité (evalutation finale)
4-selon l’approche
centré sur les effet (questionnaire)
centré sur l’utilisateur (info sur la clientèle)
centré sur la théorie (concevoir la théorie du problème, du processus et du changement)
selon les fondement épistémiologique
quanti vs quali
quanti : formaliste, structurale, expérimentale positiviste
questionnaire pré-post
augmente l’Ampleur car il y a beaucoup de variable à mesurer
quali : naturaliste, participative
entrevue, observation
permet d’aller plus en profondeur
selon les renseignements désirés
prescriptif vs participatif
prescriptif :
bureaucratique - efficacité et ressources investie
modèle rationnel- problème, besoin, solution
donne des résultats - %, chiffre
recommandation à l’organisme
Participatif :
psy communautaire - comprendre l’impact
empowerment - auto-évaluation, réflexion, pouvoir au collectif, évaluation appropriative
efficacité -basé sur les rendements moyens (tendances) concentration des risques, petits groupes
** certaines clientèles sont plus faciles à rejoindre ou réagissent mieux … savoir si on rejoint la population cible
contraste quanti vs quali
But :
quanti : l’objectif
quali : forces et faiblesse à explorer
quanti : plan formel et déterminer
quali : plus flexible
orientation
quanti : intention du programme
quali : effet du programme
méthode :
quanti : déductive, hypothèse
quali : inductive
** malgré l’apparence plus solide du quanti, il faut prendre en considération qu’il y a des biais au niveau du choix des instruments/critères/témoins
Moment de l’évaluation
1- analyse de la conceptualisation et du devis du programme sur le papier ( analyse d’intervention)
2- suivi d’avancement (implantation)
monitoring, pilotage, contrôle, surveillance
3- évaluation finale : estimation de l’utilité
efficacité et efficience