conception et évaluation des programmes Flashcards
Les 5 étapes du cycle de vie d’un programme
- analyse des besoins: point de départ, permet déterminer pertinence d’élaborer modifier programme service
- élaboration du programme:Elle permet d’offrir une réponse aux besoins prédéterminés, en concevant et en organisant les services et les activités en fonction d’objectifs spécifiques.
Mise en relation de différents éléments qui composerons la théorie du programme - implantation:Aussi appelé déploiment ou mise en œuvre
Cruciale :
un ensemble précis d’activités visant à mettre en pratique une activité ou un programme. Il s’agit d’un processus qui implique des décisions, actions et corrections afin de concrétiser un programme en une série d’activités orientées vers une mission et des résultats - productions des résultats: Il s’agit ici d’assurer un suivi ou un monitorage adéquat des processus et des résultats, afin de collecter l’ensemble des données nécessaires aux évaluations prévues
- révision du programme:Remet en cause les actions du programme. Elle porte sur les modifications à apporter au programme, en se basant sur les recommandations formulées lors de l’évaluation des résultats.
Amélioration du programme offrir service plus adaptés aux besoins, de mieux coordonner les services et ressoruces , correction dysfonctionnement, augmente niveau d’efficience
Pourquoi l’analyse des besoins est-elle une étape importante, le point de départ, du développement d’un programme?
cette Étapes qui permet de déterminer la pertinence d’élaborer ou de modifier un programme ou un service, soutient la prise de décision tout au long du programme, la planification et la définition des objectif et des activités à mettre en place.
La décision délaborer un programme né souvent d’un problème ou d’un besoin d’où l’importance de l’analyse des besoins.
=la base
quels sont les 3 approches d’analyse des besoins
- approche déductive:Identifier les besoins d’une population à partir d’une recension des écrits ou de l’expérience sur le terrain. (plus souvent utiliser quand problématique bien documenté)
- Approche inductive:La population d’intérêt qui définit les problèmes qu’elle rencontre et détermine les besoins à combler (population mieux placé pour déterminer qu’ert-ce qu’elle a besoin)
- Approche mixte: mélange déductive et inductive, peut voir convergence et divergence. plus long plus de ressource mais meilleur
qu’est-ce que le modèle de changement vs le modèle d’action
modèle de changement: hypothèse de où résultat vont aller, illustre le problème, les résultats attendu et comment y parvenir, montre but qu’on vise. Sert de manière d’évaluer en se basant sur les éléments déterminés dès le départ. Visions clair de vers quoi le programme tendra donc reduit par le même sens les risques d’inefficacité
ce qu’est le but comment ont va l’atteindre
modèle d’action:
plan d’activité, les ressoruces requises, le contexte dans lequel s’inscrira le programme et des éléments à réaliser pour l’éval de l’implantation des effets
Ce qu’on applique pour arriver à nos buts
**Nommes les composante de base d’un programme
- la description de la problématique: attention portée à éthologie du problème, les facteurs de risque et de protection qui y sont associés, son ampleur, soit la prévalence et l’incidence, les conséquences directes et indirectes qu’elle génère, les concomitances et les solutions ou traitements possibles
- Les buts et les objectifs:
but: ce qu’on veut que le porgramme aie comme finalité
objectif:désir de répondre des besoins non satisfaits, comme la mauvaise santé, le manque d’habiletés sociales ou la pauvreté. Les objectifs se divisent en deux catégories (généraux et spécifiques) - La clientèle: description (limite clinique programme évoluera), modalité de recrutement(permet développer stratégie efficaces lors du recrutement critère pas trop restrictif pas trop large), obstacle et contrainte lié au recrutement et rétention
- L’intervention:La description des interventions comprend les activités du programme qui visent directement à modifier un déterminant ou une variable. Il s’agit de l’agent de changement du programme. Pour choisir une intervention , il importe de s’appuyer sur la mission et les valeurs du milieu, les ressources financières, matérielles et humaines disponibles, les justifications théoriques (provenant des autres programmes, de la littérature ou du sens commun) et les données probantes sur le sujet.
- Le plan d’activité:
un outil de suivi permettant la coordination de l’ensemble des activités nécessaires à la réalisation des objectifs du programme. Il comprend les déterminants (c’est-à-dire les mécanismes sur lesquels développer une intervention pour répondre au besoin)
ainsi que le protocole d’intervention (contenu et procédures) (contenu, fréquence duré, planifiassiez mise en oeuvre, modalité d’action ex: groupe individuel).
- les ressources:Les ressources sont attribuées de façon à assurer la mise en place des activités et pour atteindre les résultats escomptés. Les ressources sont de nature financière, informationnelle, matérielle ou humaine( qu’est-ce que chacun fait).
- l’environnement:inclut les partenaires, les collaborateurs et l’environnement ou contexte écologique. Le contexte écologique il peut être une source d’information pour comprendre les facilitateurs et les contraintes importantes. permet tenir compte impact réseau soutient, mieux saisir ou influencer degré soutient ou d’opposition face au programme dans commu, tenir compte influence politique, social, légal
- Les limites de l’objet d’évaluation:d’établir, dès le départ, les indicateurs et les modalités de collecte de données. indicateur: mesure utiliser pour évaluer effets du programme
quels sont les caractéristiques d’un programme de qualité **
La pertinence: objectifs répondent aux besoins réels et prioritaires des usagers ou à la problématique initiale.
La cohérence: Il y a un alignement logique entre les objectifs du programme, les moyens et les ressources utilisés. Harmonie avec valeur organisation, celle de la société et avec loi et règle de l’organisation qui encadre pratique
L’a propos:prise en compte des contraintes et du contexte dans lequel évolue le programme pour ce qui est des ressources, des obligations légales et normatives.
La flexibilité:Le programme assez souple pour s’adapter à son environnement et s’améliorer où le besoin se fait ressentir
L’efficacité: programme atteint résultats attendu
l’efficience:Le programme atteint les résultats attendus en utilisant les ressources de manière optimale.
synergie:La coordination des actions du programme à travers : la communication, la coopération, la collaboration et l’implication des parties prenantes, pour atteindre les résultats escomptés.
la durabilité: résultats programme se maintien dans temps
**Quelles sont les deux raisons expliquant pourquoi le niveau et la qualité de la mise en œuvre des programmes de prévention sont importants?
Efficacité de l’intervention(si l’implantation se fait mal et est de mauvaise qualité alors il y a de grande chance que le programme n’aie pas le résultat escompter) et adaptation aux besoins spécifiques (permte s’adapter efficacement aux besoins des personnes concernés)
Qu’est-ce que la fidélité de l’implantation des programmes?
la manière dont le programme est mis en œuvre de manière cohérente par rapport à ce qui est prévu.
**Selon Stern et al. (2008), quels sont les éléments qui aident à maintenir un niveau élevé de fidélité dans l’implantation des programmes?
La fidèlit est maintenue par la formation(ceux qui l’applique), la supervision/ rétroaction régulière, fournir les ressources adéquates (matériel, etc.), évaluation continue de la fidèlité, la collaboration actives des établissemnt gens qui mettenrt en place programme (école, parents, etc), planification rigoureuse (objectif clairs par exemple)
**quels sont les 3 catégories de modèles pour l’évaluation et l’implantation
- Modèle basé sur la fidélité de l’Implantation: vérifier si le programme à été mis en oeuvre comme prévu en suivant le modèle de base et sans déviation
- modèle basé sur les ressources et le soutient nécessaire à l’implantation:Base sur l’évaluation des ressources (finance humaine matérielle) pour voir si elles sont nécessaire et adéquate pour permttre une implantation réussite du porgramme
Analyse aussi accecibilité et dispo des outils - Modèle basé sur les résultats immédiats de l’implantation:Évalue l’impact direct de l’iplantation du programme sur les participants, intervenants et oraganisation. Observe résultats observable même a court terme cptm attitudes compétences
Quelle est la distinction entre l’évaluation d’implantation initiale et l’évaluation d’implantation mature?
Initiale : concentre sur première étape de mise en œuvre d’un programme, regarde si correctement lancé, ressource nécessaireen place et si intervenant formé adéquatement. Examine condition préalable à mise en œuvre. Vraiment plus début implantation
Mature : évaluation plus approfindie du fonctionnement de programme qui ont été mis en place pendant un certain temps. Comment à évoluer effet long terme, efficacité continue. Mesure stabilité à long terme constnace des éléments du programme comme qualité intervention., engagment participants/intervenant(baisse?) donc vrm plus das le temps continuité
**quels sont les 6 dimensions de la fidélités
l’adhésions: permet de savoir si le programme est mis en œuvre comme il a été conçu
(c’est-à-dire livraison de l’ensemble des composantes clés à la population appropriée, la formation
L’exposition/mesurer le dosage et la participation:
nombre de sessions, durée de chaque session,
et fréquence avec laquelle les techniques du programme ont été utilisées
mesure taux participation des clients
La qualité de la livraison du programme/mesurer la qualité: manière dont
le programme est offert par les praticiens (p. ex. un enseignant, un bénévole ou le personnel du
programme); il peut s’agir des habiletés à utiliser les techniques ou les méthodes prescrites du
programme, du niveau de préparation, et des attitudes.
Mesurer la différenciation et l’adaptation: une mesure visant à limiter la contamination
d’un programme à un autre. S’assurer que
le groupe contrôle, par exemple, ne soit pas exposé
aux notions introduites dans le groupe expérimental.
Dequoi programme se différencie des autres
Décrire les facilitateurs et les obstacles: Ce qui facilite l’implantation vs ce qui la rend plus difficile comme des imprévues
Décrire l’étendu et le niveau de collaboration:
combien de partenaires
collaborent avec l’organisme responsable du programme
et à quelle fréquence les contacts ont lieu
qualifier le partenariat et
s’intéresser au niveau de collaboration qui s’établit
entre l’organisme et ses partenaires.
quel est la différence entre un résultat/effet et un impact
résultat/effet: changement lié à un objetif du programme
Impact : mesure plus global/ long terme, sur effets du programme sur la clientèle cible et son environemment
Quelle est la distinction entre l’évaluation formative et somative
Formative : améliorer la qualité du contenu du programme et de l’implantation du programme
Et Débute avant l’implantation de programme souvent pré-test ou projet pilote
(dans l’ordre du test vérificatrif)
Sommative:Vise à évaluer l’efficacité de l’intervention et le degré de modification de certaines variables telles: la conscientisation, les connaissances, les comportements, l’environnement ou l’état de santé. Sur tout quand programme tteint sa maturité (programme est implanté depuis un moment= val somative )
**L’évaluation sommative comporte deux éléments. Veuillez nommer et expliquer ces deux éléments
évaluation effet: mesure résultat intermédiaire (court moyen terme) comme attitude, croyance et cptm
évaluation impact: évaluation changement à plus long terme comme prévalence ou incidence de certaine maladie.
Quelles sont les deux approches méthodologies qui peuvent être utilisées individuellement ou en combinaison?
approche quantitative: (raisonnement déductif) :: Produit des données numériques (plus objectives)
Adéquat pour les programmes bien définis (on sait quoi mesurer)
Peut généraliser les résultats à un grand groupe
Peut faire des inférences causales (si essai randomisé contrôlé)
La méthode la plus fréquemment utilisée pour l’évaluation de programme
approche qualitative(raisonnement inductif): examine un cas pour en tirer des principesUtilisé lorsque l’on veut avoir de l’information sur des cas précis ou quand l’on veut des données descriptives de la part des participants
Ex quali : Études de cas(unité aprticulière(communoté, indiv,etc) souvent entrevue) Analyse de contenu ( vise à découvrir signification d’un message)
Technique Delphi( organiser et obtenir comité expert sur une question portant sur les probabilité d’apparition d’évènement futur)
Focus group (groupe discution, discutiuon sur question ouverte)
Entretiens détaillés( entrevue structuré à non structuré)
Technique d’observation participante
Quelle est la distinction entre un groupe contrôle (type) (aussi appelé groupe témoin) et un groupe de comparaison?
groupe contrôle:Le groupe doit être similaire au groupe expérimental (ex.: âge, sexe, revenu, éducation, etc.)
L’assignation au groupe contrôle doit être ALÉATOIRE
Doit s’assurer que les membres du groupe contrôle pourront recevoir l’intervention après la phase initiale
Différents types de groupe: sans contact(recoit rien), liste d’attente(recoit traitement plus tard), Gold standard(offre traitrement qui senble meilleur à ce jour), placebo(traitement sans ingrédient actif)
Groupe comparaison: Si l’assignation aléatoire n’est pas possible (PAS ALÉATOIRE) (ou éthiquement acceptable), alors on peut recruter un échantillon de participants non équivalents
On peut tout de même « matcher » les participants qui reçoivent le traitement sur la base de plusieurs caractéristiques (ex.: âge, sexe, éducation, intensité des symptômes, etc.).
**Quelles sont les trois grandes catégories de devis(moyen utilisé pour rep aux questions) d’évaluation / protocoles de recherche ?
Dévis expérimental: La randomisation permet d’écarter ou diminuer le rôle des facteurs confondants
Augmente la validité interne de l’étude (certitude que A cause B, que le traitement cause les résultats – inférences causales)
Produit les résultats les plus facilement interprétables et
défendables au plan scientifique
Seul devis qui permet de faire des inférences causales
Personne même caractéristqiues séparer groupe égal souvent en médecine
devis quasi-expérimental: pas randomiser, donc peut y avoir facteur confondant, moins validié interne= inférence causale limité
pas équivalent pas aléatoire dans groupe
devis non-expérimental:
Il peut y avoir ++ facteurs confondants
Limite la validité interne (qualité des inférences causales)
pas comparaison 1 seul groupe
Rien pour comparré puisque seulemewnt un groupe ui fit programme pas un qui le fait pas
Qu’est-ce que la validité interne?
Degré avec lequel on peut conclure que le programme cause les effets observés a cause b
**quels sont les facteurs qui peuvent diminuer la validité interne
randomisation écarte ces facteurs:
maturation, testing(pré-test= diffère quand personne rep pour la deuxième fois), instrumentation(instrument mesure chnagte au cours de l’évaluation), selection (participants à l’expérience diffèrent sensiblement de la popu de référence)
**Qu’est-ce que la validité externe
degré lequel on peut s’attendre que le programme aura des effets similaires dans d’autres contexte
**Facteur qui peuvent diminuer validité externe
désidérabilité sociale, effet des attente, effet Hawthorne, effet placebo
