Évaluation de programmes en santé Flashcards

1
Q

Qu’est-ce que l’évaluation de programmes en santé?

A
  • L’évaluation est la cueillette systématique de données sur les activités, les caractéristiques et les effets d’un programme en vue de porter un jugement de valeur, de l’améliorer ou de prendre des décisions concernant sa programmation future
  • Acte permettant de porter un jugement selon une démarche critique fondée sur une collecte systématique de données à propos de multiples objects dans le bus de prendre des décisions
How well did you know this?
1
Not at all
2
3
4
5
Perfectly
2
Q

Courants de pensée en évaluation

A
  • Il existe plusieurs courants de pensée en évaluation de programme
  • On souligne 4 générations de courants de pensée

1ère: Mesure (évaluateur spécialiste de la mesure)
2e: Description (évaluateur s’intéresse surtout aux processus)
3e: Jugement (évaluateur s’intéresse surtout au jugement au regard des objectifs initiaux)
4e: Négociation (évaluateur facilitateur entre instances et acteurs impliqués

How well did you know this?
1
Not at all
2
3
4
5
Perfectly
3
Q

En quoi consiste l’évaluation?

A
  • L’évaluation consiste à tenter de répondre à un ensemble de questions relatives à un programme, sa mise en oeuvre et ses effets
  • Cherche à apprécier dans quelles mesures le programme évalué possède les principales qualités qui caractérisent idéalement un “bon programme”
  • Évaluer consiste donc à confronter les résultats obtenus à un référentiel;
    -On pense ici généralement aux objectifs initiaux poursuivis par le programme
  • Évaluer c’est aussi collecter, analyser et présenter des informations systématiques sur un programme dans le but de faciliter la prise de décision
How well did you know this?
1
Not at all
2
3
4
5
Perfectly
4
Q

Pourquoi évaluer un programme?

A
  • Pour trouver les moyens d’améliorer un programme;
    -Évaluer les besoins de la population cible
    -Accroître l’utilité du matériel utilisé dans le cadre du programme
    -Déterminer ce qui fonctionne et ce qui ne fonctionne pas
  • Pour recueillir des preuves de l’efficacité
  • Pour rendre des comptes
  • Pour évaluer l’efficience
  • Pour aider à prendre des décisions au sujet des questions suivantes;
    -L’utilisation optimale du temps et des ressources
    -La satisfaction des besoins des participants
    -L’amélioration du programme
    -L’efficacité du programme aux yeux des bailleurs de fonds et d’autres groupes concernés
How well did you know this?
1
Not at all
2
3
4
5
Perfectly
5
Q

Quels sont les 4 standards dans l’évaluation d’un programme?

A

Utilité: Qui a besoin de cette évaluation et quels éléments particuliers sont requis?

Faisabilité: Combien de $, de temps et d’énergie seront requis pour l’exercice d’évaluation?

Éthique: Quelles sont les mesures à prendre pour s’assurer du caractère éthique et crédible de cette tâche?

Précision: Quelle approche sera utilisée afin de s’assurer que l’information générée est fiable et crédible?

How well did you know this?
1
Not at all
2
3
4
5
Perfectly
6
Q

Quand faut-il procéder à une évalutation?

A
  • Nouveau programme
  • Programme en cours de développement
  • Programme stable et mature
  • Programme complété
How well did you know this?
1
Not at all
2
3
4
5
Perfectly
7
Q

Quels sont les types d’évaluation de programme?

A
  • Formative
  • De processus
  • Sommative (résultats)
How well did you know this?
1
Not at all
2
3
4
5
Perfectly
8
Q

Évaluation formative

A
  • Souvent le début du processus ou au cours de la mise en oeuvre (“quand le cuisinier goûte la soupe”)
  • Vérifie les relations et capacités
  • Audience ciblée est le personnel du programme
  • Vise à améliorer le programme
  • Identification des problèmes, difficultés, écueils, etc.
  • Remédiation, ajustements, régulation, etc.
  • Enjeux faibles
How well did you know this?
1
Not at all
2
3
4
5
Perfectly
9
Q

Évaluation de processus

A
  • A généralement lieu au milieu ou mi-parcours des interventions ou activités
  • Vérifie la qualité et l’efficacité
  • Audience ciblée est le personnel du programme et les parties prenantes
  • Étudie les aspects de la mise en oeuvre du programme
  • Détermination du nombre et des catégories de personnes touchées
  • Détermination du nombre et des types d’activités
  • Description de la façon dont vont se dérouler les activités
How well did you know this?
1
Not at all
2
3
4
5
Perfectly
10
Q

Évaluation sommative

A
  • Souvent au terme du processus; on continue? on arrête? (“quand le client goûte la soupe”)
  • Vérifie la portée et satisfaction
  • Audience visée est l’audience externe et les parties prenantes
  • Vise à prendre une décision
  • Identification des problèmes, difficultés, écueils, etc.
  • Enjeux élevés
How well did you know this?
1
Not at all
2
3
4
5
Perfectly
11
Q

Exemple de critères de mesure dans une évaluation formative

A
  • Les besoins;
    -Utilisation des services
    -Listes d’attente
    -Disponibilité et accessibilité des services
    -Perception des utilisateurs à l’égard de leurs besoins
  • Matériel de sensibilisation;
    -Compréhension du matériel
    -Choix des messages-clés
    -Lisibilité et niveau de langue
    -Valeur esthétique
    -Caractère offensant
How well did you know this?
1
Not at all
2
3
4
5
Perfectly
12
Q

Exemple de critères de mesure dans une évaluation de processus

A
  • Les besoins;
    -Temps consacré par le personnel
    -Dépenses/coûts
    -Promotion/publicité
    -Participation
    -Roulement du personnel
  • Matériel de sensibilisation;
    -Demandes de renseignements
    -Ressources distribuées
    -Création de groupes
    -Séances de formation
    -Contacts établis
How well did you know this?
1
Not at all
2
3
4
5
Perfectly
13
Q

Exemples de critères de mesure dans une évaluation de sommation

A
  • Les besoins;
    -Modification de politique
    -Changements sur le plan de la sensibilisation, des connaissances ou des croyances
    -Changements aux chapitres de la mortalité, morbidité, etc.
  • Matériel de sensibilisation;
    -Changements relatifs à l’utilisation des services
    -Modification des comportements
    -État de santé
    -Normes sociales
How well did you know this?
1
Not at all
2
3
4
5
Perfectly
14
Q

Quelles sont les étapes de l’évaluation?

A
  1. Planifier l’évaluation
  2. Sélectionner la méthode appropriée
  3. Collecter et analyser l’information
  4. Préparer le rapport d’évaluation
  5. Implémenter les recommandations
How well did you know this?
1
Not at all
2
3
4
5
Perfectly
15
Q

Modèle d’une démarche évaluative

A
  • La démarche évaluative est un processus circulaire;
    -Planification
    -Collecte des données
    -Analyse et interprétation des données
    -Jugement et décision
    -Communication
How well did you know this?
1
Not at all
2
3
4
5
Perfectly
16
Q

Phase A: Planifier l’évaluation

A
  • Déterminer les objectifs de l’évaluation
  • Déterminer le type d’évaluation
  • Déterminer qui conduira l’évaluation (équipes chargées de l’évaluation)
  • Lister les sources d’information pertinentes
17
Q

Phase B: Sélectionner la méthode d’évaluation appropriée

A
  • Formuler les questions d’évaluation et les sous-questions
  • Déterminer le design d’évaluation appropriée
  • Identifier les standards de mesure
  • Identifier les critères et indicateurs de mesure
  • Développer un calendrier d’évaluation
  • Conformer le budget d’évaluation
18
Q

Qu’est-ce que les indicateurs et quels sont leurs caractéristiques?

A
  • Mesure unique (habituellement exprimée en termes quantitatifs) qui évalue une dimension essentielle d’un phénomène
  • Avant d’être choisi, un indicateur doit présenter certaines caractéristiques;

Validité: Un indicateur n’est valide que s’il mesure réellement l’objet voulu
Fiabilité: Une mesure est fiable si dans les mêmes circonstances, on obtient les mêmes résultats (ex: poids d’une personne sur deux balances différentes)
Précision: Un indicateur est précis s’il mesure les différences (ex dans un groupe) ou les changements sur une période de temps qui sont d’intérêt pour l’utilisateur
Universalité: Un indicateur est universel s’il peut être utilisé dans divers contextes et populations
Efficacité: Capacité d’obtenir les résultats souhaités ou d’atteindre les objectifs fixés
Efficience: Capacité de parvenir à un maximum de résultats avec un minimum de ressources (moindres coûts)

19
Q

Évaluer pour l’amélioration continue

A

Agir:
* Intégrer au programme les leçons apprises
* Reformuler la théorie au besoin
* Récupérer les autres éléments dont il faut prendre connaissance

Planifier:
* Cerner l’object et les buts
* Définit les mesures
* Planifier les activités

Faire:
* Exécuter le plan
* Entreprendre les activités
* Présenter les interventions
* Appliquer les connaissances à la poursuite de l’object et des buts

Étudier:
* Surveiller les résultats
* Vérifier la validité de la théorie et du plan
* Étudier les signes de progrès ou de réussite ou encore les résultats imprévus
* Chercher de nouvelles leçons à tirer et de nouveaux problèmes à résoudre

20
Q

Différents niveaux de l’évaluation

A
  1. Besoins (pertinence, utilité)
  2. Objectifs (pertinence, cohérence, atteinte des objectifs et impacts)
  3. Moyens (cohérence et efficience)
  4. Réalisations (efficience)
  5. Résultats (efficience)
  6. Impacts (atteinte des objectifs, utilité, impacts)