Étapes d'évaluation de programme en santé Flashcards

1
Q

Étape 1: Clarifier le programme

A

Il est important de déterminer si le programme en question est prêt à être évalué. De ce fait, il faut recueillir les renseignements nécessaires à son sujet et les communiquer aux parties prenantes.

How well did you know this?
1
Not at all
2
3
4
5
Perfectly
2
Q

Quel modèle est est l’un des meilleurs outils de planification d’une évaluation de programme.

A

Modèle logique

  • Il résume les principaux éléments d’un programme et fournit une représentaVon visuelle des relaVons qui les unissent.
How well did you know this?
1
Not at all
2
3
4
5
Perfectly
3
Q

Le modèle logique peut servir d’outil pourquoi pendant L’étape 1: Clarifier le programme?

A

pour concevoir une entente avec les parties prenantes du programme et une source de questions d’évaluation potentielles

How well did you know this?
1
Not at all
2
3
4
5
Perfectly
4
Q

Étape 1: Clarifier le programme - Définir le ou les but(s) du programme

A
  • Les buts servent d’ancrage au programme et fournissent des points d’achèvement clairs, autour desquels s’organisent de nombreuses stratégies ou activités. À mesure que la situation évolue, ces stratégies et activités peuvent changer.
How well did you know this?
1
Not at all
2
3
4
5
Perfectly
5
Q

Étape 1: Clarifier le programme - Définir le ou les public(s) cible(s)

A
  • Il s’agit des bénéficiaires du programme ou de groupes de populations auxquels nous devons portez une attention particulière en vue d’atteindre le ou les but(s) du programme.
How well did you know this?
1
Not at all
2
3
4
5
Perfectly
6
Q

Qu’elle est la différence entre un public cible primaire et secondaire?

A
  • Public cible primaire est celui dont la santé est visée par l’entremise du programme.
  • Public cible secondaire a une influence sur le public primaire.
How well did you know this?
1
Not at all
2
3
4
5
Perfectly
7
Q

Étape 1: Clarifier le programme - Définir les objectifs axés sur les résultats

A

Objectifs axés sur les résultats comptent quatre éléments:

  • Elles mesurent les changements produits par les activités du programme. Les effets souhaités se situent au niveau interpersonnel, organisationnel ou sont liés aux politiques publiques.

Qui le changement vise-t-il (public cible)?
Quel changement souhaitons-nous apporter chez le public cible? Dans quelle mesure?
Dans quel délai?

How well did you know this?
1
Not at all
2
3
4
5
Perfectly
8
Q

Qu’elle son les différentes catégories d’objectifs?

A
  • axés sur le processus
  • axés sur les résultats
How well did you know this?
1
Not at all
2
3
4
5
Perfectly
9
Q

Étape 1: Clarifier le programme - Définir les stratégies, activités et les ressources allouées

A

Stratégies

  • Une stratégie est une vaste approche que l’on adopte pour finaliser le changement.

Activités

  • Une stratégie comprend vraisemblablement diverses activités, allant de la tenue de réunions, à l’examen des preuves, en passant par la présentation d’exposés.

Ressources

  • le financement (budgets financés), les connaissances et compétences spécialisées, le temps, la place, l’équipement.
How well did you know this?
1
Not at all
2
3
4
5
Perfectly
10
Q

Étape 2: Mobiliser les parties prenantes

A

Cette étape consiste à lister les parties prenantes, constituées de bénéficiaires du programme, le maître d’ouvrage (ou porteur du programme), l’équipe de programme, les responsables hiérarchiques, les partenaires, et le comité de pilotage.

How well did you know this?
1
Not at all
2
3
4
5
Perfectly
11
Q

Définition des parties prenantes

A

un ensemble de personnes et des organisations qui ont quelque chose à voir avec le programme. Autrement dit, ce sont des acteurs fortement impliqués dans la réalisation du programme.

How well did you know this?
1
Not at all
2
3
4
5
Perfectly
12
Q

quel sont Les différentes parties prenantes d’un programme

A
  • À l’interne, nous avons: les utilisateurs (bénéficiaires), le commanditaire, le client, le chef de programme, l’équipe de programme et le management de programme.
  • À l’externe, nous pouvons citer: les fournisseurs et les pouvoirs publics.
How well did you know this?
1
Not at all
2
3
4
5
Perfectly
13
Q

Étape 2: Mobiliser les parties prenantes - Client

A
  • C’est une personne physique ou morale pour qui le programme est réalisé.
  • Il s’agit de la personne qui achète le programme. C’est une partie prenante très importante.
How well did you know this?
1
Not at all
2
3
4
5
Perfectly
14
Q

Étape 2: Mobiliser les parties prenantes - Chef de programme

A
  • Il est responsable de tous les aspects du programme, de son lancement à sa clôture.
  • C’est lui qui organise et pilote le programme.
  • Il est chargé de la planification, de l’élaboration des tâches.
How well did you know this?
1
Not at all
2
3
4
5
Perfectly
15
Q

Étape 2: Mobiliser les par>es prenantes - Équipe programme

A
  • C’est elle qui est chargée de la réalisation du programme.
  • Chaque membre est sélectionné pour ses compétences et se voit attribuer un nombre de tâches qu’il doit accomplir en respectant les échéances et le budget, ainsi que la qualité exigée.
How well did you know this?
1
Not at all
2
3
4
5
Perfectly
16
Q

Étape 2: Mobiliser les parties prenantes - Management de programme

A
  • Il soutient le chef de programme et son équipe, notamment en mobilisant les autres services de programme.
  • Il fournit un cadre de travail agréable aux employés, en offrant une rémunération attractive, des horaires flexibles et des conditions de travail favorables.
How well did you know this?
1
Not at all
2
3
4
5
Perfectly
17
Q

Étape 2: Mobiliser les parties prenantes - Bénéficiaires de programme

A
  • Ce sont les utilisateurs de programmes. Leurs attentes, leurs besoins et leurs envies doivent être pris en considération pour garantir le succès de programme.
How well did you know this?
1
Not at all
2
3
4
5
Perfectly
18
Q

Étape 2: Mobiliser les par>es prenantes - Fournisseurs

A
  • Ils sont chargés de fournir l’équipement, le matériel ou les logiciels nécessaires à la réalisaVon de programme.
  • S’ils livrent le matériel en retard, cela aura des répercussions sur l’échéancier et le budget de programme.
How well did you know this?
1
Not at all
2
3
4
5
Perfectly
19
Q

Étape 2: Mobiliser les par>es prenantes - Pouvoirs publics

A
  • Il s’agit des autorités qui dirigent l’administraVon générale de l’État et font appliquer les lois sur le territoire.
  • Il s’agit d’une parVe prenante très importante car si vous n’obtenez pas les autorisations ou votre programme ne respecte pas les normes imposées, il peut tout simplement être annulé
How well did you know this?
1
Not at all
2
3
4
5
Perfectly
20
Q

Pour utiliser au mieux les résultats de l’évaluation, il important d’associer quoi?

A

les parties prenantes dans tous les processus. Sinon, ces dernières pourraient finir par retarder, remettre en cause les recommandations de l’évaluation, ou imposer leur décision.

How well did you know this?
1
Not at all
2
3
4
5
Perfectly
21
Q

Pourquoi est-ce l’Étape 2: Mobiliser les parties prenantes important?

A
  • Cette étape est importante parce que leurs opinions ou points de vue détermineront la réussite du programme.
  • Il est important de rechercher à obtenir leurs points de vue, intérêts, préoccupations et priorités au début de processus de l’évaluation
How well did you know this?
1
Not at all
2
3
4
5
Perfectly
22
Q

Étape 3: estimer les ressources

A
  • Il s’agit ici de préciser les ressources disponibles pour votre évaluation.
  • Une ressource adéquate permettra de définir la portée de l’évaluation et d’éclairer vos décisions au moment de sélectionner les méthodes à adopter.
How well did you know this?
1
Not at all
2
3
4
5
Perfectly
23
Q

Deux tâches principales de l’Étape 3: estimer les ressources

A
  1. Repérer les ressources disponibles pour l’évaluation
  • Salaire et avantages sociaux du personnel, consultants, collecte des données
  • Fournitures et équipement – ordinateur doté des logiciels de traitement statistique
  • Temps – combien de temps vous disposez pour réaliser l’évaluation.
  1. Décider s’il est opportun d’évaluer le programme.
  • L’objet principal de l’évaluation est-il bien compris?
    *Les parties prenantes souhaitent-elles mener une évaluation?
  • Les questions d’évaluation sont-elles choisies et conviennent-elles au type d’évaluation?
How well did you know this?
1
Not at all
2
3
4
5
Perfectly
24
Q

Étape 4: Déterminer les questions d’évaluation

A
  • Cette étape a pour objectif de centrer l’évaluation en sélectionnant les questions les plus importantes et en cernant les méthodes d’approches qui conviennent le mieux pour y répondre.
How well did you know this?
1
Not at all
2
3
4
5
Perfectly
25
Q

Étape 4: Déterminer les questions d’évaluation -
Matrice d’évaluaVon d’un programme

A

C’est un outil permettant de clarifier des questions auxquelles l’évaluation peut répondre. Elle décrit la manière dont chaque question d’évaluation et chaque critère d’évaluation sont traités.

How well did you know this?
1
Not at all
2
3
4
5
Perfectly
26
Q

Étape 4: Déterminer les questions d’évaluation - Le stade de développement du programme

A

Les questions d’évaluation devraient refléter le stade de développement du programme. Par exemple, il ne serait pas pertinent de mesurer les résultats d’un programme qui vient de commencer.

27
Q

Quels sont les deux sous-étapes de l’Étape 4: Déterminer les questions d’évaluation

A
  1. Sélectionner et affiner les questions d’évaluation
  2. Déterminer les approches d’évaluation pertinentes
28
Q

Définir les évaluations axées sur le processus

A
  • Elles permettent de comprendre si l’intervention (activité) est mise en œuvre telle que planifiée et touche les participants visés. Les questions axées sur le processus peuvent aider à comprendre les raisons pour lesquelles un programme est fructueux ou ne l’est pas.
29
Q

Étape 5: Déterminer les méthodes de mesures et les procédures appropriées

A

Cette étape consiste à recueillir les données à l’aide de techniques crédibles (Quantitative ou qualitative soit les deux (mixtes)).

30
Q

Étape 5: Déterminer les méthodes de mesures et les procédures appropriées est axée sur quel domaines clés?

A
  1. Sélectionner les indicateurs les plus appropriés pour le programme (ressources disponibles, activités, résultats)
  2. Recueillir les données au moment opportun
  3. Savoir où recueillir les données
31
Q

Étape 5: Déterminer les méthodes de mesures et les procédures appropriées - quatre décisions clés à prendre en considération:

A
  1. Décider de la façon de recueillir les données
  • Sélectionner des méthodes de collecte de données (Qualitative et ou Quantitative).
  1. Décider ce qui sera mesuré
  • Tout dépendra de la méthode de collecte de données adoptée. Mais, ici il s’agit de mesurer les indicateurs.
  1. Quand recueillir les données?
  • Nous devons décider à quel moment recueillir les données et à quelle fréquence.
  1. Auprès de qui recueillir les données?
  • Les données doivent être collectées auprès de la population cible, ou un groupe suffisamment important pour fournir l’informaVon.
32
Q

Compare la méthode quantitate, qualitative et mixte.

A

Méthode quantitative

  • Elle permet de recueillir les données numériques qui peuvent se résumer par des procédures statistiques.
  • Elle fournit des résultats concrets et quantifiables. La collecte des données nécessite un grand nombre de parties prenantes.
  • Exemple: questionnaire administré, feuille de suivi, procès- verbaux de réunions

Méthode qualitative

  • permet de recueillir des données non numériques qui fournissent des renseignements très détaillés et approfondis sur le sujet du programme.
  • Elle ne permet pas de généraliser les données à une population entière.
  • Exemple: entretiens, groupes de discussion, Photovoice

Méthode mixte

  • C’est la combinaison des données quantitative et qualitative. Celle-ci offre une compréhension multidimensionnelle d’un enjeu et permet de minimiser au maximum les biais.
  • Elle permet de tirer des conclusions avec un niveau de certitude accru quand les différentes méthodes fournissent des résultats similaires
33
Q

Étape 6: Élaborer le plan d’évaluation

A

Il s’agit d’un document dans lequel on donne les détails de la façon dont le suivi d’un programme a été effectué, l’évaluation a été menée, les résultats ont été utilisés pour améliorer le programme et prendre des décisions.

34
Q

Étape 6: Élaborer le plan d’évaluation

A

l s’agit de la description du programme et la façon dont ses activités sont liées aux résultats escomptés.

35
Q

La matrice d’évaluation

A

C’ est un outil d’évaluation mis au point par les évaluateurs pour identifier les questions clés du sujet et la façon d’y répondre.

36
Q

Étape 6: Élaborer le plan d’évaluation - trois tâches principales

A
  1. Élaborer un plan d’évaluation
  • Description du programme
  • Objet de l’évaluation
  • Questions d’évaluation
  • Méthodologie
  • Considérations éthiques
  1. Créer une matrice de collecte de données d’évaluation
  • Questions d’évaluation
  • Indicateurs
  • Méthodes
  • Sources de données
  1. Finaliser le budget
  • Comme mentionné dans l’étape 3 de l’évaluation, ici il est question de prendre en considération chaque aspect du plan et les coûts qui y sont associés.
37
Q

Étape 7: Faire la collecte des données

A
  • il s’agit de mettre à l’essai les instruments de collecte et former les collecteurs de données.
  • Pour mener à bien cette étape, il faut que les données soient exactes et dans un format qui permet de les utiliser facilement.
38
Q

Pourquoi est-ce l’Étape 7: Faire la collecte des données, est importante?

A

parce que les résultats qui seront issus de l’évaluation et les recommandations qui seront formulées reposent sur la qualité des données recueillies

39
Q

Étape 7: Faire la collecte des données - Considérations éthiques

A
  • Des quesVons d’éthiques se posent à l’étape de la collecte des données en ayant le consentement éclairé et en respectant la confidentialité des participants.
40
Q

Étape 7: Faire la collecte des données - Confidentialité

A
  • C’est le fait d’assurer les participants que leur information sera entreposée de manière sécuritaire et ne sera associée au-delà de l’équipe de recherche.
41
Q

Étape 7: Faire la collecte des données - Sensibilité culturelle

A
  • Respecter et tenir compte des valeurs et tradiVons culturelles pendant la collecte des données
42
Q

Il est important de former les collecteurs de la manière dont il faut collecter les données. C’est-à-dire:

A
  • Objet de l’évaluation
  • Type de participants recherchés
  • Présentation des outils
  • Procédure pour mettre en place les outils
43
Q

Assurez que les procédures et les outils mis en place sont conçus pour traiter des questions d’évaluation identifiées et nous aideront à:

A
  • Déterminer l’acceptabilité des instruments de collecte de données
  • Estimer la durée de la collecte
44
Q

Étape 8: Traiter et analyser les données

A
  • saisir les données, vérifier la qualité et la cohérence de cette saisie et les analyser afin de dégager les résultats de l’évaluation.
  • Pour mener à bien cette étape, l’aide d’un statisticien est vivement recommandé pour améliorer la qualité, la validité et la fiabilité des résultats.
45
Q

Étape 8: Traiter et analyser les données - Il existe deux approches majeures permettant de saisir les données:

A

Approche indirecte

  • Elle consiste à faire la saisie des données recueillies aux fins d’analyse, comme dans le cas de sondages effectués sur papier ou de transcriptions d’entretiens.

Approche directe

  • Celle-ci permet de faire la saisie de données directement sur l’ordinateur en lieu et place de la collecte, comme les sondages en ligne.
  • Pour résoudre tout problème ou erreurs qui pourraient avoir un effet sur les résultats de l’évaluaVon, il est important de faire recours aux techniques de contrôle, pendant et après la collecte de données.
46
Q

Pendant la collecte de données, il faut :

A
  • Regarder de près la première vague de réponses.
  • Regarder le nombre de réponses nulles ou refus de réponse
  • Mettre en relation les collecteurs de données et les responsables du programme d’évaluation afin d’identifier les problèmes émergents.
  • Contrôle inopiné (ponctuel) des données recueillies
  • VérificaVon de portée pour chaque variable.
  • Tri pour repérer les données manquantes, élevées ou faibles
    (données quanVtaVves)
  • VérificaVon le contenu en relisant la saisie de la transcripVon des échanges d’un groupe de discussion au matériel enregistré (données qualitaVves)
47
Q

Étape 8: Traiter et analyser les données - Organiser les données dans un format pour permettre l’analyse. Quantitative vs qualitatives

A
  • quantitatives; il faut d’abord traiter les données manquantes, puis ensuite étiqueter les variables et les valeurs; cela donnera la bonne compréhension des tableaux de données.
  • qualitatives; il faut transférer les transcriptions dans le logiciel permettant d’effectuer l’analyse puis les étiqueter à l’aide de détails démographiques propres au(x) participant(s).
48
Q

Étape 8: Traiter et analyser les données - Analyser les données. Quantitatives vs qualitatives

A
  • quantitatives lors de l’évaluation, simples statistiques descriptives (pourcentages, fréquences, moyennes, modes, etc.) suffisent pour interpréter les résultats.
  • qualitatives ont été appliquées, on cherche à identifier les thèmes d’intérêt particulier dans les questions d’évaluation.
49
Q

Étape 8: Traiter et analyser les données - Préparer le terrain pour l’interprétaVon

A

Cela consiste à convoquer les parVes prenantes pour interpréter les résultats issus des analyses des données quantitatives et/ou qualitatives.

50
Q

Étape 9: Interpréta7on et diffusion des résultats

A
  • Elle consiste à partager les résultats de l’évaluaVon avec les parVes prenantes en accordant une importance parVculière aux contestaVons qui en découlent.
  • Elle permet aussi d’élaborer les recommandations réalisables en vue d’améliorer le programme en quatre points
51
Q

Étape 9: Interprétation et diffusion des résultats - 1. Interpréter les données avec les parties prenantes

A

Cet exercice consiste à amener les parties prenantes à examiner les résultats et à participer à leur interprétation. Cela pourrait augmenter la crédibilité, la validité, la transparence et l’acceptation des conclusions de l’évaluation

52
Q

Étape 9: Interprétation et diffusion des résultats - Élaborer des recommandaVons

A
  • La collaboraVon avec les parVes prenantes peut aider à élaborer des recommandaVons jugées perVnentes et des conclusions d’évaluaVon à diffuser.
53
Q

Étape 9: Interprétation et diffusion des résultats -
3. Élaborer une stratégie de communication

A
  • Une stratégie de communication est un canal ou un moyen par lequel un message est envoyé à la population cible.
  • Le choix d’un canal permet de s’assurer que les résultats de l’évaluaVon atteindront effectivement les utilisateurs prévus.
54
Q

Étape 9: Interprétation et diffusion des résultats -
4. Créer un ou des produits de communication et les distribuer

A

Un produit de communication est un document visant à toucher efficacement les parties prenantes.

55
Q

Étape 10: Appliquer les conclusions de l’évaluation

A
  • Ceci consiste à utiliser des résultats de l’évaluation en vue d’orienter les changements obtenus
56
Q

Étape 10: Appliquer les conclusions de l’évaluation permettra de:

A

1) prendre des décisions pour améliorer le programme;
2) renforcer la compréhension du programme;
3) assurer un soutien social, financier et politique

57
Q

Étape 10: Appliquer les conclusions de l’évaluation. Il est utile d’envisager de:

A
  • Passer en revue les recommandations et de réfléchir aux actions;
  • Établir l’ordre prioritaire des changements obtenus;
  • Élaborer un plan d’action en tant que groupe pour mettre en œuvre les changements obtenus;
  • Évaluer l’évaluation
58
Q

Qu’est-ce qu’une analyse ou matrice FFOM

A

F: Forces
F: Faiblesses
O: Opportunités
M: Menaces

59
Q

Qu’est-ce qu’une analyse FFOM

A

Forces: caractérisVques du projet / programme qui lui donnent un avantage sur les autres
Faiblesses: caractérisVques qui désavantagent le projet par rapport aux autres
Opportunités: éléments de l’environnement que le projet pourrait exploiter à son avantage
Menaces: éléments de l’environnement qui pourrait nuire le projet / programme

60
Q

En matière de projets/ programmes, il existe plusieurs types de portefeuilles. Nommes les

A

Ex1: Portefeuille de projets
Ex2: Portefeuille de responsabilités
Ex3: Portefeuille de priorités
Ex4: Portefeuille d’indicateurs

61
Q

Qu’est-ce qu’un portefeuille de projets?

A

C’est un outil permettant de prendre de bonnes décisions dans la gestion des projets en termes de sélection, de priorisation et du temps d’exécution

62
Q

Différence entre portefeuille de projets de petite taille, taille moyenne et taille importante

A
  • Portefeuille de projets de peVte taille: cela désigne l’implicaVon d’un nombre limité d’acteurs.
  • Portefeuille de projets de taille moyenne , Ceux-ci sont plus complexes et impliquent un nombre important de différents acteurs.
  • Portefeuille de projets de taille importante: ceux-ci sont structurels et imposent des changements majeurs ou une transformaVon profonde des personnes.
63
Q

Les facteurs pertinents pour la classification de vos projets sont :

A
  • Quelle est la pertinence stratégique du projet ? Quel est le coût ?
  • Quels sont les besoins en ressources ?
  • Quels sont les délais à respecter ?
64
Q

Les étapes de la gestion de portefeuille de projets

A
  1. Clarifier les objectifs stratégiques
  • Cela consiste à donner un sens à la démarche à suivre. Il est donc indispensable de définir les objectifs en amont et d’en faire part aux managers et aux autres acteurs impliqués.
  1. Identifier et classer les projets par priorité.
  • Cela consiste à recenser les projets (ceux en cours et ceux à venir) et de
    créer une fiche pour chaque
  1. Valider les choix et planifier les lancements
  • Il s’agit d’entériner les projets à réaliser et établir un calendrier pour leur lancement.
  1. Suivi et redéfiniVon des priorités
    * les projets doivent faire l’objet d’un suivi régulier afin de s’assurer qu’ils sont conformes aux objecVfs. Le cas échéant, il sera peut-être nécessaire de les recalibrer, de les doter de ressources complémentaires.