Cours 6

Question 1

Qu’elle est la définition de l’évaluation?

Answer 1

Champ de connaissances et de pratique qui vise à déterminer la valeur d’une intervention ou d’une non- intervention pour la société.

Question 2

Qu’est-ce que l’évaluation dans la pratique et qu’est-ce qu’elle permet d’évaluer?

Answer 2

Dans la pratique, c’est l’application systématique de méthodes scientifiques pour évaluer la conception, la mise en œuvre, l’amélioration et les résultats d’un programme ou d’une intervention.

Question 3

Qu’est-ce qu’Une intervention?

Answer 3

Action conduite dans l’intention d’avoir un effet sur la société, qu’elle soit qualifiée de programme, d’initiative, de projet, de politique, de règlement, etc.

Question 4

L’évaluation peut se concentrer sur toute forme _________, que ce soit des programmes, des projets, des sous-programmes, des sous-projets ou seulement des éléments de ceux-ci

Answer 4

D’initiatives

Question 5

Pourquoi évaluer les programmes et les interventions en nutrition?

Answer 5

• Nous agissons sur des comportements dont les bénéfices se manifestement rarement à CT ou pour lesquels nous devons patienter pour observer changement.
• Nous offrons des services intangibles (difficile à visualiser)
• Nous sommes ou serons scrutés du public
• Sommes soumis à des attentes multiples avec des ressources limitées
• Nous devons affronter des projets où les dmd de services nutri sont peu développés, négatives ou non désirées, ou trop grandes
• Nous devons représenter des auditoires démunis (non aptes à faire leur plaidoyer) et le faire avec des données fiables

Question 6

Quelles sont les finalités de l’évaluation?

Answer 6

• Rendre des comptes
• Améliorer le programme, le service
• Renforcer les capacités en réponse aux besoins des parties prenantes
• Appuyer le développement de l’organisation
• Améliorer l’état des connaissances sur l’efficacité d’une intervention
• Améliorer les conditions sociales et collectives

Question 7

Pour qui doit-on faire l’évaluation

Answer 7

• Pour les bailleurs de fonds
• Pour les décideurs
• Pour les parties prenantes
• Pour les participants
• Pour les citoyens (utilisateurs, non utilisateurs…)
• Pour vous-même

Question 8

Quels sont les obstacles à l’évaluation?

Answer 8

1. Le financement, le temps et le personnel qualifié requis peuvent nécessiter l’utilisation de fonds provenant du budget des programmes.
2. Les employés assignés à un programme craignent souvent que l’évaluation révèle que leur programme n’est pas efficace.
3. L’évaluation peut nécessiter des alliances/partenariats difficiles entre des universitaires, des prestataires de soins (Dt.P.) et des acteurs sur le terrain dont les objectifs (et les intérêts) peuvent être très différents
4. Les évaluations ne font pas toujours preuve de transparence concernant ce qu’elles révèlent (des résultats montrant qu’un programme n’est pas efficace peuvent ne pas être publiés ni présentés).
5. Certains programmes devraient être arrêtés ou modifiés, bref les personnes qui s’investissent dans ces programmes peuvent être réticentes à le faire.

Question 9

Que faut-il s’assurer de faire pour maintenir le financement d’un projet? (obstacle 1)

Answer 9

il faut s’assurer qu’il atteigne son objectif

Question 10

En lien avec l’obstacle 2, quel est le principal intérêt des évaluation et que peut on faire pour remédier à cet obstacle?

Answer 10

De découvrir les façon de corriger, d’améliorer ou de modifier les programmes pour qu’ils fonctionnent.

Les partenaires doivent établir des rapports de confiance et s’assurer qu’ils ont les mêmes objectifs (mots clés = dynamique organisationelle, transparence)

Question 11

Qu’est-t-il essentiel de faire en lien avec l’obstacle 2

Answer 11

Impliquer les parties prenantes:
Les évaluations doivent faire intervenir diverses parties prenantes intéressées par l’évaluation ou ses résultats. Le plan d’évaluation doit prévoir quelles parties prenantes, ou leur porte-parole, seront consultées et à quel moment

Question 12

Quels sont des exemples des parties prenantes en lien avec l’obstacle 2?

Answer 12

• Personnel
• Supérieur hiérarchique
• Bénéficiaires du programme ou de l’intervention
• Bailleur de fonds ou CA selon le cas
• Chercheurs et étudiants impliqués dans la collecte selon le cas
• Organismes partenaires, collaborateur à la collecte

Question 13

Que peut-on faire pour remédier à l’obstacle 3? (L’évaluation peut nécessiter des alliances/partenariats difficiles entre des universitaires, des prestataires de soins (Dt.P.) et des acteurs sur le terrain dont les objectifs (et les intérêts) peuvent être très différents)

Answer 13

Dès le départ:
- déterminer des obj clairs
- définir des rôles clairs
- respect et écoute

Question 14

Que faut-il faire pour remédier à l’obstacle 4 (Les évaluations ne font pas toujours preuve de transparence concernant ce qu’elles révèlent (des résultats montrant qu’un programme n’est pas efficace peuvent ne pas être publiés ni présentés))

Answer 14

• Connaître dès le début l’information qui est importante et qui sera diffusée.
• Ne mettre en évidence que les « réussites » n’avance pas à grand-chose à long terme.
• Il est utile d’informer les gens sur ce qui ne fonctionne pas, voilà tout un défi (Transfert de connaissances)

Question 15

Que faire pour remédier à l’obstacle 5 (Certains programmes devraient être arrêtés ou modifiés, bref les personnes qui s’investissent dans ces programmes peuvent être réticentes à le faire)

Answer 15

• N’ayez pas peur de dire ce que vous avez constaté même si cela peut soulever des critiques.
• Certains programmes finissent par n’avoir aucun impact ou causer du tort, et de tels résultats doivent toujours être exposés.

Question 16

Quels sont les contraintes de l’évaluation?

Answer 16

Les commanditaires de l’évaluation (ou vos décideurs, ou vous-même!) veulent tout savoir sur tout, en peu de temps et dans un budget restreint.

contraintes:
- Ressources
- Temps
- Accès aux données
- Considérations politiques ou stratégiques

Question 17

Les participants sont-t-ils séparés du processus d’évaluation?

Answer 17

Oui, le programme cherche à induire des changements à la faveur des participants qui bénéficieront du programme

Question 18

Qu’est-ce que l’intrant dans l’intervention?

Answer 18

ressources humaines, $$$, matérielle

Question 19

Quel est le processus dans l’intervention (ce qui est fait)

Answer 19

formation de personnel, unité de production, instllation

Question 20

Quel est le processus dans l’intervention (ce qui est fait)

Answer 20

formation de personnel, unité de production, installation d’équipement

Question 21

Quels sont les entrants dans l’intervention? (indicateur de ce qui est fait)

Answer 21

manuels de référence, cuisine bien équipés, personnel bien formé

Question 22

Quels sont les indicateurs à mesurer lors de l’intervention?

Answer 22

1. Efficacité (ex: taux de réussite de l’intervention, consommation FL, IMC)
2. Sécurité (ex: taux effets non attendus)
3. Réactivité (ex: taux de satisfaction, nature des plaintes)
4. Continuité (# moyen de jours entre congé du CH)
5. Accessibilité (temps moyen d’attente)
6. Équité (taux de service)
7. Efficience (# visites à domicile/j)
8. Viabilité (nb de Dtp dans un milieu donné)

Question 23

Pourquoi s’intéresser aux processus en nutrition?

Answer 23

car c’est complexe (bcp d’intervention, d’acteur)

Question 24

Au-delà des effets d’une intervention en nutrition, nous devons réfléchir pour________

Answer 24

comprendre comment cela fonctionne (métaphore boîte noire)

Question 25

les mécanismes par lesquels s’opèrent le(s) changement(s) de comportement alimentaire, par ex, ne résident pas dans une intervention en tant que telle, mais dans les _____________ C’est donc à ces __________ qu’il faut porter attention

Answer 25

1. dans les phénomène qui se déclenchent en réaction.
2. phénomènes

Question 26

une politique publique n’agit pas directement sur un problème; elle active une série de ___________qui finissent par atteindre ce problème. Il s’avère donc nécessaire d’examiner ce qui se passe pendant ce processus. »

Answer 26

phénomènes

Question 27

Que suppose l’évaluation des processus en nutrition clinique?

Answer 27

l’utilisation d’indicateurs qui concernent ce qui est fait pour donner un soin, un service professionnel incluant les activités du nutritionniste, ses conseils professionnels ou la mise en oeuvre du traitement ou d’un programme qu’il utilise. Cette évaluation est souvent menée en continue.

Question 28

ex d’évaluation des processus

Answer 28

temps / Évaluation
temps / Plan d’intervention
temps / counselling
temps / documentation au dossier

Question 29

quel est le but de l’évaluation des processus en nutrition clinique?

Answer 29

• Développer des normes de pratique qui précisent les activités cliniques essentielles, leur fréquence.
• Avoir des protocoles
• Distinguer et comprendre les proportions de temps direct consacré au patient du temps non consacré au patient
• Valoriser des approches différentes
• Saisir la complexité des interventions (varient selon clientèle, conditions med)

Question 30

Quelles sont les conditions spécifiques au système public de santé qui agissent sur les dimensions de la performance en nutrition clinique?

Answer 30

Contexte (ex. gouvernance)
Ressources humaines
Ressources financières
Ressources matérielles
Ressources technologiques
Ressources informationnelles

Question 31

Par rapport à l’évaluation des résultats, quelle est la séquence typique de résultats d’effets?

Answer 31

1. À court terme (résultats immédiats): Changements sur le degré de sensibilisation, connaissances, aptitudes, compétences, changements dans l’environnement immédiat
2. À moyen terme (résultats intermédiaires): changement de comportement
3. À long terme (résultats ultimes ou impacts): Changements des conditions sociales, économiques, environnementales ou de santé

Question 32

Que suppose l’évaluation des résultats?

Answer 32

l’utilisation d’indicateurs qui mesurent les effets d’un soin, d’un service ou d’un programme sur la santé d’un patient ou d’une population en fonction des objectifs visés.(ex. mesure de satisfaction des apprenants)

Question 33

Pour planifier une évaluation des résultats, il faut ___________________________ (et souvent, ils ne le sont pas suffisamment).

Answer 33

être clair quant aux objectifs de l’intervention

Question 34

Comment les objectifs de résultats doivent-t-il être mesurés?

Answer 34

de manière mesurable

Question 35

V/F l’évaluation des impact à LT d’un programme mis en oeuvre ou d’une intervention sont difficiles à réaliser.

Answer 35

Vrai

Question 36

Quels sont des exemples de mesures de l’évaluation des résultats

Answer 36

Mesures qualitatives (surtout processus): Recherche du « pourquoi » et du « comment » de la prise de décision, pas seulement le quoi, où, quand ou « qui ». Entrevues, groupes de discussion, etc.
* Mesures quantitatives nouvelles (effets court terme) :observation de l’environnement alimentaire, ventes à la cafétéria ou
registres des achats et messages véhiculés par les médias
* Mesures quantitatives classiques (effets moyen terme):apport alimentaire, anthropométrie et indicateurs biochimiques et fonctionnels (p. ex., force de préhension)

Question 37

Quand commence l’évaluation?

Answer 37

dès le moment où l’on planifie les objectifs d’intervention

Question 38

Qu’elles sont les étapes essentielles avec les parties prenantes?

Answer 38

• Est-ce que le programme est cohérent ?
• Le programme ou l’intervention sera-t-il au stade de préparation voulu pour produire le résultat espéré?
• Est-il possible de réaliser une évaluation et d’obtenir les informations nécessaires? Ces infos sont-elles disponibles ? Quelles données allez-vous recueillir et de quelle façon les recueillerez-vous?
  -Sera-t-il possible de mesurer ce résultat? Il existe de nombreuses mesures normalisées fort valides et fiables conçues pour mesurer des résultats précis.
• Le problème consiste cependant à s’assurer que la mesure choisie est adaptée à la population ciblée et qu’elle est facilement applicable (p. ex., une mesure qui ne prend pas trop de temps et qui n’est pas trop complexe).
• Ce résultat est-il important pour nos parties prenantes?
• De quelle façon utiliserez-vous les résultats de l’évaluation?

Question 39

Qu’est-ce que le modèle logique?

Answer 39

C’est une illustration visuelle des ressources, des activités et des résultats attendus d’un programme. Il s’agit d’un outil utilisé pour simplifier des relations complexes entre les diverses composantes et qui peut être utilisé pendant la planification, la mise en œuvre et l’évaluation d’un programme »

Question 40

Comment les résultats peuvent-t-ils être utiles dans un but d’apprentissage continu pour mon organisation?

Answer 40

Les organisations apprennent et les apprenants y contribuent

Question 41

Quels sont les enjeux liés à l’utilisation des évaluations?

Answer 41

• enjeux organisationnels
• enjeux scientifiques

Question 42

Quelles questions se posent-t-on en lien avec l’enjeu organisationnel?

Answer 42

• Qui se soucient des informations en lien avec les indicateurs de performance en nutrition?(qui devraient s’en soucier)
• Qui fera quel usage des résultats? Sont-ils impliqués, informés de la démarche?
  Leur compréhension des indicateurs en terme de
  définition claire
  L’acceptation des indicateurs par les personnes concernées
• Que désirent-ils savoir? (Que désirez-vous qu’ils sachent?)
• Pourquoi ont-ils besoin de ces données?
• Quels usages en feront –ils?