Cours #5 Flashcards

1
Q

<p>Quelle est la définition de l'évaluation?</p>

A

<p>Champ de connaissances et de pratique qui vise à déterminer la valeur d’une intervention ou d’une non-intervention pour la société.
Dans la pratique, c’est l’application systématique de méthodes scientifiques pour évaluer la conception, la mise en œuvre, l’amélioration et les résultats d’un programme ou d’une intervention.</p>

How well did you know this?
1
Not at all
2
3
4
5
Perfectly
2
Q

<p>Qu'est-ce qu'une intervention?</p>

A

<p>Action conduite dans l’intention d’avoir un effet sur la société, qu’elle soit qualifiée de programme, d’initiative, de projet, de politique, de règlement, etc.</p>

How well did you know this?
1
Not at all
2
3
4
5
Perfectly
3
Q

<p>Sur quelle partie d'une intervention l'évaluation se concentre-t-elle?</p>

A

<p>L'évaluation peut se concentrer sur toute forme d’ initiatives, que ce soit des programmes, des projets, des sous-programmes, des sous-projets ou seulement des éléments de ceux-ci</p>

How well did you know this?
1
Not at all
2
3
4
5
Perfectly
4
Q

<p>Pourquoi faire des évaluation en nutrition?</p>

A

<p>Nous agissons sur des comportements dont les bénéfices se manifestent rarement à court terme ou pour lesquels nous devons qq fois patienter pour observer les changements.
Nous offrons des services qui sont intangibles, donc difficiles à visualiser contrairement aux services d’autres professions.
-Utilisation des fonds publics
-Attentes multiples avec des ressources limitées
-Devons affronter des projets où les demandes de services nutritionnels sont peu développées (industrie alimentaire- épicerie), négatives ou non désirées (troubles alimentaires) ou trop grandes (clinique externe)
Devons, à l’occasion, représenter des auditoires démunis- non aptes à faire leur plaidoyer – et le faire avec des données fiables</p>

How well did you know this?
1
Not at all
2
3
4
5
Perfectly
5
Q

<p>Quelles sont les finalités de l'évaluation?</p>

A

<p>Rendre des comptes
Améliorer le programme, le service
Renforcer les capacités en réponse aux besoins des parties prenantes
Appuyer le développement de l’organisation
Améliorer l’état des connaissances sur l’efficacité d’une intervention
Améliorer les conditions sociales et collectives</p>

How well did you know this?
1
Not at all
2
3
4
5
Perfectly
6
Q

<p>Pour qui doit-on faire de l'évaluation?</p>

A
<p>Pour les bailleurs de fonds
Pour les décideurs
Pour les parties prenantes
Pour les participants
Pour les citoyens (utilisateurs, non utilisateurs…)
Pour vous-même</p>
How well did you know this?
1
Not at all
2
3
4
5
Perfectly
7
Q

<p>Quelles sont les 8 critères auquels les interventions doivent répondre?</p>

A
<p>D’accessibilité
  D’équité d’accès
  D’efficacité
  De sécurité
  De réactivité
  De continuité
  D’efficience				
 De viabilité</p>
How well did you know this?
1
Not at all
2
3
4
5
Perfectly
8
Q

<p>Quelles sont les obstacle à l'évaluation?</p>

A

<p>1. Le financement, le temps et le personnel qualifié requis peuvent nécessiter l’utilisation de fonds provenant du budget des programmes

2. Les employés assignés à un programme craignent souvent que l’évaluation révèle que leur programme n’est pas efficace
3. L’évaluation pourrait être un fardeau pour la clientèle, empêcher certaines personnes de recevoir des services ou même porter atteinte à la vie privée.
4. L’évaluation peut nécessiter des alliances/partenariats difficiles entre des universitaires, des prestataires de soins (Dt.P.) et des acteurs sur le terrain dont les objectifs (et les intérêts) peuvent être très différents
5. Les évaluations ne font pas toujours preuve de transparence concernant ce qu’elles révèlent (des résultats montrant qu’un programme n’est pas efficace peuvent ne pas être publiés ni présentés).
6. Certains programmes devraient être arrêtés ou modifiés, bref les personnes qui s’investissent dans ces programmes peuvent être réticentes à le faire.</p>

How well did you know this?
1
Not at all
2
3
4
5
Perfectly
9
Q

<p>Que doit-on répondre à l'obstacle Le financement, le temps et le personnel qualifié requis peuvent nécessiter l’utilisation de fonds provenant du budget des programmes?</p>

A

<p>Réponse: Certainement, MAIS si l’on veut maintenir le financement d’un projet, il faut s’assurer qu’il atteigne son objectif. Par ailleurs, certaines données peuvent être consignées et exiger peu de temps et d’argent :
nombre de participants
couverture médiatique
consigner des observations, comme les changements dans les aliments offerts.</p>

How well did you know this?
1
Not at all
2
3
4
5
Perfectly
10
Q

<p>Que doit-on répondre à l'obstacle Les employés assignés à un programme craignent souvent que l’évaluation révèle que leur programme n’est pas efficace?</p>

A

<p>Le principal intérêt des évaluations est de découvrir les façons de corriger, d’améliorer ou de modifier les programmes pour qu’ils fonctionnent.
De bons partenaires doivent établir des rapports de confiance et s’assurer qu’ils ont les mêmes objectifs.
Dynamique organisationnelle, transparence</p>

How well did you know this?
1
Not at all
2
3
4
5
Perfectly
11
Q

<p>Le plan d'évaluation doit faire intervenir les parties prenantes. Donner des exemples de celles-ci.</p>

A

<p>Personnel
Supérieur hiérarchique
Bénéficiaires du programme ou de l’intervention
Bailleur de fonds ou CA selon le cas
Chercheurs et étudiants impliqués dans la collecte selon le cas
Organismes partenaires, collaborateur à la collecte</p>

How well did you know this?
1
Not at all
2
3
4
5
Perfectly
12
Q

<p>Que doit-on répondre à l'obstacle L’évaluation pourrait être un fardeau pour la clientèle, empêcher certaines personnes de recevoir des services ou même porter atteinte à la vie privée. ?</p>

A

<p>Si l’évaluation est un projet de recherche qui fait intervenir des participants, les chercheurs ont besoin d’une approbation éthique pour protéger la vie privée et les renseignements personnels de chaque participant.
Si l’évaluation est un examen des pratiques, ce n’est probablement pas nécessaire. A vérifier avec l’organisation</p>

How well did you know this?
1
Not at all
2
3
4
5
Perfectly
13
Q

<p>Que doit-on répondre à l'obstacle L’évaluation peut nécessiter des alliances/partenariats difficiles entre des universitaires, des prestataires de soins (Dt.P.) et des acteurs sur le terrain dont les objectifs (et les intérêts) peuvent être très différents?</p>

A

<p>Déterminer des objectifs clairs dès le départ.
Définir des rôles clairs dès le départ.
Respect et écoute</p>

How well did you know this?
1
Not at all
2
3
4
5
Perfectly
14
Q

<p>Que doit-on répondre à l'obstacle Les évaluations ne font pas toujours preuve de transparence concernant ce qu’elles révèlent (des résultats montrant qu’un programme n’est pas efficace peuvent ne pas être publiés ni présentés). ?</p>

A

<p>Connaître dès le début l’information qui est importante et qui sera diffusée.
Ne mettre en évidence que les « réussites » n’avance pas à grand-chose à long terme.
Il est utile d’informer les gens sur ce qui ne fonctionne pas, voilà tout un défi</p>

How well did you know this?
1
Not at all
2
3
4
5
Perfectly
15
Q

<p>Que doit-on répondre à l'Obstacle Certains programmes devraient être arrêtés ou modifiés, bref les personnes qui s’investissent dans ces programmes peuvent être réticentes à le faire?</p>

A

<p>N’ayez pas peur de dire ce que vous avez constaté même si cela peut soulever des critiques.
Certains programmes finissent par n’avoir aucun impact ou causer du tort, et de tels résultats doivent toujours être exposés.</p>

How well did you know this?
1
Not at all
2
3
4
5
Perfectly
16
Q

<p>Quelles sont les contraintes de l'évaluation?</p>

A

<p>Ressources
Temps
Accès aux données
Considérations politiques ou stratégiques</p>

How well did you know this?
1
Not at all
2
3
4
5
Perfectly
17
Q

<p>Donner des exemples de contraintes de ressources.</p>

A

<p>Limitation de la portée de l’évaluation
Restriction de la démarche d’évaluation
Dépendance à l’égard des commanditaires du programme</p>

How well did you know this?
1
Not at all
2
3
4
5
Perfectly
18
Q

<p>Donner des exemples de contraintes de temps.</p>

A

<p>Restriction des fenêtres d’observation
Pressions sur la conduite de l’évaluation
Pressions pour la présentation des résultats</p>

How well did you know this?
1
Not at all
2
3
4
5
Perfectly
19
Q

<p>Donner des exemples de contraintes de de données.</p>

A

<p>Restriction des comparateurs possibles
Capacité à générer des données primaires ou recours sources secondaires
Indicateurs de succès (effets court-moyen-long terme)
Contexte et hx de l’intervention</p>

How well did you know this?
1
Not at all
2
3
4
5
Perfectly
20
Q

<p>Donner des exemples de contraintes de politiques.</p>

A

<p>Acteurs impliqués et leur perspective politique de l’évaluation
Préjugés favorables envers certaines méthodes et conclusions</p>

21
Q

<p>À quoi fait référence l'approche évaluative?</p>

A

<p>Fait référence à la manière dont les évaluateurs interagissent avec les individus concernés par l’évaluation. Façon dont l’évaluateur assume son rôle</p>

22
Q

<p>L'approche évaluative varie en fonction de quoi?</p>

A

<p>Des situations
De l’organisation dans laquelle l’évaluateur évolue
De ses caractéristiques personnelles
Des besoins précisés par les personnes concernées</p>

23
Q

<p>Décrire l'approche directive.</p>

A

<p>Evaluateur = rôle d’expert
Neutre et distant par rapport à l’objet évalué
Dirige l’ensemble des opérations et prend les décisions
Acteurs ne sont que des sources d’information à un moment donné
Seul juge de la valeur et du mérite d’un programme</p>

24
Q

<p>Décrire l'approche axée sur le développement d'un programme.</p>

A

<p>Soutient le développement des programmes et de l'organisation pour guider l'adaptation aux réalités émergentes et dynamiques dans une perspective de systèmes complexes
(ie, liens de causalité non-linéaires, incertitude ++, instabilité)
Les résultats sont utilisés pour faire évoluer le programme au cours de sa mise en œuvre, pour l’adapter dans un environnement dynamique
Evaluateur = membre de l’équipe du projet, participe aux décisions
Guide les parties prenantes pour que le projet s’améliore, s’adapte et réponde aux besoins des participants en temps réel</p>

25
Q

<p>Décrire l'approche participative.</p>

A

<p>Processus évolutif selon une démarche de coopération entre des évaluateurs et des personnes concernées par l’évaluation mais qui ne sont pas des évaluateurs professionnels.
Raisons: Pragmatiques, Politiques, Épistémologiques</p>

26
Q

<p>Quelles sont les deux grandes tendances de l'approche participative. Les décrire.</p>

A

<p>Évaluation pratique
Pour résoudre des problèmes, à améliorer un programme et prendre des décisions.
Partenariat égalitaire entre l’évaluateur et les parties prenantes.

Évaluation émancipatrice
Processus doit favoriser l’empowerment des parties prenantes, perspective de justice sociale.
Décisions prises par les parties prenantes et non l’évaluateur</p>

27
Q

<p>Quels sont les domaines d'évaluation (quoi évaluer)?</p>

A

<p>L'évaluation peut se concentrer sur un large éventail de sujets, y compris la pertinence, l'accessibilité, l'intégralité, l'intégration, la réalisation des objectifs, l'efficacité, l'impact, le coût, l'efficience et la durabilité</p>

28
Q

Décrire la figure de la représentation générique de la logique d’une intervention.

A

voit figure dans notes

29
Q

Pourquoi doit-on évaluer les processus en nutrition en santé publique?

A

les mécanismes par lesquels s’opèrent le(s) changement(s) (de comportement alimentaire, par ex) ne résident pas dans une intervention en tant que telle, mais dans les phénomènes qui se déclenchent en réaction. C’est donc à ces phénomènes qu’il faut porter attention»

«… une politique publique n’agit pas directement sur un problème; elle active une série de phénomènes qui finissent par atteindre ce problème. Il s’avère donc nécessaire d’examiner ce qui se passe pendant ce processus.

30
Q

Qu’est-ce que l’évaluation des processus en nutrition clinique?

A

Suppose l’utilisation d’indicateurs qui concernent ce qui est fait pour donner un soin, un service professionnel incluant les activités du nutritionniste, ses conseils professionnels ou la mise en oeuvre du traitement ou d’un programme qu’il utilise. Cette évaluation est souvent menée en continue.

31
Q

Quelles sont les conditions spécifiques au système public agissant sur la performance des nutritionniste?

A
Contexte (ex. gouvernance)
Ressources humaines
Ressources financières
Ressources matérielles
Ressources technologiques
Ressources informationnelles
32
Q

Pourquoi faut-il faire l’évaluation des processus en nutrition clinique?

A

Développer des normes de pratique lesquelles précisent les activités cliniques essentielles, leur fréquence.
Avoir des protocoles
Distinguer et comprendre les proportions de temps direct consacré au patient du temps non consacré au patient
Valoriser des approches différentes
Saisir la complexité des interventions (varient selon clientèle, conditions med)

33
Q

Expliquer la métaphore de la boite noire en lien avec l’évaluation des processus.

A

Entrées -> boite noire -> sorties
Entre les deux ils se passent beaucoup de choses. Il faut le décortiquer. L’évaluation des processus va essayer d’ouvrir cette boite la

34
Q

Qu’est-ce que l’évaluation des résultats?

A

Suppose l’utilisation d’indicateurs qui mesurent les effets d’un soin, d’un service ou d’un programme sur la santé d’un patient ou d’une population en fonction des objectifs visés.(ex. mesure de satisfaction des apprenants)

35
Q

Comment faut-il être pour planifier une évaluation des résultats?

A

Pour planifier une évaluation des résultats, il faut être clair quant aux objectifs de l’intervention (et souvent, ils ne le sont pas suffisamment).

36
Q

Comment doivent être les objectifs dans une évaluation des résultats?

A

Les objectifs doivent être formulés de manière à être mesurables

37
Q

Vrai ou faux.

Il est difficile d’évaluer les impacts à long terme d’un programme.

A

Vrai.

38
Q

Quelle est la séquence typique de résultats d’effets?

A

À court terme (résultats immédiats) -> à moyen terme (résultats intermédiaires) -> à long terme (résultats ultimes ou impacts)

39
Q

Donner des exemples de résultats à court terme.

A

Changements sur le degré de sensibilisation, connaissances, aptitudes, compétences, changements dans l’environnement immédiat

40
Q

Donner des exemples de résultats à moyen terme.

A

Changements de comportements

41
Q

Donner des exemples de résultats à long terme.

A

Changements des conditions sociales, économiques, environnementales ou de santé

42
Q

Qu’est-ce qu’une mesures quantitatives classiques mesurent? Donner des exemples de données.

A

effets moyen terme

apport alimentaire, anthropométrie et indicateurs biochimiques et fonctionnels (p. ex., force de préhension)

43
Q

Qu’est-ce qu’une mesures quantitatives nouvelles mesurent? Donner des exemples de données.

A

Effets à court terme
observation de l’environnement alimentaire, ventes à la cafétéria ou registres des achats et messages véhiculés par les médias

44
Q

Qu’est-ce qu’une mesures qualitatives mesurent? Donner des exemples de données.

A

Surtout le processus
Recherche du « pourquoi » et du « comment » de la prise de décision, pas seulement le quoi, où, quand ou « qui ». Entrevues, groupes de discussion, etc

45
Q

Quand commence l’évaluation?

A

l’évaluation commence dès le moment où l’on planifie les objectifs de notre intervention

46
Q

Quelles questions doit-on se poser pour limiter la liste des résultats à mesurer?

A

Ce résultat est-il important pour nos parties prenantes?
Ce résultat entre-t-il dans notre sphère d’influence?
Notre programme ou notre intervention sera-t-elle au stade de préparation voulu pour produire le résultat espéré? Les résultats visés doivent être atteints dans les délais fixés.
Sera-t-il possible de mesurer ce résultat? Il existe de nombreuses mesures normalisées fort valides et fiables conçues pour mesurer des résultats précis. Le problème consiste cependant à s’assurer que la mesure choisie est adaptée à la population ciblée et qu’elle est facilement applicable (p. ex., une mesure qui ne prend pas trop de temps et qui n’est pas trop complexe).

47
Q

Qu’est-ce que l’on peut dire sur les effets à long terme d’un programme?

A

insister sur l’importance de rester modeste sur l’atteinte des effets. Plus on se dirige vers les effets long terme, plus les facteurs externes sont susceptibles d’exercer une grand rôle sur ces effets et donc, on peut moins attribuer les bénéfices au programme.

48
Q

Que faut-il documenter?

A

l’allocation des ressources (Dt.P./région/demandes de formation)
le volume de produits, services, clientèle
la portée des efforts - principales réalisations (recherche professionnelle)
l’incapacité de fournir des services mais aussi les causes
l’implication des intervenants
Portée d’un porte-parole lors du mois de la nutrition
Rayonnement média d’une clinicienne compte tenu de son expertise

49
Q

Qu’est-ce qu’un modèle logique?

A

Un modèle logique est une illustration visuelle des ressources, des activités et des résultats attendus d’un programme. Il s’agit d’un outil utilisé pour simplifier des relations complexes entre les diverses composantes et qui peut être utilisé pendant la planification, la mise en œuvre et l’évaluation d’un programme