Exam mi-session Flashcards
Qu’est-ce qu’un devis à cas unique?
Une méthode d’évaluation qui suit un individu, un groupe ou une organisation pour mesurer les effets d’une intervention.
Quels sont les principaux types de devis à cas unique?
- A-B (niveau de base puis intervention)
A-B-A (ajout d’un retrait de l’intervention)
A-B-A-B (ajout d’une réintroduction de l’intervention)
B-A-B (début avec l’intervention, retrait, puis réintroduction)
Quelle est la principale faiblesse des devis à cas unique?
La validité externe est limitée, donc les résultats ne sont pas généralisables.
Quels critères un bon indicateur doit-il respecter?
Être en lien avec les objectifs
Mesurable à plusieurs reprises
Valide (mesurer ce qu’il doit mesurer)
Fiable (donner des résultats cohérents)
Donne un exemple d’indicateur dans un devis à cas unique.
Le niveau d’anxiété mesuré chaque semaine à l’aide d’une échelle standardisée.
Quelles sont les trois grandes approches méthodologiques en évaluation?
Quantitative (données chiffrées, tests, indicateurs)
Qualitative (entrevues, observations, journaux de bord)
Mixte (combinaison des deux)
Quelle est la différence entre une évaluation formative et sommative?
Formative : en cours de programme pour ajuster l’intervention
Sommative : après le programme pour mesurer les effets finaux
Pourquoi l’évaluation est-elle essentielle en travail social?
Elle permet d’ajuster les interventions, de prouver leur efficacité et d’assurer un bon usage des ressources.
Quel est un enjeu éthique important en évaluation?
Le consentement des participants et la confidentialité des données.
Qu’est-ce qu’un test standardisé?
C’est un instrument dont l’administration, la notation et l’interprétation suivent des procédures uniformes, et dont la validité et la fidélité ont été testées.
Quelle est la différence entre une échelle auto-évaluée et une échelle remplie par un tiers?
Une échelle auto-évaluée est remplie par la personne concernée, tandis qu’une échelle remplie par un tiers est complétée par un intervenant, enseignant ou autre observateur.
Pourquoi l’évaluation des échelles doit-elle être adaptée au contexte culturel?
Parce qu’une simple traduction ne garantit pas que l’échelle mesure correctement les concepts dans une autre culture; il faut vérifier ses qualités psychométriques.
Quels sont les principaux types d’échelles de mesure?
Échelles standardisées (ex: Échelle d’estime de soi de Rosenberg)
Échelles auto-ancrées (les repères sont définis par la personne évaluée)
Échelles d’atteinte des objectifs (score basé sur la progression par rapport aux objectifs définis)
Échelles d’impact différentiel (mesurent l’effet perçu d’une intervention)
Échelles d’évaluation des problèmes cibles (mesurent l’évolution d’un problème spécifique).
Qu’est-ce qu’une échelle d’atteinte des objectifs?
Un outil permettant d’évaluer dans quelle mesure les objectifs d’une intervention ont été atteints, en attribuant des scores avant, pendant et après l’intervention.
Quels sont les critères d’une grille d’observation efficace?
Elle doit être claire, fiable, valide, pré-testée et alignée avec les objectifs de l’intervention
Pourquoi est-il important de pré-tester une grille d’observation?
Pour s’assurer qu’elle est bien comprise et adaptée au contexte étudié, et qu’elle permet d’obtenir des données fiables
Quelle est la différence entre une évaluation d’intervention et une évaluation de programme?
Évaluation d’intervention : Porte sur un individu ou un petit groupe, souvent avec un devis à cas unique.
Évaluation de programme : Porte sur un ensemble structuré d’actions visant une population plus large, avec des outils plus généralisables
Quels éléments doivent être analysés avant d’évaluer un programme?
Clarification des objectifs
Identification de la clientèle cible
Documentation de la problématique
Définition des résultats attendus
Vérification des ressources disponibles
Qu’est-ce qu’un modèle logique en évaluation de programme?
Un schéma illustrant comment un programme produit ses effets, en mettant en relation les intrants, les activités, les extrants et les résultats attendus
Quelles sont les principales composantes d’un modèle logique?
Intrants (ressources utilisées)
Activités (actions mises en place)
Extrants (résultats immédiats)
Effets à court, moyen et long terme
Pourquoi utiliser une étude de cas en évaluation de programme?
Elle permet une analyse approfondie d’un phénomène dans son contexte réel, en utilisant plusieurs sources de données (documents, observations, entrevues)
Quels sont les trois types d’études de cas?
Exploratoire (prépare une analyse plus approfondie)
Descriptive (documente un phénomène)
Explicative (cherche à établir des liens de causalité)
Qu’est-ce que la triangulation en évaluation de programme?
C’est l’utilisation de plusieurs sources de données pour renforcer la validité des résultats et compenser les faiblesses d’une seule méthode
Quelles sont les six principales sources de données en étude de cas?
Documents
Données d’archives
Entrevues
Observations directes
Observation participative
Artefacts/objets
Outre les tests standardisés et l’évaluation à cas unique * Trois autres types d’échelles peuvent être utiles afin d’évaluer l’intervention
– l’échelle d’atteinte des objectifs– l’échelle d’impact différentiel– l’échelle d’évaluation des problèmes cibles
L’échelle d’impact différentiel
- Peut être utilisée uniquement à la fin de l’intervention * On demande essentiellement aux clients leur appréciation concernant 1. les changements observés depuis le début de l’intervention 2. dans quelle mesure ils considèrent que ces changements sont dus à l’intervention
L’échelle d’impact différentiel Limites
- il s’agit de perceptions * menace à la validité interne liée à la désirabilité sociale
L’échelle d’évaluation des problèmes cibles
Dans l’ensemble : on examine l’évolution dans le temps des perception de l’amélioration de la situation
