Chapitre 6 - Mesurer les variables 2 + Chapitre 7 - L'utilisation des questionnaires Flashcards
Qu’est-ce que la fidélité
Il s’agit de l’évaluation de l’erreur de mesure et elle réflète la consistance avec laquelle un instrument donne le même résultat.
Quels sont les différents types de fidélité
la fidélité test-retest, la consistance interne, la consistance interne moitié-moitié, la consistance inerne inter-items, les formes alternatives et l’accord inter-juges
Qu’est-ce que la fidélité test-retest
Il s’agit de la stabilité temporelle de l’instrument. Ce type de fidélité vise à quantifier les sources d’erreurs associées à l’administration de l’instrument de mesure provennant de l’environnement ou de l’expérimentateur à 2 moments différents pour ce même instrument et à l’évaluation de la consistance des résultats obtenus. L’erreur de mesure correspond aux variations aléatoires observées entre les deux temps de mesure: + délai est long = + variations réflètent changements réels du phénomène mesurer. Si délai court = permet de se souvenir de l’administration précédente.
Qu’est-ce que la fidélité consistance interne
La consistance interne réfère à la cohérence entre les items, donc s’ils sont assez semblables pour atteindre avec constance la même cible. On peut alors prédire avec une certaine fiabilité le résultat d’un item en sachant celui des autres items. Plus cette prédiction est inexacte, plus la fidélité sera faible. Il existe 2 approches d’évaluation de la consistance interne: méthode moitié-moitié et celle inter-items (comparaison)
Qu’est-ce que la fidélité consistance interne de type moitié-moitié
Cette méthode consiste à diviser le questionnaires en 2 parties égales et de voir si le résultats des deux moitiés concordent (mise en relation). Par contre, cette méthode peut poser problème si les items sont organisés en ordre croissant d’importance, si les réponses ultérieurs sont influencées par les items précédents. (méthodes pairs-impairs ou de Spearman Brown)
Qu’est-ce que la fidélité consistance interne de type inter-items
Dans les cas où la méthode moitié-moitié n’est pas applicable, la méthode inter-items est utile. Celle-ci consiste à comparer les items entre eux (méthodes de corrélation avec le score total, coefficient de Kuder-Richardson, ou coefficient alpha de Cronbach)
Qu’est-ce que la fidélité formes alternatives
Cette forme de fidélité permet d’évaluer en même temps l’erreur associée à la construction de l’instrument et celle liée à son administration. Dans cette méthode, les sujets répondent à 2 versions considérées semblables du même instrument (similarité avec une autre version du même instrument).
Qu’est-ce que la fidélité accord inter-juges
Ce type de fidélité réfère à la consistance entre des observations directes. En d’autres mots, il s’agit d’évaluer la consistance des résultats obtenus par 2 expérimentateurs différents.
Quelles sont les sources d’erreur de mesure
-Le fait que le participant soit conscient de la prise de mesure peut influencer les résultats
-Si la prise de mesure influence le résulat (performance au test) on fait alors face à un problème de réactivité
-La prise de conscience de la mesure ne cause pas toujours un problème de réactivité…
Quelles sont les différentes stratégies pour tenter de résuire l’erreur de mesure
-Des consignes neutres et standarisées
-Souligner l’anonymat/confidentialité
-Inclure des items qui masquent la vrai nature du questionnaire (mesure en ligne: avoir des items inversés)
-Inviter les participants à ne pas passer trop de temps à chaque item
-Inclure des mesures de désirabilité sociale
-Ajouter à la recherche des mesures peu réactives
Qu’est-ce que la mesure de la variable indépendante
En expérimental, cela réfère à la vérification de la manipulation (manipulation check) qui désigne jusqu’à quel point la manipulation expérimentale a bien été appliqué. Dans les essais cliniques, on documente la fidélité envers le protocole
Qu’est-ce que la fidélité envers le protocole implique (mesurer VI)
- L’intégrité de l’intervention: Lorsque la manipulation se déroule exactement comme prévue dans le protocole et qu’elle respecte chaque précaution méthodologique pré-établie. Afin de garantir cette intégrité, il faut mesurer à quelle point les expérimentateurs et les sujets observent les consignes et si la manipulation s’est passée comme prévue
- La différenciation entre les conditions: Cela se traduit par un effort délibéré de réduire, puis de mesurer le chevauchement entre les conditions expérimentales
Malgré l’importance des précautions associés au respect du protocole, 55% des essais cliniques entre 1980-1988 n’évaluaient pas la fidélité…
Quelles sont les stratégies ciblant l’intervenant afin de préserver l’intégrité envers le respect du protocole d’intervention (traitement)
-Opérationnaliser les interventions
-utiliser des manuels pour guider le traitement
-Superviser régulièrement les thérapeutes
Quelles sont les stratégies ciblant les clients afin de préserver l’intégrité envers le respect du protocole d’intervention (traitement)
-N’assumez pas sa compréhension de ce qui est discuté en séance
-N’assumez pas son adhésion aux exercises et devoirs
-Anticipez les problèmes pratico-pratiques
Comment peut-on évaluer la différenciation entre les conditions d’intervention
-Utilisez des consignes standarisées, un manuel guidant ce qui doit être spécifiquement fait dans chaque condition, et un guide « pour les nuls » pour les tâches à effectuer
-Contrôler l’impact des assistants de recherche (à l’aveugle, ou bien qualifiés, ou qui ne croient pas dans la manipulation)
-Enregistrez les séances et faites évaluer à l’aveugle le contenu des interventions par des experts
-En post-expérimentation, posez des questions à vos sujets envers le traitement
Pourquoi évaluer la manipulation expérimentale
-Si les résultats obtenus ne sont pas ceux prévus
-Éliminer les explications alternatives, surtout si l’idée est innovatrice
-Savoir si la manipulation s’est déroulée comme prévu. Par ex. si vous avez manipulé:
– l’information : ont-ils compris ?
– une tâche à faire : l’ont-ils faite ?
– des groupes : sont-ils différents ?
Expliquez la mesure des variables nuisibles
Il faut anticiper les sources de biais et les mesurer, afin de pouvoir exclure la possibilité qu’ils expliquent les résultats.
-Un truc qui n’est jamais écrit dans les articles:
* Toujours faire un pilote !
Quels sont les 7 critères pour définir l’efficacité d’une intervention thérapeutique
- Statistique (p < .05): effet plus grand que le hasard, tel que défini par 5 chances sur 100
- Signification clinique: Retour à la moyenne de la population normale
- Stabilité à long terme des acquis
- Généralisation des résultats: Les gains se généralisent, sans créer des problèmes ailleurs…
- Impact positif du traitement sur les proches ou d’autres observateurs
- Rapport coûts/bénéfices: durée; complexité ; $ pour le client + pour l’intervenant
- Acceptabilité sociale de l’intervention
Quel est l’utilité à effectuer des relaces (suivi, follow-up)
L’utilité des relances provient du fait de savoir: quelle direction prennent les résultats avec le temps ?, Est-ce que les gains sont maintenus à long terme ?, Que peut-on réellement conclure à propos de l’efficacité ?(p.ex., toxicomanie : gains élevés au post, mais rechute élevée aux relances.)
Quel est le principal problème rencontré avec les relances
Il s’agit de l’abandon (déménagement, décès, refus)
Quelles sont les étapes à suivre dans la construction d’un questionnaire
- Détermination du problème de l’étude et du sujet traité
- Constitution de la banque d’items
- Contruction d’une échelle de réponse
- Évaluation du bassin initial d’items
- Élaboration d’un mode de présentation du questionnaire
- Création d’un échantillon pour tester la version pilote de l’instrument
- Analyse d’items
Expliquez l’étape de la construction du problème à l’étude et du sujet traité de la construction d’un questionnaire
Le phénomène à mesurer doit être explicite dès le départ. Cette recommandation signale la nécessité d’une connaissance approfondie des théories ayant cours dans le secteur d’intérêt des recherches les plus récentes dans le domaine
Expliquez l’étape de la constitution de la banque d’items de la construction d’un questionnaire
La banque d’items doit représenter fidèlement la ou les dimensions du concept à investiguer. Chaque item doit se rapporter à une dimension homogène du construit. Il est recommandé que les items soit clairs et compréhensibles, pas trop long (-25 mots) et pas d’ambiguité, que le vocabulaire soit simple, sans acronyme (abréviations), sans double négatif, pas plus d’un construit (info) par item (question), ne pas diriger les réponses de façon implicite, pas de fausses prémisses, doivent s’appliquer à l’expérience actuelle de l’individu, etc…
Expliquez l’étape de la construction de l’échelle de réponse de la construction d’un questionnaire
Les échelles de réponses prennent la forme de questionnaires constitués d’items singuliers et dont la fonction principale est de positionner l’individu sur une échelle d’évaluation afin de prédire avec exactitude son comportement. L’échelle de type Likert est la plus populaire et porte sur des items comportant plusieurs catégories de réponse. Elle repose sur la production d’un certain nombre d’énoncés réflètant l’attitude ou le trait étudié (continuum)
En développant une échelle de Likert, en quoi est-ce important de considérer les pour et les contre d’avoir un point milieu (ex: ni en accord, ni en désaccord)
Car le point milieu (ex: 3 sur 5 points) correspond à une attitude moyenne et il ne permet pas de polariser les réponses
Expliquez l’étape de l’évaluation du bassin initial d’items de la construction d’un questionnaire
À cette étape, le bassin d’items obtenus doit être évalué par un comité d’experts permettant ainsi de; vérifier le degrés de polarisation des items, de détecter les items dont le contenu est ambigu, de révéler les items qui doivent être recodés, et de déterminer si toutes les dimensions du concept à l’étude se retrouvent dans l’échelle. Les experts dans la construction d’échelles peuvent émettre leur jugement sur chaque items du questionnaire.
-Pensez à la validité manifeste
-Permet de varier assez le nb items pour bien cerner le construit
Expliquez l’étape de l’élaboration du mode de présentation du questionnaire de la construction du questionnaire
Après avoir révisé le bassim initial d’items, le chercheur doit élaboré le mode de présentation du questionnaire: la claireté des consignes, leur concision, leur brièveté et leur pertinence influence la motivation des sujets à répondre. Il faut donc attiser leur curiosité à répondre au questionnaire. Il est recommandé d’éviter de débuter avec des questions embarassantes, de ne pas mettre les questions les plus importantes à la fin (fatigue)
Expliquez l’étape de la création d’un échantillon pour tester la version pilote de l’instrument de la construction d’un questionnaire
Cette étape consiste à préexpérimenter la 1er version de l’instrument de mesure ainsi que d’estimer l’intérêt, les réactions et les connaissances préalables des participants qui seront par la suite rencontrés. Cela permet de voir si tout est bien compris et de sélectionner les items les plus pertinents:
* Analyses: alpha de Cronbach, structure factorielle, etc
Expliquez l’étape de l’analyse des items de la construction d’un questionnaire
Cette étape réfère à un ensemble d’analyses quantitatives permettant de déterminer la valeur de chaque item. Le chercheur examine minutieusement les résultats rapportés par les sujets de l’échantillon de développement. C’est une étape cruciale dans la construction d’un questionnaire
Est-ce qu’on peut faire un diagnostic d’un problème de santé mentale basé sur les normes d’un questionnaire
Non!
Qu’est-ce qu’une corrélation
Une corrélation permet d’établir la force d’une relation entre 2 variables
Qu’est-ce que l’erreur type de mesure
