Diapo 4 Flashcards
En quoi concerne la fidélité?
La précision de la mesure ou autrement dit le niveau d’erreur de mesure qu’elle génère
Bien que l’affirmation « un test fiable » est commune, cette qualité en fait ne s’applique pas au test en tant que tel, mais s’applique ___ _____ qu’ils génèrent
aux scores
Vrai ou faux, la fidélité est un concept dichotomique.
faux, c’est un concept de degré
Pour la fidélité, on veut savoir à quel point les v_______ des s________ résultent de d_________ r_____ dans le construit qui nous intéresse
variations des scores
différences réelles
Quelle est la théorie du score vrai?
Score observé = score vrai + erreur de mesure
Vrai ou faux. Il y a toujours une erreur de mesure dans l’instrument.
Vrai
Quels sont les 2 grands types d’erreurs de mesure?
Aléatoire
systématique (de biais)
Quelles sont les différences entre l’erreur de mesure de type aléatoire et systématique?
Aléatoire : fluctuations statistiques non reproductibles; causé par une variation dans l’échantillonnage; peut être minimiser par un plus grand échantillon
Systématique : fluctuations constantes et reproductibles; pas de distribution normale; causé par une mauvaise utilisation de l’instrument, les conditions d’administrations inadéquates ou l’imperfections de l’instrument
Quels sont les 5 indices de fidélité en fonction des source d’erreur de mesure possibles?
.erreur d’échantillonnage de contenu
.erreur d’échantillonnage dans le temps
.incohérence interne, ou inter-items
.incohérence inter-informateurs
.erreur d’échantillonnage de contenu : coefficient de fidélité des formes parallèles
.erreur d’échantillonnage dans le temps : coefficient de fidélité test-retest
.incohérence interne, ou inter-items : coefficient de fidélité moitié-moitié/ coefficient de fidélité cohérence interne
.incohérence inter-informateurs : coefficient de fidélité inter-juges
Qu’est-ce que la fidélité des formes parallèles?
On développe deux formes équivalentes (même concept) du même instrument et on estime la corrélation des scores entre les deux formes pour les mêmes individus
Avec la fidélité des formes parallèles, on ne peut pas simplement choisir des items au hasard dans une grande banque d’items : il faut faire une _______ __________
sélection
quasi-aléatoire
Vrai ou faux. Il n’est pas nécessaire avec la fidélité des formes parallèles que tous les domaines et sous-domaines spécifiques du construit doivent être représentés proportionnellement.
Faux, contraire
Vrai ou faux, avec une bonne fidélité, on s’attend typiquement à un coefficient de 0,70 au minimum
Vrai
Qu’est-ce que la fidélité test-retest?
On évalue les mêmes individus avec le même instrument à deux reprises dans le temps pour comparer les scores obtenus
Quel est l’intervalle de temps habituel pour la fidélité test-retest?
2 semaines à 1 mois
Pourquoi ne faut-il pas s’attendre à des corrélations très élevées pour la fidélité test-retest?
Certains construits changent dans le temps
(intervalle de temps trop long?; changement réel chez les individus?; quantité d’erreurs de mesure?)
Lorsque les chercheurs créent des échelles, ils tentent de regrouper des items qui forment un tout ________, autant sur le plan __________ que sur le plan __________
un tout cohérent
plan conceptuel
plan empirique
Quelles sont les 2 stratégies pour évaluer la cohérence interne d’une échelle?
coefficient de fidélité moitié-moitié
coefficient de cohérence interne
Qu’est-ce que le coefficient moitié-moitié?
On divise en 2 les items d’une échelle et on estime ensuite les corrélations entre ces deux moitiés
Quel est le problème méthodologique de la cohérence interne?
Moins il y a d’items, moins les corrélations vont être fortes
Que peut-on faire pour déterminer la cohérence interne avec des échelles brèves?
on utilise la formule de la prophétie de Sperman-Brown (détermine quelle serait la corrélation avec plus d’items)
Qu’est-ce que le coefficient de cohérence interne?
On estime l’homogénéité de tous les items d’une échelle, soit un estimé statistique quantifiant l’ensemble des inter-corrélations entre tous les items d’une échelle
Quand utiliser le alpha de Cronbach?
C’est un indice utilisé pour estimer la cohérence interne, notamment pour les items CONTINUS
Quelles sont 2 choses que l’on assume avec le alpha de Cronbach?
Que les items mesurent une même variable latente
Que tous les items sont reliés de la même façon à la variable latente
Qu’est-ce que l’alpha de Cronbach statistiquement parlant?
L’équivalent de la moyenne de toutes les moitié-moitié possibles (toutes les combinaisons possibles)
Vrai ou faux. Plus il y a d’items, plus le coefficient alpha sera élevé.
Vrai
Qu’est-ce que le coefficient de Kuder-Richardson-20?
Un cas spécial de Cronbach pour les items dichotomique
Qu’est-ce que le coefficient Omega de McDonald
Contrairement à alpha et KR-20, avec le Omega on teste explicitement que les items mesurent une même variable latente en utilisant l’analyse factorielle
Omega à tendance à procurer un estimé de fidélité d’une échelle plus près de la réalité
Vrai ou faux, les coefficients de cohérence interne varient tous de 0 à 2
Faux, 0 à 1
Pour la cohérence interne en recherche, on accepte parfois des coefficients de ____, tandis que dans la pratique, on préfère une cohérence interne au minimum de ____ et plus
0,60
0,80
Vrai ou faux, on préfère que le coefficient de cohérence ne soit pas trop élevé (par ex. 0.95) pour éviter la redondance de contenu où certaines questions mesurent probablement la même chose
Vrai
Qu’est-ce que le principe de parcimonie?
Lorsque les auteurs pourraient enlever certaines questions
Vrai ou faux, un coefficient de cohérence peu élevé pour une échelle avec peu d’items signifie nécessairement qu’il y a un problème de précision.
Faux
Que peut-on appliquer aux indices pour une échelles avec peu d’items pour connaître la fidélité prédite de l’échelle si elle avait davantage d’items?
la transformation de Spearman-Brown
Comment évalue-t-on la fidélité inter-juges?
On vérifie si les évaluations des mêmes individus effectuées avec le même instrument, mais par différents informateurs sont corrélées
Quelle est la différence entre la fidélité inter-juges et l’accord inter-juges?
Fidélité inter-juges : renvoie au degré de cohérence entre différents informateurs avec des mesures continues; on compare la variabilité entre les informateurs
Accord inter-juges : renvoie plutôt à une mesure de degré auquel des informateurs sont en accord exactement - souvent avec des mesures catégorielles; ne considère pas la variance
Vrai ou faux. Pour les instruments dimensionnels, on obtient généralement des corrélations significativement plus faibles que celles attendues pour les autres types de fidélité
Vrai
Quelles sont les méta-analyses pour l’accord inter-juges?
Achenbach
De Los Reyes
Selon les méta-analyses pour l’accord inter-juges, dans quels contextes l’accord est-il maximisé?
Lorsqu’on connait bien l’enfant
Lorsque les évaluateurs proviennent d’un même contexte d’observation
Lorsque les objets d’évaluation sont des comportements plus facilement observables
Qu’est-ce que l’erreur standard de mesure?
C’est ce que qui donne une indication de la quantité ou du degré d’erreur de mesure associée aux scores d’une échelle
Il s’agit de l’écart-type de la distribution des erreurs
Avec quelle aide l’ESM est-elle déterminée?
Un coefficient de fidélité (Alpha de Cronbach ou autre)
Vrai ou faux. L’ESM est inversement lié à la fidélité
Vrai
À quoi servent les ESM?
À construire un intervalle de confiance autour du score observé
À identifier un critère empirique qui permet de déterminer s’il existe une différence significative entre les deux scores de deux échelles
Un intervalle de confiance est un _______ probabiliste permettant de situer le score observé à l’intérieur d’une _______ de _________ donnée
estimé probabiliste
étendue de scores
