Cours 7 - Stabilité Flashcards
Q’est-ce que l’écart à la moyenne et son symbole ?
distance entre score du participant et la moyenne du groupe x̄
Qu’est-ce que la variance ?
La variance est la moyenne des carrés des écarts à la moyenne du score de tous les individus.
Mesure qui sert à déterminer la distance moyenne (au carré) des données par rapport à la moyenne.
Qu’elle est la différence entre la variance et l’écart-type ?
écart-type = racine carré de la variance
Qu’est-ce que la covariance ?
La covariance est une mesure du degré d’association entre deux variables.
À quel point une donnée occupe la même position dans deux distributions de variables différentes.
À quel point les variables changent ensemble
Quelle est la différence entre covariance et la corrélation ?
La corrélation exprime la même chose que la covariance, mais par une métrique standardisée
Quels sont les objectifs de l’étape de la stabilité ?
- Vérifier la nature et l’ampleur de l’erreur
- Établir la stabilité interne et temporelle
Quels sont les moyens utilisés dans l’étape de la stabilité ?
o Erreur-type de mesure o Analyses d'items o Analyses corrélationnelles o Approche hypothético-déductive o Accord inter-juges
Le score observé correspond à quoi ?
vrai score + erreur de mesure
Quel est le plus gros problème de l’erreur de mesure et quel serait un moyen simple pour la diminuer ?
l’erreur aléatoire, augmenter la fréquence de passation ou le nombre d’item (variations positives et négatives ont tendance à s’annuler quand le nombre d’observation tend vers l’infini)
Quels sont les trois moyens utilisés pour estimer l’erreur de mesure ?
- Stabilité temporelle
- Cohérence interne
- Accord interjuges
Quels sont les deux moyens de mesurer la stabilité temporelle?
o Corrélation test-retest
o Corrélation test-retest avec formes parallèles
De quoi dépend la qualité de l’estimation de la corrélation test-retest ?
• La qualité de l’estimation dépend de l’intervalle de temps entre les deux passations et des changements survenus chez les participants durant cette période
Quel est le délais idéal pour la corrélation test-retest ?
On veut un temps pas trop court et pas trop long : quelques semaines à quelques mois
- Trop long : variabilité expliquées par changements dans la vie de l’individu
- trop court : ressemblance expliquée pat effet de mémoire
Qu’est-ce que la corrélation test-retest avec formes parallèles permet de faire que la corrélation test-retest ne peut pas faire et comment y parvient-elle ?
réduit l’effet de mémoire, administrer deux versions du même test
De quoi dépend la qualité de l’estimation dans la corrélation test-retest avec formes parallèles ?
o De la qualité du parallélisme entre les deux versions (équivalence des versions)
o De l’intervalle de temps entre les deux passations
De quoi doit on s’assurer pour avoir une bonne qualité de parallélisme ?
o Les items sont très similaires (mais pas identiques)
o Le nombre d’items est le même ;
o La structure dimensionnelle est la même
o Les mêmes directives d’administration sont en vigueur ;
o Les deux formes génèrent des résultats avec des moyennes et écart-types équivalents.
Quels sont les avantages à la corrélation test-retest avec formes parallèles ?
o Élimination de l’effet de mémoire
o Les deux formes peuvent être administrées en même temps
Quels sont les inconvénients à la corrélation test-retest avec formes parallèles ?
o Il faut rédiger 2 fois plus d’items
o Il faut effectuer une validation de « deux instruments »
o Il faut s’assurer que les formes demeurent parallèles
Quels sont les moyens de mesurer la cohérence interne ?
o Corrélation « split-half »
o Alpha de Cronbach
V ou F : la corrélation split-half ne peut être utiliser que pour mesurer la cohérence interne
f : Peut parfois être utilisé comme mesure artificielle de fiabilité test-retest (mais pas recommandé, car moitié moins d’items)
Pourquoi l’estimé du split-half est biaisé ?
Ne mesure pas la fiabilité du test, mais bien la fiabilité d’un test comportant la moitié moins d’items –>sous-estimation fidélité
Qu’est-ce qu’on peut faire pour éviter d’avoir une mesure de split-half biaisée ?
utiliser la corrélation de split-half de Spearman-Brown (correction qui considère tout l’instrument)
À quoi sert la formule de la prophétie ?
Cette formule permet d’estimer combien d’items il faudrait pour obtenir un « split-half » de X
Si le test avait 8 items et que la formule de la prophétie donne 22,3 combien d’item on doit ajouter ?
23-8 = 15
V ou F : l’apha de Cronbach vari entre 0 et 1 et plus la valeur s’approche de 1 plus la fiabilité est bonne?
Faux : varie entre -∞ et 1 (mais la plupart du temps il varie entre 0 et 1), si négatif = mauvais signe (erreur de manipulation, items inversés non convertis)
Qu’est-ce que mesure exactement l’alpha de Cronbach ?
Indique dans quelle mesure les items du test mesurent une seule chose
Quelles sont les deux variables qui influence l’alpha et laquelle est la plus significative ?
le nombre d’items et la corrélation moyenne (+ significative)
Qu’est-ce qui peut influencer l’alpha sans être une variable dans la formule ?
La variance : sans variance pas de corrélation donc pas d’alpha
Quels sont les deux moyens de mesurer l’accord interjuges ?
- Corrélations effectuées sur des cotes (corrélation très élevée entre les deux juges)
- Kappas effectués sur la catégorisation ou la fréquence faite par les juges (Niveau d’accord selon les items)
Quel est le principe de base de l’accord interjuges ?
La compréhension de ce qui est observé sera stable dans la mesure où deux juges « voient » la même chose.
Quelles sont les conditions pour que les juges puissent voire la même chose ?
o Si la formation est bonne
o Si les juges sont compétents
o Si les comportements à observer sont bien définis
o Si les juges ont les mêmes opportunités d’observer le comportement (Même accès à l’observation)
Que pourrait-il se produire au niveau des résultats si les différents juges s’observent faire leur évaluation ?
Réponse biaisée : La convergence de leurs résultats va venir d’autres facteurs et non de l’accord lui-même
Identifie la technique statistique ainsi que le construit mesuré selon l’hypothèse suivant :
La corrélation entre les résultats au temps 1 et les résultats au temps 2 sera positive et élevée
Corrélation : fidélité test-retest : stabilité temporelle
Identifie la technique statistique ainsi que le construit mesuré selon l’hypothèse suivant :
La corrélation entre les résultats du juge A et les résultats du juge B sera positive et élevée
Corrélation effectuée sur des cotes : accord interjuges
Identifie la technique statistique ainsi que le construit mesuré selon l’hypothèse suivante :
Le pourcentage d’accord entre le juge A et le juge B sera élevé
Kappa : accord interjuges
Identifie la technique statistique ainsi que le construit mesuré selon l’hypothèse suivant :
La corrélation entre les résultats à la forme A et les résultats à la forme B sera positive et élevée
Corrélation : corrélation test-retest avec forme parrallèles : stabilité temporelle
Identifie la technique statistique ainsi que le construit mesuré selon l’hypothèse suivant :
- La corrélation entre le résultat à l’item 1 et le résultat à l’item 2 sera positive et élevée (à interpréter avec les critères de Cohen)
- La corrélation entre le résultat à l’item 1 et le score total sera positive et élevée
corrélation : cohérence interne
Identifie la technique statistique ainsi que le construit mesuré selon l’hypothèse suivant :
La corrélation entre le « score total » de la première moitié de l’instrument et le « score total » de la deuxième moitié de l’instrument sera positive et élevée
split-half : cohérence interne
Identifie la technique statistique ainsi que le construit mesuré selon l’hypothèse suivant :
Plus les participants répondent logiquement (c’est ce qui doit se produire si les items ne contiennent pas d’erreur), plus les items sont inter-corrélés et plus le coefficient sera élevé.
Alpha de Cronbach : cohérence interne
Quelle sont les critère pour juger de la fiabilité ?
excellent : 0.90 et + modéré : 0.80-8.89 acceptable : 0.70-0.79 inacceptable (parfois utilisé en recherche): 0.60-0.69 toujours inacceptable : 0.60 et -
Sous quelle condition un critère de stabilité de 0,60 peut être utilisé en recherche ?
large échantillon
V ou F : un critère de cohérence interne de 0,95 et + est ce qui est le meilleur à avoir ?
F : suspect, o Réponses trop homogènes, unitaire –> pt oublier des sous-dimensions (sous-représentation du construit)
Quel est la formule pour calculer l’intervalle de confiance à un niveau de certitude de 68% et de 95% ?
68% : Score +/- 1 ETM
95% : Score +/- 1,96 ETM
Quelle est le nom de la théorie qui dit que les résultas obtenus à l’aide des instruments s’accompagnent d’erreur de mesure ?
théorie classique
V ou F : la formule de la prophétie ne peut être utilisée que pour le split-half ?
F : La formule de la prophétie peut être utilisée sur toutes les corrélations (split-half, test-retest, test retest forme parallèle, corrélation entre les juges), par contre elle ne peut pas être utilisée avec l’alpha puisque ce n’est pas une corrélation.
