Cours 7 - Stabilité

Question 1

Q’est-ce que l’écart à la moyenne et son symbole ?

Answer 1

distance entre score du participant et la moyenne du groupe x̄

Question 2

Qu’est-ce que la variance ?

Answer 2

La variance est la moyenne des carrés des écarts à la moyenne du score de tous les individus.
Mesure qui sert à déterminer la distance moyenne (au carré) des données par rapport à la moyenne.

Question 3

Qu’elle est la différence entre la variance et l’écart-type ?

Answer 3

écart-type = racine carré de la variance

Question 4

Qu’est-ce que la covariance ?

Answer 4

La covariance est une mesure du degré d’association entre deux variables.
À quel point une donnée occupe la même position dans deux distributions de variables différentes.
À quel point les variables changent ensemble

Question 5

Quelle est la différence entre covariance et la corrélation ?

Answer 5

La corrélation exprime la même chose que la covariance, mais par une métrique standardisée

Question 6

Quels sont les objectifs de l’étape de la stabilité ?

Answer 6

• Vérifier la nature et l’ampleur de l’erreur

- Établir la stabilité interne et temporelle

Question 7

Quels sont les moyens utilisés dans l’étape de la stabilité ?

Answer 7

o	Erreur-type de mesure
o	Analyses d'items
o	Analyses corrélationnelles
o	Approche hypothético-déductive
o	Accord inter-juges

Question 8

Le score observé correspond à quoi ?

Answer 8

vrai score + erreur de mesure

Question 9

Quel est le plus gros problème de l’erreur de mesure et quel serait un moyen simple pour la diminuer ?

Answer 9

l’erreur aléatoire, augmenter la fréquence de passation ou le nombre d’item (variations positives et négatives ont tendance à s’annuler quand le nombre d’observation tend vers l’infini)

Question 10

Quels sont les trois moyens utilisés pour estimer l’erreur de mesure ?

Answer 10

• Stabilité temporelle
• Cohérence interne
• Accord interjuges

Question 11

Quels sont les deux moyens de mesurer la stabilité temporelle?

Answer 11

o Corrélation test-retest

o Corrélation test-retest avec formes parallèles

Question 12

De quoi dépend la qualité de l’estimation de la corrélation test-retest ?

Answer 12

• La qualité de l’estimation dépend de l’intervalle de temps entre les deux passations et des changements survenus chez les participants durant cette période

Question 13

Quel est le délais idéal pour la corrélation test-retest ?

Answer 13

On veut un temps pas trop court et pas trop long : quelques semaines à quelques mois

• Trop long : variabilité expliquées par changements dans la vie de l’individu
• trop court : ressemblance expliquée pat effet de mémoire

Question 14

Qu’est-ce que la corrélation test-retest avec formes parallèles permet de faire que la corrélation test-retest ne peut pas faire et comment y parvient-elle ?

Answer 14

réduit l’effet de mémoire, administrer deux versions du même test

Question 15

De quoi dépend la qualité de l’estimation dans la corrélation test-retest avec formes parallèles ?

Answer 15

o De la qualité du parallélisme entre les deux versions (équivalence des versions)
o De l’intervalle de temps entre les deux passations

Question 16

De quoi doit on s’assurer pour avoir une bonne qualité de parallélisme ?

Answer 16

o Les items sont très similaires (mais pas identiques)
o Le nombre d’items est le même ;
o La structure dimensionnelle est la même
o Les mêmes directives d’administration sont en vigueur ;
o Les deux formes génèrent des résultats avec des moyennes et écart-types équivalents.

Question 17

Quels sont les avantages à la corrélation test-retest avec formes parallèles ?

Answer 17

o Élimination de l’effet de mémoire

o Les deux formes peuvent être administrées en même temps

Question 18

Quels sont les inconvénients à la corrélation test-retest avec formes parallèles ?

Answer 18

o Il faut rédiger 2 fois plus d’items
o Il faut effectuer une validation de « deux instruments »
o Il faut s’assurer que les formes demeurent parallèles

Question 19

Quels sont les moyens de mesurer la cohérence interne ?

Answer 19

o Corrélation « split-half »

o Alpha de Cronbach

Question 20

V ou F : la corrélation split-half ne peut être utiliser que pour mesurer la cohérence interne

Answer 20

f : Peut parfois être utilisé comme mesure artificielle de fiabilité test-retest (mais pas recommandé, car moitié moins d’items)

Question 21

Pourquoi l’estimé du split-half est biaisé ?

Answer 21

Ne mesure pas la fiabilité du test, mais bien la fiabilité d’un test comportant la moitié moins d’items –>sous-estimation fidélité

Question 22

Qu’est-ce qu’on peut faire pour éviter d’avoir une mesure de split-half biaisée ?

Answer 22

utiliser la corrélation de split-half de Spearman-Brown (correction qui considère tout l’instrument)

Question 23

À quoi sert la formule de la prophétie ?

Answer 23

Cette formule permet d’estimer combien d’items il faudrait pour obtenir un « split-half » de X

Question 24

Si le test avait 8 items et que la formule de la prophétie donne 22,3 combien d’item on doit ajouter ?

Answer 24

23-8 = 15

Question 25

V ou F : l’apha de Cronbach vari entre 0 et 1 et plus la valeur s’approche de 1 plus la fiabilité est bonne?

Answer 25

Faux : varie entre -∞ et 1 (mais la plupart du temps il varie entre 0 et 1), si négatif = mauvais signe (erreur de manipulation, items inversés non convertis)

Question 26

Qu’est-ce que mesure exactement l’alpha de Cronbach ?

Answer 26

Indique dans quelle mesure les items du test mesurent une seule chose

Question 27

Quelles sont les deux variables qui influence l’alpha et laquelle est la plus significative ?

Answer 27

le nombre d’items et la corrélation moyenne (+ significative)

Question 28

Qu’est-ce qui peut influencer l’alpha sans être une variable dans la formule ?

Answer 28

La variance : sans variance pas de corrélation donc pas d’alpha

Question 29

Quels sont les deux moyens de mesurer l’accord interjuges ?

Answer 29

1. Corrélations effectuées sur des cotes (corrélation très élevée entre les deux juges)
2. Kappas effectués sur la catégorisation ou la fréquence faite par les juges (Niveau d’accord selon les items)

Question 30

Quel est le principe de base de l’accord interjuges ?

Answer 30

La compréhension de ce qui est observé sera stable dans la mesure où deux juges « voient » la même chose.

Question 31

Quelles sont les conditions pour que les juges puissent voire la même chose ?

Answer 31

o Si la formation est bonne
o Si les juges sont compétents
o Si les comportements à observer sont bien définis
o Si les juges ont les mêmes opportunités d’observer le comportement (Même accès à l’observation)

Question 32

Que pourrait-il se produire au niveau des résultats si les différents juges s’observent faire leur évaluation ?

Answer 32

Réponse biaisée : La convergence de leurs résultats va venir d’autres facteurs et non de l’accord lui-même

Question 33

Identifie la technique statistique ainsi que le construit mesuré selon l’hypothèse suivant :

La corrélation entre les résultats au temps 1 et les résultats au temps 2 sera positive et élevée

Answer 33

Corrélation : fidélité test-retest : stabilité temporelle

Question 34

Identifie la technique statistique ainsi que le construit mesuré selon l’hypothèse suivant :
La corrélation entre les résultats du juge A et les résultats du juge B sera positive et élevée

Answer 34

Corrélation effectuée sur des cotes : accord interjuges

Question 35

Identifie la technique statistique ainsi que le construit mesuré selon l’hypothèse suivante :
Le pourcentage d’accord entre le juge A et le juge B sera élevé

Answer 35

Kappa : accord interjuges

Question 36

Identifie la technique statistique ainsi que le construit mesuré selon l’hypothèse suivant :
La corrélation entre les résultats à la forme A et les résultats à la forme B sera positive et élevée

Answer 36

Corrélation : corrélation test-retest avec forme parrallèles : stabilité temporelle

Question 37

Identifie la technique statistique ainsi que le construit mesuré selon l’hypothèse suivant :

1. La corrélation entre le résultat à l’item 1 et le résultat à l’item 2 sera positive et élevée (à interpréter avec les critères de Cohen)
2. La corrélation entre le résultat à l’item 1 et le score total sera positive et élevée

Answer 37

corrélation : cohérence interne

Question 38

Identifie la technique statistique ainsi que le construit mesuré selon l’hypothèse suivant :
La corrélation entre le « score total » de la première moitié de l’instrument et le « score total » de la deuxième moitié de l’instrument sera positive et élevée

Answer 38

split-half : cohérence interne

Question 39

Identifie la technique statistique ainsi que le construit mesuré selon l’hypothèse suivant :
Plus les participants répondent logiquement (c’est ce qui doit se produire si les items ne contiennent pas d’erreur), plus les items sont inter-corrélés et plus le coefficient sera élevé.

Answer 39

Alpha de Cronbach : cohérence interne

Question 40

Quelle sont les critère pour juger de la fiabilité ?

Answer 40

excellent : 0.90 et +
modéré : 0.80-8.89
acceptable : 0.70-0.79
inacceptable (parfois utilisé en recherche): 0.60-0.69
toujours inacceptable : 0.60 et -

Question 41

Sous quelle condition un critère de stabilité de 0,60 peut être utilisé en recherche ?

Answer 41

large échantillon

Question 42

V ou F : un critère de cohérence interne de 0,95 et + est ce qui est le meilleur à avoir ?

Answer 42

F : suspect, o Réponses trop homogènes, unitaire –> pt oublier des sous-dimensions (sous-représentation du construit)

Question 43

Quel est la formule pour calculer l’intervalle de confiance à un niveau de certitude de 68% et de 95% ?

Answer 43

68% : Score +/- 1 ETM

95% : Score +/- 1,96 ETM

Question 44

Quelle est le nom de la théorie qui dit que les résultas obtenus à l’aide des instruments s’accompagnent d’erreur de mesure ?

Answer 44

théorie classique

Question 45

V ou F : la formule de la prophétie ne peut être utilisée que pour le split-half ?

Answer 45

F : La formule de la prophétie peut être utilisée sur toutes les corrélations (split-half, test-retest, test retest forme parallèle, corrélation entre les juges), par contre elle ne peut pas être utilisée avec l’alpha puisque ce n’est pas une corrélation.