Ppt. 4

Question 1

Qu’est-ce que la fidélité?

Answer 1

La précision de notre mesure, ou dit autrement, le niveau d’erreur de mesure qu’elle génère.

(La confiance)

Question 2

Est-ce que l’appellation “un test fiable” concerne le test ou bien les résultats?

Answer 2

Les scores générés par le test.

Cette distinction peut sembler une subtilité, mais elle est fondamentale pour comprendre les implications du concept de fidélité
Affirmer qu’un test est fiable sous-entend que la fidélité a été établie de façon permanente, pour toutes les utilisations, avec tous les utilisateurs.trices

Question 3

En quoi la fidélité est-elle cruciale en psychoéducation?

Answer 3

Sur le plan clinique, avant de prendre des décisions importantes, on veut savoir à quel point les variations des scores – entre différents individus, ou entre différents moments de mesure – résultent de différences réelles dans le construit qui nous intéresse ou plutôt d’imprécisions (erreurs) de l’instrument de mesure qu’on utilise.

Bref, la justesse !

Question 4

Quelle est la formule de la théorie du score vrai?

Answer 4

Score = score + erreur de
observé vrai mesure

Question 5

Vrai ou faux : Un instrument de mesure peut ne pas avoir d’erreur de mesure.

Answer 5

Faux! Il y a toujours de l’erreur de mesure, mais les chercheurs tentent à la limiter.

Question 6

Pourquoi doit-on bien connaitre la fidélité des instruments?

Answer 6

Afin d’interpréter de manière rigoureuse et prudente les scores.

Question 7

Vrai ou faux : c’est notre rôle de connaître la fidélité d’un test

Answer 7

Vrai! Ce n’est pas le rôle des chercheurs/auteurs

Question 8

Quel est le mot en P en psychométrie?

Answer 8

Prudence! :D

Question 9

Vrai ou faux : La fiabilité a un impact sur la corrélation entre deux variables.

Answer 9

Vrai! La corrélation va dépendre de l’erreur de mesure (α = ). Plus il y a d’erreur, plus la corrélation pourrait s’éloigner de la corrélation réelle. (Voir diapo 8)

Question 10

Quels sont les deux grands types d’erreurs de mesure?

Answer 10

Aléatoires et systématiques (ou biais)

Question 11

Qu’est-ce qu’une erreur aléatoire?

Answer 11

• Fluctuations statistiques non reproductibles, toujours présentes pour tous les instruments.
• Autant au-dessus qu’en dessous de la moyenne
• Distribuées normalement

Question 12

Qu’est-ce qu’une erreur de biais ou systématiques?

Answer 12

• Fluctuations constantes et reproductibles, qui sont toujours dans la même direction. Pas dans tous les instruments.
• Surestimation ou sous-estimation constante des paramètres
• Pas distribuées normalement

Question 13

Quelle est la cause d’une erreur aléatoire?

Answer 13

Variation dans l’échantillonnage

Question 14

Quelles sont les causes possibles d’une erreur de biais?

Answer 14

• Mauvaise utilisation de l’instrument
• Conditions d’administration inadéquates
• Imperfections de l’instrument

Question 15

Comment réduire les erreurs aléatoires?

Answer 15

• plus grands échantillons
• plus de moments de mesure

Question 16

Vrai ou faux : les erreurs systématiques sont facilement détectables.

Answer 16

Faux. Elles sont difficiles à détecter, car elles sont souvent inconnues.

Question 17

Quels sont les 4 types de sources d’erreur de mesure?

Answer 17

• Erreur d’échantillonnage de contenu
• Erreur d’échantillonnage dans le temps
• Incohérence interne, ou inter-items
• Incohérence inter-informateurs

Question 18

Quel est l’indice de fidélité pour l’erreur d’échantillonnage de contenu?

Answer 18

Coefficient de fidélité des formes parallèles (coefficient de congruence)

Question 19

Indice de fidélité pour l’erreur d’échantillonnage dans le temps

Answer 19

Coefficient de fidélité test-retest (ou de stabilité temporelle)

Question 20

Indice de fidélité pour l’incohérence interne ou inter-termes

Answer 20

Coefficient de fidélité moitié-moitié
Coefficient de cohérence interne

Question 21

Quelle est la formule du score vrai utilisée avec des données?

Answer 21

rx = var vraie / var erreur

Var = variance
rx = fidélité

Question 22

Plus il y a de la variance vraie, plus la fidélité sera …

Answer 22

Élevée

Question 23

Qu’est-ce que la fidélité des formes parallèles?

Answer 23

On développe deux formes équivalentes du même instrument et on estime la corrélation des scores entre les deux formes pour les mêmes individus.
Instruments tout à fait similaires conceptuellement, mais avec des items légèrement différents.

**plus rare en psychoéducation, davantage utilisé en éducation

Question 24

Qu’est-ce qui est crucial pour l’évaluation de la fidélité des formes parallèles?

Answer 24

L’échantillonnage de contenu.
* S’il n’y a pas beaucoup d’erreur de contenu, il devrait alors y avoir une forte corrélation

Question 25

Quel type de sélection faut-il utiliser pour la fidélité de formes parallèles?

Answer 25

Sélection quasi-aléatoire!
Pourquoi? Les domaines et les sous-domaines doivent tous être représentés. On ne pourrait pas juste prendre des items au hasard dans la banque d’items.

Question 26

Quel coefficient devrait-on s’attendre au minimum pour la fidélité des formes parallèles ?

Answer 26

0,70

Par contre, ce n’est qu’une attente, il n’y a pas de coefficient officiel minimum. Ça change selon le contenu.

Question 27

Nommez un exemple de construit relativement stable dans le temps

Answer 27

Les traits de personnalité

Question 28

Pour estimer la fidélité test-retest, l’intervalle doit être assez _____

Answer 28

Court! (Environ 2 semaines à 1 mois)

Question 29

Vrai ou faux : Une bonne corrélation suggère une bonne précision. Donc, peu d’erreurs de mesure.

Answer 29

Vrai!!

Question 30

Dans la fidélité des formes parallèles : l’instrument est considéré fiable à partir d’une corrélation de combien?

Answer 30

0.70

Question 31

Vrai ou faux : Certains construits sont assez plastiques ou changeants dans le temps.

Answer 31

En effet, il ne faut pas s’attendre à des corrélations élevées pour la fidélité test-retest, car certains construits changent. C’est le cas pour les problèmes intériorisés.

Il pourrait également y avoir des facteurs environnementaux pour le changement au niveau des scores.

Question 32

Le tout cohérent contient quoi? (cohérence interne)

Answer 32

Plan conceptuel et plan empirique

Question 33

Qu’est-ce que le coefficient moitié-moitié?

Answer 33

Les chercheurs divisent en deux les items d’une échelle et on estime ensuite les corrélations entre ces deux moitiés.

Question 34

Pour la cohérence interne, faut-il une sélection aléatoire ou quasi-aléatoire?

Answer 34

Quasi-aléatoire ! Car on doit avoir une bonne représentativité dans chaque moitié

Question 35

Qu’est-ce que la formule de la prophétie de Spearman-Brown?

Answer 35

ra = 2 (rsh) / 1 + rsh

ra est la corrélation ajustée avec tous les items
rsh est la corrélation avec la moitié des items (split half)

Question 36

Dans la cohérence interne, quand il y a moins d’items, la corrélation est alors moins ___

Answer 36

forte. Cela est lié à la prophétie de Spearman! Plus d’items = plus de fidélité.

Question 37

Qu’est-ce qu’un item dichotomique?

Answer 37

Une question avec seulement deux réponses (oui/non, vrai/faux)

Question 38

Qu’est-ce que le Kuder-Richardson?

Answer 38

Cas de alpha de Cronbach, mais spécifique aux items dichotomiques.

Question 39

Qu’est-ce que le Omega de McDonald?

Answer 39

Mesure explicite si les items mesurent une même variable latente en utilisant l’analyse factorielle. Estime la fidélité d’une échelle plus près de la réalité que le alpha ou le KR-20.

Question 40

Qu’est-ce que la fidélité inter-juges?

Answer 40

Degré de cohérence (ou corrélation) entre différents informateurs avec des mesures continues; on compare la variabilité (variance) entre les informateurs

Question 41

Qu’est-ce que l’accord inter-juge?

Answer 41

Une mesure de degré auquel des informateurs sont en accord exactement – souvent avec des mesures catégorielles; ne considère pas variance

Question 42

vrai ou faux : Les instruments dimensionnels ont généralement des corrélations significativement plus faibles.

Answer 42

Vrai! Les corrélations sont souvent inférieures à 0,70.

Question 43

Quelles sont les 2 méta-analyses sur les échelles d’évaluation couvrant des études sur une période de 30 ans?

Answer 43

Achenbach, McConaughy et Howell (1987)
De Los Reyes et al. (2015)

*une méta-analyse bien faite se maintient dans le temps