Cours 7, partie A

Question 1

La fidélité d’un test psychométrique, aussi appelé ______, est une mesure de la _____ du test.

Answer 1

Fiabilité
Qualité

Question 2

Fidélité : Elle est définie comme …

Answer 2

-Le degré de précision et de constance des scores obtenus par un test. Plusieurs dimensions de cette mesure sont importantes. Par exemple, le test doit donner des résultats très similaires, si les conditions de passation sont aussi très similaires aux conditions appliquées à l’échantillon normatif.
-Mais, on s’attend que le test puisse donner des résultats similaires quel que soit le jour et les circonstances de sa passation.

Question 3

-La fidélité est formellement définie comme …
-Les critères de fidélité d’un test psychométrique sont liés à …
-On espère que les scores d’un test présentent quoi ?

Answer 3

-Le rapport de la variance vraie à la variance totale du test.
-À sa précision et à sa constance (au temps).
-Que les scores d’un test doivent présenter la plus petite marge d’erreur (variance d’erreur) possible.

Question 4

Que veulent dire les lettres de cette formule : X = t + e

Answer 4

X : variable observable (items, tout à l’intérieur du rectangle)
t : variance vraie (ce qui ns intéresse, dépression, le point milieu de tous les cercles)
e : variance d’erreur

Question 5

Ce modèle : (e) –> (variable observable) <– (variance vraie) = non identifié. Pourquoi ?

Answer 5

-Parce qu’il y a présence de beaucoup de bonnes réponses possibles, donc c’est non identifié. Je dois donner plus d’informations par rapport à ce que je cherche. Ex : x + y = 2 (bcp de possibilités) vs x + 1 = 2

Question 6

Essentiellement, qu’est-ce qui représente “la variance d’erreur” ? Comment les examinateurs rendent plus fidèles les scores aux tests ?

Answer 6

Toute condition non pertinente à l’objectif d’un test.
Si les examinateurs s’efforcent de maintenir des conditions de testage uniformes en contrôlant (l’environnement du testage, les consignes, les limites de temps, le climat interpersonnel), ils réduisent l’erreur de mesure (moins de variance d’erreur).

Question 7

Vrai/Faux : Un test peut être parfaitement fidèle.

Answer 7

Faux ; malgré tous les efforts, aucun test peut être 100% fidèle. Tout test doit être accompagné d’un rapport sur son degré de fidélité (indice de fidélité)

Question 8

Qu’est-ce que l’indice de fidélité ?

Answer 8

Caractérise bien le test sous réserve qu’il soit administré dans les mêmes conditions standardisées et à des personnes similaires à celles qui composent l’échantillon normatif (les caractéristiques de l’échantillon devraient être présentées, ainsi que le type de fidélité).

Question 9

Qu’est-ce qu’un coefficient de fidélité ?

Answer 9

Un coefficient de fidélité exprime une corrélation et est donc compris entre 0 (aucune corrélation) et 1 (corrélation parfaite).
-Un coefficient de 0,80 est le minimum requis pour un test appliqué au contexte clinique.
-Un coefficient de 0,70 est le minimum requis pour le contexte de la recherche.
-Les tests comme ceux de Wechsler (mesurent QI), ont de bons coefficients de fidélité. La plupart des tests d’intelligence sont aux alentours de 0,85 et 0,90.

Question 10

Quels sont les 5 types de fidélité ?

Answer 10

-Fidélité par test-retest
-Fidélité par versions parallèles
-Fidélité par bissection
-Fidélité par homogénéité
-Fidélité par équivalence inter-juges

Question 11

La fidélité par test-retest, aussi appelée ______ _____, est une méthode utilisée pour évaluer la _____ d’un test psychologique. Elle consiste à …
Qu’elle est sa corrélation ?

Answer 11

Stabilité temporelle
Fiabilité
Consiste à administrer le même test à 2 occasions différentes aux mêmes sujets.
Le coefficient de fidélité, dans ce cas, qu’on appelle r, est simplement la corrélation entre les scores obtenus par les mêmes personnes au cours des 2 administrations.

Question 12

La fidélité par test-retest indique l’ampleur avec laquelle …

Answer 12

Les scores peuvent être généralisés à différentes occasions. Plus la fidélité test-retest est élevée, moins les scores des sujets sont susceptibles d’être affectés par les sources d’erreurs.

Question 13

Quelles sont les sources d’erreurs de la fidélité test-retest ?

Answer 13

Les sources d’erreurs de la fidélité test-retest comprennent les fluctuations aléatoires de la performance d’une session à l’autre. Ces variations peuvent résulter, en partie, des conditions de testing qui sont mal contrôlées, mais aussi à des changements internes du sujet entre les deux passations.
Ainsi, plus le coefficient de corrélation test-retest est élevé, plus l’instrument a une bonne fidélité (stabilité) temporelle.

Question 14

Nomme les 2 avantages de la méthode test-retest et l’explication de chacune.

Answer 14

-Stabilité des résultats : Cette méthode mesure la cohérence des résultats lorsque le même test est administré au même échantillon de personne à différents moments. Elle garantit que les résultats d’un test peuvent être reproduits (respectant les mêmes conditions de passation).
-Indicateur de qualité : La fidélité test-retest est un excellent indicateur de qualité métrique d’un instrument de mesure psychologique.

Question 15

Nomme les 3 inconvénients de la méthode test-retest et l’explication de chacun.

Answer 15

-Effet de pratique : Si le retest est effectué trop rapidement, la première passation sensibilise les répondants au thème (construit). En conséquence, le répondant se souviendra des réponses déjà données et les répétera. Cela conduit à des indicateurs de fiabilité biaisés à la hausse.
-Changement d’opinions : Si le retest prend trop longtemps, les convictions peuvent changer en raison des influences situationnelles avant le retest. Dans ces cas-là, il existe une variabilité non prévue aux scores de stabilité. Cela conduit à des indicateurs de fiabilité biaisés à la baisse.
-Intervalle de temps entre les deux administrations : Plus l’intervalle entre les deux administrations successives est long, plus le coefficient de corrélation est faible, ce qui indique une mauvaise fiabilité par inclusion de sources d’erreurs (variabilité d’erreur).

Question 16

La fidélité par versions parallèles, aussi appelée ______ _____, est une méthode utilisée pour évaluer la _____ d’un test psychologique. Elle consiste à …
Qu’elle est sa corrélation ?

Answer 16

Méthode d’équivalence
Fiabilité
Administrer deux versions différentes mais équivalentes d’un même test aux mêmes sujets.
Le coefficient de fidélité est obtenu par le calcul du coefficient de corrélation entre les scores des 2 passations.

Question 17

Vrai/Faux : La fidélité par test-retest et la fidélité par versions parallèles, mesurent l’instabilité temporelle.

Answer 17

Vrai ; utiliser 2 instruments en 2 occasions aux mêmes personnes.

Question 18

Lors de la création/utilisation de versions parallèles, il faut prendre toutes les précautions pour assurer un véritable parallélisme. Quelles sont-elles (3) ?

Answer 18

-Contenir le même nombre d’items, la même forme, et couvrir le même contenu.
-Le niveau de difficulté moyen des items doit être statistiquement le même (p < 0,05).
-Il faut assurer l’équivalence des consignes, de minutage, des exemples, du format de présentation, bref, de tous les aspects du cadre de passation du test.

Question 19

Quel est l’avantage de la méthode versions parallèles ? Définition.

Answer 19

Précision : Cette méthode permet d’évaluer la précision d’un test en éliminant les effets de la mémoire ou de la pratique qui peuvent survenir lors de l’administration répétée du même test.

Question 20

Quels sont les 2 inconvénients de la méthode versions parallèles ? Définition.

Answer 20

-Coût et temps : La production de deux versions d’un même instrument est coûteuse et exige beaucoup de temps.
-Équivalence imparfaite : Deux formes parallèles ne sont jamais équivalente à 100%. Il y a donc une part d’erreur qui sera attribuable à une équivalence imparfaite entre les deux versions ; cette source de fluctuation vient s’ajouter à l’erreur de mesure, ce qui se traduit par une surestimation de l’erreur de mesure.

Question 21

La fidélité par bissection, aussi appelée méthode de partage ou _____, est une méthode utilisée pour évaluer la _____ d’un test psychologique. Elle consiste à …
Cette méthode permet de …

Answer 21

Split-half
Fiabilité
À diviser l’ensemble des items d’un test en deux moitiés équivalentes et à calculer la corrélation entre les scores obtenus pour chaque moitié.
De mesurer la cohérence interne du test, c’est-à-dire à quel point les deux moitiés du test mesurent une même caractéristique psychologique.
–> 1 passation avec 2 séries de résultats.

Question 22

Quels sont les 2 avantages de la méthode par bissection ? Définition.

Answer 22

-Pas de double administration : Cette méthode ne nécessite pas une double administration du test, ni la construction d’une seconde version parallèle de l’instrument.
-Mesure de cohérence interne : Elle permet de mesurer l’homogénéité des deux parties du test.

Question 23

Quels sont les 3 inconvénients de la méthode par bissection ? Définition.

Answer 23

-Équivalence des deux parties : Il faut porter une attention à l’équivalence des deux parties comparées, ce qui représente une difficulté.
-Influence de la méthode de bissection choisie : La fidélité calculée sera influencée par la méthode de bissection choisie (items pairs/impairs, répartition au hasard). Comment la division est faite peut être source d’erreurs.
-Sous-estimation de la fidélité : En scindant l’instrument en deux, le nombre d’items se trouve diminué. Cela a pour effet d’en sous-estimer la fidélité.

Question 24

La fidélité par homogénéité, aussi appelée ______ _____, est une méthode utilisée pour évaluer la _____ d’un test psychologique. Elle consiste à …
L’indice de fidélité s’exprime alors …

Answer 24

Cohérence interne
Fiabilité
À évaluer le degré de cohésion des items qui composent un instrument psychométrique.
L’indice de fidélité s’exprime alors par la mesure de cette cohérence entre les items.

Question 25

Quels sont les 2 avantages de la méthode par homogénéité ? Définition.

Answer 25

-Pas de double administration : Cette méthode nécessite pas une double administration du test, ni la construction d’une seconde version parallèle de l’instrument.
-Mesure de cohérence interne : Elle permet de mesurer l’homogénéité des deux parties du test.

Question 26

Quels sont les 2 inconvénients de la méthode par homogénéité ? Définition.

Answer 26

-Pas de stabilité temporelle : Cette mesure ne tient pas compte de la stabilité temporelle. Elle implique plutôt un score composite obtenu par les corrélations des divers items d’un même instrument. Score composite = score unique qui représente une combinaison de scores provenant de plusieurs variables.
-Dépendance à la longueur du test : La fidélité par l’homogénéité peut être influencée par le nombre d’items dans le test. Plus le nombre d’items est élevé, plus la fidélité par homogénéité est élevée.

Question 27

Quelle est la différence dans l’augmentation de fidélité de manière concrète vs artificielle ?

Answer 27

-Concrète : Augmentation du nombre de personnes qui répondent au test.
-Artificielle : Augmentation du nombre d’items.

Question 28

Fidélité par homogénéité ; coefficient Alpha : L’alpha de Cronbach a été proposé par ___________ (1951) afin de fournir une ______ de la ______ interne d’un test. Cette mesure suppose des valeurs comprises entre _____ et _____. La cohérence interne est celle qui décrit …

Answer 28

Lee Cronbach
Mesure
Cohérence
0 et 1
Dans quelle mesure toutes les questions d’un test mesurent le même concept, et, par conséquent, est liée à l’interrelation des éléments du test.

Question 29

Un coefficient alpha élevé ne garantit pas toujours une bonne cohérence interne, pourquoi ?

Answer 29

L’alpha de Cronbach est également affecté par le nombre d’items du test. Si l’instrument est trop court, la valeur alpha en souffrira ; si la quantité d’items est élevé, la valeur alpha augmente.

Question 30

De nombreux auteurs affirment qu’une valeur alpha supérieure à _____ est déjà satisfaisante. Un résultat supérieur à _____ est parfois considéré comme souhaitable mais il peut être aussi le signe d’énoncés trop _______, items _______ (on ne veut pas ça).

Answer 30

0,7
0,9
Similaires
Colinéaires

Question 31

Le tau-équivalence : Il est important de noter que l’alpha de Cronbach, également connu sous le nom de fiabilité _____ _____, suppose la tau-équivalence. Cependant, cette hypothèse est quoi ?

Answer 31

Tau-équivalente
Elle est violée dans la pratique psychométrique.

Question 32

Coefficient alpha : Le tau-équivalence est une condition de …

Answer 32

De fiabilité qui suppose que tous les items d’un test ont la même importance pour le construit. Cette condition peut être exprimée en termes de charges factorielles (saturation factorielle).

Question 33

Que retrouve-t-on comme mesures dans la Fidélité par homogénéité ?

Answer 33

-Coefficient Alpha
-Mesures parallèles
-Mesures congéneriques

Question 34

Vrai/Faux : Les mesures parallèles (modèle statistique) sont plus strictes que le modèle tau-équivalent.

Answer 34

Vrai

Question 35

Pourquoi les mesures parallèles sont plus strictes que le modèle tau-équivalent ?

Answer 35

-Il suppose non seulement que tous les items ont la même importance pour le construit sous-jacent, mais ce modèle suppose aussi que les variances des items soient statistiquement égales. C’est-à-dire que chaque item a statistiquement la même variance et la même corrélation avec le construit total (ce n’est pas toujours le cas).

Question 36

Les mesures congéneriques sont utilisées …
Elles supposent que …

Answer 36

Dans le cadre de l’évaluation de la fiabilité d’un test psychologique.
Chaque item du test mesure le même construit, mais pas nécessairement avec la même importance. En d’autres termes, chaque item contribue de manière unique à la mesure du construit. Ces mesures n’exigent pas de variances statistiquement égales.
–> cette mesure est proche de la réalité.

Question 37

Dans le cadre de mesures congéneriques, on suppose que chaque item a sa propre charge ______ unique, ce qui signifie que chaque item est corrélé de manière _____ avec son construit _____. Cela permet quoi ?

Answer 37

Factorielle
Unique
Sous-jacent
Une plus grande précision dans l’évaluation de la fiabilité par homogénéité.

Question 38

Lorsque l’on suppose un modèle congénerique, quelles mesures de fiabilité sont utilisées ?

Answer 38

Fidélité composite
Omega de McDonald

Question 39

La fidélité par inter-correcteur, aussi appelée fidélité ______, est une méthode utilisée pour évaluer la ______ d’un test ou d’une évaluation.
Elle mesure quoi ?

Answer 39

Inter-juges
Fiabilité
Le degré d’accord entre deux ou plusieurs évaluateurs qui évaluent indépendamment le même ensemble d’items.

Question 40

La méthode de fidélité par inter-correcteurs est souvent utilisée dans quoi ?

Answer 40

Dans les situations où les évaluations sont subjectives, comme l’évaluation des performances en milieu de travail, l’évaluation des compétences en éducation, ou l’évaluation des symptômes cliniques en psychologie.

Question 41

La fidélité inter-correcteur est généralement évaluée à l’aide …

Answer 41

De mesures statistiques telles que le coefficient de corrélation intra-classe, le coefficient kappa de Cohen, ou d’autres mesures d’accord inter-juges (CVC).

Question 42

Quels sont les 2 avantages de la fidélité par inter-correcteurs ? Définition.

Answer 42

-Réduction du biais d’évaluation : Cette méthode permet de réduire le biais associé à un seul évaluateur.
-Amélioration de la précision : Elle peut améliorer la précision des évaluations en moyennant les scores de plusieurs évaluateurs.

Question 43

Quels sont les 2 inconvénients de la fidélité par inter-correcteurs ? Définition

Answer 43

-Coût et temps : La formation et la coordination de plusieurs évaluateurs peuvent être coûteuses et prendre du temps.
-Variabilité des évaluateurs : Les différences individuelles entre les évaluateurs peuvent introduire une variabilité supplémentaire non voulu dans les scores. Ex: un évaluateur avec 15 ans d’expérience vs 5 ans.