Cours 7 - Les types de fidélités et leurs avantages et inconvénients

Question 1

Nomme les 5 types de fidélité, ainsi que leur 2ème nom

Answer 1

Par test retest : stabilité temporelle

Par versions parallèles : méthode d’équivalence

Par bissection : méthode de partage / split half

Par homogénéité : cohérence interne

Par équivalence inter-juge : Fidélité inter-correcteur

Question 2

Les 5 types de fiabilité = méthode utilisée pour …

Answer 2

Pour évaluer la fiabilité d’un test ou d’une évaluation.

Question 3

En quoi consiste la fidélité test retest?

Answer 3

Elle consiste à administrer le même test à deux occasions différentes aux mêmes sujets.

Question 4

Le coefficient de fidélité de la fidélité par test retest, c’est quoi?

Answer 4

Le coefficient de fidélité, dans ce cas, qu’on appelle rtr, est simplement la corrélation entre les scores obtenus par les mêmes personnes au cours des deux administrations.

Question 5

À quoi on s’attend lors de la passation du tests à 2 moments différents (test retest)?

Answer 5

On s’attend à ce que les résultats soient très similaires. Toutes les différences obtenues dans ces deux passations sont des erreurs.

Question 6

La fidélité par test-retest indique quoi?

Answer 6

l’ampleur avec laquelle les scores peuvent être généralisés à différentes occasions.

Question 7

Plus la fidélité test-retest est élevée, moins …

Answer 7

les scores des sujets sont susceptibles d’être affectés par les sources d’erreurs.

Question 8

Les sources d’erreurs de la fidélité test-retest comprennent quoi?

Answer 8

les fluctuations aléatoires de la performance d’une session à l’autre.

Question 9

Les sources d’erreurs de la fidélité test-retest comprennent les fluctuations aléatoires de la performance d’une session à l’autre. Ces variations peuvent résulter de quoi?

Answer 9

Ces variations peuvent résulter, en partie, des conditions de testing qui sont mal contrôlées, mais aussi à des changements internes du sujet entre les deux passations.

Question 10

Ainsi, plus le coefficient de corrélation test-retest est élevé, plus…

Answer 10

, plus l’instrument a une bonne fidélité (stabilité) temporelle

Question 11

Quels sont les 2 avantages de la fidélité par test retest?

Answer 11

Stabilité des résultats

Indicateur de qualité

Question 12

Quels sont les 3 inconvénients de la fidélité par test retest?

Answer 12

Effet de pratique

Changement d’opinions

Intervalle entre les deux administrations

Question 13

Stabilité des résultats –> L’un des avantages de la fidélité test retest. Explique

Answer 13

Cette méthode mesure la cohérence des résultats lorsque le même test est administré au même échantillon de personnes à différents moments.

Elle garantit que les résultats d’un test peuvent être reproduits (respectant les mêmes conditions de passation).

Question 14

Indicateur de qualité –> L’un des avantages de la fidélité test retest. Explique

Answer 14

La fidélité test-retest est un excellent indicateur de qualité métrique d’un instrument de mesure psychologique.

Question 15

Effet de pratique –> L’un des inconvénients de la fidélité test retest. Explique

Answer 15

Si le retest est effectué trop rapidement, la première passation sensibilise les répondants au thème (au construit).

En conséquence, le répondant se souviendra des réponses déjà données et les répétera.

Cela conduit à des indicateurs de fiabilité biaisés à la hausse.

Question 16

Changement d’opinions –> L’un des inconvénients de la fidélité test retest. Explique

Answer 16

Si le retest prend trop longtemps, les convictions peuvent changer en raison des influences situationnelles avant le retest. Dans ces cas-là, il existe une variabilité non prévue aux scores de stabilité.

Cela conduit à des indicateurs de fiabilité biaisés à la baisse.

Question 17

Intervalle entre les deux administrations
–> L’un des inconvénients de la fidélité test retest. Explique

Answer 17

Plus l’intervalle entre les deux administrations successives est long, plus le coefficient de corrélation est faible, ce qui indique une mauvaise fiabilité par inclusion de sources d’erreurs (variabilité d’erreur).

Question 18

En quoi consiste la Fidélité par versions parallèles

Answer 18

Elle consiste à administrer deux versions différentes mais équivalentes d’un même test aux mêmes sujets.

Question 19

Le coefficient de fidélité par version parallèle est obtenu comment?

Answer 19

Le coefficient de fidélité est obtenu par le calcul du coefficient de corrélation entre les scores des deux passations.

Question 20

Lors de la création/utilisation de versions parallèles, il faut …

Answer 20

prendre toutes les précautions pour assurer un véritable parallélisme.

Question 21

Nommes 3 précautions pour assurer un véritable parallélisme

Answer 21

• Contenir le même nombre d’items, la même forme, et couvrir le même contenu
• Le niveau de difficulté moyen des items doit être statistiquement le même (p < 0,05);
• II faut assurer l’équivalence des consignes, de minutage, des exemples, du format de présentation, bref, de tous les aspects du cadre de passation du test.

Question 22

Quel est l’avantage de la fidélité par versions parallèles?

Answer 22

Précision

Question 23

Quels sont les 2 inconvénients de la fidélité par version parallèle?

Answer 23

Coût et temps

Équivalence imparfaite

Question 24

Précision –> L’avantage de la fidélité par version parallèle. Explique

Answer 24

Cette méthode permet d’évaluer la précision d’un test en éliminant les effets de la mémoire ou de la pratique qui peuvent survenir lors de l’administration répétée du même test.

Question 25

Coût et temps –> L’un des inconvénients de la fidélité par version parallèle. Explique

Answer 25

La production de deux versions d’un même instrument est coûteuse et exige beaucoup de temps.

Question 26

Équivalence imparfaite –> L’un des inconvénients de la fidélité par version parallèle. Explique

Answer 26

Deux formes parallèles ne sont jamais équivalentes à 100 %.

Il y a donc une part de l’erreur qui sera attribuable à une équivalence imparfaite entre les deux versions.

Cette source de fluctuation vient s’ajouter à l’erreur de mesure, ce qui se traduit par une surestimation de l’erreur de mesure.

Question 27

En quoi consiste la fidélité par bissection?

Answer 27

Elle consiste à diviser l’ensemble des items d’un test en deux moitiés équivalentes et à calculer la corrélation entre les scores obtenus pour chaque moitié.

Question 28

La fidélité par bissection est une méthode qui permet de mesurer quoi?

Answer 28

Cette méthode permet de mesurer la cohérence interne du test, c’est-à-dire à quel point les deux moitiés du test mesurent une même caractéristique psychologique.

Question 29

Quels sont les 2 avantages de la fidélité par bissection ?

Answer 29

Pas de double administration

Mesure de cohérence interne

Question 30

Quels sont les 3 inconvénients de la fidélité par bissection ?

Answer 30

Équivalence des 2 parties

Influence de la méthode de bissection choisie

Sous-estimation de la fidélité

Question 31

Pas de double administration –> L’un des avantages de la fidélité par bissection. Explique

Answer 31

Cette méthode ne nécessite pas une double administration du test, ni la construction d’une seconde version parallèle de l’instrument.

Question 32

Mesure de cohérence interne –> L’un des avantages de la fidélité par bissection. Explique

Answer 32

Elle permet de mesurer l’homogénéité des deux parties du test.

Question 33

Équivalence des 2 parties –> L’un des inconvénients de la fidélité par bissection. Explique

Answer 33

Il faut porter une attention à l’équivalence des deux parties comparées, ce qui représente une difficulté.

Question 34

Influence de la méthode de bissection choisie –> L’un des inconvénients de la fidélité par bissection. Explique

Answer 34

La fidélité calculée sera influencée par la méthode de bissection choisie (items pairs/impairs, répartition au hasard, etc.).

Question 35

Sous-estimation de la fidélité –> L’un des inconvénients de la fidélité par bissection. Explique

Answer 35

En scindant l’instrument en deux, le nombre d’items se trouve diminué. Cela a pour effet d’en sous-estimer la fidélité.

Question 36

En quoi consiste la fidélité par homogénéité?

Answer 36

Elle consiste à évaluer le degré de cohésion de tous les items qui composent un instrument psychométrique (ou chacune de ses échelles), lesquels devraient être étroitement liés.

Question 37

comment on obtient l’indice de fidélité par homogénéité?

Answer 37

L’indice de fidélité s’exprime alors par la mesure de cette cohérence entre les items.

Question 38

Quels sont les 2 avantages de la fidélité par homogénéité

Answer 38

Pas de double administration

Mesure de cohérence interne

Question 39

Quels sont les inconvénients de la fidélité par homogénéité?

Answer 39

Pas de stabilité temporelle

Dépendance à la longueur du test

Question 40

Pas de double administration –> L’un des avantages de la fidélité par homogénéité. Explique

Answer 40

Cette méthode ne nécessite pas une double administration du test, ni la construction d’une seconde version parallèle de l’instrument.

Question 41

Mesure de cohérence interne –> L’un des avantages de la fidélité par homogénéité. Explique

Answer 41

Elle permet de mesurer l’homogénéité du test.

Question 42

Pas de stabilité temporelle –> L’un des inconvénients de la fidélité par homogénéité. Explique

Answer 42

Cette mesure ne tient pas compte de la stabilité temporelle.

Elle implique plutôt un score composite obtenu par les corrélations des divers items d’un même instrument.

Question 43

Dépendance à la longueur du test
–> L’un des inconvénients de la fidélité par homogénéité. Explique

Answer 43

La fidélité par homogénéité peut être influencée par le nombre d’items dans le test. Plus le nombre d’items est élevé, plus la fidélité par homogénéité est élevée.

Question 44

On peut augmenter la fidélité de manière concrète et artificielle. Explique

Answer 44

Concret : Augmenter le nombre de personne

Artificielle : Augmenter le nombre d’items et de possibilité des choix de réponse (car augmente la fidélité)

Question 45

Qu’est-ce que mesure la
fidélité par équivalence inter-juges

Answer 45

Elle mesure le degré d’accord entre deux ou plusieurs évaluateurs (ou “correcteurs”) qui évaluent indépendamment le même ensemble d’items.

Question 46

Quand est-ce que la méthode de fidélité par équivalence inter-juges est souvent utilisée?

Answer 46

Cette méthode est souvent utilisée dans les situations où les évaluations sont subjectives, comme :

• L’évaluation des performances en milieu de travail,
• L’évaluation des compétences en éducation
• L’évaluation des symptômes cliniques en psychologie, entre autres

Question 47

La fidélité inter-correcteur est généralement évaluée à l’aide de quoi?

Answer 47

De mesures statistiques

Question 48

La fidélité inter-correcteur est généralement évaluée à l’aide de mesures statistiques telles que ?

Answer 48

• Le coefficient de corrélation intra-classe
• Le coefficient kappa de Cohen
• Ou d’autres mesures d’accord inter-juges (CVC).

Question 49

Quels sont les 2 avantages de la fidélité par équivalence inter-juges

Answer 49

Réduction du biais d’évaluation

Amélioration de la précision

Question 50

Quels sont les 2 inconvénients de la fidélité par équivalence inter-juges

Answer 50

Coût et temps

Variabilité des évaluateurs

Question 51

Réduction du biais d’évaluation –> L’un des avantages de la fidélité par équivalence inter-juges. Explique

Answer 51

Cette méthode permet de réduire le biais associé à un seul évaluateur.

Question 52

Amélioration de la précision –> L’un des avantages de la fidélité par équivalence inter-juges. Explique

Answer 52

Elle peut améliorer la précision des évaluations en moyennant les scores de plusieurs évaluateurs.

Question 53

Coût et temps –> L’un des inconvénients de la fidélité par équivalence inter-juges. Explique

Answer 53

La formation et la coordination de plusieurs évaluateurs peuvent être coûteuses et prendre du temps.

Question 54

Variabilité des évaluateurs –> L’un des inconvénients de la fidélité par équivalence inter-juges. Explique

Answer 54

Les différences individuelles entre les évaluateurs peuvent introduire une variabilité supplémentaire non voulu dans les scores.