Cours 6

Question 1

La fidélité d’un test est aussi appelé _____?

Answer 1

Fiabilité.

C’est une mesure de la qualité du test.

Question 2

La fidélité d’un test est définie comme quoi?

Answer 2

Comme le degré de précision et de constance des scores obtenus par un test.

Le test doit donner des résultats similaires, si les conditions de passation sont aussi similaires aux conditions de passation à l’échantillon normatif.

On s’attend à ce que le test donne des résultats similaires quel que soit le jour et les circonstances de sa passation.

Question 3

Si je dis qu’un test est fidèle, je dis qu’il y a ______________.

Answer 3

Une constance des résultats.

Question 4

La fidélité est FORMELLEMENT définie comme quoi?

Answer 4

Comme le rapport de la variance vraie à la variance totale du test.

Question 5

Les critères de fidélité d’un test psychométrique sont liés à quoi?

Answer 5

À sa précision et à sa constance (au temps). On espère que les scores d’un test doivent présenter la plus petite marge d’erreur (variance d’erreur) possible.

Question 6

Quelle est l’équation pour la fidélité dans un modèle “non-identifié”?

Answer 6

X = t + e

X = variance observable (chaque items)
t = variance vraie (le concept mesuré dans mon outil)
e = variance d’erreur (tout ce qui n’explique pas le phénomène que je tente de mesurer)

Question 7

Essentiellement, toute condition non pertinente à l’objectif d’un test représente quoi?

Answer 7

La variance d’erreur

Question 8

Comment réduire l’erreur de mesure (diminution de variance d’erreur) et rendre plus fidèle les scores des tests?

Answer 8

Si les examinateurs s’efforcent de maintenir des conditions de testage uniformes.

En contrôlant :
1. L’environnement du testage
2. Les consignes
3. Les limites de temps
4. Le climat interpersonnel (avec les sujets)

Question 9

Si nous mettons tous les efforts pour rendre un test le plus fidèle possible, peut-il devenir 100% parfait/fidèle?

Answer 9

Non

Question 10

Tout test doit être accompagné d’un rapport sur quoi?

Answer 10

Sur son degré de fidélité qui caractérisera bien le test sous réserve qu’il soit administré dans les mêmes conditions standardisées et à des personnes similaires à celles qui composent l’échantillon normatif.

Question 11

Un coefficient de fidélité exprime quoi?

Answer 11

Une corrélation. Il est donc compris entre 0 et 1.

Question 12

Quel est le minimum requis de coefficient de corrélation pour un test appliqué au contexte clinique?

… au contexte de la recherche?

exemple?

Answer 12

0,80

0,70

les tests de Wechsler (QI-intelligence) ont, la plupart, des coefficients de fidélité aux alentours de 0,85 et 0,90.

Question 13

Pourquoi on ne voudrait pas avoir un coefficient de fidélité de 0,95?

Answer 13

Car cela voudrait peut-être dire que certains items de notre instrument mesurent la même chose (phénomène de colinéarité).

Question 14

Quel sont les 5 types de fidélité FONDAMENTALES ?

Answer 14

1. Test-retest
2. Versions parallèles
3. Bissection
4. Homogénéité
5. Équivalence inter-juges

Question 15

La fidélité par test-retest est aussi appelée _______________.

Explique-moi elle consiste à quoi?

Le coefficient de fidélité est alors quoi?

Ce type de fidélité indique quoi?

Answer 15

Stabilité temporelle

Elle consiste à administrer le même test à deux occasions différentes aux mêmes sujets.

On l’appelle Rtr et il est simplement la corrélation entre les scores obtenus par les mêmes personnes au cours des deux administrations. Plus il est élevé, plus l’instrument à une bonne stabilité temporelle.

L’ampleur à laquelle les scores peuvent être généralisés à différentes occasions.

Question 16

Nomme-moi des sources d’erreurs de la fidélité test-retest.

Answer 16

1. Les fluctuations aléatoires de la performance d’une session à l’autre (ex. conditions de testing mal contrôlées, changements internes du sujet entre les deux passations).

Question 17

Avantages de la méthode test-retest?

Inconvénient?

Answer 17

1. Stabilité des résultats : garantit que les résultats d’un test peuvent être reproduits.
2. Indicateur de qualité : excellent indicateur de qualité d’un instrument de mesure psychologique.
3. Effet de pratique : si le retest est effectué trop rapidement, la première passation sensibilise les répondants au thème (indicateurs de fiabilité biaisés à la hausse).
4. Changement d’opinions : si le retest prend trop de temps, les convictions peuvent changer en raison des influences situationnelles avant le retest (indicateurs de fiabilité biaisés à la baisse).
5. Intervalle entre les deux administrations : Plus l’intervalle entre les deux administrations est long, plus le coefficient de corrélation est faible (mauvaise fiabilité par inclusion de sources d’erreurs).

Question 18

La fidélité par versions parallèles est aussi appelée _______________.

Explique-moi elle consiste à quoi?

Le coefficient de fidélité est alors quoi?

Answer 18

Méthode d’équivalence

Elle consiste à administrer deux versions différentes, mais équivalentes d’un même test aux mêmes sujets.

Le calcul du coefficient de corrélation entre les scores des deux passations.

Question 19

Lors de la création/utilisation de versions parallèles, il faut prendre toutes les précautions pour assurer un véritable parallélisme.

Comme quoi?

Answer 19

Contenir le même nombre d’items, avoir la même forme et couvrir le même contenu.

Le niveau de difficulté moyen des items doit être statistiquement le même.

Il faut assurer l’équivalence de tous les aspects du cadre (standardisation) de passation du test.

Question 20

Avantage de la versions parallèles?

Answer 20

1. Précision : Évaluer la précision d’un test en éliminant les effets de la mémoire ou de la pratique qui peuvent survenir lors de l’administration répétée du même test.

Question 21

Inconvénients de la versions parallèles?

Answer 21

1. Coût et temps : produire deux tests coûte cher et exige beaucoup de temps.
2. Équivalence imparfaite : Deux formes parallèles ne sont jamais équivalentes à 100% (% d’erreur attribuable à une équivalence imparfaite entre les deux versions ; fluctuation viens s’ajouter à l’erreur de mesure, ce qui se traduit par une surestimation de l’erreur de mesure).

Question 22

La fidélité par bissection est aussi appelée _______________.

Explique-moi elle consiste à quoi?

Elle permet quoi?

Answer 22

Méthode de partage ou split-half

Elle consiste à diviser l’ensemble des items d’un test en deux moitiés équivalentes et à calculer la corrélation entre les scores obtenus pour chaque moitié.

De mesurer la cohérence interne du test, de mesurer à quel point les deux moitiés du test mesurent une même caractéristique psychologique.

Question 23

Avantages de la bissection?

Answer 23

1. Pas de double administration
2. Mesure de cohérence interne : permet la mesure de l’homogénéité des deux parties du test.

Question 24

Inconvénients de la bissection?

Answer 24

1. .Équivalence des deux parties : il faut porter une attention à l’équivalence des deux parties comparées (difficulté).
2. Influence de la méthode de bissection choisie : ex. items pairs/impairs, répartition au hasard = influencera la fidélitée
3. Sous-estimation de la fidélité : en coupant l’instrument en deux, le nombre d’items se trouve diminué = sous-estimation de la fidélité.

Question 25

La fidélité par homogénéité est aussi appelée _______________.

Explique-moi elle consiste à quoi?

L’indice de fidélité s’exprime par quoi?

Answer 25

Cohérence interne

Elle consiste à évaluer le degré de cohésion des items qui composent un instrument psychométrique. Dans quelle mesure toutes les questions d’un test mesurent le même concept et est liée à l’interrelation des éléments du test.

Par la mesure de cette cohérence entre les items.

Question 26

Avantages homogénéité?

Answer 26

1. Pas de double administration
2. Mesure de cohérence interne : permet de mesurer l’homogénéité des deux parties du test.

Question 27

Inconvénients homogénéité?

Answer 27

1. Pas de stabilité temporelle : score composite obtenu par les corrélations des divers items d’un même instrument.
2. Dépendance à la longueur du test : plus le nombre d’items est élevé, plus la fidélité par homogénéité est élevée.

Question 28

Alpha de Cronbach (proposé par Lee Cronbach, 1951), a été proposé afin de fournir quoi?

Elle est aussi appelée :

Answer 28

Une mesure de la cohérence interne d’un test.

Fiabilité tau-équivalence.

Question 29

Parle moi de l’Alpha de Cronbach.

Answer 29

1. Cette mesure suppose des valeurs comprises entre 0 et 1.
2. Un coefficient élevé ne garantit pas toujours une bonne cohérence interne puisqu’il est affecté par le nombre d’items d’un test. (Plus d’items = alpha augmente).
3. Une valeur alpha supérieure à 0,70 est satisfaisante. Un résultat supérieur à 0,90 est souhaitable, mais peu aussi être considéré ayant des éléments trop similaires (colinéarité).

Question 30

Qu’est-ce qui est fondamentale pour Alpha de Cronbach?

Answer 30

La tau-équivalence. Elle suppose la tau-équivalence.

La tau-équivalence est une condition de fiabilité qui suppose que tous les items d’un test ont la même importance pour le construit. Cette condition peut être exprimée en termes de CHARGES FACTORIELLES.

Question 31

Dans la fidélité par homogénéité, nous avons l’alpha de Cronbah, mais nous pouvons retrouver aussi les mesures parallèles.

Explique-le moi.

Answer 31

C’est un modèle statistique encore plus strict que le modèle tau-équivalent.

Il suppose que tous les items ont la même importance pour le construit sous-jacent ET que les variances des items soient statistiquement égales.

(Donc chaque item aurait statistiquement la même variance et la même corrélation avec le construit total)(avec le F de Levine)

Question 32

Dans la fidélité par homogénéité, nous avons l’alpha de Cronbah, les mesures parallèles, mais nous pouvons retrouver aussi les mesures congénériques.

Explique-le moi.

Answer 32

Elles sont utilisées dans le cadre de l’évaluation de la fiabilité d’un test. Elles supposent que chaque item du test mesure le même construit, mais pas nécessairement avec la même importance.

Chaque item contribue de manière UNIQUE à la mesure du construit. Elle n’exige pas non plus de variance statistiquement égale.

Question 33

Qu’est-ce qui est supposé dans le cadre des mesures congénériques?

Answer 33

Que chaque item a sa propre charge factorielle unique. Que chaque item est corrélé de manière unique avec son construit sous-jacent.

Cela permet une plus grande précision dans l’évaluation de la fiabilité.

Question 34

Qu’est-ce qu’on peut utiliser lorsque l’on suppose un modèle congénérique?

Answer 34

La fidélité composite et l’Omega de Mcdonald

Question 35

La fidélité par inter-correcteurs est aussi appelée _______________.

Explique-moi elle consiste à quoi?

Elle est souvent utilisée dans quel genre de situation?

Answer 35

Fidélité inter-juges

Elle consiste à mesurer le degré d’accord entre deux ou plusieurs évaluateurs qui évaluent indépendamment le même ensemble d’items.

Dans les situations où les évaluations sont subjectives.

Question 36

Comment la fidélité inter-correcteur est généralement évaluée?

Answer 36

À l’aide de mesures statistiques telles que le coefficient de corrélation intra-classe, le coefficient kappa de Cohen

Question 37

Avantages de inter-correcteurs?

Answer 37

1. Réduction du biais d’évaluation
2. Amélioration de la précision : en moyennant les scores de plusieurs évaluateurs

Question 38

Inconvénients inter-correcteurs?

Answer 38

1. Coût et temps : formation et coordination de plusieurs évaluateurs est coûteux et prend du temps.
2. Variabilité des évaluateurs : différences individuelles = introduire une variabilité supplémentaire non voulu dans les scores.

Question 39

La fidélité des tests de vitesse et puissance :

Parle-moi d’un test de vitesse.

Answer 39

1. Rapidité de la performance explique les différences individuelles observées.
2. Items tous faciles et qui font partie des habiletés maîtrisées par les sujets.
3. On fixe une limite de temps si court que la personne ne peut pas compléter tous les items.

Le score de chaque personne reflète son rytme de travail.

Question 40

Parle-moi d’un test de puissance.

Answer 40

1. Il offre une limite de temps suffisamment longue pour que tous puissent tenter de répondre à chacun des items.
2. Les items sont ordonnés selon une échelle de difficulté qui augmente rapidement jusqu’à des items à peu près insolubles.
3. Personne ou presque ne peut avoir un score parfait.

Question 41

Les tests de vitesse et de puissance sont tous les deux conçus pour quoi?

Answer 41

Pour empêcher une réussite parfaite.

Pareille précaution s’explique par le fait qu’un score parfait est indéterminé.

La variation des résultats indique l’indice de fidélité = plus de variation, moins de fidélité.

Question 42

Dans l’interprétation des scores individuels, on peut comprendre la fidélité d’un test sous la forme de quoi?

Answer 42

d’une erreur type de mesure (ETM), aussi nommée erreur type de scores individuels ou erreur standard de mesure ESM).

Question 43

L’erreur-type de mesure donne une idée de quoi?

Answer 43

De la variabilité des résultats que vous obtiendriez si vous répétiez la même mesure plusieurs fois.

Plus l’erreur type est petite, plus la mesure est précise.

Question 44

L’erreur type de mesure peut être calculée à l’aide de la formule suivant :

Answer 44

ETM = 1ET. racine carré de 1 - CF

ETM = erreur type de mesure
ET = écart-type de la distribution des scores de passation
CF = coefficient de fidélité (indice de corrélation)

Question 45

Interprétation des scores individuels :
ETM = 1.7,1 racine carré de 1 - 0,88 = 2,46

Donne-moi l’interprétation.

Answer 45

Si une personne passe le test plusieurs fois, on s’attend à ce que la plupart des scores soient dans un intervalle de + ou - 2,46 points autour de son score moyen.

Question 46

L’erreur type de mesure dépend à la fois de _________________________ et _________________.

Answer 46

la variabilité des scores dans la population et du degré de fidélité de l’instrument.

Question 47

Que peut-on faire pour réduire l’erreur-type de mesure?

Answer 47

On peut augmenter la fidélité de l’instrument ou réduire la variabilité des scores.

Question 48

L’ETM s’interprète à l’aide des pourcentages associés aux divers segments de la distribution normale, soit :

Answer 48

les individus regroupent entre -1 et 1 É.T = environ 68% des réponses de l’individu se localiseront entre -1 et 1 ETM.

Environ deux chances contre une que ces réponses se localiseront à l’intérieur de cet intervalle.