Cours 6

Question 1

Qu’est-ce que la fidélité d’un test permet de déterminer?

Answer 1

La fidélité d’un test permet de déterminer dans quelle mesure les différence individuelles dans les scores aux test peuvent être attribuées à de «réelles» différence sur le plan des caractéristiques mesurées et dans quelles mesure elle doivent être attribuées à des erreurs dues au hasard.

Question 2

Qu’est-ce qui peut représenter la variance d’erreur?

Answer 2

Toute condition non pertinente à l’objectif d’un test.

Question 3

Comment est-il possible de réduire la variance d’erreur et rendre ainsi les scores aux tests plus fidèles?

Answer 3

Si les examinateurs s’efforcent de maintenir des conditions de testage unifmores en contrôlant;

1. L’environnement du testage
2. Les consignes
3. Les limites de temps
4. Le climat interpersonnel (avec les sujets)

Question 4

Vrai ou Faux: si les conditions sont méticuleusement contrôlées, il est possible de se débarrasser de la variance d’erreur.

Answer 4

Faux, malgré tous les efforts, aucun test n’est parfaitement fidèle. Ainsi, tout test doit être accompagné d’un rapport sur son degré de fidélité (indice de fidélité)

Question 5

Quel bémol devons-nous considérer lorsque nous consultons l’indice de fidélité d’un test?

Answer 5

Un indice de fidélité caractérise bien le test sous réserve qu’il soit administré dans les mêmes conditions standardisées et à des personnes similaires à celles qui composent l’échantillon normatif.
Pour ce faire, les caractéristiques de l’échantillon et le type de fidélité devraient être présentées

Question 6

Quel est l’objet commun de tous les types de fidélité?

Answer 6

Tout les types de fidélité ont pour objet un degré d’association entre deux série de scores.

Question 7

Qu’est-ce qu’un coefficient de corrélation exprime concrètement?

Answer 7

Un coefficient de corrélation exprime le degré de correspondance entre deux série de scores variant de -1 à +1.

Question 8

Comment pourrions nous décrire la hasard de façon statistique?

Answer 8

Le hasard peut être reproduit par une corrélation de 0, ce qui indique l’absence complète de relation entre les variables mesurées.

Question 9

Quels sont les barèmes de significativité (classification) selon Furr?

Answer 9

• Plus petit que 0,10 = très faible corrélation
• Autour de 0,15 = faible corrélation
• Autour de 0,35 = corrélation modérée
• Autour de 0,60 = corrélation forte
• Plus grand que 0,80 = très forte corrélation

Question 10

À partir de quelle valeur un coefficient de fidélité est considéré comme acceptable?

Answer 10

0.72

Question 11

Quelle valeur doit avoir un coefficient de fidélité pour être désirable?

Answer 11

0.80

Question 12

Quelle produit est retiré de la standardisation d’un coefficient de covariation?

Answer 12

Dès qu’un coefficient de covariation est standardisé, il devient un coefficient de corrélation.

Question 13

Qu’est-ce qu’un coefficient de covariation?

Answer 13

L’association de deux variances

Question 14

Quelle est la formule du calcul du degré de liberté dans un contexte de corrélation?

Answer 14

D = (n-2)

Question 15

Quelle est la formule du calcul du degré de liberté dans un contexte de moyenne?

Answer 15

D = (n-1)

Question 16

Quelle est la plus petite corrélation significative d’un échantillon de 10 personnes?

Answer 16

La plus petite corrélation significative (p<0,05) pour un échantillon de 10 personnes est de 0,63. Tous les indices de corrélations plus grands ou égaux à cette valeur sont significatif, tous les indices de corrélation plus petits sont non-significatifs.

Question 17

Quelle sont les difficultés rencontrées lors de l’utilisation de la technique du test-retest?

Answer 17

1. L’effet de pratique peut augmenter les scores au retest

2. Si l’intervalle est très court, les sujets peuvent se rappeler de leurs réponses (effets de la mémoire)

Question 18

Combien de temps les testeurs laissent-ils généralement passer entre la première et la deuxième passation du test?

Answer 18

Normalement, les testeurs laissent passer;

• 3 semaines
• 3 mois
• 6 mois
• 9 mois
• 12 mois

Question 19

Quels sont les différents types de fidélité?

Answer 19

• Fidélité par test-restest
• Fidélité par version parallèles
• Fidélité par bissection
• Fidélité par structure interne
• Fidélité par équivalence interjuge

Question 20

Quelles sont les principales caractéristiques de la fidélité par test-retest? (6)

Answer 20

1. On administre et on ré-administre le même test aux même sujets (deux temps, deux séances de testage)
2. Le coefficient de validité (Rtr) équivaut tout simplement à la corrélation entre les scores obtenus par les mêmes personnes aux deux séances de testage.
3. La variance d’erreur correspond aux fluctuations aléatoires des performances d’une séance de testage à l’autre.
4. Cette fidélité indique dans quelle mesure il est possible de généraliser, à des occasions diverses, les scores d’un test; plus elle est élevée, moins les scores sont influencés par des changement quotidiens imprévisibles
5. Lorsqu’on inclut ce type de fidélité dans le manuel du test, il faut spécifier l’intervalle de temps entre les deux passations.

Question 21

Quelles sont les principales caractéristiques de la fidélité par versions parallèles?

Answer 21

1. Bon moyen de minimiser les difficultés soulevées par le test-retest
2. Les individus peuvent passer une version lors de la première séance de testage et une autre version du même test lors de la deuxième séance.
3. Prendre les précautions nécessaires pour s’assurer d’une véritable parallélisme.

Question 22

Dans la fidélité par version parallèle, comment pouvons-nous nous assurer d’un véritable parralélisme?

Answer 22

1. Les test utilisés doivent contenir le même nombre d’items, la même forme et couvrir le même type de contenu
2. Le niveau de difficulté moyen des items doit être le même
3. Il faut assurer l’équivalence de tous les aspects du cadre de passation du test (des consignes, de minutage, des exemples, du format de présentation, etc.)

Question 23

Quelle est la principale faiblesse de la fidélité par version parallèle?

Answer 23

Les sujets peuvent différer quant à leur degré d’amélioration due à la pratique, ce qui implique une autre forme de variance d’erreur qui tends à réduire la corrélation entre les deux versions du test.

Question 24

Comment s’opérationnalise la fidélité par bissection?

Answer 24

Nous devons diviser le test en deux parties équivalentes, ce qui permet de calculer deux scores indépendants. Étant donné que l’unique passation n’implique qu’une seule version d’un test, le coefficient de validité obtenu porte le nom de coefficient de validité interne. Il faut décider comment diviser le test en deux de manière à ce que les deux moitiés soient aussi semblables que possible.

Question 25

Quelle formule s’applique aux items de nature dichotomiques?

Answer 25

La formule KR (Kuder-Richardson) s’applique aux items de nature dichotomique. Plus précisément la formule KR-20.

Question 26

Qu’est-ce que la fidélité de type coefficient Alpha?

Answer 26

Il s’agit d’une seule passation, d’une seule version, d’un seul test. Cette fidélité a pour fondement l’homogénéité entre les réponses de tous les items du test.

Question 27

Quelle formule s’applique aux items selon une échelle de Likert ou de type de Likert?

Answer 27

La formule Alpha

Question 28

Quelle est la principale faiblesse du coefficient Alpha?

Answer 28

Ce coefficient varie beaucoup en fonction du nombre de participants et en fonction de la quantité d’items au sein du test. Bien que la variation en fonction du nombre de participant soit une bonne chose (car on se rapproche de la population), la variation en fonction du nombre d’items provoque de fausses fortes corrélations. C’est pourquoi il est tranquillement remplacé par le Omega de McDonald qui est ni influencé par le nombre de personnes ni le nombre d’items.

Question 29

Comment pouvons nous mesurer la fidélité inter correcteurs?

Answer 29

On peut évaluer la fidélité inter correcteurs en faisant corriger un test par au moins deux examinateurs indépendants. Les deux scores obtenus seront mis en corrélation de façon usuelle; le coefficient obtenu indiquera la fidélité dans toutes les études qui font appel à des instruments à correction subjective.

Question 30

Quel est le nombre maximum de correcteurs recommandé pour déterminer la fidélité inter correcteurs?

Answer 30

Il est déconseillé d’utiliser plus de 5 correcteurs.

Question 31

Dans quel types de tests est-il pertinent de mesurer la fidélité inter juge?

Answer 31

Les grilles de correction de certains types de tests, spécialement les tests de personnalité de type projectif, accordent un rôle important au jugement du correcteur. Ainsi, dans le cas de ces tests, il devient tout aussi nécessaire d’évaluer la fidélité interjuge.

Question 32

Quelle est la distinction entre un test de vitesse et un test de puissance?

Answer 32

Dans un test de vitesse, la rapidité de la performance explique les différences individuelles observées (mesurées). On prépare ce type de test à l’aide d’items qui sont tous faciles et qui font partie des habiletés maîtrisées par les sujets auxquels il est destiné. On fixe une limite de temps si courte que la personne ne peut pas compléter tous les items. Dans de telles conditions, le score de chaque personne reflète son rythme de travail.
Dans un test de puissance, les items sont ordonnés selon un échelle de difficulté qui augmente très rapidement jusqu’à des items à peu près insolubles; ainsi, personne ou presque ne peut obtenir un score parfait. Un test de puissance offre une limite de temps suffisamment longue pour que tous puissent tenter de répondre à chacun des items, sans problème.

Question 33

Pourquoi les tests de vitesse et de puissance sont-ils conçus pour empêcher une réussite parfaite?

Answer 33

Une pareille précaution s’explique par le fait qu’un score parfait est indéterminé; en ce sens, il est impossible de savoir quel score plus élevé le sujet aurait atteint si le test avait contenu plus d’items ou des items encore plus difficiles.

Question 34

Donnez un exemple qui explique bien ce qu’est l’erreur type de mesure.

Answer 34

Imaginons que nous ayons obtenu, avec un test de QI, un ensemble de 100 QI différents pour une même personne. En raison des divers types d’erreurs aléatoires, ces QI ont varié (probablement en adoptant la forme d’une distribution normale). On peut interpréter la moyenne de cette distribution comme représentant le score réel de cette personne et l’écart-type de cette même distribution correspond à l’ETM.

Question 35

Comment s’interprète l’erreur-type?

Answer 35

Tout comme les écarts-types, elle s’interprète à l’aide de pourcentages associés à divers segments de la courbe normale: environs 68% des individus se regroupent entre -1,ou et +1,00 É-T.

Question 36

V ou F: il est possible d’obtenir une mesure de fidélité avec seulement une série de score

Answer 36

Vrai, même avec une seule administration d’une seule version d’un test, il est possible d’obtenir une mesure de fidélité à l’aide de la méthode de bissection (split-half).

Question 37

Quelle est la principale faiblesse de la fidélité par bissection?

Answer 37

La fidélité par bissection soulève au moins une faiblesse: considérant qu’une moitié sert à tester l’autre, le calcul sert à vérifier la fiabilité de la moitié du test et non du test entier.