cours 7: la fidélité

Question 1

qu’est ce que la fidélité mesure?

Answer 1

La fidélité d’un test permet de déterminer dans quelle mesure les différences individuelles peuvent être attribuées à de « réelles » différences sur le plan des caractéristiques mesurées (variance réelle) et dans quelle mesure elles doivent être attribuées à des erreurs dues au hasard (variance d’erreur).

Question 2

comment peut-on savoir si la variance d’erreur est due au hasard?

Answer 2

Quand toutes les erreurs vont dans le même sens, ils ne sont pas dues au hasard -> manipulation

Question 3

quelles conditions de testage peut-on contrôler pour réduire l’erreur de mesure?

Answer 3

l’environnement du testage,
les consignes,
les limites de temps,
le climat interpersonnel (avec les sujets), etc.

Question 4

Étant donné que tous les types de fidélité ont pour objet un degré d’association entre deux séries de scores, ils peuvent prendre forme d’un type de ________________-

Answer 4

coefficient de corrélation

Question 5

quels sont les deux types de corrélation

Answer 5

-Intercorrélation: deux séries de personne font le même test
-Autocorrélation: à plusieurs temps (même personnes)

Question 6

quels sont les différents coefficients de corrélation

Answer 6

r
rho
rt (tétrachorique)
rpo (polychorique)
rpa (partiel)
R (multiple)
rtr (test-retest ou autocorrélation)

Question 7

une corrélation de combien indique qu’il s’agit d’un hasard?

Answer 7

0

Question 8

donne un exemple d’interprétation d’une corréation

Answer 8

les enfants qui réussissent en mathématiques TENDENT (r(8) = 0,40), DANS UNE CERTAINE MESURE, à réussir ÉGALEMENT (car corrélation positive) en lecture, et VICE-VERSA, bien que cette relation ne soit pas très étroite.

Question 9

comment dire si la corrélation est significative?

Answer 9

ca dépend du n

Question 10

quelle est la différence entre force et signification?

Answer 10

signification: à quel point les résultats s’éloignent de 0 et force: à quel point les données sont reliés ensemble

Question 11

qu’est ce que la fidélité par test-retest?

Answer 11

On administre et on réadministre le même test aux même sujets (deux temps, deux séances de testage) -> autocorrélation

Question 12

que représente la variance d’erreur quand on utilise la fidélité test-retest?

Answer 12

fluctuations aléatoires des performances d’une séance de testage à l’autre. Donc, si on laisse la personne vivre (on laisse le temps passer) entre les deux séances, la variance d’erreur va grandir.

Question 13

la fidélité test-retest indique:

Answer 13

dans quelle mesure il est possible de généraliser, à des occasions diverses, les scores d’un test; plus l’autocorrélation est élevée, moins les scores obtenus sont influencés par des changements quotidiens imprévisibles;

Question 14

quelles sont les inconvénients de la fidélité test-retest?

Answer 14

-l’effet de pratique peut augmenter les scores au retest;
-si l’intervalle est très court, les sujets peuvent se rappeler de leurs réponses (effet de la mémoire);

Question 15

la fidélité _________ est un moyen de minimiser les difficultés soulevées par le test-retest

Answer 15

par versions parallèles

Question 16

qu’est ce que la fidélité par versions parallèles?

Answer 16

Les individus peuvent passer une version lors de la première séance de testage et une autre version du même test, lors de la deuxième séance; deux tests qui mesurent exactement la même chose
(autocorrélation)

Question 17

quelles sont les précautions à prendre pour la fidélité par version parallèles?

Answer 17

• contenir le même nombre d’items, la même forme, et couvrir le même contenu;
  
  • le niveau de difficulté moyen des items doit être statistiquement le même (p < 0,05);
  • il faut assurer l’équivalence des consignes, de minutage, des exemples, du format de présentation, bref, de tous les aspects du cadre de passation du test.

Question 18

quelle est la faiblesse de la fidélité par versions parallèles?

Answer 18

Les sujets peuvent différer quant à leur degré d’amélioration due à la pratique, ce qui implique une autre forme de variance d’erreur qui tend à réduire la corrélation entre les deux versions parallèles;

Question 19

qu’est ce que la fidélité par bissection?

Answer 19

• Diviser le test en deux parties équivalentes (ce qui permet de calculer deux scores indépendants) – étant donné que l’unique passation n’implique qu’une seule version d’un test

Question 20

le coefficient de fidélité obtenu par bissection porte le nom d’________________

Answer 20

indice de cohérence interne

Question 21

sur quoi on se base pour faire la bissection d’un test?

Answer 21

• On se base dans les résultats factoriels pour diviser le tests (ex. 6 items par facteur, on en met 3 dans chaque moitié)

Question 22

quelle est la faiblesse de la fidélité par bissection?

Answer 22

Considérant qu’une moitié sert à tester l’autre, le calcul sert à vérifier la fiabilité de la moitié du test, et non du test entier !

Question 23

qu’est ce que la fidélité par coefficient alpha?

Answer 23

Il s’agit d’une seule passation, d’une seule version, d’un seul test. Cette fidélité a pour fondement l’homogénéité entre les réponses de tous les items du test (fidélité par homogénéité

Question 24

quelles sont les deux formules possibles pour la fidélité par coefficient alpha?

Answer 24

• La formule KR (Kuder-Richardson) s’applique aux items de nature dichotomique (système « tout ou rien »); sert à tester l’homogénéité quand les items sont de nature dichotomique
  La formule Alpha s’applique aux items selon une échelle Likert ou de type Likert. (quantitative ou ordinale)

Question 25

comment s’appelle le coefficient qui menace de remplacer alpha et pourquoi?

Answer 25

omega: à cause des certaines difficultés associées aux calcules Alpha (l’échantillon d’items et de personnes; la même saturation factorielle des items d’une dimension).

Question 26

qu’est ce que la fidélité par inter-correcteurs

Answer 26

• On peut évaluer la fidélité inter-correcteurs en faisant corriger un teste (le Rorschach, par exemple) par, au moins, deux examinateurs indépendants (idéalement de 3-5 examinateurs). Les deux scores obtenus seront mis en corrélation de façon usuelle (corrélation intraclasse et/ou Kappa de Cohen (coefficient de concordance)).

Question 27

quelles sont les caractéristiques d’un test de vitesse?

Answer 27

• Dans un test de vitesse, la rapidité de la performance explique les différences individuelles observées (mesurées). On prépare ce type de test à l’aide d’items qui sont tous faciles et qui font partie des habiletés maîtrisées par les sujets auxquels il est destiné. On fixe un limite de temps si court que la personne ne peut pas compléter tous les items. Dans de telles conditions, le score de chaque personne reflète son rythme (ou sa vitesse) de travail.

Question 28

quelles sont les caractéristiques d’un test de puissance?

Answer 28

Un test de puissance offre une limite de temps suffisamment longue pour que tous puissent tenter de répondre à chacun des items, sans problèmes; ceux-ci sont cependant ordonnés selon une échelle de difficulté qui augmente très rapidement jusqu’à des items à peu près insolubles; ainsi, personne ou presque ne peut obtenir un score parfait

Question 29

qu’est ce que l’erreur type de mesure?

Answer 29

imaginons que nous ayons testé 100 fois le QI d’une personne. En raison des divers types d’erreurs aléatoires, ces QI’s ont variés (on a pas toujours trouvé le même résultat, évidement). Après avoir ordonné les 100 résultats, on peut interpréter la moyenne de cette distribution comme représentant le score réel du QI de cette personne, l’écart-type de cette même distribution correspond à l’ETM (car moyenne effectuée sur les résultats de la même personne).

Question 30

donne un exemple d’interprétation avec l’ETM

Answer 30

l’ETM d’un QI à ce test est = 15 (ET) multiplié par la racine carré de (1 – 0,89 (rtr)) = 15(0,33) = 5 (arrondi). Alors, si son QI réel est de 110, on s’attendra, à 68,26% (plus ou moins deux fois sur trois), à ce que le score réel obtenu fluctue entre 105 (110-5) et 115 (100+5).

Question 31

comment interpréter l’ETM?

Answer 31

l’ETM s’interprète à l’aide des pourcentages associés aux divers segments de la distribution normale: ±68% des individus se regroupent entre -1 et +1 É-T. On peut donc conclure qu’environ 68% des réponses de l’individu se localiseront entre -1 et + 1 ETM. En parlant de proportion, il y a, environ, deux chances contre une (ou 68% expliqué 32% non-expliqué) que ces réponses se localiseront à l’intérieur de cet intervalle (-1 et + 1 ETM - autour de son réel QI/ moyenne).