Cours 6 Flashcards
Qu’est-ce que la fidélité d’un test permet de déterminer?
La fidélité d’un test permet de déterminer dans quelle mesure les différence individuelles dans les scores aux test peuvent être attribuées à de «réelles» différence sur le plan des caractéristiques mesurées et dans quelles mesure elle doivent être attribuées à des erreurs dues au hasard.
Qu’est-ce qui peut représenter la variance d’erreur?
Toute condition non pertinente à l’objectif d’un test.
Comment est-il possible de réduire la variance d’erreur et rendre ainsi les scores aux tests plus fidèles?
Si les examinateurs s’efforcent de maintenir des conditions de testage unifmores en contrôlant;
- L’environnement du testage
- Les consignes
- Les limites de temps
- Le climat interpersonnel (avec les sujets)
Vrai ou Faux: si les conditions sont méticuleusement contrôlées, il est possible de se débarrasser de la variance d’erreur.
Faux, malgré tous les efforts, aucun test n’est parfaitement fidèle. Ainsi, tout test doit être accompagné d’un rapport sur son degré de fidélité (indice de fidélité)
Quel bémol devons-nous considérer lorsque nous consultons l’indice de fidélité d’un test?
Un indice de fidélité caractérise bien le test sous réserve qu’il soit administré dans les mêmes conditions standardisées et à des personnes similaires à celles qui composent l’échantillon normatif.
Pour ce faire, les caractéristiques de l’échantillon et le type de fidélité devraient être présentées
Quel est l’objet commun de tous les types de fidélité?
Tout les types de fidélité ont pour objet un degré d’association entre deux série de scores.
Qu’est-ce qu’un coefficient de corrélation exprime concrètement?
Un coefficient de corrélation exprime le degré de correspondance entre deux série de scores variant de -1 à +1.
Comment pourrions nous décrire la hasard de façon statistique?
Le hasard peut être reproduit par une corrélation de 0, ce qui indique l’absence complète de relation entre les variables mesurées.
Quels sont les barèmes de significativité (classification) selon Furr?
- Plus petit que 0,10 = très faible corrélation
- Autour de 0,15 = faible corrélation
- Autour de 0,35 = corrélation modérée
- Autour de 0,60 = corrélation forte
- Plus grand que 0,80 = très forte corrélation
À partir de quelle valeur un coefficient de fidélité est considéré comme acceptable?
0.72
Quelle valeur doit avoir un coefficient de fidélité pour être désirable?
0.80
Quelle produit est retiré de la standardisation d’un coefficient de covariation?
Dès qu’un coefficient de covariation est standardisé, il devient un coefficient de corrélation.
Qu’est-ce qu’un coefficient de covariation?
L’association de deux variances
Quelle est la formule du calcul du degré de liberté dans un contexte de corrélation?
D = (n-2)
Quelle est la formule du calcul du degré de liberté dans un contexte de moyenne?
D = (n-1)
Quelle est la plus petite corrélation significative d’un échantillon de 10 personnes?
La plus petite corrélation significative (p<0,05) pour un échantillon de 10 personnes est de 0,63. Tous les indices de corrélations plus grands ou égaux à cette valeur sont significatif, tous les indices de corrélation plus petits sont non-significatifs.
Quelle sont les difficultés rencontrées lors de l’utilisation de la technique du test-retest?
- L’effet de pratique peut augmenter les scores au retest
2. Si l’intervalle est très court, les sujets peuvent se rappeler de leurs réponses (effets de la mémoire)
Combien de temps les testeurs laissent-ils généralement passer entre la première et la deuxième passation du test?
Normalement, les testeurs laissent passer;
- 3 semaines
- 3 mois
- 6 mois
- 9 mois
- 12 mois
Quels sont les différents types de fidélité?
- Fidélité par test-restest
- Fidélité par version parallèles
- Fidélité par bissection
- Fidélité par structure interne
- Fidélité par équivalence interjuge
Quelles sont les principales caractéristiques de la fidélité par test-retest? (6)
- On administre et on ré-administre le même test aux même sujets (deux temps, deux séances de testage)
- Le coefficient de validité (Rtr) équivaut tout simplement à la corrélation entre les scores obtenus par les mêmes personnes aux deux séances de testage.
- La variance d’erreur correspond aux fluctuations aléatoires des performances d’une séance de testage à l’autre.
- Cette fidélité indique dans quelle mesure il est possible de généraliser, à des occasions diverses, les scores d’un test; plus elle est élevée, moins les scores sont influencés par des changement quotidiens imprévisibles
- Lorsqu’on inclut ce type de fidélité dans le manuel du test, il faut spécifier l’intervalle de temps entre les deux passations.
Quelles sont les principales caractéristiques de la fidélité par versions parallèles?
- Bon moyen de minimiser les difficultés soulevées par le test-retest
- Les individus peuvent passer une version lors de la première séance de testage et une autre version du même test lors de la deuxième séance.
- Prendre les précautions nécessaires pour s’assurer d’une véritable parallélisme.
Dans la fidélité par version parallèle, comment pouvons-nous nous assurer d’un véritable parralélisme?
- Les test utilisés doivent contenir le même nombre d’items, la même forme et couvrir le même type de contenu
- Le niveau de difficulté moyen des items doit être le même
- Il faut assurer l’équivalence de tous les aspects du cadre de passation du test (des consignes, de minutage, des exemples, du format de présentation, etc.)
Quelle est la principale faiblesse de la fidélité par version parallèle?
Les sujets peuvent différer quant à leur degré d’amélioration due à la pratique, ce qui implique une autre forme de variance d’erreur qui tends à réduire la corrélation entre les deux versions du test.
Comment s’opérationnalise la fidélité par bissection?
Nous devons diviser le test en deux parties équivalentes, ce qui permet de calculer deux scores indépendants. Étant donné que l’unique passation n’implique qu’une seule version d’un test, le coefficient de validité obtenu porte le nom de coefficient de validité interne. Il faut décider comment diviser le test en deux de manière à ce que les deux moitiés soient aussi semblables que possible.
Quelle formule s’applique aux items de nature dichotomiques?
La formule KR (Kuder-Richardson) s’applique aux items de nature dichotomique. Plus précisément la formule KR-20.
Qu’est-ce que la fidélité de type coefficient Alpha?
Il s’agit d’une seule passation, d’une seule version, d’un seul test. Cette fidélité a pour fondement l’homogénéité entre les réponses de tous les items du test.
Quelle formule s’applique aux items selon une échelle de Likert ou de type de Likert?
La formule Alpha
Quelle est la principale faiblesse du coefficient Alpha?
Ce coefficient varie beaucoup en fonction du nombre de participants et en fonction de la quantité d’items au sein du test. Bien que la variation en fonction du nombre de participant soit une bonne chose (car on se rapproche de la population), la variation en fonction du nombre d’items provoque de fausses fortes corrélations. C’est pourquoi il est tranquillement remplacé par le Omega de McDonald qui est ni influencé par le nombre de personnes ni le nombre d’items.
Comment pouvons nous mesurer la fidélité inter correcteurs?
On peut évaluer la fidélité inter correcteurs en faisant corriger un test par au moins deux examinateurs indépendants. Les deux scores obtenus seront mis en corrélation de façon usuelle; le coefficient obtenu indiquera la fidélité dans toutes les études qui font appel à des instruments à correction subjective.
Quel est le nombre maximum de correcteurs recommandé pour déterminer la fidélité inter correcteurs?
Il est déconseillé d’utiliser plus de 5 correcteurs.
Dans quel types de tests est-il pertinent de mesurer la fidélité inter juge?
Les grilles de correction de certains types de tests, spécialement les tests de personnalité de type projectif, accordent un rôle important au jugement du correcteur. Ainsi, dans le cas de ces tests, il devient tout aussi nécessaire d’évaluer la fidélité interjuge.
Quelle est la distinction entre un test de vitesse et un test de puissance?
Dans un test de vitesse, la rapidité de la performance explique les différences individuelles observées (mesurées). On prépare ce type de test à l’aide d’items qui sont tous faciles et qui font partie des habiletés maîtrisées par les sujets auxquels il est destiné. On fixe une limite de temps si courte que la personne ne peut pas compléter tous les items. Dans de telles conditions, le score de chaque personne reflète son rythme de travail.
Dans un test de puissance, les items sont ordonnés selon un échelle de difficulté qui augmente très rapidement jusqu’à des items à peu près insolubles; ainsi, personne ou presque ne peut obtenir un score parfait. Un test de puissance offre une limite de temps suffisamment longue pour que tous puissent tenter de répondre à chacun des items, sans problème.
Pourquoi les tests de vitesse et de puissance sont-ils conçus pour empêcher une réussite parfaite?
Une pareille précaution s’explique par le fait qu’un score parfait est indéterminé; en ce sens, il est impossible de savoir quel score plus élevé le sujet aurait atteint si le test avait contenu plus d’items ou des items encore plus difficiles.
Donnez un exemple qui explique bien ce qu’est l’erreur type de mesure.
Imaginons que nous ayons obtenu, avec un test de QI, un ensemble de 100 QI différents pour une même personne. En raison des divers types d’erreurs aléatoires, ces QI ont varié (probablement en adoptant la forme d’une distribution normale). On peut interpréter la moyenne de cette distribution comme représentant le score réel de cette personne et l’écart-type de cette même distribution correspond à l’ETM.
Comment s’interprète l’erreur-type?
Tout comme les écarts-types, elle s’interprète à l’aide de pourcentages associés à divers segments de la courbe normale: environs 68% des individus se regroupent entre -1,ou et +1,00 É-T.
V ou F: il est possible d’obtenir une mesure de fidélité avec seulement une série de score
Vrai, même avec une seule administration d’une seule version d’un test, il est possible d’obtenir une mesure de fidélité à l’aide de la méthode de bissection (split-half).
Quelle est la principale faiblesse de la fidélité par bissection?
La fidélité par bissection soulève au moins une faiblesse: considérant qu’une moitié sert à tester l’autre, le calcul sert à vérifier la fiabilité de la moitié du test et non du test entier.
