COURS 10 - PROPRIÉTÉS PSYCHOMÉTRIQUES DES TESTS Flashcards
Fait référence à la stabilité des scores relativement à diverses passations du même test.
Qui suis-je?
a) Fidélité test-retest
b) Fidélité
c) Validité de contenu
d) Aucune de ces réponses
b) Fidélité
Repose sur l’hypothèse selon laquelle il est possible de mesurer un “attribut” en posant plusieurs questions dont les réponses forment un ensemble consistant et avec une certaine stabilité d’un contexte (situation) à l’autre et d’un moment à l’autre (temps).
Qui suis-je?
a) Fidélité test-retest
b) Fidélité
c) Validité de contenu
d) Aucune de ces réponses
b) Fidélité
Quel concept tente de répondre à ces questions :
- La méthode peut-elle reproduire son propre résultat obtenu ?
- Est-ce que la méthode est stable dans le temps ou lors d’un changement d’opérateur ?
- Quelle est la variation acceptable et comment calculer cette variation ?
Fidélité
Vrai ou faux: la fidélité d’un instrument psychométrique représente le degré d’homogénéité dans les scores.
Faux: représente le degré de précision et de constance de ses scores.
Fait référence à la capacité à produire un score observé qui est le plus proche possible du score vrai de la personne évaluée.
Qui suis-je?
a) Erreur de mesure
b) Constance
c) Coefficient de fidélité
d) Aucune de ces réponses
d) Aucune de ces réponses : la précision
Vrai ou faux: un instrument de mesure fiable donne de façon consistante les mêmes résultats
lorsqu’il n’y a pas eu des changements réels.
Vrai
Fait référence à l’obtention de résultats hautement similaires lorsqu’une personne est évaluée à l’aide du même instrument psychométrique à deux moments dans le temps
a) Erreur de mesure
b) Constance
c) Fidélité test-retest
d) Aucune de ces réponses
b) Constance
Un test est considéré comme un test fiable lorsqu’il :
a) représente bien le concept mesuré
b) est homogène
c) fournit des scores similaires pour l’ensemble des individus
d) fournit des scores similaires lorsqu’une personne le passe à plusieurs reprises
e) Toutes ces réponses
d) fournit des scores similaires lorsqu’une personne le passe à plusieurs reprises
Vrai ou faux: la fidélité est influencée par plusieurs choses, comme la difficulté des items.
Faux: comme…
- l’échelle de mesure
- le mode d’administration
- la clarté des concepts à mesurer
- la consistance des évaluateurs, etc.
Quelles sont les trois méthodes principales pour mesurer le coefficient (indice) de fidélité?
- La méthode de stabilité (dans le temps)
- La méthode d’équivalence (entre deux “versions” d’un même instrument psychométrique)
- La méthode de cohérence interne (ou d’homogénéité des items)
La méthode de stabilité (dans le temps) fait référence à :
a) la répétabilité
b) la reproductibilité
c) la corrélation
d) Aucune de ces réponses
a) la répétabilité
La méthode d’équivalence fait référence à :
a) la répétabilité
b) la reproductibilité
c) la corrélation
d) Aucune de ces réponses
b) la reproductibilité
Vrai ou faux: pour la méthode de stabilité et la méthode d’équivalence, l’indice de fidélité est un coefficient de corrélation (r).
Vrai
Quelles sont les méthodes pour mesurer la cohérence interne?
- Split-half (méthode de bissection)
- Coefficient alpha de Cronbach (a)
Pour les items dichotomique, c’est le coefficient KR-20
Vrai ou faux: la répétabilité est la variabilité intra-opérateur (“même expérimentateur”) et permet d’avoir déjà des informations sur une possible erreur de mesure aléatoire…
Vrai
Vrai ou faux: l’épreuve test-retest regarde l’état constant d’un individu dans une courte période de temps.
Faux: regarde la stabilité de la mesure au cours du temps chez un individu dont l’état est supposé “constant”.
Vrai ou faux: le coefficient de corrélation (r) représente la probabilité qu’un individu ait le même score lors d’une future passation.
Faux: représente la corrélation entre les résultats obtenus aux deux passations.
Vrai ou faux: plus la corrélation entre les deux tests est importante plus le test est considéré comme “répétable”
Vrai
Vrai ou faux: l’épreuve test-retest serait un bon indicateur de la qualité métrique de la validité.
Faux: serait un bon indicateur de la qualité métrique de fidélité
La corrélation T1-T2 suppose que la variable mesurée est stable dans le temps.
Donc les variations dans le temps proviennent de…
a) défauts psychométriques
b) l’environnement
c) l’erreur de mesure
d) Aucune de ces réponses
c) l’erreur de mesure
La stabilité (corrélation T1-T2) est influencée par quoi? (2 éléments)
- Le temps entre les passations
2. Les changements “naturels” durant cette période
Vrai ou faux: pour assurer une bonne corrélation T1-T2, il faut un délais court entre les deux passations.
Faux: il faut un temps “raisonnable” entre les 2 passations.
Corrélation entre temps 1 et temps 2
- Pour les tests perceptifs sur le terrain, les corrélations supérieures ou égal à _____ sont bonnes
- Pour les tests subjectifs, des corrélations supérieures ou égales à _____ sont acceptables
Pour les mesures d’attitude, les corrélations supérieures ou égales à _____ sont significatives
- 0,90 (bonnes)
- 0,50 (acceptables)
- 0,70 (significatives)
Cette méthode, aussi appelée méthode des formes parallèles, repose sur l’administration de deux versions d’un même instrument.
De quoi s’agit-il?
a) Méthode d’équivalence
b) Reproductibilité
c) Méthode de la cohérence interne
d) Aucune de ces réponses
a) Méthode d’équivalence
Vrai ou faux: dans la reproductibilité, le coefficient de corrélation (r) représente la corrélation entre les résultats obtenus aux deux tests.
Vrai
Quels sont les 2 désavantages de la méthode d’équivalence?
- Deux versions d’un même instrument est coûteux et long
2. Deux formes parallèles ne sont jamais pareilles à 100%
Vrai ou faux: lorsque les formes sont 2 versions presqu’identiques ou très similaires (corrélation T1 [forme A] - T2 [forme B]), alors les variations entre A et B proviennent de l’erreur de mesure.
Vrai
Quels sont les 3 facteurs qui influencent la stabilité dans le test-retest avec formes parallèles?
- Le temps entre les passations
- Les changements “naturels” durant cette période
- La qualité de la “similarité” (parallélisme) entre les deux formes
Deux formes d’un même instrument sont parallèles lorsque ____ (3 éléments)
- Les items sont très similaires et même nombre
- Les mêmes directives d’administration
- Les deux formes ont la même moyenne et le même écart-type
Comment pouvons-nous vérifier que le test est bel et bien composé d’items qui mesurent tous le même construit?
Par le degré de cohésion des items de l’instrument.
Vrai ou faux: la méthode d’estimation de la fidélité fréquemment utilisée est une seule passation.
Vrai
Vrai ou faux: dans la méthode de bissection (corrélation split-half), on sépare le groupe de participants en 2 et on compare chaque moitié.
Faux: on coupe en 2 le questionnaire et compare chaque moitié.
Vrai ou faux: habituellement, quand on coupe le questionnaire en 2 dans la corrélation split-half, on sépare le questionnaire à partir du centre (médiane).
Faux: le plus habituellement c’est les items pairs/impairs
Vrai ou faux: dans la corrélation split-half, une seule administration est nécessaire.
Vrai
Vrai ou faux: on fait appel à Spearman-Brown pour tenir compte du nombre réduit d’items (corrélation split-half)
Vrai
Quelles sont les 3 méthodes possibles pour séparer le questionnaire dans la corrélation split-half?
- La partition aléatoire (random split)
- La séparation des items pairs et impairs
- La partition appariée (matched split ; en fonction du contenu et de la difficulté)
Quel est le meilleur indice de cohérence interne?
b) Alpha de Cronbach
Mettre en relation chaque élément avec le score total de l’échelle pour évaluer le degré d’association entre chaque élément et le score total.
De quoi s’agit-il?
a) Alpha de Cronbach
b) Matrice de corrélation inter-items
c) Corrélation inter-items
d) Matrice de corrélation item-total
e) Aucune de ces réponses
c) Corrélation inter-items
Vrai ou faux: la matrice de corrélation item-total est simplement la moyenne des inter-corrélations.
Faux: c’est la matrice de corrélation inter-items
Vrai ou faux: dans la corrélation inter-items, pour les corrélations très élevées, il est à se demander la pertinence de garder (ou éliminer) ces items.
Faux: c’est pour les corrélations très faibles ou négatives.
Vrai ou faux: dans une matrice de 6 items, on aurait 12 coefficients de corrélation (6X2).
Faux : on aurait 36 coefficients de corrélation (6X6)
Vrai ou faux: les valeurs de corrélation inter-items varient beaucoup, mais il y a tout de même un minimum…
Vrai
Concernant les valeurs de corrélation inter-items…
0 à 0,15 = _____
Éléments ne sont pas bien corrélés
Concernant les valeurs de corrélation inter-items…
0,15 à 0,50 = _____
Un bon résultat
Concernant les valeurs de corrélation inter-items…
0,50 et + = _____
Éléments sont corrélés dans une plus grande mesure et les éléments peuvent être répétitifs
Vrai ou faux: la valeur de corrélation dans la plupart des livres statistiques est suggérée entre 0,3 et 0,8.
Il est important d’avoir une corrélation entre les items (>0,3) dans la même échelle, car ils supposent de mesurer la même cible.
Vrai
Vrai ou faux: les “seuils” (normes) concernant les valeurs de corrélation item-total (interprétation) sont plus hauts que pour ceux de la corrélation inter-items (la corrélation doit être plus élevée pour témoigner d’un bon résultat).
Faux: c’est l’inverse… (item-total = plus bas est mieux que inter-item)
Concernant les valeurs de corrélation item-total…
0 à 0,20 = _____
Peuvent ne pas être représentatifs du même domaine de contenu
Concernant les valeurs de corrélation item-total…
0,20 à 0,40 = _____
Items sont raisonnablement homogènes
Concernant les valeurs de corrélation item-total…
0,40 et + = _____
Peuvent ne capturer qu’une petite bande passante de la construction
Que voudrait dire un Alpha de Cronbach très faible ou négatif? (3 possibilités)
- Soit que plus d’un concept est mesuré
- Soit que certains items mesurent mal le concept
- Soit que l’échelle aurait due être inversée pour cet item
Vrai ou faux: une façon simple et rapide d’évaluer la cohérence interne des éléments est est d’examiner la matrice de corrélation des éléments entre eux.
Vrai
Vrai ou faux: l’indice (le coefficient) alpha de Cronbach varie entre 0 et 1.
Plus il s’approche de 0, plus la fidélité est bonne.
Faux: plus il s’approche de 1, plus la fidélité est bonne.
Vrai ou faux: quand l’alpha de Cronbach est élevé, il indique que le test mesure la bonne chose.
Faux: il indique que le test mesure quelque chose, mais ça ne dit pas quoi.
Vrai ou faux: l’Alpha ne mesure pas l’unidimensionnalité (mesure qu’une seule chose)
Vrai
Quelles sont les 3 manières de mesurer la fidélité?
- Matrice de corrélation inter-items
- Matrice de corrélation item-total
- Coefficient alpha de Cronbach
Vrai ou faux: la fidélité concerne la précision avec laquelle un test mesure
certaines caractéristiques (donc en lien avec l’erreur de mesure)
alors que
la validité est en lien avec la qualité de ce qui est mesuré, c’est-à-dire la ressemblance existant entre ce que l’on veut mesurer et ce que mesure le test
Vrai
Vrai ou faux: fidélité et validité sont deux notions distinctes liées par une
relation de précision
Faux: …liées par une
relation d’implication
Vrai ou faux: un test non fidèle est nécessairement non valide, mais l’inverse n’est pas vrai.
Vrai
Vrai ou faux: relation implique que la fidélité est une condition nécessaire mais non suffisante pour la validité d’un test.
Vrai
Vrai ou faux: la fidélité est le concept le plus important et le plus fondamental en psychométrie.
Faux: c’est la validité
Relation qui existe entre les éléments théoriques (modèles, concepts, définitions, hypothèses, etc.) et la réalité empirique qui doit les représenter.
Qui suis-je?
a) Fidélité
b) Validité
c) Sensibilité
d) Précision
e) Validité de construit
b) Validité
Vrai ou faux: même l’instrument de mesure le plus précis n’est pas utile si cet instrument ne mesure pas le concept qu’il doit mesurer.
Vrai
Vrai ou faux: le plus important c’est de déterminer si un instrument est valide.
Faux: il ne s’agit pas de déterminer si un instrument est valide ou pas mais plutôt quel est son degré de validité donné pour un attribut précis pour une population cible précise et pour un contexte d’application spécifique.
Quel type de validité évalue dans quelle mesure les divers items ou épreuves d’un instrument sont représentatifs du ou des construits mesurés et de leurs différentes facettes?
a) Validité de contenu
b) Validité de construit
c) Validité de critère
d) Validité d’apparence
a) Validité de contenu
Quelle est la méthode la moins rigoureuse pour évaluer la validité?
a) Validité de contenu
b) Validité de construit
c) Validité de critère
d) Validité d’apparence
d) Validité d’apparence
Quel type de validité est en lien avec la crédibilité du test pour les personnes qui le passent?
a) Validité de contenu
b) Validité de construit
c) Validité de critère
d) Validité d’apparence
d) Validité d’apparence
