COURS 7 - PROCÉDURES D'ANALYSE DES ITEMS Flashcards
Quels sont les deux critères à tenir compte lors d’épreuves d’évaluation de « performances » cognitives?
- La difficulté des items
- Leur discriminabilité
Vrai ou faux : l’indice de difficulté le plus courant est probablement de « d-index »
Faux. C’est le « p-index ».
L’indice de difficulté est simplement le rapport entre le nombre de personnes qui réussissent l’item et _____.
a) Le nombre de personnes qui l’ont échoué
b) Le nombre de personnes dans la population
c) Le nombre de personnes qui l’ont passé
d) Les personnes qui sont les plus « fortes »
e) Aucune de ces réponses
c) Le nombre de personnes qui l’ont passé
L’indice de difficulté x 100 donne le pourcentage de _____.
a) Sujets qui ont passé l’examen
b) Items « faciles »
c) Items « difficiles »
d) Performance totale à l’item
e) Aucune de ces réponses
e) Aucune de ces réponses : le pourcentage de réussite à l’examen
L’indice de difficulté varie entre ______ et ______.
a) ______ signifie qu’un item est toujours _______ (_____% de réussite)
b) ______ signifie qu’un item est toujours ________ (_____% de réussite)
L’indice de difficulté varie entre 0 et 1.
a) 0 signifie qu’un item est toujours échoué (0 % de réussite)
b) 1 signifie qu’un item est toujours réussi (100 % de réussite)
Vrai ou faux: pour l’indice de difficulté, si l’on garde que des items faciles (p élevé), l’épreuve permet de différencier les sujets les plus “forts”.
Faux: si l’on garde que des items faciles (p élevé), l’épreuve ne permet de différencier que les sujets les plus “faibles”.
Si l’on garde que des items difficiles (p trop faible) l’épreuve ne permet pas de différencier les sujets.
Faux: si l’on garde que des items difficiles (p trop faible) l’épreuve ne permet de différencier que les sujets les plus “forts”.
L’indice de discrimination le plus courant est probablement le « ___ ».
a) p-index
b) d-index
c) s-index
d) b-index
e) Aucune de ces réponses
b) d-index
a) Plus l’indice de discrimination est proche de 1, plus l’item ______.
b) Plus l’indice de discrimination est proche de 0, ________.
a) discrimine les personnes
b) moins il différencie les personnes
Un item ayant un d-index faible (ou même négatif) va nuire surtout à __________ du test.
a) La validité
b) La fidélité
c) L’hétérogénéité
d) La concordance
e) Aucune de ces réponses
e) Aucune de ces réponses : l’homogénéité du test
Vrai ou faux : un bon indice de discrimination serait 0,5 et plus.
Faux: un bon indice de discrimination est 0,40 et +
Pour les épreuves de personnalité ou des tests qui ne sont pas de « performance », à quoi s’intéressons-nous?
a) La fidélité
b) L’hétérogénéité
c) L’homogénéité
d) La concordance
e) Aucune de ces réponses
c) L’homogénéité du test
Vrai ou faux : étant la meilleure théorie abordant les indices et métrologie des tests, on utilise surtout la théorie classique des tests.
Faux: c’est pas la meilleure, mais c’est celle qu’on utilise
Vrai ou faux : on peut utiliser les notions d’indices et de métrologie des tests, particulièrement la validité, selon plusieurs modèles théoriques de mesure.
Vrai
Avec quoi est en lien l’homogénéité d’un test?
a) La validation
b) La fidélité
c) L’hétérogénéité
d) La mesure
e) Aucune de ces réponses
a) La validation
Quels sont les deux grandes catégories de modèles de la théorie des réponses aux items (TRI), qui sont l’opposé l’un de l’autre ?
- Les modèles paramétriques
- Les modèles non paramétriques (NP)
Vrai ou faux : un des avantages de la théorie des réponses aux items (TRI) est qu’elle requiert une expertise statistique beaucoup plus poussée que la théorie classique des tests.
Faux: c’est plutôt un désavantage
Vrai ou faux : la théorie classique des tests nécessite des échantillons importants pour avoir vraiment une bonne indication des caractéristiques d’un item.
Faux: c’est plutôt pour la théorie des réponses aux items (TRI).
La plupart des informations actuelles portant sur les qualités « métrologiques » s’appuient sur la _______.
a) TCT
b) TRI
c) Validation
d) Fidélité
e) Aucune de ces réponses
a) TCT
Vrai ou faux : la théorie classique des tests débute avec Spearman en 1914.
Faux: elle débute avec Spearman en 1904.
D’une manière générale, l’objectif de la théorie classique des tests est ________.
de comprendre et d’améliorer la fidélité (la fiabilité) des tests psychologiques.
Lorsqu’on parle de la théorie du « score vrai », de quoi parle-t-on?
a) Modèles paramétriques
b) Modèles non paramétriques (NP)
c) Théorie des réponses aux items (TRI)
d) Théorie classique des tests (TCT)
e) Aucune de ces réponses
d) Théorie classique des tests (TCT)
Vrai ou faux: l’hypothèse initiale de la TCT par Spearman est qu’il est impossible d’obtenir une mesure complètement exempte d’erreurs.
Vrai
Soit l’équation suivante : X = T + ε
Que veulent dire les variables?
X = score observé à un test
T = vrai score du sujet
ε = erreur non-systématique
Vrai ou faux : le score observé à un test n’est pas nécessairement le score vrai.
Vrai
Vrai ou faux: les scores les plus “loin” du score observé sont moins probables et plus on s’éloigne du score vrai, plus cette probabilité augmente.
Faux: les scores les plus “loin” du score observé sont moins probables et plus on s’éloigne du score vrai, plus cette probabilité diminue.
Ceci introduit le concept d’intervalle de confiance :
L’importance (la _________) des intervalles de confiance dépend de ______. Plus _______ (ε) est faible, plus la mesure sera ________ (= plus le score ________ a de très forte chance d’être ____________).
L’importance (la taille) des intervalles de confiance dépend de l’erreur de mesure. Plus l’erreur (ε) est faible, plus la mesure sera précise (= plus le score observé à de très forte chance d’être proche du score vrai).
Quand on se demande si la probabilité que le score d’un participant reflète son score vrai, on fait généralement référence ________.
a) à l’erreur de mesure
b) au degré de confiance
c) à la fiabilité du test
d) à l’intervalle de confiance
e) Aucune de ces réponses
d) à l’intervalle de confiance
Vrai ou faux : l’intervalle de confiance sert à déterminer un intervalle dans lequel il est vraisemblable que la valeur observée s’y retrouve.
Faux: l’intervalle de confiance sert à déterminer un intervalle dans lequel il est vraisemblable que la vraie valeur (score vrai) s’y retrouve.
Vrai ou faux: on obtient l’intervalle de confiance en calculant deux limites (inférieure et supérieure) auxquelles est associée une certaine assurance de contenir la vraie valeur (inconnue).
Vrai
Vrai ou faux : l’intervalle de confiance sert notamment à trouver la valeur vraie.
Faux: on n’aura jamais la valeur vraie.
Les degrés de confiance les plus couramment utilisés sont _______, _______ (_____) et _______ (_____).
- 90%
- 95% (0,05)
- 99% (0,01)
