4) Concept statistiques (partie 2) Flashcards
La fidélité est une propriété (qualité) psychométrique. C’est quoi ?
La fidélité détermine si les scores sont stables après plusieurs passations du même test (Crocker & Algina, 1986)
- Être sur de mesurer qqch comme il faut
Repose sur l’hypothèse selon laquelle il est possible de mesurer un «attribut» (ex: stress) en posant plusieurs questions dont les réponses forment un ensemble :
- consistant - stable d’un contexte à l’autre - stable d’un moment à l’autre
(Si je passe mon questionnaire avec le groupe 1 ou avec le groupe 2 on devrait avoir la même chose d’étudiants du même programme de l’UdeM)
La fidélité d’un instrument psychométrique représente quoi ? Comment déterminer qu’un instrument de mesure est fidèle ?
Le degré de précision et de constance de ses scores.
- Un instrument de mesure fiable donne de façon consistante et précise les mêmes résultats lorsqu’il n’y a pas eu des changements réels
Je suis la capacité à produire un score observé qui est le
plus proche possible du score vrai de la personne évaluée (erreur de mesure)
La précision
«La fidélité d’un instrument psychométrique représente le degré de précision et de constance de ses scores»
- C’est quoi la constance ?
La constance fait référence à l’obtention des résultats hautement similaires lorsqu’une personne est évaluée à l’aide du même instrument psychométrique à deux moment dans le temps
Quand est-ce qu’un test est considéré «fidèle» ?
Un test est considéré comme un test fiable lorsqu’il fournit des scores similaires lorsqu’une personne le passe à plusieurs reprises
La fidélité est influencée par quoi ?
L’échelle de mesure, le mode d’administration, la clarté des concepts à mesurer, la consistance des évaluations, etc.
Trois principales méthodes sont utilisées pour trouver le coefficient de fidélité … Lesquelles ?
- La méthode de stabilité (dans le temps) [RÉPÉTABILITÉ]
- La méthode d’équivalence (entre deux “versions” d’un même instrument psychométrique) [REPRODUCTIBILITÉ]
– Pour 1 et 2, l’indice de fidélité est un coefficient de corrélation (r). - La méthode de cohérence interne (ou d’homogénéité des items)
– Split-half ou méthode de bissection
– Coefficient alpha de Cronbach (α) (ou coefficient KR-20 (r) pour items dichotomiques
- La méthode de stabilité (dans le temps) permet de déterminer quoi par rapport au test ?
- Comment on s’y prend dans cette méthode (quelle épreuve on utilise) ?
- À quel point le test est répétable (répétabilité)
2. L’épreuve Test-Retest (on compare les mesures au T1 et au T2)
Je suis la variabilité intra-opérateur («même expérimentateur») et je permet d’avoir déjà des informations sur une possible erreur de mesure aléatoire.
La répétabilité
Qu’est-ce que la méthode de stabilité (fidélité du test-retest) permet de regarder ?
Regarde la stabilité de la mesure au cours du temps chez un individu dont l’état est supposé “constant”
- Le coefficient de corrélation (r) représente donc la corrélation entre les résultats obtenus aux deux passations - Plus la corrélation entre les deux tests est importante plus le test est considéré comme "répétable"
Je suis un bon indicateur de la qualité métrique de fidélité.
Le coefficient de corrélation (r) obtenu par l’épreuve test-retest
Une corrélation T1-T2 suppose quoi ?
Que la variable mesurée est stable (donc les variations dans le temps proviennent de l’erreur de mesure)
La stabilité est influencée par quoi ?
– Le temps entre les passations – Les changements “naturels” durant cette période
Pourquoi il fait un temps «raisonnable» entre les 2 passations ?
Assez long pour qu’ils ne se souviennent pas de leur réponses, mais pas trop court pour qu’il y ait des changements naturels
[La fidélité test-retest par la corrélation]
Corrélation entre temps 1 et temps 2
- Pour les tests PERCEPTIFS sur le terrain, les corrélations supérieures ou égal à _____ sont bonne.
- Pour les tests SUBJECTIFS, des corrélations supérieures ou égales à _____ sont acceptables
• Pour les MESURE D’ATTITUDE, les corrélations supérieures ou
égales à _____ sont significatives
(Robert, 2004)
- Pour les tests PERCEPTIFS sur le terrain, les corrélations supérieures ou égal à 0,90 sont bonne.
- Pour les tests SUBJECTIFS, des corrélations supérieures ou égales à 0,50 sont acceptables
• Pour les MESURE D’ATTITUDE, les corrélations supérieures ou
égales à 0,70 sont significatives
La méthode d’équivalence est un autre méthode d’estimation de la fidélité.
- Quel autre nom donne-t-on à cette méthode ?
- Elle permet de vérifier la _____________ du test.
- Elle consiste à faire quoi ?
- La méthode des formes parrallèles
- REPRODUCTIBILITÉ
- On administre 2 versions (presque identiques ou très similaires) d’un même instrument
- corrélation T1 (forme A) - T2 (forme B)
[MÉTHODE D’ÉQUIVALENCE — Fidélité]
• Le coefficient de corrélation (r) représente quoi ?
• Quel sont les désavantages de cette méthode ? (2)
- (r) représente la corrélation entre les résultats obtenus aux deux tests
Désavantages :
- 2 versions d’un même instrument est $$ et long.
- 2 formes parallèles ne sont jamais pareilles à 100 % -
- S’il y a une corrélation T1 (forme A) - T2 (forme B), ça veut dire quoi ?
- Qu’est-ce qui influence la stabilité entre les deux versions du test ?
- Les variations entre A et B proviennent de l’erreur de mesure…
- – Le temps entre les passations
– Les changements “naturels” durant cette période
– La qualité de la “similarité” (parallélisme) entre les deux formes
On peut considérer que deux formes d’un même instrument sont «parallèles» quand…
- Les items sont très similaires et de même nombre
- Les mêmes directives d’administration
- Les deux formes ont la même moyenne et le meme écart-type
La méthode de la cohérence interne (ou consistance interne ou l’homogénéité) est une méthode d’estimation de la fidélité.
- Permet de vérifier quoi ?
- Cette méthode peut se faire de 2 manières … lesquelles ?
- Que le test est composé d’items qui mesurent tous le même construit (par le degré de cohésion des items de l’instrument)
- a) Méthode de bissection (split-half)
b) Alpha (α) de Cronbach
Je suis la méthode d’estimation de la fidélité la plus fréquemment utilisée.
La méthode de la cohérence interne
La corrélation split-half est une des manières de déterminer s’il y a une cohérence interne dans le test (estimation de la fidélité).
- En quoi ça consiste ?
- Vu que c’est difficile de séparer vraiment «également», qu’est-ce qu’on fait ?
- On coupe en 2 le questionnaire et on compare chaque moitié
- Répartition aléatoire (random split)
- Séparation des items pairs impairs
- La partition appariée (on fonction du contenu et de la difficulté - matched split)
V ou F : 2 administrations sont nécessaires pour faire la corrélation split-half.
Faux, une seule administration est nécessaire.
[Corrélalation split-half]
- Comment on sépare le questionnaire en 2 ? (3)
- On fait quoi pour tenir compte du nombre réduit d’item ?
- La partition aléatoire (random split)
- La séparation des items pairs et impairs (plus souvent)
- La partition appariée (en fonction du contenu et de la difficulté = matched split)
Pour tenir compte du nombre réduit d’items, on fait un Spearman-Brown