Cours 4 Flashcards
En quoi concerne la fidélité de la mesure?
Précision de notre mesure, ou le niveau d’erreur de mesure qu’elle génère
Pourquoi “un test fiable” n’est pas une bonne affirmation?
Parce que la fiabilité ne s’applique pas au test en tant que tel, mais aux scores qu’il génère. Affirmer qu’un test est fiable sous-tend que la fidélité a été établie de façon permanente, pour toutes les utilisations, avec tous les utilisateurs.
V ou F? La fidélité est un concept dichotomique.
Faux, c’est une question de degré.
Quelle est la théorie du score vrai?
Score observé = score vrai + erreur de mesure
V ou F? Si on veut, il est possible de ne pas avoir d’erreur de mesure dans un instrument.
FAUX, il y a TOUJOURS des erreurs aléatoires.
V ou F? Lorsque la fiabilité de scores d’un instruments sont peu fiables, cela a un impact sur la corrélation entre les variables.
Vrai
Quels sont les 2 types d’erreurs de mesure?
Aléatoires
Systématiques (ou biais)
V ou F? Les erreurs systématiques de mesure sont dans tous les instruments.
Faux
Quelles sont les causes possibles des erreurs de mesure systématique/biais?
Mauvaise utilisation de l’instrument
Conditions d’administration inadéquates
Imperfections de l’instrument
Quelle est la cause d’erreurs de mesure aléatoire?
Variation dans l’échantillonnage
Comment minimiser/évaluer les erreurs de mesure aléatoire?
Plus grands échantillons
Plus de moments de mesure
Peuvent être plus facilement estimées/controlées statistiquement
Quelles sont les 4 sources d’erreur de mesure aléatoire?
- D’échantillonnage de contenu
- D’échantillonnage dans le temps
- Incohérence interne, ou inter-items
- Incohérence inter-informateurs
À quelle source d’erreur aléatoire de mesure sont associés les instruments pour lesquels des résultats cohérents au sens large sont souhaités?
D’échantillonnage de contenu
À quelle source d’erreur aléatoire de mesure sont associés les instruments de mesure de traits ou comportement relativement stables?
Erreur d’échantillonnage dans le temps
À quelle source d’erreur aléatoire de mesure sont associés les instruments qui requièrent une grande cohérence interne ou inter-item?
Incohérence interne ou inter-items
À quelle source d’erreur aléatoire de mesure sont associés les instruments qui impliquent un degré relativement élevé de subjectivité?
Incohérence inter-informateurs
Explique en quoi consiste le calcul du coefficient de fidélité des formes parallèles.
Même instruments, même nombre de questions ; mais on fait 2 formes! Avec une sélection quasi-aléatoire, tous les domaines ou sous-domaines spécifiques du construit doivent être représentés proportionnellement.
Explique en quoi consiste le calcul du coefficient de fidélité test-retest.
Lors de l’évaluation d’un individu avec le même instrument à 2 temps différents, est-ce qu’ils obtiennent les même résultats.
Quel est la prémisse obligatoire dans le calcul de coefficient de fidélité test-retest?
Mesure de construits relativement stables dans le temps
Lors de l’estimation du coefficient de fidélité test-retest, après combien de temps doit-on retester l’individu?
Intervalle assez court ; 2 semaines à un mois
Comment peut-on expliquer qu’il peut y avoir un écart des résultats lors des test-retests (faible corrélation)?
Intervalle de temps trop long
Changement réel chez les ind
Quantités d’erreurs de mesures
Quelles sont les 2 stratégies pour évaluer la cohérence interne?
Coefficient de fidélité moitié-moitié
Coefficient de cohérence interne
Quelle est la prophétie de Spearman?
Plus il y a d’items dans une échelle, plus sa fidélité est élevée.
Avec moins d’items, les corrélations vont toujours être _______ fortes, ____________ le niveau de fidélité.
Moins
Peu importe
V ou F? On utilise une sélection quasi-aléatoire lorsqu’on estime le coefficient de cohérence interne.
Faux, le coefficient de formes parallèles ainsi que le moitié-moitié.
Explique ce que le coefficient de cohérence interne permet de faire.
Estimer statistiquement en quantifiant l’ensemble des inter-corrélations entre tous les items d’une échelle
Est-il possible d’utiliser un alpha de Cronbach pour les items dichotomiques?
Non, seulement les items continus.
Quels sont les deux prémisses assumées pour utiliser l’alpha de Cronbach?
Items mesurent une même variable latente
Tous les items sont reliés de la même façon à la variable latente (tau équivalent)
Quels sont les 3 indices utilisés pour calculer le coefficient de fidélité de cohérence interne?
Alpha de Cronbach
Kuder-Richardson-20 (variables dichotomiques)
Omega de McDonald
Le coefficient d’omega de McDonald teste explicitement que les items mesurent _____________________ en utilisant l’analyse factorielle.
une même variable latente
Statistiquement parlant, le coefficient alpha est l’équivalent de ______________________________________________.
La moyenne de toutes les moitié-moitié possibles (toutes les combinaisons possibles).
Comme le nombre d’items est un facteur de l’équation de l’alpha de Cronbach, plus il y a d’items, plus l’alpha sera _______________.
élevé
V ou F? L’oméga a tendance à procurer un estimé de la validité d’une échelle plus près de la réalité que l’alpha ou le KR20.
Faux, de la fidélité.
Quelle est l’intervalle des coefficients de cohérence interne? Quel est celui qui est considéré satisfaisant, en pratique, en recherche?
entre 0 et 1
0,7 ; minimum 0,8 et plus et 0,6
Que signifie un coefficient de cohérence interne qui est proche de 0?
Cela veut dire que les items ne sont pas fortement liés entre eux , pas homogènes, et donc que les questions de l’échelle sont trop indépendantes et ne vont pas ensemble, donc l’échelle n’est pas précise, elle génère bcp d’erreurs.
Explique pourquoi avoir un coefficient de cohérence interne de 0,95 est peu intéressant?
Parce qu’il y a potentiellement redondance de contenu, certaines questions mesurent probablement la même chose.
Qu’est-ce que le principe de parcimonie? (lorsque le coefficient de cohérence interne trop grand)
Retirer des questions afin de permettre de diminuer la redondance de contenu et la pression sur les individus car le questionnaire est trop long!
Quelle est la manipulation qui peut être faite lorsque le coefficient de cohérence interne est faible dû à un faible nombre d’items d’une échelle?
Transformation de Spearman-Brown
Pourquoi évalue-t-on la fidélité inter-juges alors que les instruments de mesure ne soient pas influencés par la subjectivité des informateurs?
Puisque plusieurs construits qui nous intéressent en psychologie/psychoed le sont presque de facto.
Quelle est la différence entre accord interjuge et fidélité inter-juges?
Accord = degré auquel des informateurs sont en accord exactement (avec des mesures catégorielles - ne considèrent pas variance)
Fidélité = degré de cohérence (ou corrélation) entre différents informateurs avec des mesures continues ; on compare la variance entre les informateurs.
V ou F? Pour les instruments dimensionnels, on obtient généralement des corrélations significativement plus faibles que celles attendues pour les autres types de fidélité.
Vrai
Explique pourquoi les chercheurs s’attendent maintenant à de faibles coefficient de fidélité inter-juge des échelles ?
Les individus vont fréquemment manifester des comportements différents dans différents contextes (attentes différentes)
Différents informateurs provenant de différents contextes et procurer de l’info différente et complémentaire à propos d’un même individu
Différent informateurs procureraient donc une meilleure “validité écologique”
Met en ordre les différentes corrélations entre les informateurs.
Enfant et enseignant
Parent et parent
Parent et enseignant
Parent et parent
Parent et enseignant
Enfant et enseignant
Les corrélations inter-juges les plus fortes sont au niveau des sx __________________ vs. __________________.
Extériorisés vs. Intériorisés
Quelles sont les conclusions de la méta-analyse de DE Los Reyes et al concernant la maximisation de l’accord des informateurs?
Connaissent bien l’enfant
Proviennent d’un même contexte d’observation
Comportements plus facilement observables
Quel est l’autre nom pour erreur standard de mesure (ESM)?
Erreur type de mesure
Qu’est-ce que l’erreur type de mesure?
Donne une indication de la quantité ou du degré d’erreur de mesure associée aux scores d’une échelle.
Vrai ou faux? L’erreur standard de mesure est dans la métrie des scores bruts.
Faux, des scores standardisés.
Vrai ou faux? L’ESM est inversement liée à la fidélité.
Vrai, plus la fidélité est élevée, moins l’erreur standard de mesure est grande.
Dans la pratique en évaluation, les ESM servent à construire un _______________________________________.
Intervalle de confiance autour du score observé
Un intervalle de confiance est un __________________ permettant de situer le score observé à l’intérieur d’une étendue de scores donnée.
estimé probabiliste
