Fidélité de la mesure Flashcards
Quelle est la formule théorique de la corrélation?
r = somme(ZxZy)/N
Quelle est la formule théorique du score z?
z = (x-M)/s
Qu’est-ce qui est à la base de la corrélation?
Le rang et l’écart à la moyenne
VRAI ou FAUX.
Les scores de la personne sur chaque variable importent peu. Ce qui compte, c’est son écart à la moyenne dans chacune des distributions.
Vrai.
Dans quelles conditions peut se calculer une corrélation?
- Lorsque des données sont disponibles pour un groupe d’individus.
- Ces individus doivent avoir un score sur deux variables ou à deux temps de mesure.
- Ces variables doivent minimalement être de niveau ORDINAL.
Quels sont les trois concepts de base de la corrélation?
- VISE À ÉTUDIER LE LIEN ENTRE DEUX VARIABLES (niveau association et niveau prédiction)
- NE PERMET PAS D’ÉTABLIR UN LIEN DE CAUSALITÉ
- VÉRIFIE S’IL EXISTE UNE RELATION LINÉAIRE ENTRE DEUX VARIABLES (relation linéaire ou non linéaire)
Quand la relation entre les deux variables est-elle la plus importante?
Lorsqu’elle se rapproche de -1 ou de 1. Près de 0, elle est presque nulle.
Est-ce qu’une corrélation devrait être plus élevée dans la validité ou dans la fidélité?
Dans la fidélité.
Quand est-ce que la relation est…
A. négligeable B. faible C. modérée D. forte E. très forte
A. 0 à 0,19 B. 0.20 à 0.39 C. 0.40 à 0.69 D. 0.70 à 0.89 E. 0.90 à 1
LE COEFFICIENT DE DÉTERMINATION AIDE À INTERPRÉTER LE COEFFICIENT DE CORRÉLATION. Pourquoi?
- Il indique le % de variance commune entre deux variables.
- Il indique la proportion de variance d’une variable qui est commune à la variance de l’autre variable.
- Coefficient de détermination = (r2) * 100
Quel coefficient de détermination correspond à ces corrélations?
A. 0.30 B. 0.40 C. 0.50 D. 0.60 E. 0.70 F 0.80 G. 0.90
A. 9% B. 16% C. 25% D. 36% E. 49% F. 64% G. 81%
c’est la corrélation au carré!
À quoi s’intéresse la fidélité?
La fidélité s’intéresse à la constance de la mesure, et par conséquent aux sources d’inconstance ou d’erreur transitoire dans l’évaluation.
VRAI ou FAUX.
La fidélité peut limiter la validité.
Vrai.
Par contre, la validité ne peut pas influencer la fidélité.
La fidélité vise à déterminer le % d’erreur d’échantillonnage relative…(4)
- au moment de l’évaluation
- au contenu du test (choix des items)
- à la subjectivité de la correction
- au hasard
Quels sont les divers aspects du tests que la fidélité compare?
- Les QUESTIONS d’un test devraient être CORRÉLÉES
- Les résultats à un test ne devraient pas être influencés par le correcteur
- Les résultats à un test devraient être STABLES DANS LE TEMPS
Qu’est-ce que postule la théorie classique des tests?
Qu’aucune mesure n’est parfaite.
X = V + E
Score observé = score vrai + erreur de mesure
L’ERREUR DE MESURE PEUT AFFECTER LA FIDÉLITÉ ET LA VALIDITÉ D’UN TEST. Quelle erreur affecte chacun de ces concepts?
Fidélité = erreur transitoire Validité = erreur systématique
Comment se calcule le pourcentage de variance à l’erreur?
1 - coefficient de fidélité x 100
Quels sont les deux principes de base de la fidélité test-retest?
- La fidélité test-retest vise à savoir si l’échantillonnage de moment qu’on a pris pour évaluer le comportement de la personne permet une évaluation représentative de son comportement dans la vie de tous les jours.
- Fournit un indice de la stabilité de la mesure et de l’erreur d’échantillonnage de moment.
Qu’est-ce qui caractérise le contexte d’interprétation de la fidélité test-retest?
- Plus le délai est long, plus le coefficient sera faible
- Dépend de la stabilité du construit évalué et des caractéristiques des
participants à l’étude. - Si les résultats ne vont pas dans le sens du construit mesuré = instabilité attribuable à l’utilisation du test
- Apprentissage possible (surtout si cognitif); réactivité de la mesure
- Influence de facteurs transitoires.
Quels sont les principes de base des formes équivalentes?
- Bien que le test constitue un échantillon de comportements, le fait qu’on ait choisi tel ou tel comportement (item) ne devrait pas influencer le résultat au test.
- Si on a des échantillons de comportements (d’items) différents, les résultats devraient donc être les mêmes.
Quelle est la démarche d’une forme équivalente?
- Banque d’items
- division en deux pour faire 2 tests équivalents
- administration
- corrélation entre les tests
- administration consécutive
- coefficient mesure stabilité
Quels sont les principes de base de l’accord interjuge?
- Le test est une mesure objective d’un construit qui suit certaines règles. L’application des règles peut être empreinte d’erreurs.
- L’accord interjuges vise à vérifier si les résultats seront les mêmes indépendamment de la personne qui évalue l’individu.
Quelle est la démarche employée pour réaliser l’accord interjuge?
- Deux experts cotent le même groupe de sujets
2. Calcule corrélation des résultats des deux juges
On veut que la corrélation soit élévée de plus de _____.
0.70
Quel est le principe de base de la cohérence interne?
Si les items d’un test mesurent tous le même construit, ceux-ci devraient être corrélés entre eux. Ils devraient varier à un rythme comparable.
Quelle est la démarche employée pour évaluer la cohérence interne?
- On administre le test à un groupe d’individus.
- On procède à des corrélations entre les items.
- On applique une formule qui considérera un certain nombre de corrélations possibles
Quelles sont les trois méthodes d’estimation de la cohérence interne?
- Moitié-moitié
- Alpha de Cronbach
- Kuder-Richardson
…Chacune de ces méthodes fournit un indice de l’homogénéité de la mesure.
Quelle est la méthode moitié-moitié?
- Division du test en deux (seulement pour analyses) et calcul de la fidélité
- Inconvénients:
Le résultat peut être dû au hasard. Le résultat n’est peut-être pas
représentatif de l’ensemble des
corrélations moitié-moitié. - La formule de correction de Spearman-
Brown permet de prendre en compte ces inconvénients et de corriger le coefficient obtenu
Qu’est-ce qui caractérise la méthode Alpha de Cronbach (intercorrélation)?
- Considèrent toutes les corrélations moitié-moitié possibles.
- Plus précise que la méthode moitié- moitié.
- Le Kuder-Richardson (KR-20) = pour les données dichotomiques (0-1)
- L’alpha = pour les données continues (0, 1, 2, 3, etc.).
Quelle est l’utilité de la cohérence interne?
- Nécessaire d’avoir un indice de cohérence interne pour chacun des scores utilisés dans un test (donc toujours pertinent).
- Utile pour identifier les énoncés marginaux lors du développement d’une mesure.
Quels sont les facteurs influençant la fidélité?(8)
- Méthode d’estimation
- Longueur du test (plus il y a d’item, moins impact est grand)
- Variabilité possible dans les scores
- Intervalle test-retest
- Réponses aléatoires (on ne peut prédire le hasard)
- Variation dans une même situation de testing
- Toutes les sources d’erreur non systématique (fidélité = constance)
- Taille et hétérogénéité de l’échantillon de participants
Qu’est-ce qu’une erreur type de mesure?
- Permet de prendre en compte que la fidélité du test est imparfaite lors de l’interprétation des résultats des individus.
- Si un test est moins fidèle, on devrait être plus prudent dans l’interprétation des données. On sait que l’écart entre le score observé le score vrai est plus grand.
- Calcul de l’erreur-type de mesure (ETM):
ETM = s √ 1- rxx
Qu’est-ce qu’une intervalle de confiance et quel est son utilité?
- À partir de l’ETM, l’intervalle de confiance permet de déterminer le % de chances de retrouver le score vrai à l’intérieur de l’intervalle particulier.
- 68% équivaut à z = 1
- 95 % équivaut à z = 1,96
- 99 % équivaut à z = 2,58
- Formule de l’intervalle de confiance:
X ± z (ETM)
LA FIDÉLITÉ S’INTÉRESSE À L’ERREUR DE MESURE ATTRIBUABLE À…
- la subjectivité de la correction (accord interjuges).
- l’échantillonnage de contenu (formes équivalentes, cohérence interne)
- l’échantillonnage de moment (fidélité test-retest)
- l’erreur aléatoire (cohérence interne)
LA FIDÉLITÉ COMPARE DES ASPECTS DU TEST ENTRE EUX (rXX):
- Accord interjuges: comparaison des cotes de juges évaluant les mêmes sujets à l’aide des critères de correction du test.
- Formes équivalentes: comparaison de deux versions du même test qu’on a administré aux mêmes sujets.
- Fidélité test-retest: comparaison des résultats au test à deux moments distincts pour les mêmes sujets.
- Cohérence interne: comparaison des items entre eux.
