cours 4

Question 1

quest ce que la fidélité

Answer 1

le niveau d’erreur de mesure qu’elle génère

Question 2

un test fiable…

Answer 2

cette qualité en fait ne s’applique pas au test en tant que tel, mais s’applique aux scores qu’ils génèrent : Affirmer qu’un test est fiable sous-entend que la fidélité a été établie de façon permanente, pour toutes les utilisations, avec tous les utilisateurs.trices

Question 3

V ou F : La fidélité n’est pas un concept dichotomique

Answer 3

VRAI : tout est une question de degré

Question 4

pourquoi la fidélité est cruciale en évaluation psychoeducative

Answer 4

on veut savoir à quel point les variations des scores – entre différents individus, ou entre différents moments de mesure – résultent de différences réelles dans le construit qui nous intéresse ou plutôt d’imprécisions (erreurs) de l’instrument de mesure qu’on utilise

Question 5

quest ce que la théorie du score vrai

Answer 5

score observer = score vrai + erreur de mesure

Question 6

vrai ou faux : il n’y a jamais d’erreur de mesure dans les instrument

Answer 6

FAUX: il y a toujours de l’erreur de mesure, dans tous les instruments

Question 7

quest ce que les chercheurs font pour limite les erreurs

Answer 7

construire des instruments qui vont la limiter le plus possible les erreurs

Question 8

selon la théorie psychométrique classique, la correlation observée entre deux mesures est déterminée par deux facteurs:

Answer 8

(a) la correlation entre les scores vrais
b) la fidélité des mesures.

Question 9

quel sont les deux grands types d’erreurs de mesure

Answer 9

1. aléatoire
2. systématique

Question 10

définition du type d’erreurs aléatoires*

Answer 10

• fluctuation statistiques non reproductibles toujours présente pour tous les instrument
• autant au-dessus qu’en dessous de la moyenne
• distribuer normalement

Question 11

cause de l’erreur de mesure aléatoire

Answer 11

variation dans l’échantillonnage

Question 12

comment minimiser les erreur aléatoire

Answer 12

• plus grands ééchantillion
• plus de moments de mesure
• peuvent etre plus facilement estimées/contrôlées statistiquement

Question 13

définition du type derreurs systématique (ou biais)

Answer 13

• fluctuation constantes et reproductibles, qui sont toujours dans la même direction pas tout les instruments
• surestimation ou sous-estimation constante des paramètre
• pas distribues normalement

Question 14

cause de type d’erreur systématique MCI

Answer 14

• mauvaise utilisation de l’instrument
• conditions d’administration inadéquat
• imperfection de l’instrument

Question 15

comment minimiser le type d’erreurs systématique

Answer 15

• difficile d détecter souvent ne sont pas connues
• plus difficile a quantifier statistiquement

Question 16

quel sont les 4 types de fidélité en fonction des sources d’erreur de mesure possibles

erreur échantillon de contenu?
erreur d’échantillon dans le temps?
incohérence interne ou inter-items?
incohérence inter-informateur?

Answer 16

• erreur d’échantillon de contenue ( fidélité des formes parallèles)
• erreur d’échantillon dans le temps (plus conceptuelle: fidélité test-retest)
• incohérence interne ou inter-items (plus empirique: fidélité moitié-moitié)
• incohérence inter-informateur (fidélité inter-juges)

Question 17

selon la théorie classique, on ne peut pas pas évaluer le degré de fidélité d’un instrument de mesure avec l’évaluation d’une seule personne.. on doit :

Answer 17

on doit collecter les données d’un échantillons d’individus qui sont évalués avec l’instrument

Question 18

V ou F : Plus la part de variance vraie sera grande, plus le coefficient de fidélité s’approchera de 1.0,

Answer 18

VRAI lorsque cest la part de variance d’erreur cela se rapproche de 0

Question 19

quest ce que la fidélité des forme parallèle

Answer 19

On développe deux formes équivalentes du même instrument et on estime la corrélation des scores entre les deux formes pour les mêmes individus

Question 20

pour les formes parallèles de fidélité est ce qu’on peut simplement choisir des items au hasard dans une grande banque d’items

Answer 20

non, il faut faire une sélection quasi-aléatoire
Tous les domaines ou sous-domaines

Question 21

pour les forme parallèle de fidélité, on s’attend typiquement à un coefficient de :

Answer 21

de 0,70 au minimum

Question 22

la fidélité ed test-retest

Answer 22

• Pour l’estimer, l’intervalle de temps doit être assez court (environ 2 semaines à 1 mois)
• Après collecte de données: Une corrélation élevée suggère bonne précision, peu d’erreurs de mesure
• pas vrm de coefficient minimum mais si la corrélation est forte (au moins 0,70), l’instrument est considéré fiable

Question 23

cohérence interne

Answer 23

• Ils tentent de regrouper des items qui forment un tout cohérent, autant sur le
  (a) plan conceptuel que sur le
  (b) plan empirique

Question 24

deux stratégie pour évaluer la cohérence interne

Answer 24

(1) coefficient de fidélité moitié-moitié
(2) coefficient de cohérence interne

Question 25

Pour le coefficient moitié-moitié

Answer 25

1), les chercheurs.euses divisent en deux les items d’une échelle et on estime ensuite les corrélations entre ces deux moitiés
(2), les chercheurs.euses estiment l’homogénéité de tous les items d’une échelle

Question 26

qu’est-ce que la Prophétie de Spearman

Answer 26

plus il y a d’items dans une échelle, plus sa fidélité est élevée

Question 27

aller voir note de cours diapo 22-26

Answer 27

aller voir note de cours :
- alpha de cronbach: α = (k / k – 1) * (1 – Σ vari / varx )
- Kuder-Richardson-20
- Omega de McDonald

Question 28

les Coefficients de cohérence interne varient tous entre

Answer 28

0 et 1

Question 29

que signifie un coefficient près de 1

Answer 29

suggère que les items d’une échelle sont très cohérents, qu’ils forment un tout; donc l’échelle génère peu d’erreurs de mesure

Question 30

quelle sont les coefficient minimum pour la satisfaction

Answer 30

• coefficient interne : 0,70
• en recherche on accepte parfois : 0,60
• dans la pratique on préfère : 0,80

Question 31

est-ce que un score de 0.95 est bien vu ?

Answer 31

non, puisque que ceci suggère qu’il y a potentiellement redondance de contenu, i.e., certaines questions mesurent probablement la même chose: Principe de parcimonie : les auteurs.trices pourraient enlever certaines questions

Question 32

fidélité inter-juges

Answer 32

plusieurs personne observe ou sont inclu dans la prise de donnée

Question 33

différence entre Fidélité inter-juges vs Accord inter-juges

Answer 33

• Fidélité inter-juges renvoie au degré de cohérence (ou corrélation) entre différents informateurs avec des mesures continues; on compare la variabilité (variance) entre les informateurs
• Accord inter-juges renvoie plutôt à une mesure de degré auquel des informateurs sont en accord exactement – souvent avec des mesures catégorielles; ne considère pas variance

Question 34

dans la Méta-analyse de Achenbach et al. (1987) la corrélation était (iner-juge)

Answer 34

plus fortes pour EXT que INT

Question 35

conclusion des meta analyse selon la fidélité interroges

Answer 35

Conclusions: on maximise l’accord si les informateurs
Connaissent bien l’enfant (familiarité avec l’enfant, temps passé avec lui.elle assez élevé)
Proviennent d’un même contexte d’observation (e.g., deux enseignants, deux parents)
Les objets de l’évaluation sont des comportements plus facilement observables (par opposition à des choses moins facilement observables) – e.g. un cpt vs une pensée

Question 36

erreur standard de mesure (ESM)

Answer 36

• parfois appelée erreur type de mesure
  -il s’agit de l’écart-type de la distribution des erreurs
  ESM = ÉTt √ (1 – rt)
  ÉTt est l’écart-type des scores au test
  rt est le coefficient de fidélité du test

Question 37

intervalles de confiance

Answer 37

les ESM servent a construire un intervalle de confiance autour du score observé
- est un estimé probabiliste permettant de situer le score observé à l’intérieur d’une étendue de scores donnée

Question 38

L’ESM peut

Answer 38

l’erreur standard de mesure peut servir à identifier un critère empirique qui permet de déterminer s’il existe une différence significative entre les scores de deux échelles