Fiabilité

Question 1

Qu’est-ce que la fiabilité ?

Answer 1

La manière dont un test mesure avec constance un construit psychologique. Un test fiable produit des résultats similaires lorsqu’il est répété.

Question 2

Entre quelle valeur la fiabilité varie-t-elle?

Answer 2

0 et 1

Question 3

Qu’est-ce qu’un score d’une bonne fiabilité?

Answer 3

plus grand ou égal à 0.7

Question 4

Vrai ou faux.

La fiabilité prend compte des erreurs systématiques.

Answer 4

Faux

Question 5

Quel est le symbole de la fiabilité en général?

Answer 5

rxx

Question 6

Qu’est-ce que la théorie classique des tests?

Answer 6

C’est un cadre mathématique utilisé pour comprendre comment les tests mesurent un construit et comment les scores sont influencés par la fiabilité et l’erreur de mesure. C’est pour comprendre comment les erreurs de mesure influencent les résultats. Elle quantifie la proportion de variance due à des vrais scores par rapport aux erreurs.

Question 7

Quelle est l’équation de la TCT?

Answer 7

O = V + E
O = score observé
V = score vrai
E = erreur de mesure (somme de toutes les influences aléatoires et externes susceptibles de compromettre la fiabilité de la mesure/c’est la différence entre score vrai et score observé)

Question 8

Vrai ou faux

Les scores vrais et les erreurs sont indépendants.

Answer 8

Vrai
Ça l’implique que la corrélation entre V et E doit être égale à 0.

Question 9

Si la corrélation entre V et E n’est pas de 0, qu’est-ce que ça fait?

Answer 9

On mesure pas ce qu’on essaye de mesurer.

Question 10

Qu’est-ce que ça veut dire si l’erreur moyenne n’est pas nulle?

Answer 10

Veut dire que l’erreur n’est pas aléatoire, qu’elle est causée par une source spécifique.

Question 11

Vrai ou Faux

Si on repasse un test plusieurs fois, la moyenne de toutes nos performances se rapprochera de notre score vrai.

Answer 11

Vrai

Question 12

Si la fiabilité est de 0, les scores observés sont…

Answer 12

entièrement dus à l’erreur.

Question 13

Vrai ou Faux

Plus l’erreur de mesure est grande plus la fiabilité est grande.

Answer 13

FAUX!!!!!

Question 14

Dans le cadre de la TCT, qu’est-ce que la fiabilité implique?

Answer 14

La capacité du test à minimiser E (erreur de mesure) pour que O (score observé) soit une bonne estimation de V (score vrai).

Question 15

Quelle est la définition technique de la fiabilité?

Answer 15

Le ratio entre la variance du score vrai et la variance du score observé.

Question 16

Vrai ou Faux.

Les coefficients de fiabilité reflètent la proportion de la variance du score vrai par rapport à la variance du score observé.

Answer 16

vrai

Question 17

rxx = ?

Answer 17

rxx = variance (V)/variance (O)

Question 18

Quel est le test le plus fiable?

Test 1: variance (O) = 18 ; variance (V) = 15
Test 2 : variance (O) = 12 ; variance (V) = 9

Answer 18

Test 1 : 15/18 = 0.83
Test 2 : 9/12 = 0.75

Test 1

Question 19

Comment faire une deuxième version d’un test?

Answer 19

Par bissection

Question 20

Qu’est-ce que la fiabilité par bissection?

Answer 20

la corrélation entre tous les éléments des deux versions du test.

Question 21

Quels sont les inconvénients avec la bissection?

Answer 21

C’est beaucoup de travail et ennuyeux à calculer, difficile de déterminer la répartition aléatoire des items.
La corrélation entre les deux moitiés du test n’exprime pas la fiabilité complète du test, c’est une sous-estimation. il faut y amener un correction.

Question 22

Quelle est la correction à amener à la bissection?

Answer 22

L’alpha de Cronbach.

Question 23

Qu’est-ce que l’alpha de Cronbach?

Answer 23

C’est la moyenne de toutes les estimations possible de la fiabilité déterminée par la bissection.

Question 24

Pourquoi la correction avec l’alpha de Cronbach est importante?

Answer 24

Parce que la fiabilité calculée par une seule bissection peut varier selon la manière qu’on divise le test. L’alpha de Cronbach est basé sur toutes les divisions possibles du test en deux moitiés. Il prend en compte toutes les combinaisons possibles de bissections.

Question 25

Quelle est la formule de l'alpha de Cronbach ? Décris moi les symboles.

Answer 25

a=Kˉr/(1+(K-1)ˉr) K = # d'items r = corrélation entre les items ˉr = moyenne des corrélations uniques parmi tous les items d'un test corrélations uniques = (# d'items)(# d'items-1)/2 ˉr = additionne tous les items/#corrélations uniques

Question 26

Calcul-moi la fiabilité d'un test à 5 items dont la corrélation moyenne entre les items est de 0.18.

Answer 26

a=Kˉr/(1+(K-1)ˉr) K = 5 ˉr = 0.18 a= 5(0.18)/(1+(5-1)0.18) = 0.9/1.72 = 0.52

Question 27

Que peut-on faire si le coefficient de fiabilité (alpha Cronbach) n'est pas très bon? Qu'est-ce que ça l'implique?

Answer 27

Ajouter des items. Ceci implique d'utiliser le Spearman Brown.

Question 28

Qu'est-ce que le Spearman Brown permet de faire?

Answer 28

Ça permet d'améliorer/ajuster la fiabilité d'un test en ajoutant des items.

Question 29

Quelles sont les deux questions qu'on peut se demander avec la formule de Spearman Brown ?

Answer 29

Si mon test était x fois plus long OU plus court, quelle serait sa fiabilité? Si je veux que mon test ait une fiabilité de x, combien de fois plus long OU plus court devrait-il être?

Question 30

Quelle est l'équation de Spearman Brown pour l'ajout ou le retrait d'items?

Answer 30

. k*(rxx) rxx* = ------------- 1+(K*-1)rxx rxx* = fiabilité du nouveau test rxx = fiabilité du test original K* = ratio (longueur du nouveau test/longueur de l'ancien test)

Question 31

Si j'ai un test avec 5 items et une fiabilité de 0.52, mais que je me demande quelle serait la fiabilité si le test était 3x plus long. Comme je ferais cela?

Answer 31

. k*(rxx) rxx* = ------------- 1+(K*-1)rxx rxx = 0.52 K* = 3 rxx* = 3(0.52)/1+(3-1)0.52 = 1.56/2.04 = 0.76 Un test qui comporte 5 items avec une fiabilité de 0.52, aurai tune fiabilité de 0.76 s'il comportait 15 items.

Question 32

Si j'ai un test avec 8 items et une fiabilité de 0.42, mais que je me demande quelle serait la fiabilité si le test était 4x plus long. Comme je ferais cela?

Answer 32

. k*(rxx) rxx* = ------------- 1+(K*-1)rxx rxx = 0.42 K* = 4 rxx* = 4(0.42)/1+(4-1)0.42 = 1.68/2.26 = 0.74 Un test qui comporte 8 items avec une fiabilité de 0.42, aurai tune fiabilité de 0.74 s'il comportait 32 items.

Question 33

Quelle est l'équation de Spearman Brown pour savoir de combien réduire ou allonger un test pour avoir une fiabilité x?

Answer 33

. rxx* (1- rxx) K* = ------------- rxx(1-rxx*)

Question 34

Si j'ai un test de 5 items qui a une fiabilité initiale de 0.52 et que je veux augmenter celle-ci à 0.80, combien de fois le test actuel doit-il être plus long pour atteindre ce niveau de fiabilité?

Answer 34

. rxx* (1- rxx) K* = ------------- rxx(1-rxx*) rxx* = 0.80 rxx = 0.52 K* = 0.80(1-0.52)/0.52(1-0.80) = 0.38/0.10 = 3.8 Afin d'obtenir un niveau de fiabilité de 0.80, notre test devra comporter 3.8 fois plus d'items, et donc il va devoir comporter 19 items.

Question 35

Si j'ai un test de 8 items qui a une fiabilité initiale de 0.42 et que je veux augmenter celle-ci à 0.89, combien de fois le test actuel doit-il être plus long pour atteindre ce niveau de fiabilité?

Answer 35

. rxx* (1- rxx) K* = ------------- rxx(1-rxx*) rxx* = 0.89 rxx = 0.42 K* = 0.89(1-0.42)/0.42(1-0.89) = 0.52/0,05 = 10.4 Afin d'obtenir un niveau de fiabilité de 0.89, notre va devoir être 10.4 fois plus long, ce qui veut dire qu'il devra comporter 83 items.

Question 36

Quelles sont les causes principales de la non- fiabilité ?

Answer 36

La notation d'un test (cohérence interjuge). Contenu d'un test. Conditions d'administration d'un test. Conditions individuelles (fatigue, maladie, faim, manque d'étude).

Question 37

Qu'est-ce que la fiabilité interjuges?

Answer 37

Une évaluation des variations aléatoires attribuables aux personnes qui corrigent le test.

Question 38

Quel est le coefficient de fiabilité interjuges?

Answer 38

C'est la corrélation (Pearson) entre les scores attribués par le premier et le deuxième évaluateur.

Question 39

Que se passerait-il si les évaluateurs travaillaient ensembles? Séparés?

Answer 39

Ensemble : gonflerait le coefficient de fiabilité. Séparé : réduirait le coefficient de fiabilité.

Question 40

Qu'est-ce que le CCI?

Answer 40

Coefficient de corrélation intraclasse.

Question 41

Qu'est-ce qu'implique le CCI?

Answer 41

Il est interprété comme le coefficient due corrélation de Pearson. En termes de fiabilité, on l'utilise pour déterminer la fiabilité interroges ou interobservateurs.

Question 42

Sur quoi renseigne la fiabilité interjuges?

Answer 42

Elle renseigne sur les erreurs aléatoires attribuables aux variations entre les évaluateurs, mais rien d'autre sur les sources d'erreurs. C'est d'elle que découle l'objectivité des résultats obtenus à l'aide de l'instrument de mesure.

Question 43

Pour quoi est-ce que les formules Kuder-Richardson (20 et 21) sont-elles utiles?

Answer 43

Pour des tests à réponses dichotomiques. Elles ont l'objectifs d'évaluer la cohérence interne d'un test, à savoir si toutes les questions évaluent bien la même chose).

Question 44

Quelles sont les différences dans ce que mesure la KR-20 et KR-21?

Answer 44

La KR-20 mesure la fiabilité en tenant compte de la différence de difficulté entre les questions (plus précise, plus longue). La KR-21 suppose que toutes les questions ont la même difficulté (moins précise, plus courte). Le p est constant pour tous les items.

Question 45

Pour des items dichotomiques à quoi est équivalent l'alpha de Cronbach?

Answer 45

La KR-20.

Question 46

Laquelle entre KR-20 ou KR-21 sous-estime la fiabilité par rapport à l'autre à cause qu'elle ne prend pas en compte les variations de difficulté entre les items?

Answer 46

La KR-21

Question 47

Quelle formule de Kuder-Richardson je dois utiliser si mes items sont de difficulté différente?

Answer 47

KR-20

Question 48

Quelle formule de Kuder-Richardson je dois utiliser si mes items ont un niveau de difficulté similaire?

Answer 48

KR-21