Brainscape's Knowledge GenomeTM

Browse over 1 million classes created by top students, professors, publishers, and experts.


See full index

Mesure, évaluation et dérontologie > Cours 6 : Fidélité > Flashcards

Cours 6 : Fidélité Flashcards

1
Q

Qu’est-ce que la fidélité ?

A

En psychométrie, la fidélité est considérée la cohérence globale d’une mesure. Une mesure est fiable (ou fidèle) si elle produit des résultats similaires (précis, reproductibles) dans des conditions comparables.

How well did you know this?
1
Not at all
2
3
4
5
Perfectly
2
Q

Quelle est la question à se poser lorsqu’on veut mesurer la fidélité ?

A

Est-ce que je mesure ce que je veux mesurer de façon adéquatement précise ?

How well did you know this?
1
Not at all
2
3
4
5
Perfectly
3
Q

Quelles sont les statistiques associées à la fidélité ?

A

Corrélations, Kappa de Cohen, Alpha, Omega de Macdonald, Beta, Gamma, etc.

How well did you know this?
1
Not at all
2
3
4
5
Perfectly
4
Q

Comment est aussi appelée la fidélité ?

A

Fiabilité des résultats de tests

How well did you know this?
1
Not at all
2
3
4
5
Perfectly
5
Q

Que permet la fidélité d’un test ?

A

Déterminer dans quelle mesure les différences individuelles dans les scores aux tests peuvent être attribuées à de « réelles/vraies » différences sur le plan des caractéristiques mesurées (variance réelle) et dans quelle mesure elles doivent être attribuées à des erreurs dues au hasard (variance d’erreur).

How well did you know this?
1
Not at all
2
3
4
5
Perfectly
6
Q

Qu’est-ce que la variance réelle ?

A

Les caractéristiques mesurées

How well did you know this?
1
Not at all
2
3
4
5
Perfectly
7
Q

Qu’est-ce que la variance d’erreur ?

A

Erreurs dues au hasard.

How well did you know this?
1
Not at all
2
3
4
5
Perfectly
8
Q

Que représente la variance d’erreur ?

A

Toute condition non pertinente à l’objectif d’un test.

How well did you know this?
1
Not at all
2
3
4
5
Perfectly
9
Q

Comment réduire l’erreur de mesure et rendre les scores plus fidèles ?

A

En maintenant des conditions de testage uniformes et standardisés, en contrôlant :

  1. L’environnement du testage,
  2. Les consignes,
  3. Les limites de temps,
  4. Le climat interpersonnel (avec les sujets), etc.
How well did you know this?
1
Not at all
2
3
4
5
Perfectly
10
Q

Quelle variance voulons-nous maximiser ? Et quelle variance voulons-nous minimiser ?

A

1- Variance réelle

2- Variance d’erreur

How well did you know this?
1
Not at all
2
3
4
5
Perfectly
11
Q

Vrai ou faux.

Un test peut être 100% fidèle.

A

Faux.

How well did you know this?
1
Not at all
2
3
4
5
Perfectly
12
Q

De quoi devrait être accompagné tout test ?

A

D’un rapport sur son degré de fidélité (indice de fidélité).

How well did you know this?
1
Not at all
2
3
4
5
Perfectly
13
Q

Comment est aussi appelé un degré de fidélité ?

A

Indice de fidélité.

How well did you know this?
1
Not at all
2
3
4
5
Perfectly
14
Q

Complète la phrase…

Cet indice de fidélité caractérise bien le test sous réserve qu’il soit administré dans…

A

Les mêmes conditions standardisées et à des personnes similaires à celles qui composent l’échantillon normatif (les caractéristiques de l’échantillon devraient être présentées, ainsi que le type de fidélité).

How well did you know this?
1
Not at all
2
3
4
5
Perfectly
15
Q

Complète la phrase :

Si l’échantillon a été normalisé dans des conditions ___, on est en train de ___ la variance ___ et minimiser la variance ___.

A

1- Similaires
2- Potentionnaliser/augmenter
3- Réelle
4- D’erreur

How well did you know this?
1
Not at all
2
3
4
5
Perfectly
16
Q

Vrai ou faux.

Une variance d’erreur peut être complètement annulée.

A

Faux.

How well did you know this?
1
Not at all
2
3
4
5
Perfectly
17
Q

Qu’est-ce qu’un coefficient de corrélation ?

A

Exprime le degré de correspondance (ou relation, ou association) entre deux séries de scores.

How well did you know this?
1
Not at all
2
3
4
5
Perfectly
18
Q

Entre quoi et quoi peut être le coefficient de corrélation ?

A

-1 et +1

How well did you know this?
1
Not at all
2
3
4
5
Perfectly
19
Q

Vrai ou faux.

Le score de corrélation peut devenir un score de coefficient de fidélité.

A

Vrai.

How well did you know this?
1
Not at all
2
3
4
5
Perfectly
20
Q

Vrai ou faux.

Tous les types de fidélité ont pour objet un degré d’association entre deux séries de scores.

A

Vrai.

How well did you know this?
1
Not at all
2
3
4
5
Perfectly
21
Q

Qu’indique une corrélation de 0 ?

A

L’absence complète de relation, ce qui reproduit le hasard.

How well did you know this?
1
Not at all
2
3
4
5
Perfectly
22
Q

Comment appelle-t-on une relation entre 2 coefficients de variation ?

A

Coefficient de covariation

How well did you know this?
1
Not at all
2
3
4
5
Perfectly
23
Q

Qui suis-je ?

Coefficient de covariation standardisé.

A

Coefficient de corrélation.

How well did you know this?
1
Not at all
2
3
4
5
Perfectly
24
Q

Qu’est-il important de mentionner dans l’interprétation de variables ?

A

Le niveau de signification.

How well did you know this?
1
Not at all
2
3
4
5
Perfectly
25
Q

Quelle expression permet de nuancé le fait d’avoir une corrélation modérée ?

A

Dans une certaine mesure.

How well did you know this?
1
Not at all
2
3
4
5
Perfectly
26
Q

Comment doit être inscrit les degrés de liberté ?

A

r(8) = ….

How well did you know this?
1
Not at all
2
3
4
5
Perfectly
27
Q

Quelle est la formule pour calculer les degrés de liberté ?

A

N-2

How well did you know this?
1
Not at all
2
3
4
5
Perfectly
28
Q

Quelle est la formule pour calculer les degrés de liberté dans une comparaison de moyennes ?

A

N-1

How well did you know this?
1
Not at all
2
3
4
5
Perfectly
29
Q

Quel est le barème de Furr concernant la cotation des coefficients de corrélation ?

A
  • Plus petit que 0,10 = Corrélation très faible
  • Autour de 0,15 = Corrélation faible
  • Autour de 0,35 = Corrélation modérée
  • Autour de 0,6 = Corrélation forte
  • Plus grand que 0,80 = Corrélation très grande
How well did you know this?
1
Not at all
2
3
4
5
Perfectly
30
Q

Vrai ou faux.

Il existe qu’une seule classification des corrélations.

A

Faux.

How well did you know this?
1
Not at all
2
3
4
5
Perfectly
31
Q

Quelle est l’autre question à se poser concernant le résultat d’une corrélation ?

A

Est-ce que ce résultat de corrélation (r(x) = x) est-il significativement (p< 0,05) différent de zéro ?

32
Q

Quelle est la plus petite corrélation significative au seuil de 5% avec un échantillon de 10 personnes ?

A

0,63

33
Q

Complète la phrase :

Toutes corrélations plus petites que __ avec un échantillon de 10 personnes ne seront jamais ___.

A

1- 0,63

2- Significatives

34
Q

Complète la phrase :

Toutes corrélations plus grandes ou égales que ___ avec un échantillon de 10 personnes seront ___.

A

1- 0,63

2- Significatives

35
Q

Quel est le coefficient de fidélité désirable ?

A

0,80

36
Q

Quels sont les 5 types de fidélité ?

A
  • Fidélité par test-retest
  • Fidélité par versions parallèles
  • Fidélité par bissection (cohérence interne)
  • Fidélité par structure interne (Alpha de Cronbach)
  • Fidélité par équivalence inter-juges
37
Q

Qu’est-ce que la fidélité test-retest ?

A
  • On administre et on ré-administre le même test aux même sujets (deux temps, deux séances de testage).
  • Le coefficient de fidélité équivaut tout simplement à la corrélation entre les scores obtenus par les mêmes personnes aux deux séances de testage.
38
Q

À quoi correspond la variance d’erreur dans la fidélité test-retest ?

A

La variance d’erreur correspond aux fluctuations aléatoires des performances d’une séance de testage à l’autre.

39
Q

Complète la phrase :

La fidélité test-retest indique dans quelle mesure il est possible de ___, à des occasions diverses, les ___ d’un test –> plus elle est ___, moins les scores sont influencés par des changements quotidiens ___ (ce dont on n’a pas de contrôle).

A

1- Généraliser
2- Scores
3- Élevée
4- Imprévisibles

40
Q

Qu’est-il important de spécifier lorsqu’on inclut la fidélité test-retest dans un manuel de tests ?

A

L’intervalle de temps entre les deux passations.

41
Q

Dans la fidélité test-retest, quelles sont les 2 difficultés qui vont augmenter la variance d’erreur ?

A

1- L’effet de pratique peut augmenter les scores au retest (résultats + élevés la 2e fois)

2- Si l’intervalle est très court, les sujets peuvent se rappeler de leurs réponses (effet de la mémoire sur lequel nous n’avons pas de contrôle)

42
Q

Normalement, on retest après combien de temps ?

A

3 semaines, 3 mois, 6 mois, 9 mois, 12 mois.

43
Q

Qu’est-ce que la fidélité par versions parallèles ?

A

Les individus peuvent passer une version lors de la première séance de testage et une autre version du même test, lors de la deuxième séance (toujours les mêmes personnes).

La corrélation obtenue entre les deux séries de scores deviendra le coefficient de fidélité.

44
Q

Qui suis-je ?

Je suis un moyen de minimiser les difficultés soulevées par le test-retest.

A

Fidélité par versions parallèles.

45
Q

Quelles sont les précautions à prendre lors de la fidélité par versions parallèles ?

A

Il faut assurer un véritable parallélisme.

  • Contenir le même nombre d’items, la même forme, et couvrir le même type de contenu.
  • Le niveau de difficulté moyen des items doit être le même.
  • Il faut assurer l’équivalence des consignes, de minutage, des exemples, du format de présentation, bref, de tous les aspects du cadre de passation du test.
46
Q

Quelle est la faiblesse de la fidélité par versions parallèles ?

A

Les sujets peuvent différer quant à leur degré d’amélioration due à la pratique, ce qui implique une autre forme de variance d’erreur qui tend à réduire la corrélation entre les deux versions

47
Q

Qu’est-ce que la fidélité par bissection ?

A

Diviser le test en deux parties équivalentes (ce qui permet de calculer deux scores indépendants) étant donné que l’unique passation n’implique qu’une seule version d’un test, le coefficient de fidélité obtenu porte le nom d’indice de cohérence interne.

  • Il faut décider comment diviser le test en deux (de manière à ce que les deux moitiés soient aussi semblables que possible).
48
Q

Quel nom porte le coefficient de fidélité obtenu lors de la fidélité par bissection ?

A

Indice de cohérence interne.

49
Q

Quelle est la faiblesse de la fidélité par bissection ?

A

Considérant qu’une moitié sert à tester l’autre, le calcul sert à vérifier la fiabilité de la moitié du test, et non du test entier !

50
Q

Qui suis-je ?

Type de fidélité moins exploré dans la recherche.

A

Fidélité par bissection.

51
Q

Qu’est-ce que la fidélité par structure interne (Alpha de Cronbach) ?

A

Il s’agit d’une seule passation, d’une seule version, d’un seul test. Cette fidélité a pour fondement l’homogénéité entre les réponses de tous les items du test.

52
Q

Qui suis-je ?

Formule qui s’applique aux items de nature dichotomique.

A

La formule KR (Kuder-Richardson).

53
Q

Qui suis-je ?

Formule qui s’applique aux items selon une échelle Likert ou de type Likert.

A

Formule Alpha.

54
Q

À quoi sert la formule KR ?

A

Aux items dichotomiques.

55
Q

À quoi sert la formule Alpha ?

A

Aux items selon une échelle Likert ou de type Likert.

56
Q

Aujourd’hui, quelle formule est la plus utilisée ?

A

Alpha.

57
Q

Quel coefficient tend à prendre de + en + de place ces jours-ci ? Pourquoi ?

A

Coefficient Oméga de McDonald.

À cause des certaines difficultés associées aux calculs Alpha (échantillon d’items et de personnes). La formule Oméga n’est pas affectée par le N d’items ou de personnes.

58
Q

Complète la phrase :

Plus on augmente la quantité de ___ ou la quantité ___, plus on augmente artificiellement ___.

A

1- Personnes
2- D’items
3- L’alpha

59
Q

Quelle est la mauvaise augmentation ?

A

La quantité d’items.

60
Q

Quelle est la bonne augmentation ?

A

La quantité de personnes.

61
Q

Qu’est-ce que la fidélité par intercorrecteurs ?

A

Évalue le degré de concordance entre deux ou plusieurs évaluateurs dans leurs évaluations.

62
Q

Quelle statistique est associée à la fidélité intercorrecteurs ?

A

Kappa en Cohen.

63
Q

Comment évaluer la fidélité intercorrecteurs ?

A

En faisant corriger un test par, au moins, deux examinateurs indépendants (pas plus de 5, sinon on va augmenter artificiellement le Alpha). Les deux scores (ou plus) obtenus seront mis en corrélation de façon usuelle.

64
Q

Quelles sont les caractéristiques d’un test de vitesse ?

A
  • La rapidité de la performance explique les différences individuelles observées (mesurées).
  • Items faciles et qui font partie des habiletés maîtrisées par les sujets auxquels il est destiné.
  • Limite de temps très court (impossible à compléter tous les items)
  • Le score de chaque personne reflète son rythme (ou sa vitesse) de travail.
65
Q

Quelles sont les caractéristiques d’un test de puissance ?

A
  • Limite de temps suffisamment (réponse à tous les items)
  • Items ordonnés selon une échelle de difficulté qui augmente très rapidement jusqu’à des items à peu près insolubles
  • Personne ou presque ne peut obtenir un score parfait.
66
Q

Complète la phrase :

La mémoire explique __% du QI des personnes

A

31%

67
Q

Comment sont conçus les tests de vitesse et de puissance ?

A

Les tests de vitesse et de puissance sont tous les deux conçus pour empêcher une réussite parfaite.

68
Q

Vrai ou faux.

On peut exprimer la fidélité d’un test sous la forme d’une erreur type de mesure (ETM).

A

Vrai.

69
Q

Comment est aussi appelée l’erreur type de mesure ?

A

Erreur standard de mesure (ESM).

70
Q

Quel est le score réel d’une personne ?

A

La moyenne de la distribution des scores.

71
Q

À quoi correspond également l’erreur type de mesure ?

A

À l’écart-type.

72
Q

Quel pourcentage des individus se regroupent entre -1,00 et +1,00 É-T ?

A

Autour de 68%.

73
Q

Quelle est la formule pour déterminer l’ETM ?

A

ÉT*Racine carrée de (1-coefficient de fidélité)

74
Q

Quels types de tests accordent un rôle important au jugement du correcteur ?

A

Les tests de personnalité de type projectif.

75
Q

Complète la phrase :

Si les examinateurs s’efforcent de maintenir des conditions de testage uniformes/standardisés …

A

Ils réduisent les erreurs de mesure et rendent les scores + fidèles.

76
Q

Pourquoi les tests de puissance et de vitesse empêchent-ils une réussite parfaite ?

A

Un score parfait est indéterminé. Il est impossible de savoir quel score plus élevé le sujet aurait atteint si le test avait contenu plus d’items ou des items encore plus difficiles.

Mesure, évaluation et dérontologie (9 decks)

Brainscape helps you reach your goals faster, through stronger study habits.
© 2024 Bold Learning Solutions. Terms and Conditions