Cours 7 - Les types de fidélités et leurs avantages et inconvénients Flashcards
Nomme les 5 types de fidélité, ainsi que leur 2ème nom
Par test retest : stabilité temporelle
Par versions parallèles : méthode d’équivalence
Par bissection : méthode de partage / split half
Par homogénéité : cohérence interne
Par équivalence inter-juge : Fidélité inter-correcteur
Les 5 types de fiabilité = méthode utilisée pour …
Pour évaluer la fiabilité d’un test ou d’une évaluation.
En quoi consiste la fidélité test retest?
Elle consiste à administrer le même test à deux occasions différentes aux mêmes sujets.
Le coefficient de fidélité de la fidélité par test retest, c’est quoi?
Le coefficient de fidélité, dans ce cas, qu’on appelle rtr, est simplement la corrélation entre les scores obtenus par les mêmes personnes au cours des deux administrations.
À quoi on s’attend lors de la passation du tests à 2 moments différents (test retest)?
On s’attend à ce que les résultats soient très similaires. Toutes les différences obtenues dans ces deux passations sont des erreurs.
La fidélité par test-retest indique quoi?
l’ampleur avec laquelle les scores peuvent être généralisés à différentes occasions.
Plus la fidélité test-retest est élevée, moins …
les scores des sujets sont susceptibles d’être affectés par les sources d’erreurs.
Les sources d’erreurs de la fidélité test-retest comprennent quoi?
les fluctuations aléatoires de la performance d’une session à l’autre.
Les sources d’erreurs de la fidélité test-retest comprennent les fluctuations aléatoires de la performance d’une session à l’autre. Ces variations peuvent résulter de quoi?
Ces variations peuvent résulter, en partie, des conditions de testing qui sont mal contrôlées, mais aussi à des changements internes du sujet entre les deux passations.
Ainsi, plus le coefficient de corrélation test-retest est élevé, plus…
, plus l’instrument a une bonne fidélité (stabilité) temporelle
Quels sont les 2 avantages de la fidélité par test retest?
Stabilité des résultats
Indicateur de qualité
Quels sont les 3 inconvénients de la fidélité par test retest?
Effet de pratique
Changement d’opinions
Intervalle entre les deux administrations
Stabilité des résultats –> L’un des avantages de la fidélité test retest. Explique
Cette méthode mesure la cohérence des résultats lorsque le même test est administré au même échantillon de personnes à différents moments.
Elle garantit que les résultats d’un test peuvent être reproduits (respectant les mêmes conditions de passation).
Indicateur de qualité –> L’un des avantages de la fidélité test retest. Explique
La fidélité test-retest est un excellent indicateur de qualité métrique d’un instrument de mesure psychologique.
Effet de pratique –> L’un des inconvénients de la fidélité test retest. Explique
Si le retest est effectué trop rapidement, la première passation sensibilise les répondants au thème (au construit).
En conséquence, le répondant se souviendra des réponses déjà données et les répétera.
Cela conduit à des indicateurs de fiabilité biaisés à la hausse.
Changement d’opinions –> L’un des inconvénients de la fidélité test retest. Explique
Si le retest prend trop longtemps, les convictions peuvent changer en raison des influences situationnelles avant le retest. Dans ces cas-là, il existe une variabilité non prévue aux scores de stabilité.
Cela conduit à des indicateurs de fiabilité biaisés à la baisse.
Intervalle entre les deux administrations
–> L’un des inconvénients de la fidélité test retest. Explique
Plus l’intervalle entre les deux administrations successives est long, plus le coefficient de corrélation est faible, ce qui indique une mauvaise fiabilité par inclusion de sources d’erreurs (variabilité d’erreur).
En quoi consiste la Fidélité par versions parallèles
Elle consiste à administrer deux versions différentes mais équivalentes d’un même test aux mêmes sujets.
Le coefficient de fidélité par version parallèle est obtenu comment?
Le coefficient de fidélité est obtenu par le calcul du coefficient de corrélation entre les scores des deux passations.
Lors de la création/utilisation de versions parallèles, il faut …
prendre toutes les précautions pour assurer un véritable parallélisme.
Nommes 3 précautions pour assurer un véritable parallélisme
- Contenir le même nombre d’items, la même forme, et couvrir le même contenu
- Le niveau de difficulté moyen des items doit être statistiquement le même (p < 0,05);
- II faut assurer l’équivalence des consignes, de minutage, des exemples, du format de présentation, bref, de tous les aspects du cadre de passation du test.
Quel est l’avantage de la fidélité par versions parallèles?
Précision
Quels sont les 2 inconvénients de la fidélité par version parallèle?
Coût et temps
Équivalence imparfaite
Précision –> L’avantage de la fidélité par version parallèle. Explique
Cette méthode permet d’évaluer la précision d’un test en éliminant les effets de la mémoire ou de la pratique qui peuvent survenir lors de l’administration répétée du même test.
Coût et temps –> L’un des inconvénients de la fidélité par version parallèle. Explique
La production de deux versions d’un même instrument est coûteuse et exige beaucoup de temps.
Équivalence imparfaite –> L’un des inconvénients de la fidélité par version parallèle. Explique
Deux formes parallèles ne sont jamais équivalentes à 100 %.
Il y a donc une part de l’erreur qui sera attribuable à une équivalence imparfaite entre les deux versions.
Cette source de fluctuation vient s’ajouter à l’erreur de mesure, ce qui se traduit par une surestimation de l’erreur de mesure.
En quoi consiste la fidélité par bissection?
Elle consiste à diviser l’ensemble des items d’un test en deux moitiés équivalentes et à calculer la corrélation entre les scores obtenus pour chaque moitié.
La fidélité par bissection est une méthode qui permet de mesurer quoi?
Cette méthode permet de mesurer la cohérence interne du test, c’est-à-dire à quel point les deux moitiés du test mesurent une même caractéristique psychologique.
Quels sont les 2 avantages de la fidélité par bissection ?
Pas de double administration
Mesure de cohérence interne
Quels sont les 3 inconvénients de la fidélité par bissection ?
Équivalence des 2 parties
Influence de la méthode de bissection choisie
Sous-estimation de la fidélité
Pas de double administration –> L’un des avantages de la fidélité par bissection. Explique
Cette méthode ne nécessite pas une double administration du test, ni la construction d’une seconde version parallèle de l’instrument.
Mesure de cohérence interne –> L’un des avantages de la fidélité par bissection. Explique
Elle permet de mesurer l’homogénéité des deux parties du test.
Équivalence des 2 parties –> L’un des inconvénients de la fidélité par bissection. Explique
Il faut porter une attention à l’équivalence des deux parties comparées, ce qui représente une difficulté.
Influence de la méthode de bissection choisie –> L’un des inconvénients de la fidélité par bissection. Explique
La fidélité calculée sera influencée par la méthode de bissection choisie (items pairs/impairs, répartition au hasard, etc.).
Sous-estimation de la fidélité –> L’un des inconvénients de la fidélité par bissection. Explique
En scindant l’instrument en deux, le nombre d’items se trouve diminué. Cela a pour effet d’en sous-estimer la fidélité.
En quoi consiste la fidélité par homogénéité?
Elle consiste à évaluer le degré de cohésion de tous les items qui composent un instrument psychométrique (ou chacune de ses échelles), lesquels devraient être étroitement liés.
comment on obtient l’indice de fidélité par homogénéité?
L’indice de fidélité s’exprime alors par la mesure de cette cohérence entre les items.
Quels sont les 2 avantages de la fidélité par homogénéité
Pas de double administration
Mesure de cohérence interne
Quels sont les inconvénients de la fidélité par homogénéité?
Pas de stabilité temporelle
Dépendance à la longueur du test
Pas de double administration –> L’un des avantages de la fidélité par homogénéité. Explique
Cette méthode ne nécessite pas une double administration du test, ni la construction d’une seconde version parallèle de l’instrument.
Mesure de cohérence interne –> L’un des avantages de la fidélité par homogénéité. Explique
Elle permet de mesurer l’homogénéité du test.
Pas de stabilité temporelle –> L’un des inconvénients de la fidélité par homogénéité. Explique
Cette mesure ne tient pas compte de la stabilité temporelle.
Elle implique plutôt un score composite obtenu par les corrélations des divers items d’un même instrument.
Dépendance à la longueur du test
–> L’un des inconvénients de la fidélité par homogénéité. Explique
La fidélité par homogénéité peut être influencée par le nombre d’items dans le test. Plus le nombre d’items est élevé, plus la fidélité par homogénéité est élevée.
On peut augmenter la fidélité de manière concrète et artificielle. Explique
Concret : Augmenter le nombre de personne
Artificielle : Augmenter le nombre d’items et de possibilité des choix de réponse (car augmente la fidélité)
Qu’est-ce que mesure la
fidélité par équivalence inter-juges
Elle mesure le degré d’accord entre deux ou plusieurs évaluateurs (ou “correcteurs”) qui évaluent indépendamment le même ensemble d’items.
Quand est-ce que la méthode de fidélité par équivalence inter-juges est souvent utilisée?
Cette méthode est souvent utilisée dans les situations où les évaluations sont subjectives, comme :
- L’évaluation des performances en milieu de travail,
- L’évaluation des compétences en éducation
- L’évaluation des symptômes cliniques en psychologie, entre autres
La fidélité inter-correcteur est généralement évaluée à l’aide de quoi?
De mesures statistiques
La fidélité inter-correcteur est généralement évaluée à l’aide de mesures statistiques telles que ?
- Le coefficient de corrélation intra-classe
- Le coefficient kappa de Cohen
- Ou d’autres mesures d’accord inter-juges (CVC).
Quels sont les 2 avantages de la fidélité par équivalence inter-juges
Réduction du biais d’évaluation
Amélioration de la précision
Quels sont les 2 inconvénients de la fidélité par équivalence inter-juges
Coût et temps
Variabilité des évaluateurs
Réduction du biais d’évaluation –> L’un des avantages de la fidélité par équivalence inter-juges. Explique
Cette méthode permet de réduire le biais associé à un seul évaluateur.
Amélioration de la précision –> L’un des avantages de la fidélité par équivalence inter-juges. Explique
Elle peut améliorer la précision des évaluations en moyennant les scores de plusieurs évaluateurs.
Coût et temps –> L’un des inconvénients de la fidélité par équivalence inter-juges. Explique
La formation et la coordination de plusieurs évaluateurs peuvent être coûteuses et prendre du temps.
Variabilité des évaluateurs –> L’un des inconvénients de la fidélité par équivalence inter-juges. Explique
Les différences individuelles entre les évaluateurs peuvent introduire une variabilité supplémentaire non voulu dans les scores.
