Cours 7 (Fidélité) Flashcards
Comment est-ce que l’on défini la fidélité?
Elle est définie comme le degré de précision et de constance des scores obtenus par un test.
Est-ce qu’un test est fidèle si:
Le test donne des résultats différents, les conditions de passations sont similaires aux conditions appliquées à l’échantillon normatif?
Faux, les résultats doivent être similaires.
Qu’est-ce que la constance?
C’est la stabilité temporelle, avoir des résultats similaires dans le temps.
Qu’est-ce que la précision?
C’est minimiser au maximum l’erreur associé à la mesure.
Vrai ou faux
Variance vraie et variance réelle sont des synonymes?
Vrai
Qu’est-ce qui explique la variable observable?
La variance vraie et la variance d’erreur
Qu’est-ce que la variance vraie?
Un construit
Vrai ou Faux
Avec 1 variable, le modèle X = t + e est considéré non identifié?
Vrai, parce que l’on connait la valeur d’une seule variable, donc il y a trop de possibilité de réponses.
Comment est-ce que l’on peut réduire la variance d’erreur?
En maintenant des conditions de testage uniformes, en contrôlant: environnement, les consignes, le temps, le climat interpersonnel.
Que ce passe-t-il lorsque la variance d’erreur est petite?
Ça rend plus fidèle les scores aux tests.
Vrai ou Faux
Un test peut être parfaitement fidèle?
Faux, aucun test n’est parfaitement fidèle.
Chaque test est accompagné de quoi?
Un coefficient de fidélité
Qu’est-ce que le coefficient de fidélité exprime? Il est comprit entre quoi et quoi?
Une corrélation
Il est compris entre 0 (aucune corrélation) et 1 (corrélation parfaite).
Quel est le minimum du coefficient de corrélation pour considérer que la corrélation est assez élevée?
0,70
Que ce passe-t-il si le coefficient de corrélation est très élevé?
Il est probable que certains items mesurent la même chose, ça crée de la polynéarité et on ne veut pas ça.
Quels sont les 5 types de fidélité?
- Par test-retest
- Par versions parallèles
- Par bissection (split-half)
- Par homogénéité
- Par équivalence inter-juges
Qu’est-ce que la fidélité par test-retest?
Consiste à administrer le même test à 2 occasions différentes aux mêmes sujets.
Comment est-ce que l’on appel aussi la fidélité par test-retest?
Stabilité temporelle
Quel est le coefficient de fidélité du test-retest?
r_tr, c’est simplement la corrélation entre les scores obtenus au cours des 2 administrations.
Que ce passe-t-il plus le coefficient de fidélité du test-retest est élevé?
Moins il y a de variance d’erreur et plus l’instrument a une bonne stabilité temporelle.
Quelle est la source d’erreur de la fidélité test-retest?
Les fluctuations aléatoires de la performance d’une session à l’autre.
Quels sont les 2 avantages de la méthode test-retest?
- Stabilité des résultats (permet d’évaluer la validité du test dans le temps et garantit que les résultats peuvent être reproduits.)
- Indicateur de qualité
Quels sont les 3 inconvénients de la méthode test-retest?
- Effet de pratique
- Changement d’opinions
- Intervalle entre les 2 administrations
Quel est l’impact de l’effet de pratique sur la fiabilité?
Indicateurs de fiabilité biaisés à la hausse.
Quel est l’impact du changement d’opinion sur la fiabilité?
Indicateurs de fiabilité biaisés à la baisse.
Quel est l’impact plus l’intervalle est long entre les passations?
Plus le coefficient de corrélation est faible, plus il y a de variance d’erreur, moins c’est fidèle.
Qu’est-ce que la fidélité par versions parallèles?
Elle consiste à administrer 2 versions différentes mais équivalentes d’un même test aux mêmes sujets.
Comment est-ce que l’on appel aussi la fidélité par versions parallèles?
Méthode d’équivalence.
Quels sont les 3 éléments qui permettent de s’assure d’un véritable parallélisme?
- Continent le même nombre d’items, même forme, même contenu.
- Niveau de difficulté moyen des items doit être le statistiquement le même.
- L’équivalence de tous les aspects de passation.
Quel est l’avantage de la fidélité par versions parallèle?
Précision (permet d’éliminer les effets de la mémoire, de la pratique.)
Quels sont les 2 inconvénients de la fidélité par version parallèle?
- Coût et temps (production de deux versions)
- Équivalence imparfaite (Elles ne sont jamais équivalente à 100%)
Quel est l’impact de l’équivalence imparfaite?
Il y a une surestimation de l’erreur de mesure.
Qu’est-ce que la fidélité par bissection?
Consiste à diviser l’ensemble des items d’un test en 2 moitiés équivalentes.
Comment est-ce que l’on appel aussi la fidélité par bissection?
Méthode de partage ou split-half
Qu’est-ce que la méthode de fidélité par bissection permet de mesurer?
La cohérence interne du test
Qu’est-ce que la cohérence interne d’un test?
Décrit dans quelle mesure toutes les questions d’un test mesurent le même concept.
Quels sont les 2 avantages de la fidélité par bissection?
- Pas de double administration
- Mesure la cohérence interne
Quels sont les 3 inconvénients de la fidélité par bissection?
- Équivalence des 2 parties
- Influence de la méthode de bissection choisie
- Sous-estimation de la fidélité (car le nombre d’items se trouve diminué).
Qu’est-ce que la fidélité par homogénéité?
Consiste à évaluer le degré de cohésion des items qui composent un instrument psychométrique.
Comment est-ce que l’on appel aussi la fidélité par homogénéité?
Cohérence interne
Quels sont les 2 avantages de la fidélité par homogénéité?
- Pas de double administration
- Mesure la cohérence interne
Quels sont les 2 inconvénients de la fidélité par homogénéité?
- Pas de stabilité temporelle
- Dépendance à la longueur du test
En psychologie, quel fidélité est-ce que l’on utilise fondamentalement?
La fidélité par homogénéité.
Qu’est-ce qui se passe si le nombre d’items est élevé?
Plus la fidélité par homogénéité est élevée.
Comment est-ce que l’on peut augmenter la fidélité par homogénéité?
- Façon artificielle (augmente nb d’items dans le test)
- Façon concrète (augmente nb de personne qui passe le test).
Quels sont les 3 outils qui permettent de mesurer la fidélité par homogénéité?
- Alpha de Cronbach
- Mesure parallèle
- Mesures congéneriques
Qu’est-ce que le alpha de Cronbach fourni?
Une mesure de la cohérence interne d’un test
Quand est-ce que le alpha de Cronbach augmente?
Quand les différents items du test sont corrélés.
Vrai ou Faux
Un coefficient alpha élevé garantit une bonne cohérence interne?
Faux, car le alpha est aussi affecté par le nb d’items du test.
Quelle est la valeur de la valeur alpha satisfaisante?
> 0,7
Comment est-ce que l’on appel aussi l’alpha de Cronbach?
Fiabilité tau-équivalence.
Qu’est-ce que la tau-équivalence?
Condition de fiabilité qui suppose que tous les items d’un test ont la même importance pour le construit.
Vrai ou faux
Si on n’a pas la tau-équivalence, on peut tout de même utiliser l’alpha de Cronbach?
Faux, on doit l’oublier.
Quel outils est à prévilégier pour la fidélité par homogénéité? C’est quoi?
Les mesures congéneriques: Chaque item du test mesure le même construit, mais pas nécessairement dans la même importance
Qu’est-ce que les mesures congéneriques permettent?
Quels sont les 2 autres mesures parfois utilisées lorsque l’on suppose un modèle congenerique?
Plus grande précision dans l’évaluation de la fiabilité.
1. Fidélité composite
2. Omega de McDonald
Qu’est-ce que la fidélité par inter-juges?
Elle mesure le degré d’accord entre 2 ou plusieurs évaluateurs.
Dans quel cas est-ce que l’on utilise souvent la fidélité par inter-juges?
Quand les situation où les évaluations sont subjectives.
La fidélité inter-juge est généralement évaluée à l’aide de mesures statistiques comme: ___________.
Le coefficient de corrélation inter-juge, le coefficient kappa de Cohen, etc.
Quels sont les 2 avantages de la fidélité par inter-juge?
- Réduction du biais d’évaluation
- Améliorer la précision
Quels sont les 2 inconvénients de la fidélité inter-juges?
- Coût et temps
- Variabilité des évaluateurs (expérience de l’évaluateur)
Qu’est-ce qu’un test de vitesse?
La rapidité de la performance explique les différences individuelles mesurées.
Vrai ou faux
Le test de vitesse est très limité dans le temps?
Vrai
Qu’est-ce qu’un test de puissance?
Test qui offre une limite de temps suffisament longue pour que tous puissent tenter de répondre à chaque items.
Dans le cas d’un test de vitesse et qu’un test de puissance, on cherche à ___________.
Empêcher la réussite parfaite.
La variation des résultats au test de vitesse et de puissance indique l’indice de fidélité, donc plus de variation = _____________.
Moins de fidélité
Comment est-ce que l’on peut comprendre la fidélité d’un test?
Sous la forme d’une erreur type de mesure (ETM).
Plus l’erreur type de mesure est petite, plus la mesure est ___________.
précise
Quand on mesure plusieurs personnes sur 1 test, on a _________, comme indice de variabilité. Quand on mesure plusieurs fois le même test à 1 personne, on a _________, comme indice de variabilité.
- L’écart-type
- L’erreur type de mesure
Comment est-ce que l’on détermine, dans la formule de l’erreur type de mesure si c’est 1 ou 2 ou 3 ET?
1, si le score est entre 68% de la distribution
2, si le score est entre 95% de la distribution
3, si le score est entre 99% de la distribution
De quoi dépend l’erreur type de mesure?
Dépend de l’écart-type et du coefficient de fidélité.
Comment est-ce que l’on peut réduire l’erreur type de l’instrument?
- augmenter la fidélité de l’instrument
- Réduire la variabilité des scores
Si une personne a un QI réel de 110 et que son ETM est de 5, qu’est-ce que cela veut dire?
On s’attend à 68%, à ce que le score réel obtenu fluctue entre 105 et 115.
Plus le ETM est petit, plus ___________, et donc _________.
tu as de précision, donc plus c’est fidèle.
