Cours 7 (Examen #2) Flashcards
La fidélité d’un test psychométrique est aussi appelée ____
Fiabilité
Définir la fidélité
Degré de précision et de constance des scores obtenus par un test.
C’est le rapport de la variance vraie à la variance totale.
Quelles sont les dimensions importantes de la fidélité?
- Le test doit donner des résultats très similaires
- Conditions de passation sont aussi très similaires aux conditions appliquées à l’échantillon normatif
Qui suis-je? Concept qui se définie comme le rapport de la variance vraie à la variance totale.
Fidélité
À quoi sont liés les critères de fidélité d’un test psychométrique?
À la précision et à sa constance (au temps)
On espère que les scores d’un test doivent présenter la _____ marge d’erreur (Variance d’erreur) possible.
La plus petite
Comment les examinateurs peuvent réduire l’erreur de mesure?
En maintenant des conditions de testage uniforme, en contrôlant :
- L’environnement du testage
- Les consignes
- Les limites de temps
- Le climat interpersonnel
- Etc
Un coefficient de fidélité exprime une ____.
Corrélation
Comment interpréter le coefficient de fidélité?
Donnée compris entre 0 et 1.
En clinique : 0,80 est le minimum requis
En recherche : 0,7 est le minimum requis
Quels sont les types de fidélité?
- Test-retest (stabilité)
- Version parallèles (d’équivalence)
- Bissection (Split-half)
- Homogénéité (cohérence interne)
- Équivalence inter-juges
La fidélité par test-retest est aussi appelée _____.
Stabilité temporelle
À quoi consiste la fidélité par test-retest?
À administrer le même test à 2 occasions différentes aux mêmes sujets.
Comment appelons-nous le coefficient de fidélité par test-retest?
rtr (tr en petit)
Expliquer le coefficient de fidélité par test-retest?
C’est la corrélation entre les scores obtenus par les mêmes personnes au cours de deux administrations.
Vrai ou faux: Moins la fidélité test-retest est élevé, moins le scores des sujets sont susceptibles d’être affectés par Les Sources d’erreurs.
Faux: Plus la fidélité test ré test est élevé….
Quels sont Les Sources d’erreur de la fidélité test-retest?
- Fluctuations aléatoire de la performance d’une session à l’autre.
- Causé par les conditions de testing qui sont mal contrôlées.
- Et/ou changements internes du sujet entre les 2 passations.
Vrai ou faux: Plus le coefficient de corrélation test-retest est élevé, plus l’instrument a une bonne fidélité temporelle.
Vrai
Quels sont les avantages de la méthode test-retest? (2)
- Stabilité des résultats: Garantit que les résultats peuvent être reproduits
- Indicateur de qualité : Excellent indicateur de qualité métrique
Quels sont les inconvénients de la méthode test-retest? (3)
- Effet de pratique
- Changement d’opinions : Changement en raison des influences situationnelles.
- Intervalle entre les 2 administrations: + long = + le coefficient de corrélation est faible
La fidélité par versions parallèles est aussi appelée ____.
Méthode d’équivalence
Expliquer la fidélité par versions parallèles
Consiste à administrer 2 versions différentes mais équivalentes d’un test aux même sujets
Comment est obtenue le coefficient de fidélité par la méthode d’équivalence (versions parallèles)
Par le calcul du coefficient de corrélation entre les scores des deux passations.
Quelles sont les précautions à prendre en compte pour s’assurer d’un véritable parallélisme? (Fidélité par versions parallèles)
- Contenir le même nbr d’items, la même forme et couvrir le même contenu.
- Niveau de difficulté moyen des items doit être statistiquement le même.
- S’assurer l’équivalence des consignes, de minutage, des exemples, du format de présentation, etc
Quel est l’avantage de la fidélités par versions parallèles?
La précision : Permet d’évaluer la précision d’un test en éliminant les effets de la mémoire ou de la pratique.
Quels sont les inconvénients de la méthode versions parallèles? (2)
- $ et temps
- Équivalence imparfaite: Donc une part de l’erreur qui sera attribuable à une équivalence imparfaite
Pourquoi dans le type de fidélité des versions parallèles, il peut y avoir un surestimation de l’erreur de mesure?
À causse de l’équivalence imparfaite : Un part de l’erreur de mesure sera attribuable à une équivalence imparfaite entre les 2 versions.
La fidélité par bissection est aussi appelée ____.
Méthode de partage ou split-half
Expliquer la fidélité par bissection (split-half)
Consiste à diviser l’ensemble des items d’un test en deux moitiés équivalentes et à calculer la corrélation entre les scores obtenus pour chaque moitié.
La méthode de fidélité par bissection permet de mesure quoi?
La cohérence interne du test
Qu’est-ce que la cohérence interne d’un test? (Pour la méthode de fidélité bissection)
À quel point les deux moitiés du tests mesurent une même caractéristique psychologique
Quels sont les avantages de la fidélité par bissection?
- Pas de double administration
- Mesure la cohérence interne du test: Donc l’homogénéité des deux parties du test
Quels sont les inconvénients de la méthode par bissection? (3)
- Équivalence des deux parties
- Influence de la méthode de bissection choisie (Items pairs/impairs, répartition au hasard, etc)
- Sous-estimation de la fidélité : puisqu’on divise l’instrument en 2, cela a pour effet de sous-estimer la fidélité
La fidélité par homogénéité est aussi appelée ___
Cohérence interne
Expliquer a fidélité par homogénéité
Consiste à évaluer le degré de cohésion des items qui composent un instrument.
Comment s’exprime l’indice de fidélité dans la fidélité par homogénéité?
Par la mesure de la cohérence entre les items (donc des corrélations)
Quels sont les avantages de la fidélité par homogénéité? (2)
- Pas de double administration
- Mesure la cohérence interne
Quels sont les inconvénients de la méthode de fidélité par homogénéité? (2)
- Pas de stabilité temporelle : Méthode qui implique un score composite obtenu par les corrélations des divers items d’un même instrument.
- Dépendance à la longueur du test : + le nbr d’items est élevé + la fidélité par homogénéité a tendance à être élevée.
Qui a proposé l’alpha de Cronbach?
Lee Cronbach (1951)
Qu’est-ce qui est fournit par l’alpha de Cronbach?
Une mesure de la cohérence interne (donc une fidélité par homogénéité) d’un test
Qu’est-ce qui est décrit par la cohérence interne de l’alpha de Cronbach?
Décrit dans quelle mesure toutes les questions d’un test mesurent le même concept
Quand est-ce que l’alpha de Cronbach augmente-t-il?
Quand les différents items du tests sont corréllées.
Vrai ou faux: Un coefficient alpha élevé ne garantit pas toujours une bonne cohérence interne
Vrai, puisque l’alpha de Cronbach est également affecté par le nombre d’items du test. (Si trop court = valeur alpha en souffrira, si élevé = valeur alpha augmente)
Expliquer comment la valeur de l’alpha de Cronbach est-elle affecté par le nombre d’items du test?
Peu d’items : la valeur alpha en souffrira
Bcp d’items: La valeur alpha augmente
Quelles sont les valeurs du coefficient alpha satisfaisant?
Supérieur à 0,7
Supérieur à 0,9 = parfois souhaitable, mais peut aussi être signe d’énoncés trop similaire, diminuant la fiabilité réelle de l’échelle.
Qu’est-ce que la Tau-équivalence?
Associé à l’alpha de Cronbach.
Une condition de fiabilité qui suppose que tous les items d’un test on la même importance pour le construit.
La tau-équivalence peut être exprimée en termes de_____.
Charges factorielles
Qu’est-ce que les mesures parallèles? (Dans la fidélité par homogénéité)
Modèle qui suppose non seulement que tous les items ont la même importance pour le construit sous-jacents (comme tau-équivalence), mais aussi que les variance des items sont égales.
Qu’est-ce que les mesures congeneriques? ( dans les fidélité par homogénéité)
Supposent que chaque item du test mesure le même construit, mais pas nécessairement dans la même importance
Vrai ou faux: Dans le cas des mesures parallèles, on suppose que chaque item a sa propre charge factorielle unique
Faux: Mesures congeneriques
Expliquer ce que signifie ‘’ que chaque item a sa propre charge factorielle unique’’ pour les mesures congeneriques.
Que chaque item est corrélé de manière unique avec son construits sous-jacent.
Nommer des exemples de mesures congeneriques
- Fidélité composite
- Omega de McDonald
La fidélité par inter-correcteur est aussi appelé ___
Fidélité inter-juges
Expliquer la fidélité inter-juges
Mesure le degré d’accord entre deux ou plusieurs évaluateurs qui évaluent indépendamment le même ensemble d’items.
La méthode de fidélité inter-juges est souvent utilisée dans quel type d’évaluation?
Évaluations subjectives
Nommer des exemples d’évaluations subjectives où la méthode de fidélité inter-juges pourraient être à privilégier
- Évaluation des performances en milieu de travail
- Évaluation des compétences en éducation
- Évaluation des symptômes cliniques en psychologie
Quelles sont les mesures statistiques utilisées pour évalué la fidélité inter-correcteur (inter-juges)?
- Coefficient de corrélation intra-classe
- Coefficient kappa de Cohen
- autres mesures d’accord inter-juges (CVC)
Quels sont les avantages de la fidélité inter-correcteurs? (2)
- Réduction du biais d’évaluation : évaluation d’un seul évaluateur VS plusieurs évaluateurs
- Amélioration de la précision
Quels sont les inconvénients de la fidélité par inter-correcteurs? (2)
- $ et temps : Formation et coordination de plusieurs évaluateurs.
- Variabilité des évaluateurs : Différences individuelles entre les évaluateurs peuvent introduire un variabilité supplémentaire non voulu dans les scores
Quelle est la distinction entre la mesure de la vitesse et celle de la puissance?
Vitesse : Rapidité de la performance explique les différences individuelles observées. Items faciles et qui font partie des habiletés maîtrisées par les sujets. Temps limite si court que la personne ne peut pas compléter tous les items.
Puissance : Limite de temps suffisamment longue pour pouvoir tout répondre. Difficulté qui augmente très rapidement jusqu’à temps insolubles
Vrai ou faux: Les tests de vitesse et de puissance sont conçus pour empêcher une réussite parfaite
Vrai
Que veut dire ETM?
Erreur type de mesure (même chose que erreur type de scores individuels ou ESM= erreur standard de mesure)
Sur quoi l’erreur type de mesure nous donne-t-elle une idée?
La variabilité des résultats qu’on peut obtenir si on répète la même mesure plusieurs fois.
Vrai ou faux: Plus l’erreur type de mesure est petite, plus la mesure est précise
Vrai
De quoi dépend l’erreur type de mesure?
De la variabilité des scores dans la population (Écart-type) ET du degré de fidélité de l’instrument
Comment pouvons-nous réduire l’erreur type de mesure?
Soit augmenter la fidélité de l’instruments, soit réduire la variabilité des scores
Comment s’interprète l’erreur type de mesure?
Comme les écart-types selon la distribution normale.
Expliquer les termes « Précision » et « constance» des scores obtenus par un test.
Précision : Minimiser au max l’erreur associé à toutes les mesures
Constance: Stabilité temporelle, résultats très similaire entre 2 passations du test
Que veut dire : « Variation des réponses d’un moment à l’autre » ?
Erreur de mesure
Vrai ou faux: L’analyse factorielle inclue la variance bivariée
Faux: Analyse des composantes principales
Vrai ou faux: Si on augmente le nombre d’items on peut donc expliquer plus de variance
Vrai
Vrai ou faux: Plus la fidélité est élevé + la variance d’erreur est basse/faible
Vrai
La méthode test-retest mesure la _____
Stabilité temporelle
Quel type de fidélité doit toujours être présent dans l’interprétation? (dans le rapport)
Fidélité par homogénéité
Vrai ou faux : La fidélité par homogénéité touche la stabilité temporelle
Faux n’y touche pas
La fidélité par homogénéité est une évaluation qui touche ____ les items.
Tous
Vrai ou faux: Plus on augmente la nombre d’item d’un test, plus la fidélité et la variabilité des données augmentent
Vrai
Comment pouvons-nous augmenter la fidélité par homogénéité? + Les expliquer
De façon concrète : En augmentant le nbr de participants
De façon artificielle : En aug le nbr d’items et/ou en aug nbr de chois de réponses dans les échelles Likert
Qu’est-ce qui est fondamentale pour le coefficient Alpha?
La Tau-équivalence
Vrai ou faux: L’alpha ordinal n’a pas l’exigence de la tau-équivalence
Vrai
