Fidélité Flashcards
Qu’est-ce que la fidélité?
Est-ce que le test donne toujours des résultats semblables?
Vrai ou faux: la validité est un préalable de la fidélité?
Faux. La fidélité est toujours un préalable de la validité car doit s’assure que le test est “stable” (toujours même score) avant de vérifier si CE score est valide
Qu’est-ce qui peut influencer la fidélité?
-État personnel (malade, triste)
-Fluctuation selon temps de journée (plus concentré matin vs soir)
-Personne qui corrige l’exam (sévère vs souple)
Pourquoi faut-il que le clinicien ajuste ses conclusions en fonction de la fidélité?
La fidélité n’est pas parfaite = il faut le considérer!!! = ajuster les conclusions avec des adverbes car pas totalement certain
+ Écrire les conditions qui pourraient influencer les tests
Truc: évaluer à plusieurs moments pour contrer les facteurs qui influencent la fidélité
Quels sont d’autres synonymes de la fidélité?
Consistance, stabilité
Est-ce que la fidélité garantie la validité?
NON!!! Peut avoir toujours le même résultat mais qui n’est pas représentatif de ce qu’on veut mesurer
Ex: Toujours moins bons aux entrevues d’embauche MAIS ne représente pas la performance au travail donc pas valide
Qu’est-ce que la marge d’erreur de la fidélité?
Toujours une petite fluctuation (facteurs s’additionnent et se soustraient mais ne diffèrent pas beaucoup) dans 95% des cas et tolère un 5% de grande différence (ex: chat meurt matin exam)
MAIS si diffère plus, pas fidèle
Quelle est la distinction entre un changement réel et un changement temporaire?
Un changement réel du trait ne relève pas de la fidélité: faire fidélité test-retest entre 2 à 4 semaines car sinon peut changer normalement au-delà
Quelle est la distinction entre les erreurs constantes ou non systématiques?
Les erreurs non systématiques sont mesurées par la fidélité (ex: être malade pendant un exam = pas toujours)
Erreurs constantes sont mesurées par la validité: constamment pas bon car ne mesure pas bien le construit
Quelle est la révision statistique de la fidélité?
Distribution bivariée: 2 variables (diagramme de dispersion, nuage de point)
Corrélation: Résumé numérique de la relation de la distribution et permet de déterminer le pourcentage de variance expliqué par la VI sur la VD (Pearson ou Spearman si postulats non rencontrés)
Quels sont les barèmes de la corrélation?
0: Nulle
entre 0,1 et 0,3: Faible
entre 0,3 et 0,5: Modéré
> 0,5: Forte
1: Parfaite
Qu’est-ce que la grande moyenne?
Corrélation nulle (?) qui est toujours présente mais pas toujours la meilleure observation/prédictrice de la réalité
À quoi sert la régression?
Une fois la corrélation établie (Fidélité), peut prédire le résultat d’une personne à partir de cette relation (validité)
Quelle est la formule de la régression?
Y’ = bX + a
Y’= y prédit
b: bêta non standardisé (pente de régression)
a: constante (point d’intersection axe des y)
Vrai ou faux: Plus r est haut (se rapproche de 1), plus il va y avoir de scores éparpillés autour de la droite?
Faux!! Plus r est élevé, moins il va y avoir de score éparpillés car r correspond au pourcentage de variance expliqué et donc augmente la prédiction et diminue les scores éparpillés
Quelle est la différence entre la prédiction (y’) et la réalité (y)?
L’erreur type d’estimation
Quels sont les facteurs qui affectent r?
Linéarité (absence de linéarité ex: droite curvilinéaire = plus représentatif mais affecte la force de la corrélation)
Hétéroscédasticité: Prédiction de y pas constante à travers les différents niveaux de x
Position
Hétérogénéité du groupe: si trop homogène, affecte la force car restreint la variance (ex: QI et réussite scolaire = fortes corrélation au primaire car tout le monde va au primaire/hétérogène VS faible corrélation au primaire car gens avec QI faible se retrouvent pas à l’uni)
Quelles sont les principales sources affectant la fidélité?
-Correction du test (accord inter-juges): Plus la correction implique le jugement du correcteur, plus cela augmente les chances d’erreurs (volontaires ou pas)
*Truc: corréler note correcteur 1 et 2
-Contenu du test: Pour formes/versions parallèles d’un test = items pourraient ne pas être totalement équivalents
-Conditions d’admission du test (bruit vs silence, donner 3h vs 3h10)
-Conditions personnelles (forme, humeur, etc.)
*Truc: faire signer qu’est apte au début du test pour ne pas avoir d’excuses des clients
Quels sont les termes de base de la théorie du vrai score?
-Vrai score (T): connaît jamais le vrai score mais peut estimer
-Score observé (0): résultat
-Erreur (E)
Vrai ou faux: le bêta standardisé correspond à la corrélation?
Vrai
2 personnes refont un examen plusieurs fois et voient selon la courbe normale où se situe son score:
Personne 1: 90, 50, 70, 45
Personne 2: 80, 70, 75, 85
Lequel est le plus facile à estimer?
La personne 2!! Peut dire que dans 95% des cas, le score se situe entre 75 et 85
**Pas infaillible, peut tomber sur une exception (ex: chat meurt matin exam)
Quelles sont les méthodes pour la fidélité?
Test-retest
Inter-juges
Forme parallèle
Consistance/cohérence interne
Coefficient Alpha
En quoi consiste la méthode test-retest?
-Fonctionnement: entre 2-4 semaines plus tard
-Couverture fidélité: condition personnelle des participants (physique et mentale)
-Forces et limites: Difficilement applicable (difficile de conserver l’échantillon), effet du premier test sur la réponse, délai discutable (a pt changé en 4 semaines)
En quoi consiste l’accord inter-juges?
Fonctionnement: Évaluer les variations aléatoires attribuables aux correcteurs
*Truc: Essayer de mesurer davantage des cmpts plutôt qu’attitudes (moins subjectif) est: pas de système d’entrevue
Couverture fidélité: correction du test (les correcteurs sont-ils en accord?)
En quoi consiste la forme parallèle?
Fonctionnement: 2 versions du même test mais avec items différents
Couverture: très peu répandu
En quoi consiste la forme parallèle?
Fonctionnement: 2 versions du même test mais avec items différents
Couverture: très peu répandu
En quoi consiste la consistance/cohérence interne? AJUSTER!!!!
Plus important et utilisé!!
Fonctionnement: on r
En quoi consiste le coefficient Alpha?
C’est une autre façon de mesurer la cohérence
Plus, le nombre de questions sur un même concept est élevé, plus la corrélation entre les items est élevée, plus l’alpha est élevé
DONC plus l’alpha est élevé, plus la cohérence est élevée
**Attention de ne pas mettre TROP de questions car augment erreurs dans réponses et d’avoir des items qui créent de la restriction de variance (diminue alpha)
Qu’est-ce que l’erreur type de mesure?
Attribuable à un manque de FIDÉLITÉ
Qu’est-ce que l’erreur type d’estimation?
Erreur de prédiction de Y par X (avec droite de régression) et attribuable à un manque de VALIDITÉ
À quoi devons-nous faire attention dans les rapports d’évaluation en lien avec la fidélité?
-Erreur de mesure (résultats se situent entre X et X dans 95% des cas)
-Aux profils: ???
-Fidélité des items et des sous-tests: un sous-test n’a pas la même fidélité qu’un test complet!!!
Ex: Exam a 10qs par chapitre, si j’évalue juste 5 qs par chapitre car élève en retard = baisse la fidélité
En quoi consiste l’erreur type de moyenne?
Prendre plusieurs échantillons
Quel est le barème pour l’alpha?
Recherche: 0,60 minimum
Combiné à d’autres infos: 0,80 minimum
Décisions individuelles importantes: 0,95
*Mais souvent redondant don mieux 0,9
Est-ce que les tests cours sont une excuse pour justifier une faible fidélité?
NON! Fidélité toujours importante
