Fidélité

Question 1

Qu’est-ce que la fidélité?

Answer 1

Est-ce que le test donne toujours des résultats semblables?

Question 2

Vrai ou faux: la validité est un préalable de la fidélité?

Answer 2

Faux. La fidélité est toujours un préalable de la validité car doit s’assure que le test est “stable” (toujours même score) avant de vérifier si CE score est valide

Question 3

Qu’est-ce qui peut influencer la fidélité?

Answer 3

-État personnel (malade, triste)
-Fluctuation selon temps de journée (plus concentré matin vs soir)
-Personne qui corrige l’exam (sévère vs souple)

Question 4

Pourquoi faut-il que le clinicien ajuste ses conclusions en fonction de la fidélité?

Answer 4

La fidélité n’est pas parfaite = il faut le considérer!!! = ajuster les conclusions avec des adverbes car pas totalement certain
+ Écrire les conditions qui pourraient influencer les tests

Truc: évaluer à plusieurs moments pour contrer les facteurs qui influencent la fidélité

Question 5

Quels sont d’autres synonymes de la fidélité?

Answer 5

Consistance, stabilité

Question 6

Est-ce que la fidélité garantie la validité?

Answer 6

NON!!! Peut avoir toujours le même résultat mais qui n’est pas représentatif de ce qu’on veut mesurer

Ex: Toujours moins bons aux entrevues d’embauche MAIS ne représente pas la performance au travail donc pas valide

Question 7

Qu’est-ce que la marge d’erreur de la fidélité?

Answer 7

Toujours une petite fluctuation (facteurs s’additionnent et se soustraient mais ne diffèrent pas beaucoup) dans 95% des cas et tolère un 5% de grande différence (ex: chat meurt matin exam)

MAIS si diffère plus, pas fidèle

Question 8

Quelle est la distinction entre un changement réel et un changement temporaire?

Answer 8

Un changement réel du trait ne relève pas de la fidélité: faire fidélité test-retest entre 2 à 4 semaines car sinon peut changer normalement au-delà

Question 9

Quelle est la distinction entre les erreurs constantes ou non systématiques?

Answer 9

Les erreurs non systématiques sont mesurées par la fidélité (ex: être malade pendant un exam = pas toujours)

Erreurs constantes sont mesurées par la validité: constamment pas bon car ne mesure pas bien le construit

Question 10

Quelle est la révision statistique de la fidélité?

Answer 10

Distribution bivariée: 2 variables (diagramme de dispersion, nuage de point)

Corrélation: Résumé numérique de la relation de la distribution et permet de déterminer le pourcentage de variance expliqué par la VI sur la VD (Pearson ou Spearman si postulats non rencontrés)

Question 11

Quels sont les barèmes de la corrélation?

Answer 11

0: Nulle
entre 0,1 et 0,3: Faible
entre 0,3 et 0,5: Modéré
> 0,5: Forte
1: Parfaite

Question 12

Qu’est-ce que la grande moyenne?

Answer 12

Corrélation nulle (?) qui est toujours présente mais pas toujours la meilleure observation/prédictrice de la réalité

Question 13

À quoi sert la régression?

Answer 13

Une fois la corrélation établie (Fidélité), peut prédire le résultat d’une personne à partir de cette relation (validité)

Question 14

Quelle est la formule de la régression?

Answer 14

Y’ = bX + a

Y’= y prédit
b: bêta non standardisé (pente de régression)
a: constante (point d’intersection axe des y)

Question 15

Vrai ou faux: Plus r est haut (se rapproche de 1), plus il va y avoir de scores éparpillés autour de la droite?

Answer 15

Faux!! Plus r est élevé, moins il va y avoir de score éparpillés car r correspond au pourcentage de variance expliqué et donc augmente la prédiction et diminue les scores éparpillés

Question 16

Quelle est la différence entre la prédiction (y’) et la réalité (y)?

Answer 16

L’erreur type d’estimation

Question 17

Quels sont les facteurs qui affectent r?

Answer 17

Linéarité (absence de linéarité ex: droite curvilinéaire = plus représentatif mais affecte la force de la corrélation)

Hétéroscédasticité: Prédiction de y pas constante à travers les différents niveaux de x

Position

Hétérogénéité du groupe: si trop homogène, affecte la force car restreint la variance (ex: QI et réussite scolaire = fortes corrélation au primaire car tout le monde va au primaire/hétérogène VS faible corrélation au primaire car gens avec QI faible se retrouvent pas à l’uni)

Question 18

Quelles sont les principales sources affectant la fidélité?

Answer 18

-Correction du test (accord inter-juges): Plus la correction implique le jugement du correcteur, plus cela augmente les chances d’erreurs (volontaires ou pas)
*Truc: corréler note correcteur 1 et 2

-Contenu du test: Pour formes/versions parallèles d’un test = items pourraient ne pas être totalement équivalents

-Conditions d’admission du test (bruit vs silence, donner 3h vs 3h10)

-Conditions personnelles (forme, humeur, etc.)
*Truc: faire signer qu’est apte au début du test pour ne pas avoir d’excuses des clients

Question 19

Quels sont les termes de base de la théorie du vrai score?

Answer 19

-Vrai score (T): connaît jamais le vrai score mais peut estimer
-Score observé (0): résultat
-Erreur (E)

Question 20

Vrai ou faux: le bêta standardisé correspond à la corrélation?

Answer 20

Vrai

Question 21

2 personnes refont un examen plusieurs fois et voient selon la courbe normale où se situe son score:
Personne 1: 90, 50, 70, 45
Personne 2: 80, 70, 75, 85

Lequel est le plus facile à estimer?

Answer 21

La personne 2!! Peut dire que dans 95% des cas, le score se situe entre 75 et 85
**Pas infaillible, peut tomber sur une exception (ex: chat meurt matin exam)

Question 22

Quelles sont les méthodes pour la fidélité?

Answer 22

Test-retest
Inter-juges
Forme parallèle
Consistance/cohérence interne
Coefficient Alpha

Question 23

En quoi consiste la méthode test-retest?

Answer 23

-Fonctionnement: entre 2-4 semaines plus tard

-Couverture fidélité: condition personnelle des participants (physique et mentale)

-Forces et limites: Difficilement applicable (difficile de conserver l’échantillon), effet du premier test sur la réponse, délai discutable (a pt changé en 4 semaines)

Question 24

En quoi consiste l’accord inter-juges?

Answer 24

Fonctionnement: Évaluer les variations aléatoires attribuables aux correcteurs
*Truc: Essayer de mesurer davantage des cmpts plutôt qu’attitudes (moins subjectif) est: pas de système d’entrevue

Couverture fidélité: correction du test (les correcteurs sont-ils en accord?)

Question 25

En quoi consiste la forme parallèle?

Answer 25

Fonctionnement: 2 versions du même test mais avec items différents

Couverture: très peu répandu

Question 26

En quoi consiste la forme parallèle?

Answer 26

Fonctionnement: 2 versions du même test mais avec items différents

Couverture: très peu répandu

Question 27

En quoi consiste la consistance/cohérence interne? AJUSTER!!!!

Answer 27

Plus important et utilisé!!

Fonctionnement: on r

Question 28

En quoi consiste le coefficient Alpha?

Answer 28

C’est une autre façon de mesurer la cohérence
Plus, le nombre de questions sur un même concept est élevé, plus la corrélation entre les items est élevée, plus l’alpha est élevé

DONC plus l’alpha est élevé, plus la cohérence est élevée

**Attention de ne pas mettre TROP de questions car augment erreurs dans réponses et d’avoir des items qui créent de la restriction de variance (diminue alpha)

Question 29

Qu’est-ce que l’erreur type de mesure?

Answer 29

Attribuable à un manque de FIDÉLITÉ

Question 30

Qu’est-ce que l’erreur type d’estimation?

Answer 30

Erreur de prédiction de Y par X (avec droite de régression) et attribuable à un manque de VALIDITÉ

Question 31

À quoi devons-nous faire attention dans les rapports d’évaluation en lien avec la fidélité?

Answer 31

-Erreur de mesure (résultats se situent entre X et X dans 95% des cas)

-Aux profils: ???

-Fidélité des items et des sous-tests: un sous-test n’a pas la même fidélité qu’un test complet!!!
Ex: Exam a 10qs par chapitre, si j’évalue juste 5 qs par chapitre car élève en retard = baisse la fidélité

Question 32

En quoi consiste l’erreur type de moyenne?

Answer 32

Prendre plusieurs échantillons

Question 33

Quel est le barème pour l’alpha?

Answer 33

Recherche: 0,60 minimum
Combiné à d’autres infos: 0,80 minimum
Décisions individuelles importantes: 0,95
*Mais souvent redondant don mieux 0,9

Question 34

Est-ce que les tests cours sont une excuse pour justifier une faible fidélité?

Answer 34

NON! Fidélité toujours importante