Cours 5

Question 1

À quoi correspond la validité?

Answer 1

Lorsqu’on évalue la validité d’un instrument de mesure, on veut généralement savoir s’il mesure vraiment ce qu’il prétend ou devrait mesurer.
Le degré de validité détermine l’interprétation et les inférences que l’on peut faire à partir des scores d’une échelle.

Question 2

La validité d’un test ou d’une mesure doit être évaluée relativement à 3 aspects. Lesquels?

Answer 2

1) Est-ce qu’il mesure bien le construit qu’il prétend mesurer?
2) Est-ce qu’il mesure bien ce construit pour la population ciblée?
3) Est-ce qu’il mesure bien ce construit pour une application particulière (e.g., classifier dans des groupes diagnostiques, donner une valeur quantitative sur continuum, etc.)?

Question 3

Quels sont les 3 points clés à propos de la validité des tests que soulignent les organisations professionnelles?

Answer 3

1) La validité concerne l’interprétation des scores procurés par un test pour un construit spécifique; ce n’est pas une caractéristique du test.
2) La validité est une question de degré; ce n’est pas une question absolue, de « tout ou rien ».
3) La validité d’un test repose sur de solides bases théoriques ET empiriques.

Question 4

Est-ce que la vraisemblance/validité d’apparence est une forme/source de validité?

Answer 4

Non.

Question 5

À quoi correspond la vraisemblance/validité d’apparence?

Answer 5

Le degré auquel une mesure semble adéquate et reliée à un construit spécifique selon le jugement de (a) les personnes qui sont évaluées avec le test et/ou (b) les personnes qui utilisent le test.

Une mesure détient une bonne vraisemblance lorsque les personnes évaluées ou celles qui l’utilisent jugent qu’elle « semble pertinente et adéquate » pour mesurer le construit.

Question 6

Quels facteurs peuvent influencer la vraisemblance?

Answer 6

• Contexte d’évaluation (e.g., endroit physique de l’administration, les consignes, attitude et apparence physique de l’évaluateur.trice, etc.)
• Capacités cognitives des répondants.es
• Santé mentale et état psychologique des répondants.es
• Personnalité des répondants.es
• Motif de l’évaluation (désirabilité sociale [+ ou -])
• Etc.

Question 7

À quoi réfère la validité de contenu?

Answer 7

Elle réfère au degré de représentativité des items (questions) utilisés pour mesurer un construit.
La plupart du temps, elle est établie de façon déductive.

Question 8

À partir de quoi les chercheurs.euses définissent un construit (et donc, son contenu)?

Answer 8

1) Cadre théorique
2) Recherches empiriques (recension)
3) Connaissances et expériences professionnelles/pratiques

Question 9

Quels sont les deux types de validité de contenu?

Answer 9

1) Nominale: auteurs.trices du test
2) Consensuelle: groupe de spécialistes indépendants

Question 10

Comment estimer le degré de validité du contenu empiriquement?

Answer 10

On demande à des experts.es indépendants.es d’estimer
A) À quel point (degré) chacun des items d’un test est pertinent et représentatif du construit d’intérêt
B) À quel point (degré) l’ensemble des items constitue un bon échantillon représentatif du contenu du construit.

Question 11

Comment quantifier le degré de validité de contenu?

Answer 11

On donne aux experts.es un choix de réponse avec une gradation à propos de chaque item afin de systématiser le tout.

Question 12

Quelles sont les deux grandes menaces à la validité de contenu?

Answer 12

1) Inclusion de contenu conceptuellement non pertinent (e.g., des items d’hyperactivité sont intégrés dans une échelle d’inattention)
2) Sous-représentation conceptuelle de certains domaines du construit

Question 13

À quoi réfère la validité de construit?

Answer 13

Elle réfère au degré de (a) reproductibilité de la structure interne théorique sous-jacente à l’instrument ainsi que les (b) relations du construit d’intérêt avec d’autres construits externes.

Question 14

Quelles sont les 2 grandes façons de vérifier la validité de construit?

Answer 14

1) Validité factorielle
2) Validité convergente / discriminante

Question 15

Qu’est-ce que le réseau nomologique?

Answer 15

C’est la théorie expliquant le construit par le biais de ses interrelations avec d’autres construits.

Question 16

À quoi réfère la validité factorielle?

Answer 16

On veut vérifier si la structure factorielle théorique qui représente le construit est reproduite sur le plan empirique (i.e., avec des données).
On utilise généralement le terme « facteur » pour représenter une dimension latente (ou trait latent), d’où l’utilisation du terme validité factorielle.

Question 17

Qu’est-ce qu’un facteur (validité factorielle)&

Answer 17

C’est une réduction parcimonieuse de plusieurs variables (items ou questions) en une variable latente hypothétique.

Question 18

À quoi réfère la validité convergente?

Answer 18

Degré auquel les scores d’une échelle sont associés avec ceux d’une autre échelle existante qui mesure le même construit théorique.

Question 19

À quoi réfère la validité discriminante?

Answer 19

Degré auquel les scores d’une échelle ne sont pas associés avec une échelle qui ne mesure pas le même construit.

Question 20

Quel est l’idéal pour tester rigoureusement la validité C/D?

Answer 20

C’est d’employer la méthode de la matrice multitraits-multiméthodes.

Question 21

À quoi réfère la validité de critère/validité pragmatique?

Answer 21

Réfère au degré auquel les scores à une échelle sont associés à l’adaptation (ou la performance) des individus.
Le critère devrait être une mesure objective et indépendante, mais reliée conceptuellement au construit d’intérêt.

Question 22

Quels sont les deux grands types de validité de critère?

Answer 22

Concomitante et prédictive

Question 23

Quelles sont les 2 façons d’estimer la validité de critère concomitante?

Answer 23

1) Corrélation avec un critère indépendant
2) Méthode des groupes contrastés

Question 24

À quoi réfère la validité de critère prédictive?

Answer 24

Le degré auquel une mesure est capable de prédire un critère externe prospectivement, i.e. plus tard dans le temps

Question 25

À quoi réfère la sensibilité?

Answer 25

La capacité d’une échelle de procurer un résultat positif pour les personnes présentant le statut qu’elle prétend identifier. (Se rapporte donc à la capacité de détection)

Question 26

À quoi réfère la spécificité?

Answer 26

La capacité d’une échelle de procurer un résultat négatif pour les personnes ne présentant pas le statut (ex., un trouble) qu’elle prétend identifier. (Se rapporte donc à sa capacité de discrimination)

Question 27

Qu’est-ce que le pouvoir prédictif positif (PPP)?

Answer 27

La probabilité qu’un individu avec un résultat positif sur une échelle ait réellement le statut prédit.

Question 28

Qu’est-ce que le pouvoir prédictif négatif (PPN)?

Answer 28

La probabilité qu’un individu avec un résultat négatif sur une échelle n’ait réellement pas le statut prédit.

Question 29

De quoi dépendent les PPN ET PPP?

Answer 29

Ils dépendent de la prévalence du trouble.

Question 30

Quels sont les deux problèmes potentiels avec les indices de sensibilité, spécificité et de pouvoir prédictif?

Answer 30

1) L’estimation de ces indices statistiques dépend de la validité et de la fidélité du critère utilisé.
2) L’estimation de la prévalence réelle dans différents contextes cliniques peut être difficile.

Question 31

Pourquoi dit-on que la validité et la fidélité sont interreliées?

Answer 31

1) La validité est un préalable à la fidélité.
2) La fidélité est une condition nécessaire à la validité.
3) Les indices de validité sont directement influencés par le degré de fidélité.