LA VALIDITÉ

Question 1

Qu’est-ce que la validité ?

Answer 1

C’est le degré avec lequel un test mesure ce qu’il prétend mesurer uniquement.

Elle ne peut jamais être parfaite.

Question 2

Pourquoi il est nécessaire de procéder au processus de validation ?

Answer 2

Parce que plusieurs instruments de mesure ne permettent pas d’observer directement le concept qu’on cherche à étudier.

EXEMPLE

Concept de la dépression : s’assurer que l’instrument se rapporte uniquement à la dépression, et non pas à la tristesse, la solitude, l’ennui, etc. (Dans la définition on retrouve ces éléments)

Concept de l’agressivité : s’assurer que l’instrument se rapporte uniquement à l’agressivité et non à la frustration, à la colère, à l’impulsivité, à la dangerosité, etc.

*D’où l’importance de la définition de ce que je mesure

Question 3

Vrai ou faux : la validité ne concerne pas l’instrument de même lui-même, mais plutôt l’interprétation des résultats.

Answer 3

Vrai.

EXEMPLE

Dépressions vs. Déficit cognitif -> même résultat, mais raisons différentes.

Dépression = pas l’énergie, pas la motivation
Déficit cognitif = pas la capacité

Question 4

Le processus de validation est une façon de déterminer quel élément ?

Answer 4

Le niveau de confiance que l’on peut avoir par rapport aux inférences qu’on fait en s’appuyant sur les résultats obtenus à un test.

Question 5

La validité n’est pas inhérente à l’instrument lui-même, pourquoi ?

Answer 5

Parce que la validité est inhérente au contexte de son utilisation (un test n’est pas valide en lui même)

Question 6

Pourquoi on ne peut pas dire qu’un test est valide ?

Answer 6

La validité d’un instrument est directement et uniquement lié au contexte dans lequel le processus de validation a été effectué.

On peut seulement dire qu’on a démontré qu’il est valide avec telle clientèle et sous telles conditions.

Question 7

L’évaluation de la validité d’un test est ________

Answer 7

Un processus continu d’accumulation de preuves ou d’évidences (normalement quantitatives)

Question 8

Vrai ou faux : Il faut considérer le nom d’un test comme un indice précis de ce qu’il mesure ?

Answer 8

Faux, il faut éviter.

Question 9

Vrai ou faux : la validité est une affaire de tout ou rien (valide ou pas valide).

Answer 9

Faux, c’est une question de degré de validité. (Donne un bon indice)

Un test n’est jamais valide à 100%.

Question 10

Selon le ‘‘Standards for Educational and Psychological Testing’’ il existe 3 grandes catégories de techniques destinées à recueillir des preuves de validité, lesquelles ?

Answer 10

1) Validation de contenu (contenu vs. apparente)
2) Validation pragmatique (critériée, prédictive)
3) Validation de construit (conceptuelle, théorique)

Question 11

Qu’est-ce que la validité de contenu ?

Answer 11

Elle désigne l’aptitude d’un instrument à appréhender les aspects de contenu pour lesquels il a été conçu et ceux-là seulement.

EX :
Dans une épreuve de connaissance ayant pour but de vérifier la maîtrise dans tel domaine d’apprentissage, il faut s’assurer que les contenues des items utilisés contribuent tous à évaluer un aspect significatif (ou dimension) de ce domaine, qu’ils forment un échantillon important de tous les items (qui représentent les contenus).

Question 12

Vrai ou faux : dans la validité de contenu, il ne faut pas veiller à ce que les contenus de ces items ne fassent pas appel à des caractéristiques que l’on souhaite explicitement ne pas solliciter.

Answer 12

Faux, il faut le faire.

Question 13

Quel type de validité on examine lors de la construction de l’instrument de mesure (choix des items) ?

Answer 13

La validation de contenu.

Question 14

Par quelle méthode la validation de contenu est estimée généralement ?

Answer 14

La méthode des juges experts.

Question 15

Qui sont les juges experts et quel est leur rôle ?

Answer 15

Ce sont des personnes qui ont une bonne connaissance du concept à mesurer ou qui on une expertise dans l’élaboration d’instrument de mesure.

Leur rôle est de se prononcer sur le contenu des énoncés, soit sur leur clarté, leur représentativité, l’exhaustivité, dimensionnalité et la pertinence de l’outil dans son ensemble.

Question 16

Qu’est ce que la validation pragmatique ?

Answer 16

Elle désigne l’aptitude d’un instrument (conçu par exemple dans une perspective d’évaluation pronostique) à prédire (de manière aussi précise que possible) le niveau de réussite, d’adaptation, d’intégration, etc., d’un ensemble d’individus par rapport à des situations qu’il rencontreront (ou pourraient rencontrer) ultérieurement.

EX: l’évaluation du QI et du succès professionnel.

*Mesure de validité intéressante mais lourde

Question 17

Quelle est la procédure la plus simple pour évaluer la validité pragmatique d’un instrument ?

Answer 17

Elle à étudier la corrélation (ou comparaison de moyenne, mais moins robuste) entre les résultats obtenus par un même groupe d’individus à deux moments différents.

EX: au début et à la fin d’un programme de formation ou d’un cycle d’études

*Pas la plus facile par contre, elle prend beaucoup de temps et sur le plan de l’application plusieurs difficultés peuvent parfois se présenter.

Question 18

Quel est l’objectif d’une méthode issue de l’approche corrélationnelle ou analyse de régression ?

Answer 18

Prédire la situation future d’un individu sur la base d’éléments qui caractérisent sa situation présente.

Question 19

Qu’est-ce que signifie précisément d’évaluer la validation pragmatique d’un instrument ?

Answer 19

Elle détermine dans quelle mesure les prédicteurs retenus permettent de fournir une estimation valide des résultats qui seront obtenus ultérieurement ( % de variance prédite ou expliquée)

Question 20

Il existe 2 types de validité pragmatiques, quels sont-ils ?

Answer 20

1) Validité concomitante / concourante
On détermine le degré de corrélation entre les scores obtenus au test et les scores obtenus à une mesure de référence (administration du test et de la mesure du critère pratiquement en même temps)

*Semblable à la fidélité parallèle

2) Validité prédictive
On évalue la qualité des prédictions faites sur la base des résultats obtenus au test et une réalité future (administration du test et du critère séparée d’un laps de temps important, le test étant administré en premier)

EX: profils professionnels, SAT

Question 21

Qu’est-ce que la validité de construit ?

Answer 21

Elle se définit comme étant la justesse avec laquelle un instrument de mesure permet d’obtenir des résultats conformes aux construits définis par son contexte théorique ; elle indique dans quelle mesure les énoncés d’un instrument sont cohérents avec la théorie et les concepts, définis de façon opérationnelle.

Opérationnelle = à tous les jours, 5 fois, 10 fois (on peut mesurer)

Question 22

Dans de nombreuses situations en psychologie, on cherche à étudier des entités hypothétiques ou construits, comment se définissent-ils ?

Answer 22

Ils résultent d’une élaboration psycho-sociale et théorique et ils ne sont pas directement accessibles à l’observation et à la mesure. (On mesure des indicateurs/critères pour identifier).

EX: intelligence, aptitudes, personnalité, connaissances, compétences, capacités et habiletés diverses, motivation, intérêt, aptitudes.

Question 23

Vrai ou faux : Les construits sont considérés comme des mini-théories qui expliquent la relation entre différents concepts, que ce soient des comportements ou attitudes.

Answer 23

Vrai

Question 24

Les construits sont aussi appelés facteurs (dimensions, composantes), qu’est-ce qu’ils expliquent ?

Answer 24

Ils viennent expliquer les corrélations qu’on observe entre les différentes variables.

Question 25

Quelle est la façon la plus usuelle de calculer la validité de construit ?

Answer 25

Avoir recours une méthode issue de l’approche corrélationnelle (L’analyse multitrait-multiméthode et l’analyse factorielle)

Question 26

Quel est l’objectif de l’approche corrélationnelle (analyse multitrait-multiméthode et l’analyse factorielle) ?

Answer 26

Démontrer la pertinence (relation, association) d’un item par rapport à sa propre dimensions théorique (AF).

Question 27

Qu’est-ce que l’analyse multitrait-multiméthode ?

Answer 27

Matrice de corrélation entre les résultats obtenus à différents tests.

Elle illustre à la fois la validité convergente et la validité discriminante.

On s’attend à ce que la plus forte corrélation soit trouvé pour un même trait-même méthode et la plus petite corrélation pour traits différentes-méthode différente

Question 28

Quelles sont les 2 limites de l’analyse multitrait-multiméthode ?

Answer 28

1) Elle demande beaucoup de temps de la part des sujets (faire plusieurs tests)
2) Difficile à trouver des tests qui évaluent les mêmes traits

Question 29

Vrai ou faux : Il n’y a pas toujours 2 temps à la méthode multitrait-multiméthode qui sont représentés par les axes des abscisses (x) et des ordonnées (y).

Answer 29

Faux, il y a toujours 2 temps.

VOIR IMAGE *

Question 30

Quel est le rationnel de l’analyse factorielle ?

Answer 30

C’est de projeter 3 (ou plus) variables qui sont fortement corrélées entre elles sur une nouvelle variable qui retient l’essentiel de la variance commune.

Cette nouvelle variable représente le facteur.

(1) Combien de facteurs l’analyse nous propose ?
(2) Quel est le pourcentage d’explication de la variance ?
(3) Est-ce que tous les items sont valides par la biais de la validation de construit ou y a-t-il des items nécessitant une reformulation ?
* Total de la variance expliquée par 3 facteurs.

Question 31

Vrai ou faux : Le résultat du processus de validation de construit mène un indice statistique unique.

Answer 31

Faux, il mène à plusieurs résultats qui doivent être interprétés en lien avec les éléments théoriques sur lesquels le test se base.

Question 32

Vrai ou faux : la validité de construit d’un instrument sera plus facilement mesurable si la théorie utilisée est implicite et bien définie.

Answer 32

Faux, si elle est explicite et bien définie.

Question 33

Quels sont les 2 types de validité de construit ?

Answer 33

1) Validité convergente
Vérifier à quel point est-ce que l’échelle est reliée à des variables et des mesures du même construit. L’outil devrait corréler avec les autres outils qui évaluent des construits identiques ou très similaires.

EX: tests de dépression devraient avoir sensiblement les mêmes résultats

2) Validité discriminante
Vérifier à quel point l’échelle s’écarte de variables et de mesures de construits différents. L’outil ne devrait pas corréler avec des construits indépendants de celui qu’il évalue. (Mesure pas la même chose)

EX: anxiété devrait pas avoir une corrélation avec déficits cognitifs

Question 34

Est-ce qu’on peut affirmer qu’un test est valide en soi ?

Answer 34

Non, c’est l’interprétation qu’on fait du test qui est valide,

Question 35

Si un test est validé l’est-il de façon permanente ?

Answer 35

Non, l’accumulation d’indices de validité qui le rend valide.

Question 36

Une psychologue remplaçante peut-elle compléter l’évaluation ?

Answer 36

Non, il doit avoir une rencontre clinique avec opinion clinique.
Peut l’intégrer, mais en distinguant qui a fait quoi en nommant l’interprétation des résultats.

Question 37

Une psychologue remplaçante peut-elle achever le rapport ?

Answer 37

Quand l’évaluation est complétée, il peut avoir une rencontre clinique et distinguer le travail de chaque personne.

Question 38

Une entrevue de bilan peut-elle être faite par une psychologue remplaçante si le rapport est complétée ?

Answer 38

Non.