Cours 5 Flashcards
À quoi correspond la validité?
Lorsqu’on évalue la validité d’un instrument de mesure, on veut généralement savoir s’il mesure vraiment ce qu’il prétend ou devrait mesurer.
Le degré de validité détermine l’interprétation et les inférences que l’on peut faire à partir des scores d’une échelle.
La validité d’un test ou d’une mesure doit être évaluée relativement à 3 aspects. Lesquels?
1) Est-ce qu’il mesure bien le construit qu’il prétend mesurer?
2) Est-ce qu’il mesure bien ce construit pour la population ciblée?
3) Est-ce qu’il mesure bien ce construit pour une application particulière (e.g., classifier dans des groupes diagnostiques, donner une valeur quantitative sur continuum, etc.)?
Quels sont les 3 points clés à propos de la validité des tests que soulignent les organisations professionnelles?
1) La validité concerne l’interprétation des scores procurés par un test pour un construit spécifique; ce n’est pas une caractéristique du test.
2) La validité est une question de degré; ce n’est pas une question absolue, de « tout ou rien ».
3) La validité d’un test repose sur de solides bases théoriques ET empiriques.
Est-ce que la vraisemblance/validité d’apparence est une forme/source de validité?
Non.
À quoi correspond la vraisemblance/validité d’apparence?
Le degré auquel une mesure semble adéquate et reliée à un construit spécifique selon le jugement de (a) les personnes qui sont évaluées avec le test et/ou (b) les personnes qui utilisent le test.
Une mesure détient une bonne vraisemblance lorsque les personnes évaluées ou celles qui l’utilisent jugent qu’elle « semble pertinente et adéquate » pour mesurer le construit.
Quels facteurs peuvent influencer la vraisemblance?
- Contexte d’évaluation (e.g., endroit physique de l’administration, les consignes, attitude et apparence physique de l’évaluateur.trice, etc.)
- Capacités cognitives des répondants.es
- Santé mentale et état psychologique des répondants.es
- Personnalité des répondants.es
- Motif de l’évaluation (désirabilité sociale [+ ou -])
- Etc.
À quoi réfère la validité de contenu?
Elle réfère au degré de représentativité des items (questions) utilisés pour mesurer un construit.
La plupart du temps, elle est établie de façon déductive.
À partir de quoi les chercheurs.euses définissent un construit (et donc, son contenu)?
1) Cadre théorique
2) Recherches empiriques (recension)
3) Connaissances et expériences professionnelles/pratiques
Quels sont les deux types de validité de contenu?
1) Nominale: auteurs.trices du test
2) Consensuelle: groupe de spécialistes indépendants
Comment estimer le degré de validité du contenu empiriquement?
On demande à des experts.es indépendants.es d’estimer
A) À quel point (degré) chacun des items d’un test est pertinent et représentatif du construit d’intérêt
B) À quel point (degré) l’ensemble des items constitue un bon échantillon représentatif du contenu du construit.
Comment quantifier le degré de validité de contenu?
On donne aux experts.es un choix de réponse avec une gradation à propos de chaque item afin de systématiser le tout.
Quelles sont les deux grandes menaces à la validité de contenu?
1) Inclusion de contenu conceptuellement non pertinent (e.g., des items d’hyperactivité sont intégrés dans une échelle d’inattention)
2) Sous-représentation conceptuelle de certains domaines du construit
À quoi réfère la validité de construit?
Elle réfère au degré de (a) reproductibilité de la structure interne théorique sous-jacente à l’instrument ainsi que les (b) relations du construit d’intérêt avec d’autres construits externes.
Quelles sont les 2 grandes façons de vérifier la validité de construit?
1) Validité factorielle
2) Validité convergente / discriminante
Qu’est-ce que le réseau nomologique?
C’est la théorie expliquant le construit par le biais de ses interrelations avec d’autres construits.
À quoi réfère la validité factorielle?
On veut vérifier si la structure factorielle théorique qui représente le construit est reproduite sur le plan empirique (i.e., avec des données).
On utilise généralement le terme « facteur » pour représenter une dimension latente (ou trait latent), d’où l’utilisation du terme validité factorielle.
Qu’est-ce qu’un facteur (validité factorielle)&
C’est une réduction parcimonieuse de plusieurs variables (items ou questions) en une variable latente hypothétique.
À quoi réfère la validité convergente?
Degré auquel les scores d’une échelle sont associés avec ceux d’une autre échelle existante qui mesure le même construit théorique.
À quoi réfère la validité discriminante?
Degré auquel les scores d’une échelle ne sont pas associés avec une échelle qui ne mesure pas le même construit.
Quel est l’idéal pour tester rigoureusement la validité C/D?
C’est d’employer la méthode de la matrice multitraits-multiméthodes.
À quoi réfère la validité de critère/validité pragmatique?
Réfère au degré auquel les scores à une échelle sont associés à l’adaptation (ou la performance) des individus.
Le critère devrait être une mesure objective et indépendante, mais reliée conceptuellement au construit d’intérêt.
Quels sont les deux grands types de validité de critère?
Concomitante et prédictive
Quelles sont les 2 façons d’estimer la validité de critère concomitante?
1) Corrélation avec un critère indépendant
2) Méthode des groupes contrastés
À quoi réfère la validité de critère prédictive?
Le degré auquel une mesure est capable de prédire un critère externe prospectivement, i.e. plus tard dans le temps
À quoi réfère la sensibilité?
La capacité d’une échelle de procurer un résultat positif pour les personnes présentant le statut qu’elle prétend identifier. (Se rapporte donc à la capacité de détection)
À quoi réfère la spécificité?
La capacité d’une échelle de procurer un résultat négatif pour les personnes ne présentant pas le statut (ex., un trouble) qu’elle prétend identifier. (Se rapporte donc à sa capacité de discrimination)
Qu’est-ce que le pouvoir prédictif positif (PPP)?
La probabilité qu’un individu avec un résultat positif sur une échelle ait réellement le statut prédit.
Qu’est-ce que le pouvoir prédictif négatif (PPN)?
La probabilité qu’un individu avec un résultat négatif sur une échelle n’ait réellement pas le statut prédit.
De quoi dépendent les PPN ET PPP?
Ils dépendent de la prévalence du trouble.
Quels sont les deux problèmes potentiels avec les indices de sensibilité, spécificité et de pouvoir prédictif?
1) L’estimation de ces indices statistiques dépend de la validité et de la fidélité du critère utilisé.
2) L’estimation de la prévalence réelle dans différents contextes cliniques peut être difficile.
Pourquoi dit-on que la validité et la fidélité sont interreliées?
1) La validité est un préalable à la fidélité.
2) La fidélité est une condition nécessaire à la validité.
3) Les indices de validité sont directement influencés par le degré de fidélité.