cours 4 - la validité Flashcards
Définition populaire de la validité
Dans le monde de la psychométrie, la validité fait référence aux preuves qui nous indiquent si nos tests mesurent ou non ce qu’ils sont censés mesurer.
MAIS une question de degré et non tout ou rien (on peut pas dire un test est valide ou ne l’est pas, plutot à quel degré l’est-il ou non)
la validité est un concept ..
UNITAIRE (générique) (umbrella term)
regroupe plusieurs types de validité, mais font tous partie de la validité
comment dire si le degré de validité d’un test
En fonction d’une situation particulière
- on ne peut pas dire un test est valide
- il faut dire ce test est valide pour tel situation
quelle est la distinction entre validité et exactitude des normes (donne ex)
ex : les tests A et B sont tous deux des tests de «QI» servant à prédire lamoyenne générale au cégep. Ces tests ont une correlation de 0,65 avec la movenne générale. Dans les deux cas, la moyenne générale est de 3,0
Le QI moyen obtenu au test A est de 110, alors qu’il est de 80 au test B. L’utilisateur pourrait conclure que le test B «n’est pas valide» parce qu’il est inconcevable que des élèves avant un Ql moven de 80 obtiennent une moyenne générale de 3,0. Toutefois,le coefficient de validité (=0,65) étant le meme pour les deux tests, tous deux sont également valides en ce qui concerne la prédiction de la moyennegénérale. Le problème réside dans l’exactitude des normes, non dans la validité du test.
Pourquoi est-il important d’établir la validité ?
- Votre procédure de mesure doit mesurer ce qu’elle est censée évaluer, sinon vos résultats de mesure ne sont pas utiles !
- S’applique à tout (aussi bien à la recherche psychologique qu’aux domaines extérieurs à la psychologie).
comment mesurer la validité (3) (1-1,2-2,3-2)
- Validité liée au contenu [Content validity]
- Validité d’apparence - La validité liée aux critères [criterion related validity]
- Concomitant [Concurrent]
- Prédictive - La validité de construit [construct validity]
- validité convergente
- Validité discriminant
quest ce que la validité de contenu
Évaluer la validité du contenu d’un test, c’est évaluer si votre test pose des questions sur toutes les différentes parties du sujet que vous évaluez.
L’application de la validité de contenu implique souvent la notion d’échantillonnage, c’est-à-dire que le contenu du test doit couvrir un échantillon représentatif de tous les éléments possibles du domaine
Pas d’évaluation statistique formelle de la validité du contenu
Menaces pour la validité du contenu
quelles sont les menaces (2)
- les tests qui ne couvrent pas le contenu d’un domaine peuvent etre appelés “déficients en terme de critères” (sous-représentation du construit)
L’intersection du construit et du test représente la validité: le test mesure ce qu’il est censé mesurer. La partie du construit qui n’est pas couverte par le test est appelée sous-représentation du construit.
- les tests peuvent également chevaucher avec des sujets que j’essaye pas d’évaluer ou pas pertinent = variance non liée au construit
quest ce que la validité d’apparence
Le test mesure-t-il ce qu’il semble être censé mesurer ?
- Les questions semblent être pertinentes pour le répondant dans le contexte particulier d’évaluation dans lequel elles apparaissent.
- C’est très simple et direct - nous pouvons l’évaluer en demandant à des experts connaissant bien la chose que nous mesurons si elle semble mesurer ce qu’elle est censée mesurer.
ex : le fait de vous demander de résoudre des questions de mathématiques n’a pas l’air de faire partie d’un test d’extraversion.
MAIS peut etre utile si dans des situations de test où vous ne voulez pas révéler l’objectif du test.
ex : “J’apprécierais le travail d’un boucher”.
- Peut évaluer l’agressivité
quest ce que la validité critériée
La fonction essentielle de la validité critériée est de définir la relation entre les résultats au test et un
autre critère considéré comme un important indicateur du construit à l’étude.
ex : Les scores au SAT devraient permettre de prédire les notes à l’université
validité critériée
quest ce que le coefficiant de validité
cest la relation entre le score au test et un test externe d’intérêt
dhabitude : r ou R = .3-.4 est typique, plus de .7 est mauvais
pourquoi?
++ ca se rapproche de 1 ++ cela signifierait que votre nouveau test présente un chevauchement considérable/trop important avec votre critère (qui est souvent un ancien test).
- C’est une bonne chose dans la mesure où votre nouveau test mesure le concept que vous souhaitez qu’il mesure.
- mais ce n’est pas bon parce qu’il peut être redondant par rapport à un test existant si le coefficient est trop élevé.
validité critériée
quest ce qui peut influencer (negativement) les coefficiants de validité (7)
- si la mesure du critère est bonne ou non
- si l’échantillon que j’utilise est représentatif de la population que je veux tester
- les personnes qui quittent l’étude en cours de route - peuvent constituer un gros problème, en particulier pour les études de critères prédictifs.
- taille insuffisante de l’échantillon
- Restriction de l’étendue- Le GRE, un test utilisé pour l’admission aux études supérieures, en est un bon exemple
(si tas juste des gens avec bonnes notes qui font ton test pas bonne etendue) - Critère déficient — il est également important de choisir un critère qui soit complet et auquel il ne manque rien.
- contamination du critère : Lorsqu’on tente de déterminer la validité d’un test en établissant sa corrélation avec un critère externe. la contamination du critère renvoie a une situation
dans laquelle le résultat au test influe sur la valeur du critère. On peut expliquer ce concept à l’aide
d’un exemple. Avec un échantillon de 50 individus, on tente de déterminer la validité de l’Échelle de dépression de Cleveland en démontrant sa forte corrélation avec les évaluations de dépression réalisees par trois cliniciens. Les cliniciens ont accès
aux scores obtenus à l’Échelle de dépression de Cleveland, sur lesquels ils fondent, du moins en
partie, leurs évaluations. La corrélation entre le test et le critère s’en trouve ainsi augmentée.
il y a 2 types de validités critériée
- validité prédictive
- validité concomittante (simultanée)
validité critériée
quest ce que la validité prédictive
Dans le cas de la validité prédictive, le test vise à prédire la valeur que prendront certains critères à l’avenir.
ex : Les résultats du test SAT pour prédire la moyenne générale après qu’un étudiant a obtenu son diplôme.
La caractéristique principale d’une “stratégie de test de validité prédictive” est que les données relatives au prédicteur sont EN GÉNÉRAL collectées à un moment ou au cours de sessions différents de ceux des données associées au critère/résultat.
validité critériée
quest ce que la validité concomittante
La validité concomitante
concerne la concordance entre les résultats à un test et la valeur actuelle d’autres variables.
ex : on peut par ailleurs évaluer la relation entre les résultats à un test de dépression et les évaluations
que font des cliniciens de la gravité actuelle de la dépression.
La relation entre la fiabilité et la validité
cest quoi
- Un test qui est valide DOIT être fiable
- Un test qui est fiable n’est pas nécessairement valide
donc la fiabilité est une condition préalable nécessaire à la validité
validité incrémentale
Imaginons une situation dans laquelle nous voudrions en savoir plus sur la performance au travail et sur la manière de prédire la performance au travail.
Nous pouvons examiner sa corrélation avec d’autres variables.
Par exemple, nous savons que le QI et la performance au travail sont corrélés, et nous savons que le sens de cette relation est que le QI–> prédit–> la performance au travail. Disons que la corrélation est de 0,3
Nous pouvons représenter cette relation par ces deux cercles. r = .3 donc r2= 0.09
que pouvons nous faire pour ameliorer la prediciton
en rajoutant un autre predicteur
La recherche nous apprend que la personnalité est AUSSI un facteur prédictif de la performance au travail, mais qu’elle a aussi une relation avec le QI
Par conséquent, nous pouvons poser la question suivante : pouvons-nous utiliser la personnalité pour améliorer notre prédiction de la performance au travail ? (la réponse est oui)
Nous pouvons le faire avec la régression multiple qui nous permet de comprendre comment deux variables se combinent pour prédire une troisième variable.
Le chevauchement entre le cercle bleu et le cercle gris représente la variance supplémentaire qui est prise en compte par notre analyse et qui n’est PAS déjà prise en compte par le chevauchement entre le rouge et le gris.
quest ce que le MTMM (multitrait-multimethod matrix)
le MTMM est un outil que les chercheurs peuvent utiliser pour **évaluer la validité convergente et discriminante **dans une seule étude.
en gros, il faut que Les mesures d’un trait donné doivent converger entre les différentes méthodes de mesure.
- La corrélation entre l’auto-évaluation de la bonne humeur et l’évaluation de la bonne humeur par les coéquipiers doit être positive et supérieure à zéro.
- Les corrélations devraient être plus fortes entre des tests qui mesurent la même caractéristique qu’entre des tests qui n’ont rien en commun.
- Les corrélations devraient être plus fortes entre des tests qui mesurent la même caractéristique qu’entre des tests qui partagent uniquement la même méthode de mesure.
