Psychométrie et évaluation Cours 4 la validation Flashcards
Qu’est-ce que la validité ?
- si l’instrument mesure vraiment ce qu’il est censé mesuré.
Le degré de validité permet de ?
- déterminé les inférences que l’on eut faire à partir des scores d’une échelle
la vrai question n’est pas si ce test est valide mais ?
est-ce que le test est une mesure valide pour ce construit ?
Quelles sont les 3 caractéristique à évaluer lors de la validité ?
- est-ce qu’il mesure vraiment le construit qu’il prétend mesurer ?
- Est-ce qu’il mesure bien le construit pour la population ciblée ? (âge, etc)
- Est-ce qu’il mesure bien le construit pour cette population et pour une application particulière
Nommées les différents types de validité
Validité de contenu
Validité de construit
Validité de critère (pragmatique)
Est-ce que la vraisemblance est une forme de validité en soit ?
Non, mais elle est tout même considérée importante pour certains auteurs
Qu’est-ce que la vraisemblance ?
lorsque les utilisateurs jugent qu’elle semblent pertinent pour juger ce qui doit être mesuré (non exprets)
Si l’instrument n’est pas vraisemblable, cela menace ?
et donner un exemple
Sa validité. Exemple : est-ce que les dessins d’un enfant mesure le niveau d’agressivité physique ?
Nommez trois facteurs qui peuvent influencer la vraisemblance
- contexte d’évaluation (l’apparence physique de l’évaluateur)
- L’état psychologique et santé mental des répondants
- Le motif de l’évaluation
Qu’est-ce que la validité de contenu ?
Jugement porté sur la représentativité des items utilisé pour mesurer un construit
on répond à deux questions quand on teste la validité de contenu
- est-ce que les items individuellement correspond au construit
- est-ce que tous les items du construits constituent un échantillon représentatif du construit ?
Qu’est-ce qu’on entend par échantillon représentatif de l’ensemble des items ?
- que l’ensemble des items permettent de mesurer tous les sous-domaines d’un construit
- éviter la sur ou sous représentation d’items des différents sous-domaine du construit
Avant de construire une échelle, qu’est-ce qu’il faut décrire en détail pour que la validité de contenue soit legit ?
Il faut décrire de manière détaillé les domaines ou sous domaines du construit utilisé
à partir de quoi, les chercheurs définissent un construit ?
- théorie
- Recherche empiriques (recension de écrits)
- Connaissances et expériences professionnelle (préocupation clinique)
- Expériences personnelles (sur importance de la famille exemple)
Nommez les deux types de validité de contenu
- Nominale et consensuelle
Expliquer la validité de contenu de type nominale
- Les auteurs de l’instruments nommes que l’instrument à une bonne validité de contenue
Expliquer la validité de contenu de type consensuelle
- Groupe de spécialiste de la théorie indépendant regarde les items et disent s’il représentent bien le construit
Comment quantifier la validité de contenu de type consensuelle ? En autre mot, comment estimer la validié de contenue de manière empirique
- on demande aux experts indépendants d’estimer chaque items selon la représentativité du construit
- Cela permet de calculer l’indice de validité de contenu
Qu’est-ce que la validité de construit
- on vérifie la validité de la structure théorique de l’instrument et les interrelation entre les construits
Avant d’entamer l’évaluation de la validité de construit il faut ?
Connaitre la théorie relié au construit
Qu’est-ce que la nomologie ?
Elle représente quoi et inclut quoi ? (1+2)
- étude des lois du construits
- représente les interrelations entre les domaines et sous domaines du construit
- elle inclut les facteurs étiologiques (facteurs de risques)
Elle inclut les conséquences développementales (pronostic)
Quel sont les deux moyens pour vérifié la validité de construit ?
- Validité factorielle
- Validité convergente-discriminatoire
Qu-est-ce que la validité factorielle
- On vérifie si la structure théorique est reproduite sur le plan empirique
Qu’est-ce qu’un facteur ?
- réduction parcimonieuse d’un ensemble d’item en une variable latente
En validité factorielle on veut vérifié deux aspects qui sont interellier
- les items sont relié de manière significative au construit auquel il devrait être relié
- structure hiérarchique est reproduite
Qu’est-ce que l’analyse factorielle exploratoire ?
Quelle est sa caractéristique ?
- On explore les items auquel les individus ont répondu de manière similaire
- On n’impose pas de restriction à la matrice de corrélation
Quelle est le critère classique pour la saturation ?
- 0.40
Qu’est-ce que l’analyse factorielle confirmatoire ?
- on impose une structure stricte à la matrice de corrélation et on teste si elle correspond aux données
Quel est la méthode de validité fonctionnelle utilisé pour la validation d’un instrument ?
L’analyse factorielle confirmatoire, car on est supposé connaitre sa structure
L’analyse factorielle confirmatoire est quelque chose qui se fait beaucoup en psychométrie, car elle est simple a réalisé V/F
Faux, elle est peu employée en psychométrie, car les analyses statistiques sont beaucoup plus complexes
Qu’est-ce que la validité convergente ?
on compare la nouvelle échelle avec d’autre échelles existant qui mesure le même construit
Qu’est-ce que la validité discriminante ?
On compare la nouvelle échelle avec d’autre échelle existant qui ne mesure pas le même construit, mais qui est relié
Donner un exemple d’échelle de validité discriminante
Nouvelle échelle de trouble intériorisé comparé à un échelle de trouble extériorisé déjà existante
Qu’est-ce que la validité de critère (pragmatique)
Savoir si les scores à une échelle peuvent prédire l’adaptation (ou performance) des individus
-Avec quoi, pouvons-nous évaluer la validité de critère ?
Quelles sont les caractéristiques de ce truk. ( 3)
Avec un critère qui est externe de l’instrument qui est une mesure objective et distincte du construit, mais conceptuellement reliée.
Nommez les trois grand types de validité de critère.
- Concomitante
- Prédictive
- postdictive
Nommez et décrivez les deux facon d’évaluer la validité de critère concomitante
- Avec un critère indépendant; test de QI et réussite académique
- Méthode des groupes contrasté; on compare des groupes ex: groupe qui sont diagnostiqué d’un groupe que l’instrument a trouver avec le trouble
Qu’est-ce que la validité de critère prédictive ?
est-ce que notre échelle est capable de prédire un critère externe plus tard dans le temps
Comment pouvons nous évaluer le critère de validité prédictive ?
Avec des études longitudinales
Qu’est-ce que la validité postdictive ?
Est-ce que notre échelle est capable de prédire un critère externe qui s’est passé dans le passé de l’individu
Nommez un exemple de validité postdictive
- Les scores à l’échelle de la dépression peuvent-ils être corrélés avec le niveau de solitude quand il était enfant ?
Nommez une limite de la validité postdictive
Biais dans la mémoire, biais dans une sous ou sur représentation des évènements de la vie du sujet
Qu’est-ce que la sensibilité ?
Capacité d’une échelle à identifier les gens qui ont un trouble parmi ceux qui en ont réellement un.
Qu’est-ce que la spécificité ?
Capacité d’une échelle à identifié les gens qui n’ont pas le trouble parmi ceux qui on pas le trouble
Lors d’une évaluation de la validité de critère d’une échelle, quel est la particularité des individus ?
Leurs statu sont connu contrairement en clinique dans le cas d’un test de dépistage