Cours 1 Flashcards
À quoi la validité fait référence?
La validité d’un test psychométrique fait référence à la mesure dans laquelle le test mesure ce qu’il est censé mesurer.
Comment Balbinotti (2005, 2024) détaille un peu plus la validité?
Selon Balbinotti (2005, 2024), on pourrait détailler un peu plus ce concept en indiquant que la validité fait référence à l’accumulation de preuves dans un but ultime de prouver que le teste mesure, bel et bien, ce qu’il est censé mesurer!
Quels sont les types fondamentaux de preuve de validité?
- Basée sur le contenu
- Basée sur le processus de réponse
- Basée sur la structure interne
- Basée sur les relations avec d’autres variables
- Basée sur les conséquence de l’utilisation des tests
Qu’est-ce que la validité basée sur le contenu?
Se réfère à la mesure dans laquelle les items d’un test couvrent l’ensemble du domaine de contenu qu’il est censé mesurer.
–> Par exemple, un test conçu pour évaluer l’anxiété devrait inclure des questions qui abordent tous les aspects pertinents de l’anxiété, tels que les symptômes physiques, les pensées anxieuses et les comportements d’évitement (AERA, APA, & NCME, 2014).
Qu’est-ce que la validité basée sur le processus de réponse?
Se réfère aux processus cognitifs ou comportementaux requis par les items du test (sont-ils cohérents avec les processus que le test est censé évaluer?).
–> Par exemple, si un test de raisonnement logique prétend mesurer la capacité de déduction, les items doivent exiger que les participants utilisent des processus de déduction logique (AERA, APA, & NCME, 2014).
Qu’est-ce que la validité basée sur la structure interne?
Se réfère à la mesure dans laquelle les relations entre les items d’un test sont cohérentes avec la structure théorique du construit mesuré.
–> Basé sur des évidences des structures internes.
–> C’est cette validité qui est importante. Est-ce que les items fonctionnent bien entre eux? C’est un gros processus pour s’assurer de cette cohérence.
–> Les articles mesurent souvent juste la validité basée sur la structure interne, beaucoup plus que basée sur le contenu.
–> Par exemple, un test de personnalité qui prétend mesurer plusieurs dimensions de la personnalité (comme l’extraversion, l’ouverture, etc.) doit montrer que les items sont correctement regroupés en fonction de ces dimensions dans une analyse factorielle (AERA, APA, & NCME, 2014).
Qu’est-ce que la validité basée sur les relations avec d’autres variables?
Concerne la mesure dans laquelle les scores du test sont associés à d’autres variables, comme des critères externes ou d’autres tests (ou dimensions de tests) mesurant des concepts similaires.
–> Par exemple : un test est déjà reconnu et on en crée une autre. L’association (la corrélation) entre ces deux tests doit être forte puisqu’ils mesurent la même chose.
–> Par exemple, les scores d’un test de dépression devraient être corrélés avec d’autres mesures de dépression ou d’autres symptômes psychologiques associés (AERA, APA, & NCME, 2014).
Qu’est-ce que la validité basée sur les conséquences de l’utilisation des tests?
Examine les effets potentiels (positifs ou négatifs) de l’utilisation des scores de test dans des contextes pratiques.
–> Très peu utilisé. C’est très compliqué.
–> Par exemple : tous les étudiants font des tests d’intelligence. Si quelqu’un fait un crime, ils vont voir ce qu’est son résultat au test d’intelligence. Selon son résultat, il aura une peine de mort ou non.
–> Par exemple, l’usage d’un test d’admission à l’université peut avoir des conséquences importantes sur les individus en termes d’accès à l’éducation, et il est important de considérer si ces conséquences sont justes et appropriées (AERA, APA, & NCME, 2014).
À quoi fait la référence la fidélité?
Fait référence à la cohérence des résultats obtenus avec un test psychométrique (précision de la mesure). Un test est considéré comme fiable s’il produit des résultats similaires sous des conditions similaires.
–> Je ne sais pas ce que l’instrument mesure, mais il mesure avec précision.
Quels sont les types fondamentaux de fidélité?
- Test-retest
- Cohérence interne
- Fidélité interjuges
Qu’est-ce que la fidélité test-retest?
Évalue la stabilité temporelle des résultats d’un test.
–> On refait la passation du test après une période donnée. On s’attend à ce que le résultat demeure le même.
–> Par exemple, si un individu passe un test de personnalité à deux moments différents, un test fiable devrait produire des résultats similaires lors des deux passages.
Qu’est-ce que la fidélité - cohérence interne
Mesure la consistance des items d’un test. Un test est dit cohérent en interne si les items qui mesurent le même concept produisent des scores similaires.
–> La plus importante
–> Basée sur des corrélations, comme les autres, mais plus avancées.
Qu’est-ce que la fidélité interjuges?
La fidélité interjuges évalue le degré d’accord entre différents évaluateurs ou juges qui notent le même ensemble de performances ou de réponses.
Qu’est-ce que la sensibilité?
La sensibilité se réfère à la capacité d’un test à identifier correctement les individus ayant une condition particulière (taux de vrais positifs)
Qu’est-ce que la spécificité?
La spécificité se réfère à la capacité d’un test à identifier correctement les individus qui n’ont pas la condition (taux de vrais négatifs)
Mets en relation le test d’intelligence et les concepts de validité et de fidélité.
Les tests de QI, tels que le WAIS (Wechsler Adult Intelligence Scale), sont souvent utilisés pour mesurer l’intelligence. Ces tests doivent démontrer une forte validité et fidélité pour être considérés comme des outils fiables. Par exemple, la validité basée sur les relations avec d’autres variables est évaluée en comparant les scores du WAIS avec les performances académiques ou professionnelles des individus.
Mets en relation l’évaluation de la dépression et les concepts de validité et de fidélité.
Les échelles d’évaluation de la dépression, comme le Beck Depression Inventory (BDI), nécessitent une validité de contenu pour s’assurer qu’elles couvrent tous les aspects pertinents de la dépression, tels que l’humeur, la cognition et le comportement. La cohérence interne est également cruciale pour garantir que tous les items du BDI mesurent de manière cohérente les symptômes de la dépression.
Quels sont les modèles de mesure?
- Modèle de mesure réflective
- Modèle de mesure formative
Qu’est-ce que le modèle de mesure réflective?
–> Items liés à la dépression, mais pourquoi « je pleure constamment » ou « je mange mal ». Il y a quelque chose derrière le comportement qui crée ledit comportement. La dépression cause ces comportements (x). Les comportements sont subséquents à la dépression. Analyse factorielle.
Qu’est-ce qu’un modèle de mesure formative?
–> En questionnaire de satisfaction, c’est à cause de différents éléments que je suis satisfait. Analyse à composante principale.
Compare le modèle de mesure réflective au modèle de mesure formative.
Processus de transformation des attributs psychologiques en valeurs quantitatives, ce qui permet leur analyse et interprétation. La distinction entre mesures réflectives et formatives n’est pas une simple réflexion sur la nature des construits. Cette distinction à des conséquences sur les modèles statistiques utilisés.
–> Toutes les mesures ont une dissonance, une erreur qui s’ajoute (comme une donnée élevée dans la moyenne). Une erreur de mesure s’établie. En enlevant l’erreur, la donnée est plus précise. L’erreur peut être modéliser. On peut mesurer l’erreur, mais on ne peut pas connaitre son origine.
Qu’est-ce que la moyenne?
Mesure de tendance centrale qui résume un ensemble de valeurs en un seul nombre représentatif;
Vrai ou faux. On peut créer une moyenne à partir d’une échelle de Likert.
Faux
Qu’est-ce que la médiane?
Mesure de tendance centrale qui indique la valeur qui sépare la moitié supérieure de la moitié inférieure d’un ensemble de données;
–> Conditions d’utilisation différentes que la moyenne. Elle considère aussi tous les résultats, mais pas leur force, seulement le nombre.
Vrai ou Faux. Il est possible de faire une corrélation/régression à partir de la médiane?
Vrai
On peut faire une corrélation/régression polychorique en utilisant la médiane. SPSS se base toujours sur la moyenne.
Qu’est-ce que le mode?
Mesure de tendance centrale qui représente la valeur la plus fréquente dans un ensemble de données;
Vrai ou faux. Il est possible de faire une corrélation ou régression à partir du mode?
Vrai.
Cela se nomme une corrélation/régression tétrachorique.