Validité de l'évaluation

Question 1

Quelle est la définition initiale de la validité ?

Answer 1

Est-ce qu’un attribut psychologique existe et est-ce celui mesuré par le test ?

Question 2

Définir la validité selon Zumbo ?

Answer 2

Validité = cadre théorique de l’évaluation de la mesure : explication des variations des scores du test (lié à un contexte). Test valide = permet une interprétation d’un test sur un attribut psychologique donné.

Question 3

Définir la théorie unifiée de Messick

Answer 3

Proposition d’une conception unifiée de la validité. Conception dominante actuellement. Messick unifie le concept sous la validité de construit.

Question 4

Définition de la validité selon Messick

Answer 4

Jugement évaluatif intégré ; Sur l’interprétation des scores ; En terme de construit ; Fonction des données empiriques ; Question de degré (plus ou moins valide).
La clé pour qu’une interprétation soit valide c’est le modèle théorique et empirique qu’il y a derrière. La validité est une question d’interprétation.

Question 5

Quel est le coeur de la validité selon Messick ?

Answer 5

La validité de construit (avoir une hypothèse/modèle théorique sur le processus qu’il y a derrière le test).

Question 6

Quelles sont les 5 composantes de la théorie unifiée de Messick ?

Answer 6

• Structure interne
• Association avec d’autres variables
• Validité des conséquences
• Contenu du test
• Processus réponses

Question 7

Définir la structure interne (Messick)

Answer 7

Développer un questionnaire en fonction d’un modèle théorique, on évalue si l’organisation interne de l’instrument (nb de facteurs, items) est compatible avec le modèle théorique.

Question 8

Définir l’association avec d’autres variables (Messick)

Answer 8

Corrélations entre deux scores et interprétation théorique de cette corrélation.

Question 9

Définir la validité de conséquences (Messick)

Answer 9

Quelles conséquences a l’évaluation sur la personne testée ? Les conséquences positives doivent être supérieures aux négatives.

Question 10

Définir le contenu du test (Messick)

Answer 10

insérer les scores du test et les items par rapport à un modèle théorique.

Question 11

Définir le réseau nomologique

Answer 11

Ensemble théorique de relations entre des concepts psychologiques. On doit pouvoir créer une argumentation théorique sur les relations entre tous nos concepts psychologiques.

Question 12

Qu’est-ce que la Matrice Multi-Trait Multi-Méthode (MMTMM) ?

Answer 12

La méthode de référence pour la validité de construit. Interprétation ambiguë des corrélations et donc interprétation ambiguë de l’attribut. Objectif MMTMM : séparer les parts de variance et clarifier l’attribut qui doit être utilisé pour l’interprétation.

Question 13

Définir la validité de contenu

Answer 13

Validité de contenu faite par des experts. Voir si les items posés représentent bien l’entièreté du domaine qu’on souhaite évaluer. Exhaustivité : on doit identifier toutes les compétences que doivent avoir les participants, et ensuite on pose des questions sur toutes ces compétences. Contenu : on part de qc de subjectif mais on fait ensuite un accord.

Question 14

Définir le processus de réponse (Messick)

Answer 14

Evaluer la nature des processus : cohérent avec les hypothèses ? On veut, à travers les processus de réponses, avoir des hypothèses et des données en accord avec les processus impliqués.

Question 15

Définir la validité incrémentielle

Answer 15

Est-ce que le test rajoute qc qui permet d’augmenter le diagnostic, pronostic ? Quel est le gain qu’on peut obtenir en ajoutant un test ?

Question 16

Quels sont les facteurs influençant la validité (selon la TCT) ?

Answer 16

• Homogénéité de l’échantillon
• Réduction étendue des scores
• Difficulté du test
• Taille de l’échantillon
• Relation fidélité-validité

Question 17

Postulats et limites de la validité de construit ?

Answer 17

Exiger des réseaux nomologiques en psychologie n’est pas réaliste. VC doit consister à tester tout le réseau, or les études ne testent la relation qu’entre 2-3 éléments à la fois (MMTMM).

Question 18

Postulats et limites de la validité de conséquences ?

Answer 18

Difficile à identifier à l’avance et à évaluer. Distinguer la validité de conséquences et les mauvaises utilisations des tests.

Question 19

Postulats et limites des processus de réponse ?

Answer 19

Pas étudiés, difficile à réaliser. Nécessite une analyse psychologique, des analyses de tâches.

Question 20

Quelle est la validité la plus importante ?

Answer 20

Seule chose de vraie → valeur de validité prédictive. Tout ce que je sais c’est que l’ensemble des compétences cognitives, conatives, permet de prédire les futures performances dans 10-15ans. Donc tout ce qu’on a de solide est la validité prédictive.