Cours 9 - La validité Flashcards

1
Q

Définition générale : Qu’est-ce que la validité ?

A

La validité est le degré avec lequel un test mesure ce qu’il prétend mesurer. ET CELA SEULEMENT.

How well did you know this?
1
Not at all
2
3
4
5
Perfectly
2
Q

Pourquoi on doit utiliser un processus de validation ?

A

Parce que plusieurs instruments de mesure ne permettent pas d’observer directement le concept qu’on chercher à étudier

How well did you know this?
1
Not at all
2
3
4
5
Perfectly
3
Q

La validité ne concerne pas l’instrument de mesure lui-même, mais quoi (2 choses) ?

A
  1. L’interprétation des résultats
  2. Le contexte de son utilisation
How well did you know this?
1
Not at all
2
3
4
5
Perfectly
4
Q

En quoi consiste l’interprétation des résultats comme validité ?

A

Le processus de validation permet de déterminer le niveau de certitude qu’on peut avoir grâce aux résultats

How well did you know this?
1
Not at all
2
3
4
5
Perfectly
5
Q

En quoi consiste le contexte de son utilisation ?

A

C’est orienté vers la clientèle et les conditions générales
On doit dire qu’on a démontré des preuves de validité avec telle clientèle et sous telles conditions
La validité est lié au contexte dans lequel le processus d’accumulation de preuves a été effectué

How well did you know this?
1
Not at all
2
3
4
5
Perfectly
6
Q

Qu’est-ce que l’évaluation de la validitié

A

C’est un processus continu d’accumulation de “preuves” ou “d’évidence”

How well did you know this?
1
Not at all
2
3
4
5
Perfectly
7
Q

Vrai ou faux : Il faut éviter de considérer le nom du test comme une preuve de ce qu’il mesure ?

A

VRAI

How well did you know this?
1
Not at all
2
3
4
5
Perfectly
8
Q

Quels sont les trois validités étudiées ?

A
  1. Validation de contenu
  2. Validation pragmatique
  3. Validation de construit
How well did you know this?
1
Not at all
2
3
4
5
Perfectly
9
Q

Qu’est-ce que la validation de contenu ?

Le meilleur contenu nécessaire (items)

A

Désigne la capacité à capturer les aspects du contenu
Il faut s’assurer que les contenus des items contribuent à évaluer les aspects fondamentaux du domaine
En gros, il faut que les items mesurent ce que l’on veut mesurer, cela prend un échantillon d’items important

How well did you know this?
1
Not at all
2
3
4
5
Perfectly
10
Q

Quand avons-nous besoin de la validité de contenu ?

A

On examine ce type de validité lors de la construction de l’instrument de mesure

How well did you know this?
1
Not at all
2
3
4
5
Perfectly
11
Q

La validité de contenu est évalué par qui et comment ?

décrire les 5 choses qui sont évalués

A

Cette validité est évalué par les juges-experts (connaisseurs du concept à mesurer)
Ils sont là pour se prononcer sur 5 choses (la clarté, la représentativité, l’exhaustivité, la dimensionnalité et la pertinence)
1. La clarté : item suffisament claire au niveau linguistique
2. La représentativité : item représente bien la théorie dans sa formulation
3. L’exhaustivité : les items mesurent bien tous les éléments de la théorie
4. La dimensionnalité : l’item se réfère bien à la dimension sous-jacente
5. La pertinence : item est pertinent, pertinence de poser cette question

How well did you know this?
1
Not at all
2
3
4
5
Perfectly
12
Q

Dans la validation de contenu quelles sont les statistiques habituellement utilisées ?

A
  1. Le coefficient de validité de contenu (CVC) : mesure le pourcentage des réponses des juges-experts qui sont d’accord sur les aspects items
  2. La corrélation intra-classe (ICC) : mesure l’association des opinions entre juges-experts en termes de trait quantitatif et qualitatif
    3- Coefficient d’indice Kappa de Cohen
How well did you know this?
1
Not at all
2
3
4
5
Perfectly
13
Q

Qu’est-ce que la validation apparente ?

A

C’est ce qui renvoie à comment les items sont disposés. Autrement dit qu’elle est la structure de l’instrument.

How well did you know this?
1
Not at all
2
3
4
5
Perfectly
14
Q

Qu’est-ce que la validation pragmatique ?

A

Désigne la capacité d’un instrument à prédire le niveau de performance d’un groupe d’individus par rapport à des situations qu’ils rencontreront ou pourraient rencontrer utlérieurement.

Ex : QI et succès professionnel

How well did you know this?
1
Not at all
2
3
4
5
Perfectly
15
Q

On évalue la validité pragmatique comment ?

A

Il faut calculer la corrélation entre les résultats obtenus par un même groupe à deux moments différents (présent ou futur)
On utilise souvent l’analyse de régression (prédire la variance d’une variable par le biais d’une variable indépendante (beta te donne une pseudo direction)

Niveau de dépression et probabilité de suicide

How well did you know this?
1
Not at all
2
3
4
5
Perfectly
16
Q

Vrai ou faux : évaluer la validité pragmatique = déterminer dans quelle mesure les prédicteurs retenus permettent de fournir une estimation valide des résultats qui seront obtenus ultérieurement (% de variance prédite)

A

VRAI

17
Q

Nomme et explique les deux types de validité pragmatique.

A

1.** Validité concomitante/concourante** :
Détermine le degré d’association entre les scores obtenus au test et les scores obtenus à une mesure de référence (Administration du test et d’un critère en même temps)
2. Validité prédictive : Évalue la qualité de la prédiction faites sur la base des résultats obtenus au test et une réalité future (Administration du test et d’un critère séparé d’un laps de temps important)

18
Q

Quelles sont les statistiques habituellement utilisées pour la validation pragmatique ?

A
  1. Coefficient de détermination (CD) : pourcentage d’explication de la variance entre deux mesures sans considérer l’ordre des mesures
  2. Corrélation multipe au carré (R2) : pourcentage d’explication de la variance entre deux mesure en considérant l’ordre des mesures
19
Q

Qu’est-ce que la validité de construit ?

A

C’est la justesse/certitude avec laquelle l’ensemble d’items d’un instrument de mesure psychologique permet d’obtenir des résultats conformes aux concepts (ou traits) définis par son contexte théorique
Elle indique dans quelle mesure les énoncés d’un instrument sont cohérents (homogènes) avec la théorie
On cherche à étudier des entités hypothétiques (variables latentes)

20
Q

Nommer et expliquer les construits sont aussi comment ?

A
  1. Ils sont des mini-théories : expliquent la relation entre différents concepts évalués par les items
  2. Ils sont des facteurs : expliqués par l’association entre les concepts inhérent aux variables directement mesurables (items)
21
Q

Comment on peut évaluer la validité de construit (2) ?

nommer et expliquer

A
  1. L’analyse multitrait-multiméthode : c’est une matrice de corrélation entre les résultats obtenus à différents traits et à différentes méthodes
    + forte corrélation : même trait, même méthode
    - forte corrélation : traits différents, méthodes différentes
    LIMITES : demande bcp de temps et difficile de trouver différents tests qui mesure la même chose
    Voir diapo 25
    Exemple de trait : dépression, tristesse, désespoir
    Exemple de méthode : observation, questionnaire, entrevue
  2. L’analyse factorielle : il faut avoir au moins 3 variables observées qui sont corrélées entre elles sur une nouvelle variable (latente) qui retient l’essentiel de la vriance commune. Cette nouvelle variable = facteur
    Les questions typiques :
    - combien de facteurs l’analyse nous propose ?
    - quel est le % d’explication de la variance ?
    - est-ce que tous les items sont valides ?
    Voir diapo 27-28 pour étude
22
Q

Vrai ou faux : dans la validité de construit le processus de validation n’amène pas à un indice statistique unique mais à plusieurs résultats qui doivent être interprétés en lien avec les éléments théoriques.

A

VRAI

23
Q

La validitié de construit d’un instrument sera plus facilement mesurable si la théorie utilisée est ??? et ???.

A
  1. Claire et bien définie
24
Q

Quelles sont les deux types de validité de construit ?

Nommer et expliquer

A
  1. Validité convergente : il faut vérifier la force de l’association entre les résultats des items de l’échelle cible et les autres qui mesurent le même construit. les résultats de l’outil doivent corrélés avec les autres outils qui évalue le même construit
  2. Validité discriminante : il faut vérifier à quel point les résultats des items de l’échelle cible s’écartent des autres mesures de construit différents. Les résultats de l’outil ne doivent pas corrélés de façon importante avec ces autres construits.
24
Q

Quelles sont les deux types de validité de construit ?

Nommer et expliquer

A
  1. Validité convergente : il faut vérifier la force de l’association entre les résultats des items de l’échelle cible et les autres qui mesurent le même construit. les résultats de l’outil doivent corrélés avec les autres outils qui évalue le même construit
  2. Validité discriminante : il faut vérifier à quel point les résultats des items de l’échelle cible s’écartent des autres mesures de construit différents. Les résultats de l’outil ne doivent pas corrélés de façon importante avec ces autres construits.