Cours 4 et 5 : La validité Flashcards

1
Q

Qu’est-ce que la validité ?

A

La validité quantifie la façon avec laquelle un test mesure ce qu’il est censé mesurer

PE, deux psychologues font le même diagnostic de dépression

How well did you know this?
1
Not at all
2
3
4
5
Perfectly
2
Q

Vrai ou faux, la validité est propre à l’interprétation et l’usage qui sont faits d’un test ?
Vrai ou faux, la validité est un tout ou rien ?

A

Vrai

Faux, c’est un continuum

How well did you know this?
1
Not at all
2
3
4
5
Perfectly
3
Q

Quels seraient les dimensions du construit de dépression ?

A

Cognitive, émotive, comportementale

How well did you know this?
1
Not at all
2
3
4
5
Perfectly
4
Q

Par quoi la variance peut-elle être influencée ?

A

Les réponses socialement acceptables à donner

How well did you know this?
1
Not at all
2
3
4
5
Perfectly
5
Q

Quel est l’enjeu fondamental de la validité ?

A

Prouver que les scores obtenus suite à la passation de l’instrument sont révélateurs du construit que l’on tente de mesurer

How well did you know this?
1
Not at all
2
3
4
5
Perfectly
6
Q

Vrai ou faux, un test peut être fidèle sans être valide ?

A

Vrai, mais un test valide est nécessairement fidèle

How well did you know this?
1
Not at all
2
3
4
5
Perfectly
7
Q

Quel sont les quatre types de validité ?

A
  • validité d’apparence (degré avec lequel un test semble mesurer ce qu’il vise à mesurer)
  • validité de contenu (degré avec lequel le contenu du test correspond au contenu du concept étudié)
  • validité critériée (degré avec lequel le résultat du test est lié à un autre critère)
  • validité de construit (degré avec lequel le test mesure le construit tel que défini)
How well did you know this?
1
Not at all
2
3
4
5
Perfectly
8
Q

Comment vérifier la validité d’apparence ?

A

Juger du degré avec lequel chacun des items d’un test représente bien le construit que l’on cherche à mesurer (Construit et dimensions)

How well did you know this?
1
Not at all
2
3
4
5
Perfectly
9
Q

Comment vérifier la validité de contenu ? Dans quels domaine est-ce important ?

A

On tente de vérifier que tous les contenus de notre construit sont représentés dans l’instrument, ou qu’un échantillon représentatif de son contenu soit représenté.

Important dans test de rendement et test d’aptitudes professionnelles.

How well did you know this?
1
Not at all
2
3
4
5
Perfectly
10
Q

Quelles sont les limites de la validité de contenu ?

A
  • Difficile établir clairement domaine des items
  • Avec quel degré les items couvrent les spécifications du contenu (difficulté des questions)
How well did you know this?
1
Not at all
2
3
4
5
Perfectly
11
Q

Comment vérifier la validité critériée ?

A

Quantifier la relation entre le résultat du test et un autre critère considéré comme étant un indicateur important du concept mesuré

Deux méthodes :
- validité prédictive : test prédit la valeur que prendront certains critères à l’avenir (—>)
- validité concomitante : utiliser le test pour prédire la valeur que prennent actuellement d’autre variables liées (<—>)

How well did you know this?
1
Not at all
2
3
4
5
Perfectly
12
Q

Quels sont les trois méthode de vérification de la validité critériée ?

A
  • Critère réaliste externe
  • Groupes contrastés
  • Corrélation avec d’autres tests (validité convergente ou divergente)
How well did you know this?
1
Not at all
2
3
4
5
Perfectly
13
Q

Qu’est-ce ce que la méthode de critère réaliste externe (Validité critériée) ?

A

Un critère réaliste externe est un critère qui donne une définition réaliste du construit mesuré par l’instrument. (Si la corrélation est forte, le test aura une bonne validité critériée)

*validité s’exprime sour forme d’un coefficient de corrélation

How well did you know this?
1
Not at all
2
3
4
5
Perfectly
14
Q

Qu’est-ce que la méthode du groupe contrasté (validité critériée) ?

A

On souhaite démontrer que le test permet de différencier un groupe d’un autre. Plus la différenciation est élevée, meilleur est la validité du test.
* Si des groupes diffèrent sur le trait mesuré, la séparation des scores à l’instrument devraient refléter ceux-ci (test t, régression, ANOVA)

*Il doit y avoir assez de différence entre nos groupes pour que ce soit utile dans la pratique

How well did you know this?
1
Not at all
2
3
4
5
Perfectly
15
Q

Qu’est-ce que la méthode de corrélation avec d’autres tests (validité critériée) ?

A

Démontrer la corrélation entre le test à valider et une mesure établie ou présumée (l’autre test devient le critère, utilisation corrélation Pearson)

  • Validité convergente : degré d’accord entre l’instrument évalué et un instrument établi mesurant le concept à l’étude (corrélation positive et élevée)
  • Validité divergente : degré de désaccord entre l’instrument évalué et un instrument établi mesurant le concept à l’étude (corrélation négative et élevée)
How well did you know this?
1
Not at all
2
3
4
5
Perfectly
16
Q

Dans la méthode méthode de corrélation avec d’autres tests, quelle est l’utilité de la matrice multitraits multiméthodes (Campbell et Fiske) ?

A

Utilisée pour vérifier la validité convergente et discriminante.

Les corrélations couvrant les mêmes traits et même méthodes sont plus élevées

17
Q

Dans la méthode méthode de corrélation avec d’autres tests, qu’est-ce qu’un système hypothético-déductif ?

A

Un système hypothético-déductif est un ensemble d’hypothèses portant sur ce que l’on devrait observer si l’instrument est valide.
Si l’instrument est valide, on devrait confirmer les hypothèses, car on retrouverait les relations ou les différences attendues.
La confirmation d’une hypothèse est une bonne démonstration de la validité, mais la confirmation de plusieurs hypothèses apporte de plus solides arguments.

  • si toutes les relations attendues sont trouvés, preuve de validité
  • si non, où est le problème
18
Q

Dans la tailles de corrélation de Cohen, qu’est-ce qui est considéré comme petit, moyen et grand ?

A

Petit 0,10 à 0,29

Moyen 0,30 à 0,49

Grand 0,50 et plus

19
Q

De quoi un critère doit-il être indépendant (méthode de corrélation avec d’autres tests)

A
  • de l’instrument testé
  • des concepteurs de l’instrument testé
  • de l’administrateur de l’instrument testé

Lorsque le critère est l’information fournit par un juge :
- juge doit pas reproduire ce que l’instrument testé vise à faire
- juge doit pas connaitre résultats à l’instrument testé

20
Q

Qu’est-ce que l’effet d’atténuation (méthode de corrélation avec d’autres tests) ?

A

Une mauvaise fidélité atténue la validité de l’instrument testé

21
Q

Qu’est-ce que le coefficient de validité désatténué ?

A

Le coefficient de validité désatténué correspond à la limite supérieur théorique de la validité pouvant être atteinte avec les instruments s’ils n’avaient pas d’erreur

La correction pour l’atténuation ne donne pas un nouveau coefficient de validité

22
Q

Qu’est-ce que la validité incrémentielle (corrélation avec d’autres tests) ?

A

Degré avec lequel un nouvel instrument (ou autre source d’information) ajoute à la compréhension ou la prédiction d’un phénomène

*si notre mesure améliore prédiction elle a de la validité incrémentielle

23
Q

Qu’est-ce que la validité de construit ?

A

Degré avec lequel le test mesure le construit tel que défini

24
Q

Vrai ou faux, les construits sont souvent observables directement ?

A

Faux, ils sont cachés, latents

25
Q

Quelles sont les deux manières de vérifier la validité de construit ?

A
  • Structure interne
  • Analyse factorielle
26
Q

Qu’est-ce que la manière de la structure interne (validité de construit) ?

A

Vérifier si les items d’un instrument ou d’une dimension se tiennent bien ensemble. En d’autres termes, si les mesures à l’intérieur d’un test sont toutes cohérentes

27
Q

Qu’est-ce que la manière de l’analyse factorielle (validité de construit) ? Quels sont les deux types d’analyse factorielle ?

A

L’analyse factorielle est un type d’analyse statistique qui permet de déterminer les dimensions communes aux résultats obtenus à des mesures (p.ex., réponses à un ensemble de questions)

Analyse factorielle exploratoire :
* Tous les items d’un instrument sont entrés en même temps dans l’analyse
* Utilisée quand on n’a pas vraiment d’hypothèse relatives à la structure du concept

Analyse factorielle confirmative :
* Les items sont reliés aux dimensions posées en hypothèse (quels items devraient appartenir à quelle dimensions)
* Utilisée quand on a des hypothèses claires relatives à la structure du concept
* Les résultats de l’analyse indiquent si oui ou non la structure posée en hypothèse représente bien ce qui est observé dans les données

28
Q

Quelle est l’utilité de l’analyse factorielle (validité de construit) ?

A
  • Vérifier si instrument mesure bien le construit
  • Identifier items ayant bcp d’erreur de mesure
  • Vérifier si un item mesure pas adéquatement une dimension
29
Q

Quels sont les inconvénients de l’analyse factorielle (validité de construit) ?

A
  • pas de réponse absolue
  • s’effectue ne plusieurs étapes
  • interprétation
30
Q

Quelle est la saturation visé dans une analyse factorielle où tout ce qui est plus petit sera ignoré ?

A

0,30

31
Q

Vrai ou faux, il est possible de vérifier la validité de construit ?

A

Faux, c’est une façon de vérifier si la conceptualisation de notre instrument est bonne