Chapitre 5 Flashcards

1
Q

Donnez une définition de la validité.

A
  • Le degré auquel un test mesure ce qu’il prétend mesurer.
  • La question de la validité permet de déterminer si les scores d’un test sont valides à une fin particulière; si, par exemple, l’indice de dépression du test de Rorschach est valide pour déterminer le degré de sévérité d’une dépression.
  • C’est la propriété la plus importante d’un test.
How well did you know this?
1
Not at all
2
3
4
5
Perfectly
2
Q

Vrai ou faux. La validité est une affaire de degré, pas d’absolu.

A

Vrai. Il n’existe probablement aucun score de test qui soit parfaitement valide à une fin donnée. La validité d’un test peut être faible, modérée ou élevée.

How well did you know this?
1
Not at all
2
3
4
5
Perfectly
3
Q

Faites la distinction entre la validité et l’exactitude des normes.

A

Un test peut être valide alors que ses normes sont déficientes. À l’inverse, un test peut avoir d’excellentes normes sans être pour autant valide.

How well did you know this?
1
Not at all
2
3
4
5
Perfectly
4
Q

Qu’est-ce qu’un construit?

A

C’est un trait ou une variable psychologique, donc une construction théorique.

How well did you know this?
1
Not at all
2
3
4
5
Perfectly
5
Q

Qu’est-ce qu’une sous-représentation du construit?

A

La partie du construit non couverte par le test.

How well did you know this?
1
Not at all
2
3
4
5
Perfectly
6
Q

Qu’est-ce que la variance non reliée au construit?

A

Les caractéristiques mesurées par le test qui ne sont pas liées au construit.

How well did you know this?
1
Not at all
2
3
4
5
Perfectly
7
Q

Qu’est-ce que la validité d’apparence?

A

La validité d’apparence fait référence à l’apparence de validité d’un test. En d’autres termes, il s’agit de déterminer si les items d’un test semblent mesurer ce qu’ils prétendent mesurer et ce, en dehors de toute preuve empirique. Si nous devons choisir entre deux tests présentant une validité empirique égale, il convient de choisir celui dont la validité d’apparence est la plus élevée.

How well did you know this?
1
Not at all
2
3
4
5
Perfectly
8
Q

Qu’est-ce que la validité de contenu?

A

La validité de contenu concerne la correspondance entre le contenu couvert par le test et certains domaines de connaissance ou de compétence bien définis.

On l’utilise surtout en ce qui concerne les tests de rendement et d’aptitudes professionnelles.

Afin de garantir une validité de contenu suffisante, il importe d’abord de spécifier le contenu du test à couvrir. Le contenu des connaissances ou des compétences sera présenté dans un tableau de spécifications pour ce qui est des tests de rendement et dans une analyse de poste en ce qui a trait aux tests d’aptitudes professionnelles. On détermine la validité de contenu en comparant le contenu du test au tableau de spécifications ou à l’analyse de poste.

How well did you know this?
1
Not at all
2
3
4
5
Perfectly
9
Q

Qu’est-ce que la validité critériée?

A

La fonction essentielle de la validité critériée est de définir la relation entre les résultats au test et un autre critère considéré comme un important indicateur du construit à l’étude.

Ce critère peut être établi en fonction d’un critère réaliste externe, de groupes contrastés ou d’un autre test. Elle est souvent présentée comme une corrélation entre le test et le critère, auquel cas elle porte le nom de « coefficient de validité ».

Comparer les résultats d’un test à un critère externe pour augmenter la validité des résultats du test.

How well did you know this?
1
Not at all
2
3
4
5
Perfectly
10
Q

Quels sont les deux contextes généraux de la validité critériée?

A

La validité prédictive et la validité concomitante.

How well did you know this?
1
Not at all
2
3
4
5
Perfectly
11
Q

Que sont les validité prédictive et la validité concomitante?

A

Dans le cas de la validité prédictive, le test sert à prédire la valeur que prendra un critère à l’avenir.
Ex. Un test d’admission au cégep administré aux élèves de dernière année du secondaire peut servir à prédire leur moyenne générale à la find e leur première année collégiale.

La validité concomitante concerne la concordance entre les résultats à un test et la valeur d’autres variables mesurées au même moment.
Ex. Faire passer un test qui mesure le degré de dépression et évaluer la relation entre ces résultats et les évaluations que font les cliniciens de la gravité actuelle de la dépression.

How well did you know this?
1
Not at all
2
3
4
5
Perfectly
12
Q

Quelles sont les trois applications courantes de la validité critériée?

A
  • Critère réaliste externe
  • Groupes contrastés
  • Autre test
How well did you know this?
1
Not at all
2
3
4
5
Perfectly
13
Q

Pourquoi aurait-on recours à un test plutôt qu’au critère externe directement?

A
  • Parce que l’information sur le critère pourrait ne pas être disponible avant un certain temps, alors ue l’on veut prédire maintenant la position future d’une personne par rapport au critère.
  • Il peut être compliqué d’obtenir de l’information sur le critère.
How well did you know this?
1
Not at all
2
3
4
5
Perfectly
14
Q

Qu’est-ce qu’un coefficient de corrélation?

A

Un coefficient de corrélation exprime la validité d’un test; plus précisément il exprime la relation entre un test et un critère externe.

How well did you know this?
1
Not at all
2
3
4
5
Perfectly
15
Q

Qu’est-ce que la méthode des groupes contrastés?

A

Les groupes contrastés constituent la deuxième méthode de démonstration de la validité critériée. Ici, le critère est la composition du groupe. On souhaite démontrer que le test permet de différencier un groupe d’un autre.

Plus la différenciation entre les groupes est élevée, meilleure est la validité d’un test.

How well did you know this?
1
Not at all
2
3
4
5
Perfectly
16
Q

Pour quelles raisons utilise-t-on un autre test comme critère pour évaluer la validité critériée d’un nouveau test?

A

Parce que le nouveau test pourrait être plus court et moins cher que le test critère.

Les normes ou les processus d’établissement des scores du nouveau test pourraient être meilleures.

How well did you know this?
1
Not at all
2
3
4
5
Perfectly
17
Q

Qu’est ce que la validité convergente?

A

Elle exprime la relation de concordance entre un nouveau test et un test critère pour le construit qu’on tente de mesurer. On utilise une corrélation de Pearson.

How well did you know this?
1
Not at all
2
3
4
5
Perfectly
18
Q

Quels sont les facteurs influençant le coefficient de corrélation?

A

La linéarité, l’homogénéité du groupe et l’hétéroscédasticité.

  • Si la relation entre le test et le critère est non linéaire, la corrélation de Pearson sous-estimera le véritable degré de cette relation.
  • La validité peut être affectée si le groupe est trop homogène.
19
Q

Que veut dire le terme «atténuation»?

A

L’atténuation exprime la limite imposée à la validité par une fidélité imparfaite.

20
Q

Lorsqu’on examine la validité critériée, on doit aussi penser à la validité de la dénifition opérationnelle du critère. Quelle est-elle?

A

C’est la définition donnée au critère. Par exemple, on utilise la moyenne générale des étudiants de première année au cégep comme définition opérationnelle de la réussite au cégep. Dans quelle mesure cette définition opérationnelle convient-elle? Ce n’est qu’une définition possible de la réussite au cégep. Une autre encore pourrait être la participation aux activités hors programme.

21
Q

Qu’est-ce que la contamination du critère?

A
  • Situation dans laquelle les scores d’un test influent sur le critère dans une étude de validité critériée. Ex. Des cliniciens ont accès aux scores de 50 patients obtenus à l’Échelle de dépression de Cleveland sur lesquels ils fondent leurs évaluations. La corrélation entre le test et le critère s’en trouve ainsi augmentée.
  • ** Un critère est contaminé lorsque;
  • Les cliniciens ont accès aux résultats du test La corrélation entre le critère et test serait alors augmentée.
  • Les clinicien ont accès aux résultats du test – mais considère que l’outil est de piètre qualité. La corrélation serait alors diminuée.
  • La contamination du critère conduit habituellement à une augmentation de la corrélation entre le test et le critère.
22
Q

Que sont la validité convergente et la validité divergente (ou discriminante)?

A

La validité convergente renvoie à une corrélation relativement élevée entre le test et un certain critère mesurant le même construit que celui du test. (La validité de congruence en est une forme).

La validité divergente (ou discriminante) démontre que le test a une corrélation relativement faible (ou négative) avec des construits autres que celui qu’on souhaite mesurer.

  • Ces deux types de validité sont largement mesurés dans le domaine de la personnalité. Ex. p.119

Convergente : Corrélation (élevée) entre deux tests ou deux variables

Divergente : Corrélation faible positive ou négative avec un test mesurant un autre construit.
¤ Ex. Estime de soi et anxiété sociale

23
Q

Qu’est-ce qu’une matrice multitraits multiméthodes?

A
  • Technique d’examen des relations entre plusieurs variables mesurées de différentes manières. C’est une matrice faite pour analyser la validité de convegence et de divergence de plusieurs tests.
  • Son utilisation principale est de vérifier la validité convergente et divergente.

Explication de la matrice multitraits, p. 120-121

24
Q

Qu’est-ce que la corrélation multiple?

A

Faisant partie de la validité critériée, c’est le fait d’utiliser plusieurs tests pour prédire la valeur d’un critère. La corrélation multiple est le fait de prédire la valeur d’un critère sur la base d’une compinaison de deux ou plusieurs autres variables (ex, plusieurs tests).

Ex. On souhaite prédire la moyenne générale des étudiants de première année à partir de la combinaison d’un test d’admission, du rang au secondaire et d’un test de motivation scolaire.

25
Q

La corrélation multiple permet de déterminer quel type de validité?

A

La validité incrémentale.

26
Q

Qu’est-ce que la validité incrémentale ou incrémentielle?

A

La validité incrémentale concerne la quantité de données nouvelles et uniques qu’ajoute un test à la prédiction d’une variable. Elle augmente la validité par l’ajout d’un nouveau test.

  • Ex. : APGAR ou prématurité (date naissance) ou le faible poids à la naissance (poids) aide à prédire la présence TDAH.
27
Q

À quoi sert la théorie de la décision?

A

Méthode qui aide à prendre certaines décisions par l’analyse des effets quantitatifs des décisions.
Liée à la validité critériée.

28
Q

Qu’est-ce qu’un résultat approprié dans la théorie de la décision?

A

Les résultats qui se retrouvent dans le cadran supérieur droit et inférieur gauche, soit supérieurs au point de coupure du test et du critère ou inférieur au point de coupure du test et du critère.

29
Q

Qu’est-ce qu’un faux positif et un faux négatif?

A

Faux positifs : cadran inférieur droit : les cas dans lesquels les scores sont supérieurs au point de coupure du test, mais qui représente un échec par rapport au critère.

Faux négatifs : cadran supérieur gauche : les scores tombrent sous le point de coupure du test, , mais représentent une réussite par rapport au critère.

30
Q

Quels deux facteurs influent sur la proportion de résultats appropriés, de faux positifs et de faux négatifs?

A

1) Le premier est le degré de corrélation entre le test et le critère.
Une corrélation parfaite : que des résultats appropriés. Une corrélation nulle : la somme des fp et des fn sera égale à la somme des résultats appropriés.

2) Le seocnd facteur est l’emplacement du point de coupure du test. Un déplacement de ce point influe sur la proportion de fp et de fn.

31
Q

Qu’est-ce que la validité de construit?

A

Plus un test est valide, plus il va couvrir une grande étendue des dimensions du construit.

32
Q

Qu’est-ce que la sensibilité?

A

La sensibilité est le degré auquel un test permettra de définir un groupe critère. C’est le fait de sélectionner correctement les membres d’un groupe.

33
Q

Qu’est-ce que la spécificité?

A

La spécificité est le degré auquel le test détermine ou non les membres du groupe contraste. C’est le fait de ne pas sélectionner les membres appartenant à un autre groupe.

La sensibilité et la spécificité représentent toutes deux des «résultats appropriés».

34
Q

Deux facteurs influent sur la sensibilité et la spécificité?

A
  1. L’emplacement du point de coupure.

2. Le degré de séparation entre les groupes.

35
Q

Qu’est-ce qui détermine la position du point de coupure?

A

Ça dépend!

  • La gravité des conséquences si on accepte des «mauvais» candidats, soit les faux positifs.
  • La gravité du problème si on rejette des «bons» candidats, soit les faux négatifs.
  • Des facteurs pratiques peuvent aussi intervenir dans le choix : ex. le nombre de place disponible dans un programme de prévention.
36
Q

Qu’est-ce que la validité de construit?

A
  • est comme la validité de contenu.
  • construit = trait ou variable psychologique, construction théorique
  • vaste ensemble de méthodes utilisées pour appuyer la proposition selon laquelle le test mesure le construit ciblé.
37
Q

Quels sont les outils pour mesurer la validité de construit?

A
  • Alpha de Cronbach
  • Analyse factorielle
  • Processus de réponse
  • Effet des variables expérimentales
  • Changements développementaux
38
Q

Pourquoi la cohérence interne (alpha de cronbach) ne fournit qu’une preuve ambiguë et faible en matière de validité?

A

Une cohérence interne élevée indique qu’un construit est mesuré de façon fiable, mais d’autres preuves sont nécessaires pour vérifier que c’est bel et bien le bon construit qui est mesuré.

Il est considéré comme un préalable à la validité et non une preuve.

39
Q

Quels sont quelques-unes des principales façons d’analyser la validité de construit?

A
  • Structure interne ou Alpha de Cronbach
  • Analyse factorielle
  • Processus de réponse
  • Effet des variables expérimentales
  • Changements développementaux
40
Q

Décrivez le processus de réponse.

A
  • Une analyse de la manière dont les sujets répondent à un test.
  • Pas une preuve très solide de la validité du test.
41
Q

Qu’est-ce que l’étude des effet des variables expérimentales?

A

Pour analyser la validité d’un test, on fait passer le test et ensuite on soumet les sujets à une expérience pour ensuite faire repasser le test.
Ex. Le test d’anxiété de Scranton est administré à un groupe de 25 personnes. Celles-ci sont soumises à une situation anxiogène, puis le test est administré de nouveau. On s’attend à ce que les scores augmentent si le test mesure bel et bien l’anxiété.

42
Q

Une autre source d’information potentielle en matière de validité de construit réside dans les changements développementaux. Expliquez.

A

Lorsque le test reflète les changements développementaux, il a une meilleure validité. Ex. pour les tests d’aptitude et de rendement scolaire : Les résultats aux items reliés à la lecture et au calcul augmentent à mesure que l’enfant avance en âge.

43
Q

La méthode des groupes contrastés se rapproche de quels outils?

A
  • L’étude des changements développementaux

- L’étude des effets des variables expérimentales