Cours 10 Flashcards

1
Q

Un score à un test psychologique n’est utile que si … ?

A

il est relié à quelque critère externe ou construit théorique ayant un certain intérêt (dans quelle mesure les différences individuelles quant aux scores obtenus reflètent des différences pertinentes quant à une question posée)

How well did you know this?
1
Not at all
2
3
4
5
Perfectly
2
Q

Quels sont les 2 aspects fondamentaux que la validation d’un test à pour but de préciser?

A

1) Ce que le test mesure

2) avec quel degré de précision il le mesure

How well did you know this?
1
Not at all
2
3
4
5
Perfectly
3
Q

De façon très général qu’est-ce que la validité d’un test?

A

Réfère au degré avec lequel un test mesure ce qu’il est supposé mesurer

How well did you know this?
1
Not at all
2
3
4
5
Perfectly
4
Q

Vrai ou faux?
Plusieurs facteurs, théoriques et pratiques, justifient l’utilisation des tests psychologiques et chacun de ceux-ci influence différemment la notion de validité

A

Vrai

How well did you know this?
1
Not at all
2
3
4
5
Perfectly
5
Q

La validité d’un test dépend de quoi?

A

1) du contexte d’utilisation de ce test
2) des fins pour lesquelles il est utilisé
3) des questions auxquelles il tente de répondre

How well did you know this?
1
Not at all
2
3
4
5
Perfectly
6
Q

Vrai ou faux?

Il n’y a pas de définition absolue de la validité d’un test

A

Vrai

How well did you know this?
1
Not at all
2
3
4
5
Perfectly
7
Q

Vrai ou faux?

Un test n’est jamais valide en soi, mais c’est plutôt son utilisation spécifique qui est valide ou invalide

A

Vrai

How well did you know this?
1
Not at all
2
3
4
5
Perfectly
8
Q

De façon globale, la validité d’un test réfère à quoi ?

A

À la pertinence des inférences que l’on tire des résultats fournis par le test

How well did you know this?
1
Not at all
2
3
4
5
Perfectly
9
Q

Quelles sont les 3 grandes méthodes de validation d’un test, dans un contexte donné?

A

1) Validation de contenu: (que l’on a étudié lors de l’analyse des items) et qui porte en fait sur la pertinence et la couverture des contenus.
2) Validation de construit: cohérence avec la «structure théorique»
3) Validation critériée ou pragmatique: relation avec un critère externe

How well did you know this?
1
Not at all
2
3
4
5
Perfectly
10
Q

Dans quel cas utilise-t-on la validité critériée?

A

La validation pragmatique ou critériée est une méthode qui s’applique à tous les cas où il existe une mesure indépendante et directe de la caractéristique que le test est supposé mesurer

How well did you know this?
1
Not at all
2
3
4
5
Perfectly
11
Q

Comment on appelle une mesure indépendante et directe de la caractéristique que le test est supposé mesurer ?

A

Critère (externe)

How well did you know this?
1
Not at all
2
3
4
5
Perfectly
12
Q

En quoi consiste la méthode de validité critériée?

A

La méthode consiste à calculer la corrélation entre le résultat au test et le critère

How well did you know this?
1
Not at all
2
3
4
5
Perfectly
13
Q

Nommes 3 exemples de tests utilisant la validité critériée.

A

1) Test d’aptitudes mécaniques -> performance ultérieure comme machiniste
2) Test d’aptitudes scolaires au secondaire -> résultats scolaires au collégial
3) Test de tendances névrotiques -> diagnostic clinique professionnel

How well did you know this?
1
Not at all
2
3
4
5
Perfectly
14
Q

Le test ne mesure pas un construit purement théorique, mais a plutôt pour but … ? (validité critériée)

A

de prédire où se situe l’examiné par rapport à ce critère

How well did you know this?
1
Not at all
2
3
4
5
Perfectly
15
Q

La méthode de validation critériée présuppose l’existence de quoi?

A

Du critère

How well did you know this?
1
Not at all
2
3
4
5
Perfectly
16
Q

Quels sont les 2 type de validation critériée et quand sont-ils utilisés?

A

1) la validation concomitante (lorsque l’administration du test et la mesure du critère sont simultanées)
2) la validation prédictive (lorsque l’administration du test précède d’un certain intervalle de temps la mesure du critère)

How well did you know this?
1
Not at all
2
3
4
5
Perfectly
17
Q

Quand est-ce que la méthode de validation concomitante s’avère appropriée?

A

Lorsque le test à valider sera éventuellement utilisé à des fins de diagnostic, c’est-à-dire à la mesure d’un état actuel.

How well did you know this?
1
Not at all
2
3
4
5
Perfectly
18
Q

Nomme un exemple où la méthode de validation concomitante est appropriée.

A

Un test de connaissances en pilotage d’avions commerciaux chez des pilotes commerciaux.

How well did you know this?
1
Not at all
2
3
4
5
Perfectly
19
Q

Quand est-ce que la méthode de validation prédictive s’avère appropriée?

A

Lorsque le test à valider sera éventuellement utilisé à des fins de pronostic, c’est-à-dire que le test servira à prédire un état futur.

How well did you know this?
1
Not at all
2
3
4
5
Perfectly
20
Q

Nomme un exemple où la méthode de validation prédictive est appropriée.

A

Un test d’aptitudes au pilotage (utilisé avant un cours)

How well did you know this?
1
Not at all
2
3
4
5
Perfectly
21
Q

Qu’arrive-t-il lorsque l’intervalle de temps qui sépare l’administration du test de la mesure du critère est trop long? (lors de l’étape de validation)

A

On s’en remet alors à la validation concomitante en contrastant la performance d’échantillons «pré-sélectionnés», i.e. composés d’examinés pour lesquels les données critériées sont déjà disponibles. (Par exemple, en passant le test d’aptitudes au pilotage à un groupe de pilotes et à un groupe de non-pilotes.)

How well did you know this?
1
Not at all
2
3
4
5
Perfectly
22
Q

Nommes les 7 grandes catégories de critères qui sont souvent considérés lors de l’analyse de la validité de certains types de tests et leurs utilités.

A

1) La performance académique : Utilisé pour mesurer la validité des tests d’«intelligence générale», des tests d’aptitudes scolaires.
2) La performance à un cours spécialisé : Utilisés pour mesurer la validité de tests visant à mesurer des aptitudes spécifiques.
3) Rendement au travail : Mêmes fins que dans l’exemple précédent. La standardisation est plus difficile car il peut y avoir beaucoup de différences d’un lieu de travail à l’autre
4) Groupes contrastés (critère composite) : Cette méthode est souvent utilisée pour «valider» les tests de personnalité.
5) Diagnostic psychiatrique : Le diagnostic sert de critère pour établir la validité de certains tests de personnalité qui pourraient éventuellement faciliter le travail diagnostic.
6) Les jugements appréciatifs servent surtout à valider les tests de personnalité. -Pour certains types de «traits», les appréciations de l’entourage de l’examiné sont possiblement le meilleur critère. (C’est comme le critère précédent, mais ce sont les personnes de l’entourage immédiat qui agissent comme «experts».)
7) Liens avec les tests existants : Lorsqu’on élabore un nouveau test pour remplacer un test reconnu, mais lourd à administrer, le résultat à ce dernier peut être vu comme étant un «critère» pour établir la validité du nouveau test. (On a ici un certain recoupement avec la validation de construit.)

How well did you know this?
1
Not at all
2
3
4
5
Perfectly
23
Q

Vrai ou faux?

La validation de construit est une méthode unique et explicite pour établir la validité d’un test

A

Faux

How well did you know this?
1
Not at all
2
3
4
5
Perfectly
24
Q

Qu’est-ce que la validité de construit? (but)

A

Ensemble de méthodes qui visent toutes le même but: établir jusqu’à quel point le test fournit une mesure adéquate du construit théorique qu’on prétend qu’il mesure.

How well did you know this?
1
Not at all
2
3
4
5
Perfectly
25
Q

La validité de construit d’un test ne pourra se faire qu’à la lumière d’une définition claire et explicite du … ?

A

construit qu’on prétend mesurer.

How well did you know this?
1
Not at all
2
3
4
5
Perfectly
26
Q

Dans quoi est ancré la validité de construit d’un test?

A

Ancrée dans un réseau d’explications et de justifications théoriques

How well did you know this?
1
Not at all
2
3
4
5
Perfectly
27
Q

Comment s’établit la validité de construit?

A

D’abord en montrant la correspondance entre la théorie et certains faits qu’elle prédit.

How well did you know this?
1
Not at all
2
3
4
5
Perfectly
28
Q

le processus de validation de construit implique plus que la «qualité» de la mesure, elle implique également quoi?

A

La «qualité» de la construction théorique sous-jacente.

*On peut difficilement envisager la mesure valide d’un construit théorique issu d’une théorie farfelue (p. ex. «votre habileté à devenir invisible»).

How well did you know this?
1
Not at all
2
3
4
5
Perfectly
29
Q

Comment doit être la mesure du construit lorsque le construit mesuré est intrinsèquement relié à une ou plusieurs caractéristiques de l’individu ?

A

Doit être sensible à cette relation

(Un exemple clair est certainement celui de la mesure de l’«intelligence» qui doit se développer avec l’âge de l’enfance à l’adolescence. On peut également penser à d’autres caractéristiques, selon la théorie à laquelle appartient le construit. Par exemple, un test de «masculinité-féminité» devrait montrer une relation entre les scores qu’il fournit et le sexe des examinés)

30
Q

Que doit-on démontrer pour appuyer la validité de construit d’une échelle ordinale?

A

Il est essentiel de démontrer que les résultats respectent intégralement la séquence ordinale supposée.

31
Q

De façon générale, que fait-on pour appuyer la validité de construit d’un certain test?

A

on a recours au calcul de plusieurs corrélations entre les scores obtenus à ce test et ceux fournis par un ensemble d’autres tests.

32
Q

Le calcul de plusieurs corrélations entre les scores obtenus à ce test et ceux fournis par un ensemble d’autres tests visent 2 buts aussi important l’un que l’autre. Lesquels?

A

1) Montrer la présence de corrélation entre le test et d’autres tests qui sont supposés mesurer le même construit ou des construits théoriquement liés
2) Montrer l’absence de corrélation entre le test et d’autres tests qui sont supposés mesurer des construits théoriquement indépendants (preuves négatives de validité)

33
Q

Certains auteurs de tests considèrent les ________ comme des indices de la validité de construit.

A

Coefficients d’homogénéité

34
Q

Le calcul des coefficients d’homogénéité est fondé sur quoi? Le score total est alors vu comme quoi?

A

le calcul de ces coefficients est fondé sur la corrélation entre chacun des items du test et le score total au test. Le score total est alors vu comme la meilleure mesure du construit que le test est supposé mesurer.

35
Q

Quelle technique peut être utilisée pour établir la validité des sous-tests qui forment une batterie de tests pour laquelle il existe un score global?

A

Les coefficients d’homogénéité

Utilisés par exemple, tous les sous-tests (p. ex. vocabulaire, calcul, …) de certains tests d’intelligence devraient être corrélés avec le score total au test (souvent appelé «Q.I. global»).

36
Q

Vrai ou faux?
Les coefficients d’homogénéité sont des indices de cohérence de la mesure (qui sont équivalents à des facteurs) et, par conséquent, ils ne peuvent être considérés que comme des indices très directs et très informatifs de la validité de construit.

A

Faux

Les coefficients d’homogénéité sont des indices de cohérence de la mesure (qui ne sont PAS équivalents à des facteurs) et, par conséquent, ils ne peuvent être considérés que comme des indices très INDIRECTS et PEU informatifs de la validité de construit.

37
Q

Lorsque plusieurs tests sont administrés à peu près simultanément, le nombre de coefficients de corrélation calculables diminue ou augmente très rapidement ?

A

Augmente

38
Q

Qu’est-ce que l’analyse factorielle et que facilite-t-elle?

A

L’analyse factorielle est une méthode statistique sophistiquée qui permet de faciliter l’interprétation d’une telle structure de coefficients de corrélation.

39
Q

Globalement que permet l’analyse factorielle?

A

Globalement, elle permet de mettre ensemble les tests qui semblent mesurer à peu près le même construit et de distinguer les tests qui mesurent des construits distincts (i.e. peu corrélés).

40
Q

Comment appelle-t-on les construits extraits de façon empirique avec l’analyse factorielle?

A

Facteurs

41
Q

Qu’est-ce que le coefficient de validité factorielle?

A

Le coefficient de corrélation calculé entre le score à un certain test et le score factoriel correspondant (les saturations).

42
Q

Qu’est-ce que la validité convergente?

A

Les scores à un test doivent démontrer des corrélations élevées avec d’autres variables avec lesquelles ils doivent théoriquement être reliés. (Par exemple, montrer qu’un test de «raisonnement numérique» est corrélé avec un test d’«habiletés arithmétiques».)

43
Q

Qu’est-ce que la validité discriminante?

A

Trouver des corrélations nulles (ou faibles) avec les autres variables avec lesquelles ils ne doivent pas, en principe, être reliés. (Par exemple, montrer qu’un test de «raisonnement numérique» est peu (ou même, pas) corrélé avec un test de «compréhension de texte».)

44
Q

Qu’est-ce que la méthode multitraits/multiméthodes proposée par Campbell et Fiske (1959) ?

A

une méthode très générale qui permet d’analyser en détail les qualités psychométriques de plusieurs tests.

45
Q

La méthode multitraits/multiméthodes permet d’étudier simultanément quoi? (3)

A

1) La fidélité
2) la validité convergente
3) la validité discriminant

46
Q

En quoi consiste la méthode multitraits/multiméthodes ?

A

La méthode consiste à mesurer deux ou plusieurs construits (appelés ici «traits psychologiques») théoriquement distincts à l’aide de deux ou plusieurs méthodes différentes et à calculer les différents coefficients de corrélation possibles

47
Q

Décris l’analyse à faire dans la méthode multitraits/multiméthodes.

A

L’analyse à faire est de comparer:
-Les coefficients obtenus en mesurant le même construit « D ou A » à l’aide de différentes méthodes « 1 et 2 » (validation convergente)
ET
-Les coefficients obtenus en mesurant différents construits « D et A » à l’aide de la même méthode « 1 ou 2 » ou des méthodes différentes « 1 et 2 » (validation discriminante)

48
Q

Qu’est-ce que ça signifie si les coefficients de validité discriminante “les F et les TF” sont plus élevé que les coefficients de validité convergente “les E” ?

A

Les différences individuelles observées seraient attribuables à la méthode utilisée au lieu du «construit» que l’on suppose mesurer.

49
Q

Vrai ou faux?
Les coefficients de validité convergente « les E » sont toujours plus élevés que tous les coefficients de validité discriminante « les F et les TF ».

A

Vrai,
sinon, les différences individuelles observées seraient attribuables à la méthode utilisée au lieu du «construit» que l’on suppose mesurer.

50
Q

Dans la méthode multitraits/multiméthodes, à quoi correspond la fidélité?

A

La fidélité correspond au degré d’accord entre deux mesures d’un même trait obtenues à l’aide de méthodes maximalement apparentées (tels un même test ou les versions parallèles d’un même test) « les r de la ligne diagonale »

51
Q

Dans la méthode multitraits/multiméthodes, à quoi correspond la validité convergente (de construit)?

A

La validité convergente (de construit) correspond au degré d’accord entre deux mesures d’un même trait obtenues à l’aide de méthodes maximalement différentes « les E ».

52
Q

Vrai ou faux?
La fidélité et la validité peuvent être vues comme les deux extrêmes d’un même continuum quant aux méthodes utilisées « apparentés vs différentes » pour les mettre en évidence.

A

Vrai

53
Q

Qu’est-ce que la continuité entre fidélité et validité explique peut-être?

A

pourquoi il est parfois difficile de déterminer si telle ou telle méthode contribue plus à appuyer la fidélité ou la validité d’un certain test.

54
Q

Lorsqu’on illustre la fidélité et la validité sur un continuum, il est plus facile de comprendre quoi?

A

Que la fidélité est un prérequis à la validité.

55
Q

Lorsqu’un construit est bien ancré dans un certain modèle théorique, celui-ci devrait produire des hypothèses quant à quoi?

A

aux différences individuelles par rapport au construit.

56
Q

Vrai ou faux?
Parmi les hypothèses quant aux différences individuelles par rapport au construit, certaines peuvent être testées expérimentalement.

A

Vrai

57
Q

À quoi contribue la vérification expérimentale d’une hypothèse à propos d’un construit ?

A

Contribue à la validité de construit du test qui prétend le mesurer.
(Par exemple, la validité de construit d’un «test de dépression» sera renforcée si l’on montre que les résultats à ce test changent radicalement pour ceux qui suivent un certain traitement «anti-dépressif», alors qu’ils ne changent pas pour les membres du groupe contrôle)

58
Q

Comment la recherche en psychologie fondamentale peut-elle contribuer à la compréhension de ce qu’un test mesure?

A

Il s’agit d’analyser en détail les «processus» qui interviennent lorsque l’examiné répond au test et qui déterminent sa performance. Des manipulations expérimentales de la tâche elle-même peuvent apporter plusieurs informations.
(Par exemple, on peut systématiquement manipuler le mode de présentation des questions, les consignes, etc. afin d’en déterminer l’impact sur la performance des examinés.)

59
Q

Quelle est la manière la plus riche d’identifier correctement «ce qu’un test mesure» ?

A

La validation de construit

60
Q

Vrai ou faux?

La validité de construit est la manière la plus délicate d’établir la validité de ce test.

A

Vrai,

N’oublions pas qu’un «construit» est, par définition, inaccessible et que la validité «de construit» du test qui prétend en donner une mesure exacte ne peut être établie que par une accumulation progressive d’«appuis indirects» (plutôt que par des preuves directes).

61
Q

Pourquoi est-ce que les coefficients de validité prennent la forme de coefficients de corrélation?

A

Parce que toutes les démarches pour établir la validité d’un test reposent sur la démonstration des liens entre la performance au test et d’autres «observations» de la caractéristique que l’on tente de mesurer.

62
Q

De quoi devrait être accompagné toute présentation d’un coefficient de validité ?

A

d’une description détaillée du groupe auprès duquel ce coefficient fut obtenu (tout comme pour les coefficients de fidélité).

63
Q

Plusieurs facteurs, associés principalement aux spécificités de __________, peuvent influencer le degré de validité d’un test.

A

de l’échantillon de validation

64
Q

Le coefficient de validité ne peut être appliqué, en termes d’indice de validité, qu’auprès de qui?

A

populations comparables à l’échantillon de validation.

65
Q

Un même test peut-il mesurer différentes caractéristiques pour différents groupes d’examinés?

A

Oui,
Par exemple, un test d’aptitudes académiques prédit bien la performance ultérieure des collégiens à l’université, mais, chez les candidats «adultes», il est d’abord relié au temps pris à compléter leur diplôme.

66
Q

Vrai ou faux?
Il est possible qu’un test s’avère valide pour une certaine population, mais pas ou peu valide pour d’autres populations.

A

Vrai
Par conséquent, le manuel technique devrait toujours préciser pour quelles populations spécifiques le test peut être considéré comme valide.

67
Q

«Toutes choses étant égales par ailleurs», comment est affecté un coefficient de corrélation lorsqu’on restreint l’étendue de la distribution des scores mis en corrélation?

A

Le coefficient de corrélation est affecté à la baisse.

68
Q

Une réduction d’étendue des scores a également un impact sur les coefficients de validité (lorsque ces derniers sont présentés sous forme de corrélations). Cet impact est à la hausse ou à la baisse?

A

À la baisse,

Comme pour le cas de la fidélité

69
Q

le calcul du coefficient de corrélation r n’est justifié que si la relation entre les deux mesures impliquées est ________.

A

Linéaire

70
Q

Si la relation entre les 2 mesures impliquées n’est pas linéaire, comment en est affecté le coefficient de validité?

A

La valeur de ce coefficient est atténuée et peut laisser supposer un certain manque de validité.

71
Q

Pour éviter des problèmes de relations non-linéaires qu’est-il préférable de faire?

A

De toujours observer le diagramme de corrélation pour vérifier la forme de la relation plutôt que de calculer machinalement un coefficient r.