Cours 6 / Validité 2/2 Flashcards

1
Q

Qu’elle sont les deux aspects fondamentaux de la validité ?

A

1- Ce qu’on mesure

2- le degré de précision de la mesure

How well did you know this?
1
Not at all
2
3
4
5
Perfectly
2
Q

De façon très générale à soit sert la validité ?

A

Permet de mesure le degré auxquels les scores sont supposés être. De façon globale, la validité d’une mesure réfère donc à la pertinence des inférences que l’on tire des résultats fournis par la mesure.

How well did you know this?
1
Not at all
2
3
4
5
Perfectly
3
Q

Par quoi la notion de validité peut-elle être influencé ?

A

Par plusieurs facteurs théoriques et pratiques, des mesures psychologiques…

How well did you know this?
1
Not at all
2
3
4
5
Perfectly
4
Q

Pourquoi il n’y a pas de définition absolu à la validité ?

A

Puisque cette validité dépend du contexte d’utilisation de cette mesure, dépend pourquoi elle doit être utiliser et à quoi elle va répondre.

How well did you know this?
1
Not at all
2
3
4
5
Perfectly
5
Q

Cette exemple comporte les éléments de la fidélité ou la validité ?
Par exemple, un thermomètre risque de fournir une mesure valide de la température de votre corps, mais invalide de votre compréhension de la méthodologie de la recherche.
C’est donc dire qu’une mesure n’est jamais valide en soi, mais c’est plutôt son utilisation spécifique qui est valide ou invalide.

A

Validité.

How well did you know this?
1
Not at all
2
3
4
5
Perfectly
6
Q

Classiquement, on distingue trois grandes méthodes de validation d’une mesure, dans un contexte donné, quel sont-elles ?

A

-Validation de contenu: qui porte en fait sur la pertinence et la couverture des contenus. -
Validation de construit: cohérence avec la «structure théorique».
-Validation critériée ou pragmatique: relation avec un critère externe.

How well did you know this?
1
Not at all
2
3
4
5
Perfectly
7
Q

Qu’elle type de validité ?
Une méthode qui consiste à analyser le contenu d’une mesure afin de s’assurer qu’elle est représentative en tant qu’échantillon du domaine de comportements à mesurer.

A

Validité de contenu

How well did you know this?
1
Not at all
2
3
4
5
Perfectly
8
Q

La question de la représentativité peut se diviser en deux questions, dans la validité de contenu, qu’elle sont les deux questions ?

A

1- À quel point chaque observation qui forme la mesure appartient à l’univers du construit défini?
2- À quel point l’ensemble des observations représente tous les aspects de cet univers?

How well did you know this?
1
Not at all
2
3
4
5
Perfectly
9
Q

Qu’est que la validité apparente dans la validité de contenu ?

A

La validité apparente correspond à ce que la mesure semble mesurer, i.e. est-ce que la mesure semble valide aux yeux des examinés, du personnel administratif, des observateurs non initiés, etc.

How well did you know this?
1
Not at all
2
3
4
5
Perfectly
10
Q

Vrai ou faux
dans la validité de contenue la représentativité de la mesure ne peut se juger que par rapport à la définition donnée au construit mesuré ?

A

Vrai.

How well did you know this?
1
Not at all
2
3
4
5
Perfectly
11
Q

Comment peut-ont augmenter la validité apparente dans la validité de contenu ?

A

On peut augmenter la validité apparente en modifiant quelque peu les observations afin qu’elles paraissent plus pertinentes aux examinés.

How well did you know this?
1
Not at all
2
3
4
5
Perfectly
12
Q

Qu’elles sont les quatre 4 étape de la validations de contenu ?

A

1- La détermination des utilisations prévues de la mesure
(Quels sont les buts de la mesure ? À quelle clientèle est-elle destinée ?)
2- La définition de ce que l’on souhaite mesurer
3- La création des observations
4- L’évaluation des observations

How well did you know this?
1
Not at all
2
3
4
5
Perfectly
13
Q

En quoi comporte étapes 2 de la validation de contenu ?

A

Habituellement, le point de départ d’une mesure est un objectif relativement vague et général qu’il faut opérationnaliser.

(1) Il faut donc déterminer soit la portée de la construction mentale (construit hypothétique) ou l’étendue du domaine mesuré (comportements).
(2) L’élaboration du plan de la structure de la mesure sera guidée soit par la théorie dans le cas de la mesure d’un construit mental ou soit par une analyse de contenu de domaine de comportements dans le cas de la mesure d’un domaine de comportements.

How well did you know this?
1
Not at all
2
3
4
5
Perfectly
14
Q

En quoi comporte étapes 3 de la validation de contenu ?

A

Lorsqu’on a déterminé le format, le niveau de difficulté et le nombre d’observations à créer « devis de rédaction », on passe alors à la première rédaction.

How well did you know this?
1
Not at all
2
3
4
5
Perfectly
15
Q

En quoi comporte étapes 4 de la validation de contenu ?

A

1- Confirmation de la représentativité conceptuelle de la banque initiale d’observations grâce à des jugements d’experts sur la pertinence et la représentativité des observations, puis révision de la banque initiale s’il y a lieu.
2- Mise à l’essai des observations, puis analyse qualitative des observations à partir des jugements des individus mesurés sur la clarté et la signification des observations. Enfin, sélection finale d’observations adéquates.

How well did you know this?
1
Not at all
2
3
4
5
Perfectly
16
Q

De qu’elle type de validité s’agit-il ?
Une méthode qui s’applique à tous les cas où il existe une mesure indépendante et directe de la caractéristique que la mesure est supposée mesurer. On appelle cette mesure: critère (externe). La méthode consiste à calculer la corrélation entre le résultat à la mesure et le critère.

A

La validation pragmatique ou critériée

How well did you know this?
1
Not at all
2
3
4
5
Perfectly
17
Q

qu’est qui est présupposer dans la validité pragmatique et critériée ?

A

Il est important de noter que cette méthode de validation présuppose l’existence du critère.
Par conséquent, la mesure ne mesure pas un construit purement théorique, mais a plutôt pour but de prédire où se situe l’examiné par rapport à ce critère.

How well did you know this?
1
Not at all
2
3
4
5
Perfectly
18
Q

Ces exemples font recours à qu’elle type de validité ?
Test d’aptitudes mécaniques -> performance ultérieure comme machiniste; Test d’aptitudes scolaire au secondaire -> résultats scolaires au collégial; Test de tendances névrotiques -> diagnostic clinique professionnel.

A

La validation pragmatique ou critériée

19
Q

Qu’elles sont les deux types de validations critériée ?

A

1- la validation concomitante (lorsque l’administration de la mesure et la mesure du critère sont simultanées)
2- la validation prédictive (lorsque l’administration de la mesure précède d’un certain intervalle de temps la mesure du critère).

20
Q

Lorsque la mesure à valider sera éventuellement utilisée à des fins de diagnostic, c’est-à-dire à la mesure d’un état actuel. Par exemple, un test de connaissances en pilotage d’avions commerciaux. Qu’elles types de validité critériée sera utilisé ?

A

La méthode de validation concomitante

21
Q

lorsque la mesure à valider sera éventuellement utilisée à des fins de pronostic, c’est-à-dire que la mesure servira à prédire un état futur. Par exemple, un test d’aptitudes au pilotage (utilisé avant un cours).Qu’elles types de validité critériée sera utilisé ?

A

La validation prédictive

22
Q

Dans la validité pragmatique/critériée il s’avère parfois que l’intervalle de temps qui sépare l’administration de la mesure est trop long, que doit-ont faire ?

A

On s’en remet alors à la validation concomitante en contrastant la performance d’échantillons «pré-sélectionnés», i.e. composés d’examinés pour lesquels les données critériées sont déjà disponibles.

PS : Par exemple, en passant la mesure d’aptitudes au pilotage à un groupe de pilotes et à un groupe de non-pilotes.

23
Q

Il existe quelques grandes catégories de critères qui sont souvent considérés lors de l’analyse de la validité de certains types de mesures, quel sont-ils ? (7)

A
  • La performance académique
  • La performance à un cours spécialisé
  • Rendement au travail
  • Groupes contrastés (critère composite)
  • Diagnostic psychiatrique
  • Jugements appréciatifs
  • Liens avec les tests existants
24
Q

Qu’est que les performance académique dans la méthode de validation prédictive?

A

-La performance académique : Notes scolaires, promotion de classe, obtention d’un diplôme, niveau
d’éducation atteint (chez les adultes), etc. Utilisé pour mesurer la validité des tests d’«intelligence générale», des tests d’aptitudes scolaires.

25
Q

Qu’est que La performance à un cours spécialisé dans la méthode de validation prédictive?

A

Appréciations par les instructeurs, achèvement vs abandon du cours, etc. Utilisés pour mesurer la validité de tests visant à mesurer des aptitudes spécifiques (aptitudes mécaniques, de pilotage, etc.).

26
Q

Qu’est que le rendement au travail dans la méthode de validation prédictive ?

A

Même fins que dans l’exemple précédent (i.e. performance à un cours spécialisé). La standardisation est plus difficile car il peut y avoir beaucoup de différences d’un lieu de travail à l’autre.
63

27
Q

Qu’est que les groupes contrastés dans la méthode validation prédictive ?

A
  • Groupes contrastés (critère composite) :
  • Par exemple, un test d’aptitudes musicale -> comparaison entre les élèves du conservatoire de musique et ceux des autres disciplines.
  • Cette méthode est souvent utilisée pour «valider» les tests de personnalité. Par exemple, Leadership -> comparaison entre les directeurs d’entreprise et les employés de bureau.
28
Q

Qu’est que le diagnostic de psychiatrie dans la méthode validation prédictive ?

A

-Diagnostic psychiatrique :
Le diagnostic sert de critère pour établir la validité de certains tests de personnalité qui pourraient éventuellement faciliter le travail diagnostic.

29
Q

Qu’est que le jugement appréciatifs dans la méthode de validation prédictives ?

A

-Jugements appréciatifs :
-Les jugements appréciatifs servent surtout à valider les tests de personnalité.
-Pour certains types de «traits», les appréciations de l’entourage de l’examiné sont possiblement le meilleur critère. Par exemple, votre conjoint est en mesure de porter un jugement sur votre «niveau de libido».
C’est comme le critère précédent (i.e. «diagnostic psychiatrique»), mais ce sont les personnes de l’entourage immédiat qui agissent comme «experts».

30
Q

Qu’est que les liens avec tests existants dans la méthode de validation prédictives ?

A
  • Liens avec les tests existants :
  • Lorsqu’on élabore un nouveau test pour remplacer un test reconnu, mais lourd à administrer, le résultat à ce dernier peut être vu comme étant un «critère» pour établir la validité du nouveau test.
  • On a ici un certain recoupement avec la validation de construit.
31
Q

Qu’elle type de validité ?
N’est pas une méthode unique et explicite pour établir la validité d’une mesure, mais bien un ensemble de méthodes qui visent toutes le même but: établir jusqu’à quel point la mesure fournit une mesure adéquate du construit théorique qu’on prétend qu’elle mesure.

A

La validation de construit

32
Q

Vrai ou faux.
La validité de construit d’une mesure ne pourra se faire qu’à la lumière d’une définition claire et explicite du construit qu’on prétend mesurer.

A

vrai

33
Q

qu’est Il est fondamental de comprendre dans la validation de construit ?

A

Que la validité de construit d’une mesure est ancrée dans un réseau d’explications et de justifications théoriques.

34
Q

Qu’elles sont les deux éléments impliquer le processus de validation de construit ?

A

la «qualité» de la mesure, elle implique également la «qualité» de la construction théorique sous-jacente.

PS : On peut difficilement envisager la mesure valide d’un construit théorique issu d’une théorie farfelue (p. ex. «votre habileté à devenir invisible»).

35
Q

Qu’elles sont les deux buts dans le calcul de la validité de construit ?

A

1-Montrer la présence de corrélation entre la mesure et d’autres mesures qui sont supposées mesurer le même construit ou des construits théoriquement liés;
2- Montrer l’absence de corrélation entre la mesure et d’autres mesures qui sont supposées mesurer des construits théoriquement indépendants (preuves négatives de validité).

36
Q

Ont a recours à quoi pour monter la validité de certain mesure dans la validité de construit ?

A

Pour appuyer la validité de construit d’une certaine mesure, on a recours au calcul de plusieurs corrélations entre les scores obtenus à cette mesure et ceux fournis par un ensemble d’autres mesures.

37
Q

Certains auteurs de tests considèrent les coefficients d’homogénéité comme quoi ?

A

Des indices de la validité de construit.

38
Q

Les coefficients d’homogénéité sont des indices de quoi ?

A

Toutefois, les coefficients d’homogénéité sont des indices de cohérence de la mesure (qui ne sont pas équivalents à des facteurs) et, par conséquent, ils ne peuvent être considérés que comme des indices très indirects et peu informatifs de la validité de construit.

39
Q

Comment appelle-t-on cette technique présenté ci-dessous?
On a déjà précisé ci-dessus le fait que les scores à une mesure doivent démontrer des corrélations élevées avec d’autres variables avec lesquelles elles doivent théoriquement être reliées.

A

On appelle cette technique particulière: la validation convergente.

Par exemple, montrer qu’un test de «raisonnement numérique» est corrélé avec un test d’«habiletés arithmétiques».

40
Q

Comment ce nomme ce processus ?
on doit trouver des corrélations nulles (ou faibles) avec les autres variables avec lesquelles elles ne doivent pas, en principe, être reliées. Par exemple, montrer qu’un test de «raisonnement numérique» est peu (ou même, pas) corrélé avec un test de «compréhension de texte».

A

La validation discriminante

41
Q

De quoi s’agit-il ?
Elles reposent toutes sur la démonstration des liens entre la performance à la mesure et d’autres «observations» de la caractéristique que l’on tente de mesurer.

A

Coefficient de validité

42
Q

Qu’est qui peut influencer le degré de validité de la mesure dans le coefficient de validité ?

A

Plusieurs facteurs, associés principalement aux spécificités de l’échantillon de validation, peuvent influencer le degré de validité d’une mesure.

43
Q

De quoi devrait être accompagner chaque présentation d’un coefficient de validité ?

A

Par conséquent, toute présentation d’un coefficient de validité devrait être accompagnée d’une description détaillée du groupe auprès duquel ce coefficient fut obtenu (tout comme pour les coefficients de fidélité).

44
Q

Vrai ou faux.
Ce coefficient peut être appliqué, en termes d’indice de validité, qu’auprès de populations comparables à l’échantillon de validation.

A

Faux.