Cours 9 - La validité Flashcards

1
Q

définition générale de la validité

A

= le DEGRÉ avec lequel un test mesure ce qu’il prétend mesurer, et cela seulement!

How well did you know this?
1
Not at all
2
3
4
5
Perfectly
2
Q

V/F ds la réalité, on peut utiliser le tout ou rien ds la validité

A

FAUX, c’est un DEGRÉ

How well did you know this?
1
Not at all
2
3
4
5
Perfectly
3
Q

pourquoi procéder au processus de validation?

A

plrs instruments de mesure ne permettent pas d’observer directement le concept qu’on cherche à étudier

How well did you know this?
1
Not at all
2
3
4
5
Perfectly
4
Q

définition processus de validation

A

= processus d’accumulations de preuves (d’évidences) de validité

How well did you know this?
1
Not at all
2
3
4
5
Perfectly
5
Q

exemples de mesures directes

A

poids, grandeur

How well did you know this?
1
Not at all
2
3
4
5
Perfectly
6
Q

exemples de mesures indirectes

A

motivation, personnalité, intelligence

How well did you know this?
1
Not at all
2
3
4
5
Perfectly
7
Q

V/F quand on s’assure que l’instrument se rapporte uniquement à l’agressivité, ça veut dire pas de frustration, de colère, d’impulsivité, de dangerosité, etc.

A

VRAI, seulement agressivité

How well did you know this?
1
Not at all
2
3
4
5
Perfectly
8
Q

ce que la validité ne concerne pas (1)

A

l’instrument de mesure

How well did you know this?
1
Not at all
2
3
4
5
Perfectly
9
Q

ce que la validité concerne (2)

A

1- l’interprétation des résultats de ses items

2- le contexte de son utilisation (au test)

How well did you know this?
1
Not at all
2
3
4
5
Perfectly
10
Q

pourquoi la validité concerne l’interp des résultats?

A

le processus de validation dét le niv de certitude qu’on a P/R aux inférences qu’on fait en s’appuyant sur les résultats

How well did you know this?
1
Not at all
2
3
4
5
Perfectly
11
Q

pourquoi la validité concerne le contexte de son utilisation?

A

on doit préciser les preuves de validité avec telle clientèle et sous telles conditions

How well did you know this?
1
Not at all
2
3
4
5
Perfectly
12
Q

l’évaluation de la validité est…

A

…un processus continu d’accumulation de preuves ou d’évidences

How well did you know this?
1
Not at all
2
3
4
5
Perfectly
13
Q

V/F le test peut être valide à 100%

A

FAUX

How well did you know this?
1
Not at all
2
3
4
5
Perfectly
14
Q

pourquoi un test ne peut pas être valide à 100%?

A

car c’est une question de DEGRÉ selon les indices de validité vérifiés

How well did you know this?
1
Not at all
2
3
4
5
Perfectly
15
Q

quelles sont les catégories de techniques destinées à recueillir des preuves (3)?

A

1- validation de contenu
2- validation pragmatique
3- validation de construit

How well did you know this?
1
Not at all
2
3
4
5
Perfectly
16
Q

définition validation de contenu

A

= capacité d’un instrument à capturer (saisir) les aspects de contenu pour lesquels il a été conçu, et ceux-là seulement

How well did you know this?
1
Not at all
2
3
4
5
Perfectly
17
Q

que faut-il s’assurer à propos du contenu des items dans la validation de contenu?

A

que les items forment un échan des items imp qui représ les contenus (création d’un pool d’items)

How well did you know this?
1
Not at all
2
3
4
5
Perfectly
18
Q

quand examine-t-on la validation de contenu?

A

lors de la construction de l’instrument de mesure (choix des contenus des items)

How well did you know this?
1
Not at all
2
3
4
5
Perfectly
19
Q

comment est estimé la validation de contenu?

A

par la méthode des juges-experts

How well did you know this?
1
Not at all
2
3
4
5
Perfectly
20
Q

qu’est-ce que la méthode des juges-experts?

A

ces pers qui ont des conn sur le concept à mesurer se prononcent sur le contenu de chaque énoncé

How well did you know this?
1
Not at all
2
3
4
5
Perfectly
21
Q

quels sont les 5 aspects qui composent le contenu des énoncés (aspects auxquels les juges-experts se prononcent)?

A
  • clarté
  • représentativité
  • exhaustivité
  • dimensionnalité
  • pertinence
How well did you know this?
1
Not at all
2
3
4
5
Perfectly
22
Q

qu’est-ce que la clarté?

A

l’énoncé est clair pour le participant

How well did you know this?
1
Not at all
2
3
4
5
Perfectly
23
Q

qu’est-ce que la représentativité?

A

le concept est compris dans la théorie

How well did you know this?
1
Not at all
2
3
4
5
Perfectly
24
Q

qu’est-ce que l’exhaustivité?

A

je touche à tous les éléments de la théorie

How well did you know this?
1
Not at all
2
3
4
5
Perfectly
25
Q

qu’est-ce que la dimensionnalité?

A

les mêmes dimensions que ceux proposées dans la théorie

How well did you know this?
1
Not at all
2
3
4
5
Perfectly
26
Q

qu’est-ce que la pertinence?

A

oui, ça touche et mentionne la théorie, mais est-ce pertinent dans ce test?

How well did you know this?
1
Not at all
2
3
4
5
Perfectly
27
Q

quelles statistiques sont utilisées dans la validation de contenu? (2)

A
  • coefficient de validité de contenu (CVC)

- corrélation intra-classe (ICC)

How well did you know this?
1
Not at all
2
3
4
5
Perfectly
28
Q

que mesure le CVC?

A

la proportion (%) des rép des juges-experts qui sont d’accord sur certains aspects relatifs au contenu inhérent aux items de l’instrument

How well did you know this?
1
Not at all
2
3
4
5
Perfectly
29
Q

que mesure la ICC?

A

l’association des opinions entre juges-experts ayant un certain degré de formation en termes de trait quantitatif

How well did you know this?
1
Not at all
2
3
4
5
Perfectly
30
Q

définition de la validation pragmatique

A

la capacité d’un instrument à prédire (aussi explicite et invariable que possible) le niveau de performance (comportement) d’un gr d’individus P/R à des situations qu’ils rencontrent (ou pourraient rencontrer) ultérieurement

How well did you know this?
1
Not at all
2
3
4
5
Perfectly
31
Q

exemple classique de validation pragmatique

A

l’évaluation du QI et le succès professionnel

32
Q

quelle est la procédure la plus simple pour évaluer la validité pragmatique?

A

calculer la corrélation entre les résultats obtenus par un même gr d’individus à 2 moments différents (2 présents ou 1 p et 1 futur)

33
Q

ds la validité pragmatique, quelle méthode de l’approche corrélationnelle est utilisée?

A

l’analyse de régression

34
Q

quel est un des objectifs de l’analyse de régression?

A

prédire la variance d’une variable (p ou f) par le biais d’une (ou plrs) v indép

35
Q

que signifie précisément l’évaluation de la validité pragmatique?

A

dét ds quelle mesure les prédicteurs retenus permettent de fournir une estimation valide (explicite, claire, empirique et relativement invariable) des résultats qui seront obtenus ultérieurement (pourcentage de variance prédite ou expliquée)

36
Q

2 types de validité pragmatique

A

1- validité concomitante/concourante

2- validité prédictive

37
Q

que détermine la validité concourante?

A

le degré d’asso entre les scores obtenus au test et les scores obtenus à une mesure de réf (2 mesures au présent)

38
Q

qu’évalue la validité prédictive?

A

la qualité des prédictions faites sur la base des résultats obtenus au test et une réalité future (1 mesure p et 1 f)

39
Q

2 statistiques habituellement utilisées dans la validité pragmatique

A

1- coefficient de détermination (CD)

2- corrélation multiple au carré (R2, et à la fois beta standardisé, B)

40
Q

qu’est-ce que le CD?

A

pourcentage d’expl de la variance entre 2 mesures, sans considérer l’ordre des mesures

41
Q

qu’est-ce que le R2?

A

pourcentage d’expl de la variance entre 2 ou plrs mesures, en considérant l’ordre des mesures

42
Q

définition validation de construit

A

= la justesse/certitude avec laquelle l’ensemble d’items d’un instrument de mesure psychologique permet d’obtenir des résultats conformes aux concepts (ou construits, traits) définis par son contexte théorique

43
Q

qu’indique la validité de construit

A

ds quelle mesure les énoncés d’un instrument sont cohérents (structure interne) avec la théorie (et les concepts rattachés), définis de façon opérationnelle (construction des facteurs)

44
Q

quelles sont les nombres de juges-experts possible

A

3, 4 ou 5 => min et max de variance voulue

45
Q

quelles sont les entités les plus étudiées en psychologie

A

les entités hypothétiques

46
Q

quel est le défaut des entités hypothétiques?

A

elles ne sont pas directement accessibles

47
Q

comment sont considérés les construits?

A

comme des mini-théories qui expliquent les relations entre les diff concepts évalués par les items

48
Q

à quel moment un concept devient un construit?

A

le moment où on teste un concept, il devient un construit

49
Q

synonyme de construits

A

facteurs, dimensions, composantes

50
Q

par quoi sont expliqués les facteurs (construits)

A

l’asso linéaire entre les concepts (contenus) inhérent aux variables directement mesurables

51
Q

comment appelle-t-on les variables mesurables

A

les items

52
Q

comment appelle-t-on les variables qui ne sont pas directement mesurables

A

variables latentes

53
Q

3 modèles d’analyse factorielle

A

1- modèle d’analyse factorielle exploratoire
2- modèle d’analyse factorielle confirmatoire de premier ordre
3- modèle d’analyse factorielle confirmatoire de premier et de deuxième ordre

54
Q

quand utilise-t-on confirmatoire?

A

qd on connait ds la litt

55
Q

cb de facteurs de 2e ordre et de 1er ordre ds exploratoire

A
2e = 1
1er = 3
56
Q

exploratoire : comment est mesuré le facteur de 2e ordre

A

par le biais de 3 dimensions (3 facteurs de 1er ordre)

57
Q

cb de variables latentes ds exploratoire

A

4 (1 (2e) + 3 (1er))

58
Q

qu’expliquent les variables manifestes

A

une partie de la variance de ces items explique la variable latente, etc

59
Q

quelles variables ont des erreurs associées à la mesure

A

variables manifestes (mesurables)

60
Q

que représente les erreurs associées à la mesure

A

la partie de la variance qui n’est pas expliquée par les facteurs de 1er ordre

61
Q

2 façons robustes de calculer la validité de construit

A

1- l’analyse multitrait-multiméthode

2- l’analyse factorielle

62
Q

qu’est-ce que l’analyse multitrait-multiméthode

A

une matrice de corrélation entre les résultats obtenus à différents traits et à différentes méthodes

63
Q

AMM : où la corrél est la plus forte et où plus faible

A
  • même trait/même méthode

- diff traits/diff méthodes

64
Q

AMM : 2 types traits et 2 types méthodes

A
  • hétérotraits VS monotraits

- hétérométhode VS monométhode

65
Q

AMM : limites (2)

A
  • bcp de tps de la part des sujets (plrs test à 2 tps)

- difficulté à trouver/faire passation des plrs tests qui évaluent les mêmes traits

66
Q

exemples de traits et de méthodes

A

traits (ABC)
A = dépression
B = tristesse
C = désespoir

méthodes (123)
1 = observation directe
2 = questionnaire papier
3 = entrevue semi-structurée

67
Q

AMM : qu’indique les corrél les plus élevées et pourquoi

A

mêmes traits et mêmes méthodes, car test-retest donc mesure de fidélité

68
Q

quel est le rationnel de l’analyse factorielle?

A

avoir au moins 3 variables qui sont corrélées entre elles sur une nouvelle variable qui retient l’essentiel de la variance commune. nouvelle variable = le facteur

69
Q

AF : tableau total variance explained

A

total variance explained

  • total = savoir cb de facteurs retenus (>1)
  • % de variance/cumul avant extrac nécess > extraits
  • % variance extraits = le 2e facteur expl un surplus de % de variance (surplus = ce qu’il n’a pas été expl par les facteurs avant)
70
Q

AF : tableau Pattern Matrix

A

Pattern matrix (résultats AFE)

  • pas de chiffre = pas imp (imp > 0,3) (imp =/= sign)
  • les chiffres dim ds un facteur, et qd + grand c’est pq change de facteur
  • item avec 2 chiffres = mesure 2 choses, donc item complexe et prob validité (reformuler et retester)
71
Q

qu’amène le résultat du processus de validation de construit

A

plrs résultats qui doivent être interp en lien avec les éléements théoriques sur lesquels le test est basé (et non un indice statistique unique)

72
Q

la validité de construit d’un instrument sera plus facilement mesurable si…

A

…la théorie utilisée est claire et bien définie

73
Q

2 types validité construit

A

1- validité convergente

2- validité discriminante

74
Q

qu’est-ce que la validité convergente

A

qd on teste la force de l’asso entre les résultats des items de l’échelle cible et les autres qui mesurent le MÊME construit, association forte

75
Q

qu’est-ce que la validité discriminante?

A

à quel pt les résultats des items de l’échelle cible s’écarte d’autres mesures de construits DIFFÉRENTS, donc une association faible