Cours 9 Flashcards

1
Q

Quelle est la définition générale de la validité?

A

La validité est le degré avec lequel un test mesure ce qu’il prétend mesurer, et cela seulement.

How well did you know this?
1
Not at all
2
3
4
5
Perfectly
2
Q

Vrai ou Faux. Plusieurs instruments de mesure ne permettent pas d’observer directement le concept qu’on cherche à étudier.

A

Vrai.

How well did you know this?
1
Not at all
2
3
4
5
Perfectly
3
Q

Vrai ou Faux. La validité ne concerne pas l’instrument de mesure lui-même. Justifie (2)

A

Vrai, c’est plutôt l’interprétation des résultats associés à ses items et le contexte de son utilisation (clientèle et conditions en générales).

How well did you know this?
1
Not at all
2
3
4
5
Perfectly
4
Q

Le processus de validation est une façon de déterminer quoi?
En s’appuyant sur quoi?

A

Le niveau de certitude qu’on peut avoir, en s’appuyant aux indices obtenus.

How well did you know this?
1
Not at all
2
3
4
5
Perfectly
5
Q

La validité d’un instrument psychométrique est liée dans quel contexte?

A

Au contexte dans lequel le processus de l’accumulation de preuves a été effectué.

How well did you know this?
1
Not at all
2
3
4
5
Perfectly
6
Q

L’évaluation de la validité est un processus continu de quoi?

A

D’accumulation de « preuves » et « d’évidences »

How well did you know this?
1
Not at all
2
3
4
5
Perfectly
7
Q

Vrai ou Faux. Un test n’est jamais valide à 100%.

A

Vrai.

How well did you know this?
1
Not at all
2
3
4
5
Perfectly
8
Q

La validité n’est pas une affaire de « tout ou rien » (valide ou pas valide), mais plutôt une question de quoi?

A

« degré », selon les indices de validité vérifiés

How well did you know this?
1
Not at all
2
3
4
5
Perfectly
9
Q

Quelles sont les 5 sources de preuve de validité?

A

(a) le contenu du test (b) les processus de réponse
(c) la structure interne (d) les relations avec d’autres variables
(e) les conséquences du test

How well did you know this?
1
Not at all
2
3
4
5
Perfectly
10
Q

Quelles sont les 3 sources les plus fondamentales?

A

Indice de contenu
Indice des relations avec d’autres variables [pragmatique, critériée, prédictive]
Indice de structure interne [construit, conceptuelle, théorique

How well did you know this?
1
Not at all
2
3
4
5
Perfectly
11
Q

Quel est le type de validité très peu étudié?

A

Conséquences du test

How well did you know this?
1
Not at all
2
3
4
5
Perfectly
12
Q

La validité de contenu est également connue sous quel nom?

A

Validité logique

How well did you know this?
1
Not at all
2
3
4
5
Perfectly
13
Q

La validité de contenu doit faire référence à quoi?

A

À toutes les facettes d’un concept donné

How well did you know this?
1
Not at all
2
3
4
5
Perfectly
14
Q

La validité de contenu nécessite quoi? Pourquoi?

A

Le recours à des experts reconnus en la matière pour évaluer si les items du test évaluent un contenu défini.

How well did you know this?
1
Not at all
2
3
4
5
Perfectly
15
Q

Les experts sont des personnes qui ont quoi?

A

Une connaissance reconnue du concept à mesurer et préférablement qui ont aussi une expertise dans l’élaboration d’instrument de mesure.

How well did you know this?
1
Not at all
2
3
4
5
Perfectly
16
Q

Les juges-experts sont normalement invités à se prononcer sur le contenu de chaque énoncé, soit quoi? (5)

A

Clarté, représentativité, exhaustivité, dimensionnalité et pertinence

How well did you know this?
1
Not at all
2
3
4
5
Perfectly
17
Q

La validité de contenu est la plus souvent abordée dans quoi?

A

Dans les tests académiques et professionnels

How well did you know this?
1
Not at all
2
3
4
5
Perfectly
18
Q

Dans un contexte clinique, la validité de contenu fait référence à quoi par exemple?

A

À la correspondance entre les items (contenus) du test et le contenu des symptômes d’une maladie

How well did you know this?
1
Not at all
2
3
4
5
Perfectly
19
Q

La validité de contenu fait référence à quoi?

A

À la manière dont un instrument évalue tous les aspects théoriques du concept qu’il est censé mesurer.

How well did you know this?
1
Not at all
2
3
4
5
Perfectly
20
Q

Une méthode bien connu et encore utilisée pour mesurer la validité de contenu a été développé par qui?

A

Lawshe

How well did you know this?
1
Not at all
2
3
4
5
Perfectly
21
Q

La méthode de Lawshe s’agit essentiellement de quoi?

A

Il s’agit essentiellement d’une méthode permettant d’évaluer l’accord entre les évaluateurs.

How well did you know this?
1
Not at all
2
3
4
5
Perfectly
22
Q

Comment est appelé la formule que Lawshe a développé?

A

Ration de validité de contenu

How well did you know this?
1
Not at all
2
3
4
5
Perfectly
23
Q

Quelle est la question que Lawshe (1975) a proposé que chacun des experts réponde (dans un contexte de connaissance, par exemple) pour chaque item?

A

La connaissance mesurée par cet item est-elle “essentielle”, “utile, mais pas essentielle” ou “pas nécessaire (aux objectifs spécifiques du test)?

How well did you know this?
1
Not at all
2
3
4
5
Perfectly
24
Q

Les résultats de Lawshe varient entre quoi et quoi?

A

-1 et +1

How well did you know this?
1
Not at all
2
3
4
5
Perfectly
25
Q

Qu’est-ce qu’indique les valeurs positives de la formule de Lawshe?

A

Au moins la moitié des spécialistes ont jugé l’item comme essentiel.

How well did you know this?
1
Not at all
2
3
4
5
Perfectly
26
Q

Le CVR moyen pour l’ensemble des items peut être utilisé comme quoi?

A

Indicateur de la validité globale du contenu du test

27
Q

Wilson, Pan, & Schumsky (2012) ont proposé quoi?

A

Une transformation pour le CVR

28
Q

En ce qui concerne l’évaluation du contenu des tests, les Standards (2014) laissent entendre que les preuves basées sur le contenu d’un test peuvent inclure quoi?

A

Des analyses empiriques à partir de la relation entre le contenu de chaque item et sa pertinence pour le domaine d’étude.

29
Q

Les preuves fondées sur le contenu du test peuvent provenir de quoi?

A

De jugements d’experts sur la relation entre certaines parties du test et les concepts [dimensions]

30
Q

Qu’est-ce que désigne la validité pragmatique?

A

La capacité d’un instrument à prédire (aussi explicite et invariable que possible) le niveau de performance (comportement) d’un groupe d’individus par rapport à des situations qu’ils rencontreront (ou pourraient rencontrer) ultérieurement.

31
Q

Quelle est la procédure la plus simple pour évaluer la validité pragmatique d’un instrument?

A

Calculer la corrélation entre les résultats obtenus par un même groupe d’individus à deux moments différents.

32
Q

Quelles sont les deux passations de test de la validité pragmatique?

A
  1. Au moment présent (virtuellement simultané)
  2. Au moment présent et l’autre au « future »
33
Q

Quel est un des objectifs de l’analyse de régression?

A

Prédire la variance d’une variable (présente ou future) par le biais d’une (ou plusieurs) variable indépendante.

34
Q

Évaluer cette qualité psychométrique de l’ensemble des items d’un instrument signifie quoi?

A

Déterminer dans quelle mesure les prédicteurs retenus permettent de fournir une estimation valide des résultats qui seront obtenus ultérieurement (pourcentage de variance prédite ou « expliquée » : r2 ou R2).

35
Q

Quels sont les deux types de validité pragmatique?

A

Validité concomitante / concourante
Validité prédictive

36
Q

On détermine quoi dans la validité concomitante / concourante?

A

On détermine le degré d’association entre les scores obtenus au test et les scores obtenus à une mesure de référence, ou critère (l’administration du test et de la mesure du critère pratiquement en même temps – temps présent).

37
Q

On évaluer quoi dans la validité prédictive?

A

On évalue la qualité des prédictions faites sur la base des résultats obtenus au test et une réalité future (administration du test et du critère séparée d’un laps de temps important, le test étant administré en premier).

38
Q

Qui suis-je? Pourcentage d’explication de la variance entre deux mesures, sans considérer l’ordre des mesures

A

Coefficient de détermination (r2)

39
Q

Qui suis-je? Pourcentage d’explication de la variance entre deux (ou plusieurs) mesures, en considérant l’ordre des mesures

A

Corrélation multiple au carré (R2)

40
Q

Quelle la seule différence de la corrélation Multiple au carré simple avec la corrélation de Pearson?

A

La corrélation multiple au carré simple aura une direction. Elle n’est pas bidirectionnelle.

41
Q

Lorsqu’on fait une corrélation multiple au carré multiple, l’origine de la corrélation va se faire par quoi?

A

La combinaison linéaire des VI associée avec la VD

42
Q

Comment la validité de construit est-elle définie?

A

La validité de construit est définie comme étant la justesse/certitude avec laquelle l’ensemble d’items d’un instrument de mesure psychologique permet d’obtenir des résultats conformes aux concepts (ou construits, ou traits) définis par son contexte théorique.

43
Q

La validité de construit indique quoi?

A

Dans quelle mesure les énoncés d’un instrument sont cohérents (structure interne) avec la théorie.

44
Q

Quelles sont les entités hypothétiques (construits ou traits), qui résultent d’une élaboration psycho-sociale et théorique?

A

intelligence, personnalité, connaissances, compétences, dépression, motivation, intérêt, etc

45
Q

Les construits peuvent aussi être considérés comme quoi?

A

Des « mini-théories »

46
Q

Les « mini-théories » expliquent quoi?

A

Les relations entre différents concepts (ou contenus) évalués directement par les items et les dimensions.

47
Q

Quels sont les synonymes des dimensions?

A

facteurs, construits, traits latents, variables latentes

48
Q

Les dimensions sont expliquées par quoi?

A

La combinaison linéaire des contenus des items (l’association entre les concepts, contenus – les variables directement mesurables) ou même la combinaison linéaire d’autres construits.

49
Q

Quelles sont les 3 dimensions du locus de contrôle selon Balbinotti?

A

Dimension grande force
Dimension interne
Dimension externe

50
Q

Le deuxième modèle explicatif permet de savoir quoi?

A

Quel item s’associe davantage avec quelle dimension

51
Q

Quelle est le type de modèle du troisième et quatrième modèle explicatif?

A

Modèle confirmatoire

52
Q

Quelles sont les deux façons robustes de calculer la validité de construit (toujours issues de l’approche corrélationnelle)?

A

Analyse multitrait-multiméthode
Analyse factorielle

53
Q

Qu’est-ce que l’analyse multitrait-multiméthode?

A

Une matrice de corrélation entre les résultats obtenus à différents traits (hétérotraits vs monotraits) et à différents méthodes (hétérométhode vs monométhode).

54
Q

Vrai ou Faux. On s’attend à ce que la plus forte corrélation soit trouvé par le calcul « même trait-même méthode »; et la plus faible corrélation soit trouvé pour traits différents-méthodes différentes.

A

Vrai.

55
Q

Quels sont les deux limites de l’analyse multitrait-multiméthode?

A
  1. Demande beaucoup de temps de la part des sujets (faire plusieurs tests… Deux temps)
  2. Difficulté à trouver et faire la passation des plusieurs tests qui évaluent les mêmes traits.
56
Q

Les deux temps de mesure de l’analyse multitrait-multiméthode sont représentés par quoi?

A

Les axes des abscisses (x) et les axes des ordonnées (y)

57
Q

Nomme trois exemples de traits.

A

A = Dépression
B = Tristesse
C = Désespoir

58
Q

Nomme trois exemples de méthodes.

A
  1. Observation directe
  2. Questionnaire papier
  3. Entrevue semi-structurée
59
Q

Quelles sont les trois questions typiques de l’analyse factorielle?

A

(1) Combien de facteurs l’analyse nous propose?
(2) Quel est le pourcentage d’explication de la variance?
(3) Est-ce que tous les items sont valides ou existe-il des items nécessitant une reformulation / exclusion?

60
Q

Le résultat du processus de validation de construit n’amène pas à un indice statistique unique mais bien à quoi?

A

À plusieurs résultats qui doivent être interprétés en lien avec les éléments théoriques sur lesquels le test est basé.

61
Q

La validité de construit d’un instrument (ensemble de preuves de validité) sera plus facilement mesurable si quoi?

A

La théorie utilisée est claire et bien définie.

62
Q

Quels sont les deux types de validité de construit?

A

Validité convergente
Validité discriminante

63
Q

Nomme un exemple pour évaluer la validité convergente.

A

Tester la force de l’association entre les résultats des items de l’échelle cible et les autres qui mesurent le même construit. En ce sens, les résultats de l’outil devraient corréler avec les autres outils qui évaluent le même construit.

64
Q

Nomme un exemple pour évaluer la validité discriminante.

A

Vérifier à quel point les résultats des items de l’échelle cible s’écarte d’autres mesures de construits différents. En ce sens, l’outil ne devrait pas corréler de façon importante avec ces autres construits.