Diapo 5 Flashcards

1
Q

Qu’est-ce qu’on évalue avec la validité?

A

On évalue si l’instrument mesure vraiment ce qu’il prétend ou devrait mesure
ou plus précisément
Est-ce que ce test est une mesure valide de ce construit, pour cette population et pour cette application particulière

How well did you know this?
1
Not at all
2
3
4
5
Perfectly
2
Q

Le _____ de validité détermine l’interprétation et les ___________ que l’on peut faire

A

degré
inférences

How well did you know this?
1
Not at all
2
3
4
5
Perfectly
3
Q

Quels sont les 3 aspects d’une mesure ou d’un test lorsqu’on évalue la validité?

A
  1. Est-ce qu’il mesure bien le construit qu’il prétend mesurer?
  2. Est-ce qu’il mesure bien ce construit pour la population ciblée
  3. Est-ce qu’il mesure bien ce construit pour une application
How well did you know this?
1
Not at all
2
3
4
5
Perfectly
4
Q

Quels sont les 3 points que soulignent les organisations professionnelles à propos de la validité?

A
  1. La validité concerne l’interprétation des scores procurés par un test pour un construit spécifique; ce n’est pas une caractéristique d’un test
  2. la validité est une question de degré; ce n’est pas une question absolue, de tout ou rien
  3. La validité d’un test repose sur de solides bases théoriques et empiriques
How well did you know this?
1
Not at all
2
3
4
5
Perfectly
5
Q

Quelles sont les 3 différentes sources de validité?

A

de contenu
de construit
de critère

How well did you know this?
1
Not at all
2
3
4
5
Perfectly
6
Q

Quelles sont les sous-catégories de la validité de construit?(3)

A

factorielle
convergente
discriminante

How well did you know this?
1
Not at all
2
3
4
5
Perfectly
7
Q

Quelles sont les sous-catégories de la validité de critère?

A

concomitante
prédictive
incrémentielle

How well did you know this?
1
Not at all
2
3
4
5
Perfectly
8
Q

Vrai ou faux. La vraisemblance (validité d’apparence) est une forme ou une source de validité.

A

Faux, aucun des deux

How well did you know this?
1
Not at all
2
3
4
5
Perfectly
9
Q

Qu’est-ce que la vraisemblance?

A

Le degré auquel une mesure semble adéquate et reliée à un construit selon le jugement des personnes qui sont évaluées avec le test et/ou les personnes qui utilisent le test

How well did you know this?
1
Not at all
2
3
4
5
Perfectly
10
Q

Avec quelle type de validité la vraisemblance est souvent confondue?

A

La validité de contenu

How well did you know this?
1
Not at all
2
3
4
5
Perfectly
11
Q

Nommez quelques facteurs qui peuvent influencer la vraisemblance

A

.format de présentation de l’instrument
.contexte d’évaluation
.capacités cognitives des répondants.es
.santé mentale et état psychologique des répondants.es
.personnalité des répondants.es
.motif de l’évaluation (désirabilité sociale)

How well did you know this?
1
Not at all
2
3
4
5
Perfectly
12
Q

À quoi réfère la validité de contenu?

A

Au degré de représentativité des items utilisés pour mesurer un construit

How well did you know this?
1
Not at all
2
3
4
5
Perfectly
13
Q

Vrai ou faux. La validité de contenu est souvent établie de façon déductive

A

Vrai

How well did you know this?
1
Not at all
2
3
4
5
Perfectly
14
Q

Quelles sont les questions à se poser pour la validité de contenu?

A
  1. Chaque item individuellement correspond bien au construit?
  2. Tous les items d’une échelle considérés comme un groupe constituent un échantillon représentatif de tous les domaines du construit d’intérêt?
How well did you know this?
1
Not at all
2
3
4
5
Perfectly
15
Q

Vrai ou faux. Il est plutôt facile de faire un bon échantillonnage de contenu pour des construits psychologiques complexes

A

Faux, contraire

How well did you know this?
1
Not at all
2
3
4
5
Perfectly
16
Q

Quel est l’élément centrale de la validité de contenu?

A

La représentativité
(ex : impulsivité cognitive, impulsivité émotionnelle, impulsivité comportementale, etc.)

How well did you know this?
1
Not at all
2
3
4
5
Perfectly
17
Q

Avant de construire une échelle, les auteurs.trices doivent toujours décrire en détails et de façon compréhensive les différents _______ et ___________ du construit d’intérêt

A

domaine
sous-domaine

How well did you know this?
1
Not at all
2
3
4
5
Perfectly
18
Q

À partir de quoi les cheucheurs.euses définissent un construit?

A
  1. cadre théorique
  2. recherches empiriques
  3. connaissances et expériences professionnelles
How well did you know this?
1
Not at all
2
3
4
5
Perfectly
19
Q

Quels sont les 2 types de validité de contenu?

A

Nominale : auteurs du test
consensuelle : groupe de spécialistes indépendants

How well did you know this?
1
Not at all
2
3
4
5
Perfectly
20
Q

Afin de quantifier le degré de validité de _______, on donne aux experts un choix de réponse avec une _________ à propos de _______ ________ afin de systématiser le tout

A

contenu
gradation
chaque item

How well did you know this?
1
Not at all
2
3
4
5
Perfectly
21
Q

Que signifie IVC-I?

A

Nombres d’experts qui ont jugé l’item représentatif, divisé par le nombre total d’experts

How well did you know this?
1
Not at all
2
3
4
5
Perfectly
22
Q

Que signifie IVC-É?

A

Proportion d’items jugés représentatifs, soit la moyenne des IVC-I divisée par le nombre total d’experts.es

How well did you know this?
1
Not at all
2
3
4
5
Perfectly
23
Q

Quelles sont les grandes menaces de la validité de contenu?

A
  1. Inclusion de contenu conceptuellement non pertinent
  2. sous-représentation conceptuelle de certains domaines du construit
How well did you know this?
1
Not at all
2
3
4
5
Perfectly
24
Q

À quoi quoi réfère la validité de construit?

A

Au degré de reproductibilité de la structure interne théorique sous-jacente à l’instrument ainsi que les relations du construit d’intérêt avec d’autres construits externes

How well did you know this?
1
Not at all
2
3
4
5
Perfectly
25
Q

Comment vérifie-t-on la validité de construit?

A

La validité factorielle
la validité convergente / discriminante

How well did you know this?
1
Not at all
2
3
4
5
Perfectly
26
Q

Qu’est-ce que le réseau nomologique?

A

La théorie expliquant le construit par le biais de ses interrelations avec d’autres construits
Il représente donc la structure interne et les interrelation entre les domaines importants du construits externes théoriquement importants

How well did you know this?
1
Not at all
2
3
4
5
Perfectly
27
Q

Qu’est-ce que la nomologie?

A

L’étude des lois, donc bien plus q’une liste de domaines ou sous-domaines

28
Q

Que veut-on vérifier avec la validité factorielle?

A

Lorsqu’on veut vérifier si la structure factorielle théorique qui représente le construit est reproduites sur le plan empirique

29
Q

Qu’est-ce qu’un facteur?

A

Une réaction parcimonieuse de plusieurs variables expliquées par une variable latente

30
Q

Quelles sont les questions à se poser qui permettent de vérifier la validité factorielle?

A
  1. Les items sont-ils significativement (statistiquement) associés au facteur (construit)?
  2. Dans le cas d’un instrument multidimensionnel,
    a) Les items sont-il significativement associés au bon facteur et non-associés aux autres facteurs?
    b) Dans le cas d’une structure hiérarchique, est-ce que les sous-domaines sont significativement associés au domaine général?
31
Q

Expliquer comment l’analyse factorielle exploratoire prouve ou non la validité de contenu.

A

On identifie des regroupements d’items inter-corrélés, signifiant que les individus tendent à y répondre de façon similaire
ex : les répondants répondent oui à Q#5 et Q#8, ces items seront regroupés dans un même facteur

32
Q

Quel est le critère classique de la validité factorielle?

A

On devrait avoir des saturations factorielles de 0,40 ou plus pour les items associés à un facteur

33
Q

Quelle est la différence entre l’analyse factorielle exploratoire et l’analyse factorielle confirmatoire?

A

On impose une structure stricte pour l’analyse factorielle confirmatoire à la matrice de corrélations et teste si elle correspond aux données (imposition d’une corrélation de 0 entre certains facteurs), ce qui n’est pas le cas pour l’analyse factorielle exploratoire

34
Q

Vrai ou faux. L’analyse factorielle confirmatoire est encore très peu utilisée en psychométrie

A

Vrai

35
Q

Qu’est-ce que la validité convergente?

A

Degré auquel les scores d’une échelle sont associés avec ceux d’une autre échelle existante qui mesure le même construit théorique

36
Q

Qu’est-ce que la validité discriminante?

A

Degré auquel les scores d’une échelle ne sont pas associés avec une échelle qui ne mesure pas le même construit

37
Q

Quel est le meilleur moyen de tester la validité convergente et discriminante?

A

La méthode de la matrice multitraits-multiméthodes

38
Q

À quoi réfère la validité pragmatique(validité de critère)?

A

Réfère au degré auquel les scores à une échelle sont associés à l’adaptation des individus

39
Q

Concernant la validité de critère, les score à l’échelle sont comparés à ceux d’un _______ ________

A

critère externe

40
Q

Concernant la validité de critère, le critère devrait être une mesure _______ et __________ de l’instrument

A

objective
indépendante

41
Q

Quelles sont les façons d’estimer la validité de critère concomitante?

A
  1. corrélation avec un critère indépendant
    (test d’intelligence avec réussite académique)
  2. méthode des groupes contrastés
    (on teste les différences de scores moyens entre des groupes)
42
Q

À quoi réfère la validité de critère prédictive?

A

Le degré auquel une mesure est capable de prédire un critère externe prospectivement

43
Q

La validité de critère prédictive nécessite une étude ________ __________

A

longitudinale
prospective

44
Q

Qu’est-ce que la validité incrémentielle?

A

Forme de validité pas toujours présente dans les livres, mais signifie à quel point les scores à un test ont une valeur ajoutée pour prédire un critère externe, au-delà de la capacité d’autres facteurs prédictifs importants

45
Q

La validité incrémentielle est liée à l’idée de ________ ________ en analyse de régression

A

contrôle statistique

46
Q

Que comprend la théorie de la décision et dans quels contextes est-elle pertinente?

A

Comprend une série de concepts visant l’analyse des effets quantitatifs des décisions prises avec des tests
pertinent dans différents contextes de classification tels que pour le dépistage, le diagnostic, la sélection du personnel, la certification, etc.

47
Q

Vrai ou faux. Les concepts de la théorie de la décision sont intimement liés à la validité de critère.

A

Vrai

48
Q

En quoi consiste la théorie de la décision?

A

Déterminer à quel point les scores d’un test peuvent classifier adéquatement les personnes dans des groupes

49
Q

Qu’est-ce que la sensibilité?

A

Capacité d’une échelle de procurer un résultat positif pour les personnes présentant le statut (vrai positif)

50
Q

La sensibilité se rapporte à la ____________ de __________

A

capacité
détection

51
Q

Qu’est-ce que la spécificité?

A

Capacité d’une échelle de procurer un résultat négatif pour les personnes ne représentant pas le statut (vrai négatif)

52
Q

La spécificité se rapporte à la __________ de _________

A

capacité
discrimination

53
Q

Les indices de sensibilité et de spécificité sont des observations empiriques de la _________ _________ d’un test calculés à partir d’une classification de différents groupes diagnostiques

A

performance rétrospective

54
Q

Vrai ou faux. La sensibilité et la spécificité ne varie pas en fonction du score critère d’une même échelle.

A

Faux, contraire

55
Q

Qu’est-ce que le pouvoir prédictif?

A

calcul d’une échelle qui permet de savoir la probabilité qu’un individu présente réellement le trouble, étant donné un résultat positif à un test, soit le niveau de confiance accordé à un résultat positif

56
Q

Qu’est-ce que le pouvoir prédictif positif (PPP)?

A

la probabilité qu’un individu avec un résultat positif sur une échelle ait réellement le statut prédit

57
Q

Qu’est-ce que le pouvoir prédictif négatif (PPN)?

A

La probabilité qu’un individu avec un résultat négatif sur une échelle n’ait réellement pas le statut prédit

58
Q

Les PPP et PPN sont des indices de ___________ ____________ d’un test et ils dépendent de la prévalence d’un trouble

A

performances extrinsèques

59
Q

Quelle est la différence entre la sensibilité et la spécificité et les PPN et PPP?

A

PPN et PPP sont à eux des paramètre d’un test ET de la prévalence d’un trouble contrairement aux autres qui sont seulement des paramètres d’un test

60
Q

Va relire sur l’échelle Dépis-Dép

A

ok

61
Q

Quelle est la règle générale pour l’ensemble des tests de dépistage? (concernant les PPP et PPN)

A

Lorsque la prévalence est faible, PPN > PPP et c’est l’inverse lorsque la prévalence est élevée

62
Q

Quels sont 2 problèmes sur la sensibilité, la spécificité et les PP?

A
  1. estimation de ces indices statistiques dépend de la validité et de la fidélité du critère utilisé
  2. estimation de la prévalence réelle dans différents contextes cliniques peut être difficile
63
Q

La validité est un _______ de la fidélité

A

préalable

64
Q

La fidélité est une ________ nécessaire à la validité

A

condition

65
Q

La validité et la fidélité sont __________ empiriquement : les indices de validité sont ________ ________ par le degré de fidélité

A

interreliées
directement influencés

66
Q

On valide un instrument pour une _________ particulière et/ou une _________ particulière

A

population
utilisation