Cours 5 Flashcards

1
Q

V ou F? Le degré de fidélité détermine l’interprétation et les inférences que l’on peut faire à partir de scores d’une échelle.

A

Faux, degré de validité

How well did you know this?
1
Not at all
2
3
4
5
Perfectly
2
Q

V ou F? Le nom d’un test ou d’une échelle est un bon indice du construit mesuré.

A

Faux

How well did you know this?
1
Not at all
2
3
4
5
Perfectly
3
Q

Définit la validité d’un instrument de mesure.

A

S’il mesure vraiment ce qu’il prétend ou devrait mesurer, ce construit pour cette population et pour cette application particulière.

How well did you know this?
1
Not at all
2
3
4
5
Perfectly
4
Q

Quels sont les 3 aspects à évaluer lorsqu’on évalue la validité d’une mesure?

A

Mesure bien le construit qu’il prétend mesurer
Mesure bien ce construit pour la population ciblée
Mesure bien le construit une application particulière

How well did you know this?
1
Not at all
2
3
4
5
Perfectly
5
Q

Quels sont les 3 points clés que les organisations professionnelles soulignent vis-à-vis la validité des tests?

A

Caractéristique de l’interprétation des scores procurés par un test, pas une caractéristique du test
Validité est une question de degré ; pas une question absolue (de tout ou rien)
Repose sur de solides bases théoriques et empiriques

How well did you know this?
1
Not at all
2
3
4
5
Perfectly
6
Q

Quelles sont les 3 différentes sources de validité?

A

De contenu
De construit
De critère

How well did you know this?
1
Not at all
2
3
4
5
Perfectly
7
Q

V ou F? La vraisemblance est une source de validité.

A

Faux

How well did you know this?
1
Not at all
2
3
4
5
Perfectly
8
Q

Avec quelle source de validité la vraisemblance est-elle confondue?

A

Validité de contenu

How well did you know this?
1
Not at all
2
3
4
5
Perfectly
9
Q

Quel est l’autre nom donné à la vraisemblance?

A

Validité d’apparence

How well did you know this?
1
Not at all
2
3
4
5
Perfectly
10
Q

Pour avoir un bon degré de vraisemblance, qui doit trouver adéquat la mesure lié à un construit spécifique?

A
  1. Personnes qui sont évaluées avec le test
  2. Personnes qui utilisent le test/
How well did you know this?
1
Not at all
2
3
4
5
Perfectly
11
Q

Quels sont les facteurs pouvant influencer la vraisemblance?

A

Contexte d’évaluation
Capacités cognitives des répondants
Santé mentale et état psychologique des répondants
Personnalité des répondants
Motif de l’évaluation (désirabilité sociale +/-)
etc.

How well did you know this?
1
Not at all
2
3
4
5
Perfectly
12
Q

À quoi réfère la validité de contenu?

A

Au degré de représentativité des items (questions) utilisés pour mesurer un construit

How well did you know this?
1
Not at all
2
3
4
5
Perfectly
13
Q

Quelle source de validité est mesurée de manière déductive? Qu’est-ce que cela signifie?

A

De contenu ; les auteurs du test demandent à un groupe d’experts indépendants de se prononcer sur la pertinence des items.

How well did you know this?
1
Not at all
2
3
4
5
Perfectly
14
Q

Quelles sont les questions demandées au groupe d’experts indépendants pour mesurer la validité de contenu?

A

Chq item individuellement correspond bien au construit
Tous les items de l’échelle considérés comme un groupe constituent un échantillon représentatif de tous les domaines et sous-domaines expliqués par le construit d’intérêt

How well did you know this?
1
Not at all
2
3
4
5
Perfectly
15
Q

Comment obtenir la meilleure représentativité?

A

Tous les domaines du construits représentés
Éviter la sur- ou sous- représentation d’items

How well did you know this?
1
Not at all
2
3
4
5
Perfectly
16
Q

À partir de quoi les chercheurs définissent un construit (son contenu)?

A
  • Cadre théorique
  • Recherches empiriques (recensions)
  • Connaissances et expériences professionnelles/pratiques
How well did you know this?
1
Not at all
2
3
4
5
Perfectly
17
Q

Quels sont les 2 types de validité de contenu?

A

Nominale (auteur du test)
Consensuelle (groupe de spécialistes indépendants)

How well did you know this?
1
Not at all
2
3
4
5
Perfectly
18
Q

Même si de façon déductive, comment les experts estiment le degré de validité de contenu empiriquement?

A

En quantifiant le degré de validité de contenu par la gradation ; indice de validité de contenu
- À quel point chacun des items est pertinent et représentatif du construit d’intérêt (IVC-I)
- À quel point l’ensemble des items constitue un échantillon représentatif du contenu du construit d’intérêt (IVC-É)

How well did you know this?
1
Not at all
2
3
4
5
Perfectly
19
Q

Quelles sont les 2 grandes menaces à la validité de contenu?

A
  • Inclusion de contenu conceptuellement non pertinent
  • Sous-représentation conceptuelle de certains domaines du construit
How well did you know this?
1
Not at all
2
3
4
5
Perfectly
20
Q

À quoi réfère la validité de construit?

A

Degré de reproductibilité de la structure interne sous-jacente à l’instrument ainsi que les relations du construits d’intérêt avec d’autres construits externes

How well did you know this?
1
Not at all
2
3
4
5
Perfectly
21
Q

Quelles sont les deux façons de vérifier la validité de construit?

A

Validité factorielle
Validité convergente/discriminante

How well did you know this?
1
Not at all
2
3
4
5
Perfectly
22
Q

Avant d’entamer l’évaluation de la validité de construits, que faut-il bien connaître?

A

Théorie sous-jacente au construit

How well did you know this?
1
Not at all
2
3
4
5
Perfectly
23
Q

Qu’est-ce que le réseau nomologique?

A

Théorie expliquant le construit par le biais de ses interrelations avec d’autres construits

24
Q

Que devrait représenter le réseau nomologique?

A

la structure interne et les interrelations (ordonnées et prévisibles) entre les domaines ou sous-domaines importants du construit et des construits externes théoriquement importants

25
V ou F? Le réseau nomologique concerne seulement les relations concurrentes.
Faux, peut inclure des facteurs étiologiques et des conséquences développementales plus distales
26
Qu'est-ce que la validité factorielle?
Permet de vérifier si la structure factorielle théorique qui représente le construit est reproduite sur le plan empirique (avec des données)
27
Quelles sont les 2 analyses factorielles?
Analyse factorielle exploratoire Analyse factorielle confirmatoire
28
Quel est le critère classique de l'analyse factorielle ?
Saturations factorielles de 0,4 ou plus pour les items associés à un facteur
29
Quel est l'objectif de vérifier 2 aspects inter-reliés de la structure factorielle théorique (validité factorielle)?
1. Items sont significativement (statistiquement) associés au facteur (construit) 2. Dans le cas d'un instrument multidimensionnel : items sont-ils significativement associés au bon facteur et non-associés aux autres facteurs? Dans le cas d'une structure hiérarchique, est-ce que les sous-domaines sont significativement associés au domaine général (traits spécifiques associés à trait général)
30
Quand est-ce qu'on utilise l'analyse factorielle confirmative?
À l'étape de la validation puisque la structure est supposée être connue.
31
Définit la validité convergente.
Degré auquel les scores d'une échelle sont associés avec ceux d'une échelle existante qui mesure le même construit théorique.
32
Définit la validité discriminante.
Degré auquel les scores d'une échelle ne sont pas associés avec ceux d'une échelle existante qui mesure pas le même construit théorique.
33
Quelle est la méthode à utiliser pour évaluer la validité convergente/discriminante?
Matrice multitraits-multiméthodes
34
Quel est l'autre nom donné à la validité de critère?
Validité pragmatique
35
À quoi réfère la validité de critère?
Degré auquel les scores à une échelle sont associés à l'adaptation (ou la performance) des individus
36
Quels sont les deux types de validité de critères?
Concomitante et prédictive
37
Quelles sont les 2 façons d'estimer les validité de critère concomitante?
1. Corrélation avec un critère indépendant 2. Méthode des groupes contrastés
38
Dans la validité de critère, les scores à l'échelle comparés à ceux d'un ____________________.
Critère externe
39
En quoi consiste la validité de critère prédictive?
Degré auquel une mesure est capable de prédire un critère externe prospectivement i.e plus tard dans le temps. (besoin d'une étude longitudinale prospective)
40
À quelle forme de validité se réfère la validité incrémentielle?
Validité de critère
41
Qu'est-ce que la validité incrémentielle?
Il s'agit de la même chose que la validité prédictive mais on se demande si les scores à un test ont une valeur ajoutée pour prédire un critère externe (au-delà de la capacité d'autres facteurs (autres tests) prédictifs importants
42
À quelle validité est liée à l'idée de "contrôle statistique" en analyse de régression?
Validité incrémentielle
43
Dans quel contexte peut-on utiliser la validité incrémentielle?
Classification ; scores d'une échelle de dépistage qui procurent une meilleure sensibilité et spécificité que ceux d'une autre échelle similaire. S'applique aussi à la révision d'un test ; les scores de la nouvelle version prédisent mieux un critère au-delà des facteurs de contrôle, ou encore procurent une meilleure sensibilité et spécificité que l'ancienne version
44
Qu'est-ce que la théorie de la décision? À quel validité est-elle relié?
Déterminer à quel point les scores d'un test peuvent classifier adéquatement les personnes dans des groupes Validité de critère
45
Qu'est-ce que la sensibilité?
Capacité d'une échelle de procurer un résultat positif pour les pers présentant le statut qu'elle prétend identifier. Se rapporte à la capacité de détection. Vrais positifs
46
Qu'est-ce que la spécificité?
Capacité d'une échelle de procurer un résultat négatif pour les personnes ne présentant pas le statut qu'elle prétend identifier. Se rapporte à sa capacité de discrimination. Vrais négatifs
47
V ou F? Si on change le critère, la sensibilité et spécificité change.
Vrai
48
Les indices de sensibilité et de spécificité sont des observations empiriques de la ____________________________ d'un test calculés à partir d'une classification de différents groupes diagnostiques.
performance rétrospective
49
V ou F? Les indices de sensibilité et de spécificité renseignent sur la capacité de classification d'une échelle ou d'un test lorsque ce dernier est utilisé avec des personnes dont le statut est ___________________.
Connu
50
En clinique, la tâche de l'évaluateur est plutôt de déterminer le __________________ qui peut être accordé à un résultat positif pour un individu classifié. On veut savoir la ___________ qu'un individu présente réellement le trouble, étant donné un résultat positif à un test. Pour ce faire, il faut calculer le ________________.
niveau de confiance probabilité Pouvoir prédictif
51
Qu'est-ce que le pouvoir prédictif positif?
Probabilité qu'un individu avec un résultat positif sur une échelle ait réellement le statut prédit
52
Qu'est-ce que le pouvoir prédictif négatif?
Probabilité qu'un individu avec un résultat négatifsur une échelle n'ait pas réellement le statut prédit
53
Lorsque la prévalence est faible, le PPN est plus _________ que PPP.
grand
54
Quels sont les 2 problèmes potentiels avec les indices de sensibilité, spécificité et pouvoir prédictif?
1. Estimation de ces indices statistiques dépend de la validité et de la fidélité du critère utilisé 2. Estimation de la prévalence réelle dans certains contextes cliniques peut être difficiles.
55
Quels sont les 3 postulats à se rappeler de la fidélité/validité?
Validité est un préalable à la fidélité La fidélité est une condition nécessaire à la validité Les deux sont interreliées: les indices de validité sont directement influencés par le degré de fidélité