Cours 5 Flashcards

1
Q

V ou F? Le degré de fidélité détermine l’interprétation et les inférences que l’on peut faire à partir de scores d’une échelle.

A

Faux, degré de validité

How well did you know this?
1
Not at all
2
3
4
5
Perfectly
2
Q

V ou F? Le nom d’un test ou d’une échelle est un bon indice du construit mesuré.

A

Faux

How well did you know this?
1
Not at all
2
3
4
5
Perfectly
3
Q

Définit la validité d’un instrument de mesure.

A

S’il mesure vraiment ce qu’il prétend ou devrait mesurer, ce construit pour cette population et pour cette application particulière.

How well did you know this?
1
Not at all
2
3
4
5
Perfectly
4
Q

Quels sont les 3 aspects à évaluer lorsqu’on évalue la validité d’une mesure?

A

Mesure bien le construit qu’il prétend mesurer
Mesure bien ce construit pour la population ciblée
Mesure bien le construit une application particulière

How well did you know this?
1
Not at all
2
3
4
5
Perfectly
5
Q

Quels sont les 3 points clés que les organisations professionnelles soulignent vis-à-vis la validité des tests?

A

Caractéristique de l’interprétation des scores procurés par un test, pas une caractéristique du test
Validité est une question de degré ; pas une question absolue (de tout ou rien)
Repose sur de solides bases théoriques et empiriques

How well did you know this?
1
Not at all
2
3
4
5
Perfectly
6
Q

Quelles sont les 3 différentes sources de validité?

A

De contenu
De construit
De critère

How well did you know this?
1
Not at all
2
3
4
5
Perfectly
7
Q

V ou F? La vraisemblance est une source de validité.

A

Faux

How well did you know this?
1
Not at all
2
3
4
5
Perfectly
8
Q

Avec quelle source de validité la vraisemblance est-elle confondue?

A

Validité de contenu

How well did you know this?
1
Not at all
2
3
4
5
Perfectly
9
Q

Quel est l’autre nom donné à la vraisemblance?

A

Validité d’apparence

How well did you know this?
1
Not at all
2
3
4
5
Perfectly
10
Q

Pour avoir un bon degré de vraisemblance, qui doit trouver adéquat la mesure lié à un construit spécifique?

A
  1. Personnes qui sont évaluées avec le test
  2. Personnes qui utilisent le test/
How well did you know this?
1
Not at all
2
3
4
5
Perfectly
11
Q

Quels sont les facteurs pouvant influencer la vraisemblance?

A

Contexte d’évaluation
Capacités cognitives des répondants
Santé mentale et état psychologique des répondants
Personnalité des répondants
Motif de l’évaluation (désirabilité sociale +/-)
etc.

How well did you know this?
1
Not at all
2
3
4
5
Perfectly
12
Q

À quoi réfère la validité de contenu?

A

Au degré de représentativité des items (questions) utilisés pour mesurer un construit

How well did you know this?
1
Not at all
2
3
4
5
Perfectly
13
Q

Quelle source de validité est mesurée de manière déductive? Qu’est-ce que cela signifie?

A

De contenu ; les auteurs du test demandent à un groupe d’experts indépendants de se prononcer sur la pertinence des items.

How well did you know this?
1
Not at all
2
3
4
5
Perfectly
14
Q

Quelles sont les questions demandées au groupe d’experts indépendants pour mesurer la validité de contenu?

A

Chq item individuellement correspond bien au construit
Tous les items de l’échelle considérés comme un groupe constituent un échantillon représentatif de tous les domaines et sous-domaines expliqués par le construit d’intérêt

How well did you know this?
1
Not at all
2
3
4
5
Perfectly
15
Q

Comment obtenir la meilleure représentativité?

A

Tous les domaines du construits représentés
Éviter la sur- ou sous- représentation d’items

How well did you know this?
1
Not at all
2
3
4
5
Perfectly
16
Q

À partir de quoi les chercheurs définissent un construit (son contenu)?

A
  • Cadre théorique
  • Recherches empiriques (recensions)
  • Connaissances et expériences professionnelles/pratiques
How well did you know this?
1
Not at all
2
3
4
5
Perfectly
17
Q

Quels sont les 2 types de validité de contenu?

A

Nominale (auteur du test)
Consensuelle (groupe de spécialistes indépendants)

How well did you know this?
1
Not at all
2
3
4
5
Perfectly
18
Q

Même si de façon déductive, comment les experts estiment le degré de validité de contenu empiriquement?

A

En quantifiant le degré de validité de contenu par la gradation ; indice de validité de contenu
- À quel point chacun des items est pertinent et représentatif du construit d’intérêt (IVC-I)
- À quel point l’ensemble des items constitue un échantillon représentatif du contenu du construit d’intérêt (IVC-É)

How well did you know this?
1
Not at all
2
3
4
5
Perfectly
19
Q

Quelles sont les 2 grandes menaces à la validité de contenu?

A
  • Inclusion de contenu conceptuellement non pertinent
  • Sous-représentation conceptuelle de certains domaines du construit
How well did you know this?
1
Not at all
2
3
4
5
Perfectly
20
Q

À quoi réfère la validité de construit?

A

Degré de reproductibilité de la structure interne sous-jacente à l’instrument ainsi que les relations du construits d’intérêt avec d’autres construits externes

How well did you know this?
1
Not at all
2
3
4
5
Perfectly
21
Q

Quelles sont les deux façons de vérifier la validité de construit?

A

Validité factorielle
Validité convergente/discriminante

How well did you know this?
1
Not at all
2
3
4
5
Perfectly
22
Q

Avant d’entamer l’évaluation de la validité de construits, que faut-il bien connaître?

A

Théorie sous-jacente au construit

How well did you know this?
1
Not at all
2
3
4
5
Perfectly
23
Q

Qu’est-ce que le réseau nomologique?

A

Théorie expliquant le construit par le biais de ses interrelations avec d’autres construits

24
Q

Que devrait représenter le réseau nomologique?

A

la structure interne et les interrelations (ordonnées et prévisibles) entre les domaines ou sous-domaines importants du construit et des construits externes théoriquement importants

25
Q

V ou F? Le réseau nomologique concerne seulement les relations concurrentes.

A

Faux, peut inclure des facteurs étiologiques et des conséquences développementales plus distales

26
Q

Qu’est-ce que la validité factorielle?

A

Permet de vérifier si la structure factorielle théorique qui représente le construit est reproduite sur le plan empirique (avec des données)

27
Q

Quelles sont les 2 analyses factorielles?

A

Analyse factorielle exploratoire
Analyse factorielle confirmatoire

28
Q

Quel est le critère classique de l’analyse factorielle ?

A

Saturations factorielles de 0,4 ou plus pour les items associés à un facteur

29
Q

Quel est l’objectif de vérifier 2 aspects inter-reliés de la structure factorielle théorique (validité factorielle)?

A
  1. Items sont significativement (statistiquement) associés au facteur (construit)
  2. Dans le cas d’un instrument multidimensionnel : items sont-ils significativement associés au bon facteur et non-associés aux autres facteurs?
    Dans le cas d’une structure hiérarchique, est-ce que les sous-domaines sont significativement associés au domaine général (traits spécifiques associés à trait général)
30
Q

Quand est-ce qu’on utilise l’analyse factorielle confirmative?

A

À l’étape de la validation puisque la structure est supposée être connue.

31
Q

Définit la validité convergente.

A

Degré auquel les scores d’une échelle sont associés avec ceux d’une échelle existante qui mesure le même construit théorique.

32
Q

Définit la validité discriminante.

A

Degré auquel les scores d’une échelle ne sont pas associés avec ceux d’une échelle existante qui mesure pas le même construit théorique.

33
Q

Quelle est la méthode à utiliser pour évaluer la validité convergente/discriminante?

A

Matrice multitraits-multiméthodes

34
Q

Quel est l’autre nom donné à la validité de critère?

A

Validité pragmatique

35
Q

À quoi réfère la validité de critère?

A

Degré auquel les scores à une échelle sont associés à l’adaptation (ou la performance) des individus

36
Q

Quels sont les deux types de validité de critères?

A

Concomitante et prédictive

37
Q

Quelles sont les 2 façons d’estimer les validité de critère concomitante?

A
  1. Corrélation avec un critère indépendant
  2. Méthode des groupes contrastés
38
Q

Dans la validité de critère, les scores à l’échelle comparés à ceux d’un ____________________.

A

Critère externe

39
Q

En quoi consiste la validité de critère prédictive?

A

Degré auquel une mesure est capable de prédire un critère externe prospectivement i.e plus tard dans le temps. (besoin d’une étude longitudinale prospective)

40
Q

À quelle forme de validité se réfère la validité incrémentielle?

A

Validité de critère

41
Q

Qu’est-ce que la validité incrémentielle?

A

Il s’agit de la même chose que la validité prédictive mais on se demande si les scores à un test ont une valeur ajoutée pour prédire un critère externe (au-delà de la capacité d’autres facteurs (autres tests) prédictifs importants

42
Q

À quelle validité est liée à l’idée de “contrôle statistique” en analyse de régression?

A

Validité incrémentielle

43
Q

Dans quel contexte peut-on utiliser la validité incrémentielle?

A

Classification ; scores d’une échelle de dépistage qui procurent une meilleure sensibilité et spécificité que ceux d’une autre échelle similaire.
S’applique aussi à la révision d’un test ; les scores de la nouvelle version prédisent mieux un critère au-delà des facteurs de contrôle, ou encore procurent une meilleure sensibilité et spécificité que l’ancienne version

44
Q

Qu’est-ce que la théorie de la décision? À quel validité est-elle relié?

A

Déterminer à quel point les scores d’un test peuvent classifier adéquatement les personnes dans des groupes
Validité de critère

45
Q

Qu’est-ce que la sensibilité?

A

Capacité d’une échelle de procurer un résultat positif pour les pers présentant le statut qu’elle prétend identifier. Se rapporte à la capacité de détection. Vrais positifs

46
Q

Qu’est-ce que la spécificité?

A

Capacité d’une échelle de procurer un résultat négatif pour les personnes ne présentant pas le statut qu’elle prétend identifier. Se rapporte à sa capacité de discrimination. Vrais négatifs

47
Q

V ou F? Si on change le critère, la sensibilité et spécificité change.

A

Vrai

48
Q

Les indices de sensibilité et de spécificité sont des observations empiriques de la ____________________________ d’un test calculés à partir d’une classification de différents groupes diagnostiques.

A

performance rétrospective

49
Q

V ou F? Les indices de sensibilité et de spécificité renseignent sur la capacité de classification d’une échelle ou d’un test lorsque ce dernier est utilisé avec des personnes dont le statut est ___________________.

A

Connu

50
Q

En clinique, la tâche de l’évaluateur est plutôt de déterminer le __________________ qui peut être accordé à un résultat positif pour un individu classifié. On veut savoir la ___________ qu’un individu présente réellement le trouble, étant donné un résultat positif à un test. Pour ce faire, il faut calculer le ________________.

A

niveau de confiance
probabilité
Pouvoir prédictif

51
Q

Qu’est-ce que le pouvoir prédictif positif?

A

Probabilité qu’un individu avec un résultat positif sur une échelle ait réellement le statut prédit

52
Q

Qu’est-ce que le pouvoir prédictif négatif?

A

Probabilité qu’un individu avec un résultat négatifsur une échelle n’ait pas réellement le statut prédit

53
Q

Lorsque la prévalence est faible, le PPN est plus _________ que PPP.

A

grand

54
Q

Quels sont les 2 problèmes potentiels avec les indices de sensibilité, spécificité et pouvoir prédictif?

A
  1. Estimation de ces indices statistiques dépend de la validité et de la fidélité du critère utilisé
  2. Estimation de la prévalence réelle dans certains contextes cliniques peut être difficiles.
55
Q

Quels sont les 3 postulats à se rappeler de la fidélité/validité?

A

Validité est un préalable à la fidélité
La fidélité est une condition nécessaire à la validité
Les deux sont interreliées: les indices de validité sont directement influencés par le degré de fidélité