Cours 4 Flashcards

1
Q

Qu’est-ce que le degré de validité détermine?

A

détermine les inférences que l’on peut faire à partir des scores d’une échelle

How well did you know this?
1
Not at all
2
3
4
5
Perfectly
2
Q

Est-ce que le nom d’un test ou d’une échelle constitue toujours un indice adéquat du construit mesuré ?

A

Non

How well did you know this?
1
Not at all
2
3
4
5
Perfectly
3
Q

Au lieu de demander si un test «mesure vraiment ce qu’il prétend ou devrait mesurer», que devrait-on demander?

A

est-ce que ce test est une mesure valide de ce construit, pour cette population et dans cette application particulière

How well did you know this?
1
Not at all
2
3
4
5
Perfectly
4
Q

La validité d’un test ou d’une mesure doit donc être évaluée relativement à trois choses, lesquelles?

A
  1. Est-ce qu’il mesure bien le construit qu’il prétend mesure ?
  2. Est-ce qu’il mesure bien ce construit pour la population ciblée (e.g., âge, niveau académique, groupe clinique particulier, etc.) ?
  3. Est-ce qu’il mesure bien ce construit, pour cette population et pour une application particulière (e.g., classifier dans des groupes diagnostiques, donner une valeur quantitative, etc.) ?
How well did you know this?
1
Not at all
2
3
4
5
Perfectly
5
Q

Quels sont les 4 différents types de validité?

A
  1. Vraisemblance
  2. Validité de contenu
  3. Validité de construit
  4. Validité de critère
How well did you know this?
1
Not at all
2
3
4
5
Perfectly
6
Q

Lequel des différents types de validité évalue la représentativité?

A

Validité de contenu

How well did you know this?
1
Not at all
2
3
4
5
Perfectly
7
Q

Nommez des facteurs pouvant influencer la vraisemblance?

A
  1. Contexte d’évaluation
  2. Capacité cognitives des répondants
  3. État psychologique et santé mental des répondants
  4. Personnalité des répondants
How well did you know this?
1
Not at all
2
3
4
5
Perfectly
8
Q

Quel types de validité porte un jugement sur la représentativité des items ?

A

Validité de contenu

How well did you know this?
1
Not at all
2
3
4
5
Perfectly
9
Q

Comment s’établie la validité de contenu?

A

De façon déductive

How well did you know this?
1
Not at all
2
3
4
5
Perfectly
10
Q

Quelles sont les 2 questions posées en ce qui attrait à la validité de contenu?

A

Chaque item individuellement correspond au construit ?
Tous les items d’une échelle considérés dans l’ensemble constituent un échantillon représentatif de tous les domaines (ou sous-domaines) expliqués par le construit d’intérêt ?

How well did you know this?
1
Not at all
2
3
4
5
Perfectly
11
Q

Qu’est-ce qui permet de déterminer si la vraisemblance est bonne?

A

Une mesure détient une bonne vraisemblance lorsque ceux qui l’utilisent jugent qu’elle semble pertinente pour mesurer ce qui doit être mesuré

How well did you know this?
1
Not at all
2
3
4
5
Perfectly
12
Q

Que veut-on dire lorsque l’on affirme que dans la validité de contenu, la représentativité est centrale?

A
  1. Tous les sous-domaines représentés

2. Éviter la sur- ou sous-représentation d’items des différents sous-domaines du construit

How well did you know this?
1
Not at all
2
3
4
5
Perfectly
13
Q

À partir de quoi les chercheurs définissent un construit (et donc, son contenu) ?

A

Théories
Recherches empiriques (recension des écrits)
Connaissances et expériences professionnelles
Expériences personnelles

How well did you know this?
1
Not at all
2
3
4
5
Perfectly
14
Q

Quels sont les 2 types de validation de contenu?

A

Nominale et consensuelle (groupe de spécialistes indépendants)

How well did you know this?
1
Not at all
2
3
4
5
Perfectly
15
Q

Les personnes validant la validation de contenu sont-elles indépendant ou dépendante? Comment s’organise-t-on pour systématiser leur réponse?

A

Indépendant
On systématise leur réponse en leur demandant de répondre entre 0,1,2,3
(pas du tout pertinent / représentatif = 0
un peu pertinent / représentatif = 1
assez pertinent / représentatif = 2
très pertinent / représentatif = 3

How well did you know this?
1
Not at all
2
3
4
5
Perfectly
16
Q

Dans la validité de contenu, puisqu’on a des données numériques, on peut donc calculer un …?

A

Indice de validité de contenu
Peut calculer un indice pour chaque item (IVC-I) et pour l’échelle (IVC-É)
IVC-I = nombre d’experts qui ont jugé l’item représentatif (2 ou 3) divisé par le nbr d’experts
IVC-É = la proportion d’items jugés représentatifs (2 ou 3) – ou dit autrement, la moyenne des IVC-I – divisée par le nbr d’experts

How well did you know this?
1
Not at all
2
3
4
5
Perfectly
17
Q

Que vérifie la validité de construit?

A

Il s’agit d’abord de vérifier la validité de la structure théorique sous-jacente à l’instrument ainsi que les relations du construit d’intérêt avec d’autres construits

How well did you know this?
1
Not at all
2
3
4
5
Perfectly
18
Q

Quels sont les 2 grandes façons de vérifier la validité du construit?

A

Validité factorielle

Validité convergente-discriminante

How well did you know this?
1
Not at all
2
3
4
5
Perfectly
19
Q

Que faut-il savoir avant de commencer la validation du construit?

A

Avant d’entamer ces évaluations, il faut connaitre la théorie sous-jacente au construit

20
Q

Qu’est-ce que le réseau nomologique?

A

La théorie expliquant le construit par le biais des interrelations avec d’autres construits (nomologie=étude des lois du cmpt)

21
Q

Est-ce que le réseau nomologique devrait représenter toutes les interrelations (ordonnées et prévisibles) entre les domaines ou sous-domaines à la base du construit?

22
Q

Que permet de vérifier la validité factorielle?

A

On veut vérifier si la structure factorielle théorique est reproduite sur le plan empirique

23
Q

Dans la validité factorielle, que veut dire facteur?

A

une réduction parcimonieuse de plusieurs variables (items, questions) en une variable latente ou hypothétique

24
Q

Quelles sont les 2 questions associées à la validité factorielle?

A
  1. Les items sont-ils significativement (statistiquement) reliés au trait (construit) auquel ils devraient être reliés ?
  2. La structure hiérarchique est-elle reproduite (items liés aux sous domaines, sous-domaines liés aux domaines, traits primaires et traits d’ordre supérieur) ?
25
Quelles sont les 2 type de validité factorielle?
Analyse factorielle exploratoire (aucune restriction) | Analyse factorielle confirmatoire (Imposte une structure stricte)
26
Qu'est-ce qu'identifie l'analyse factorielle exploratoire?
On identifie des regroupements d’items pour lesquels les individus donnent des réponses similaires
27
Quelle est le critère classique concernant l'analyse factorielle exploratoire?
Critère classique: on devrait avoir des saturations de 0,40 ou plus pour les items associés à un trait
28
Quel méthode il faudrait normalement employer à l’étape de la validation d’un instrument de mesure puisqu’on est supposé connaitre sa structure ?
Analyse factorielle confirmatoire
29
Qu'est-ce que la validité convergente?
Mettre en relation notre échelle avec une autre (ou des) échelle existante qui se rapporte au même construit théorique
30
Qu'est-ce que la validité discriminante?
Il faut aussi démontrer que notre échelle ne corrèle pas avec une (ou des) échelle qui ne se rapporte pas au même construit
31
Quel outil est l'idéal pour calculer la validité convergente/discriminante?
L’idéal pour tester la validité C/D est d’employer une matrice multitraits-multiméthodes
32
Quelle question doit-on se poser en ce qui concerne la validité de critère?
Est-ce que les scores à l’échelle peuvent prédire l’adaptation (ou la performance) des individus?
33
Dans la validité de critère, les scores à l’échelle sont donc comparés à un critère interne ou externe?
Externe
34
Quelle sont les caractéristiques que doit posséder un critère?
Le critère devrait être une mesure objective et indépendante, mais reliée conceptuellement au construit d’intérêt (réseau nomologique)
35
Quelles sont les 3 grand type de validité de critère?
Concomitante, prédictive et postdictive
36
Quelle sont les 2 méthode pour faire un test de validité de critère concomitant?
1. Corrélation avec un critère indépendant | 2. Méthode des groupes contrastés
37
Quelle question doit-on se poser si l'on veut faire un test de validité de critère prédictif?
Est-ce que notre échelle est capable de prédire un critère externe prospectivement, i.e. plus tard dans le temps ?
38
Quelle question doit-on se poser si l'on veut faire un test de validité de critère postdictif?
Est-ce que notre échelle est capable de prédire un critère externe qui s’est passé avant l’évaluation ?
39
Dans le test de validité de critère, qu'est-ce que la sensibilité?
Sensibilité: Capacité d’une échelle de procurer un résultat positif pour les personnes présentant le trouble qu’elle prétend identifier
40
Dans le test de validité de critère, qu'est-ce que la spécificité?
Capacité d’une échelle de procurer un résultat négatif pour les personnes ne présentant pas le trouble qu’elle prétend identifier
41
Les indices de sensibilité et de spécificité sont des observations empiriques de quoi?
De la précision rétrospective d’un test calculés à partir d’une classification de différents groupes diagnostiques (ou d’attributs autres)
42
Dans le test de sensibilité/spécificité, le statut des individus est-il connu?
Oui (sauf en clinique)
43
Par qui est déterminé les indices associées au test sensibilité/spécificité?
Ces indices sont déterminés par le score critère établi par les auteurs du test
44
En clinique et lors d'un test de validité de critère de type spécificité/sensibilité, quel est la tâche de l'évaluateur?
la tâche de l’évaluateur est plutôt de déterminer le niveau de confiance qui peut être accordé à des résultats positifs ou négatifs pour les individus qu’il évalue
45
Lors d'un test de validité de critère de type spécificité/sensibilité, que veut savoir l'évaluateur?
la probabilité qu’un individu présente réellement le trouble, étant donné un résultat positif à un test