Validité-fidélité Flashcards

1
Q

Nommez les 4 types de validité.

A

1- Vraisemblance (validité apparente; «face validity»)

2- Validité de contenu

3- Validité de construit

4- Validité de critère (ou pragmatique)

How well did you know this?
1
Not at all
2
3
4
5
Perfectly
2
Q

Expliquez la validité apparente (vraisemblance).

A

Le degré auquel une mesure semble adéquate et reliée à un construit spécifique selon le jugement de ceux qui sont évalués (non-experts qui sont évalués, ou représentants cliniques ou légaux reliés à la population ciblée, etc.)

Une mesure détient une bonne vraisemblance lorsque ceux qui l’utilisent jugent qu’elle semble pertinente pour mesurer ce qui doit être mesuré

Est-ce que les items et l’instrument ont «l’air valides» aux yeux de ceux qui l’utilisent (e.g., psychoéducateurs, enseignants, parents, etc.)

Souvent confondue avec la validité de contenu

Si l’instrument ne paraît pas valide ou vraisemblable pour ceux qui l’utilisent dans les situations concrètes d’évaluation, cela peut devenir une menace à la validité
(mesurer le niveau d’agressivité physique d’un enfant en lui faisant faire un dessin?)

How well did you know this?
1
Not at all
2
3
4
5
Perfectly
3
Q

Quels facteurs peuvent influencer la vraisemblance?

A
  • Contexte d’évaluation (incluant l’endroit physique de l’administration, les consignes, l’apparence physique de l’évaluateur, etc.)
  • Capacités cognitives des répondants
  • État psychologique et santé mentale des répondants
  • Personnalité des répondants
  • Motif de l’évaluation (désirabilité sociale [+ ou -])
    etc.
How well did you know this?
1
Not at all
2
3
4
5
Perfectly
4
Q

Expliquez la validité de contenu.

A

Il s’agit de porter un jugement sur la représentativité des items (questions) utilisés pour mesurer un construit

La plupart du temps établie de façon déductive

Est-ce que :
- Chaque item individuellement correspond au construit?

  • Tous les items d’une échelle considérés dans l’ensemble constituent un échantillon représentatif de tous les domaines (ou sous-domaines) expliqués par le construit d’intérêt?

Il est très difficile de faire un bon échantillonnage pour des construits psychologiques complexes – et ici, les statistiques ne sont d’aucune aide… ou presque

How well did you know this?
1
Not at all
2
3
4
5
Perfectly
5
Q

Quel aspect est central dans l’évaluation de la validité de contenu?

A

La représentativité est centrale :
- Tous les sous-domaines représentés

  • Éviter la sur- ou sous-représentation d’items des différents sous-domaines du construit

Avant de construire une échelle, il faut toujours décrire en détails et de la façon la plus compréhensive possible les différents domaines et sous-domaines du construit d’intérêt :

Exemple: Échelle de problèmes extériorisés

  • Quels sont les domaines inclus?
  • Quelle est l’importance relative de chacun?
  • Y a-t-il des sous-domaines selon la théorie?
  • Quelle est leur importance relative?
  • Avec quels items peut-on bien représenter ces domaines et/ou sous-domaines?
How well did you know this?
1
Not at all
2
3
4
5
Perfectly
6
Q

Validité de contenu - à partir de quoi les chercheurs définissent un construit (et donc, son contenu)?

A
  • Théories
  • Recherches empiriques (recension des écrits)
  • Connaissances et expériences professionnelles
  • Expériences personnelles
  • Rappelez-vous de l’effet des théories implicites de l’évaluateur – s’applique aux chercheurs aussi!
How well did you know this?
1
Not at all
2
3
4
5
Perfectly
7
Q

Quels sont les 2 types de validité de contenu?

A
  • Nominale
  • Consensuelle
    (groupe de spécialistes indépendants)
How well did you know this?
1
Not at all
2
3
4
5
Perfectly
8
Q

Il y a une façon d’estimer la validité de contenu empiriquement, comment?

A

On demande à des experts indépendants d’estimer si chacun des items de la mesure est pertinent et représentatif du construit d’intérêt

On leur donne généralement un choix de réponse pour systématiser et quantifier le tout :
pas du tout pertinent / représentatif = 0
un peu pertinent / représentatif = 1
assez pertinent / représentatif = 2
très pertinent / représentatif = 3

How well did you know this?
1
Not at all
2
3
4
5
Perfectly
9
Q

Validité de contenu - on peut calculer 2 types d’indices de validité de contenu, quels sont-ils?

A

Puisqu’on a des données numériques, on peut donc calculer un Indice de validité de contenu

Peut calculer un indice pour chaque item (IVC-I) et pour l’échelle (IVC-É) :

IVC-I = nombre d’experts qui ont jugé l’item représentatif (2 ou 3) divisé par le nbr d’experts

IVC-É = la proportion d’items jugés représentatifs (2 ou 3) – ou dit autrement, la moyenne des IVC-I – divisée par le nbr d’experts

How well did you know this?
1
Not at all
2
3
4
5
Perfectly
10
Q

Qu’est-ce que la validité de construit?

A

Il s’agit d’abord de vérifier la validité de la structure théorique sous-jacente à l’instrument ainsi que les relations du construit d’intérêt avec d’autres construits

How well did you know this?
1
Not at all
2
3
4
5
Perfectly
11
Q

Validité de construit - deux grande façons de la vérifier, lesquelles?

A
  • Validité factorielle

- Validité convergente-discriminante

How well did you know this?
1
Not at all
2
3
4
5
Perfectly
12
Q

Validité de construit - avant d’entamer ces évaluations, il faut connaitre…?

A

…la théorie sous-jacente au construit.

How well did you know this?
1
Not at all
2
3
4
5
Perfectly
13
Q

Validité de construit - Qu’est-ce que le réseau nomologique?

A

La théorie expliquant le construit par le biais des interrelations avec d’autres construits

Nomologie est «l’étude des lois», donc bien plus qu’une liste de domaines ou sous-domaines

Peut inclure une spécification des facteurs étiologiques et des conséquences développementales

How well did you know this?
1
Not at all
2
3
4
5
Perfectly
14
Q

Validité de construit - Qu’est-ce que la validité factorielle?

A

On veut vérifier si la structure factorielle théorique est reproduite sur le plan empirique (i.e., avec des données)

How well did you know this?
1
Not at all
2
3
4
5
Perfectly
15
Q

Validité de construit - Que veut-on vérifier avec la validité factorielle?

A

1- Les items sont-ils significativement (statistiquement) reliés au trait (construit) auquel ils devraient être reliés ?

2- La structure hiérarchique est-elle reproduite (items liés aux sous domaines, sous-domaines liés aux domaines, traits primaires et traits d’ordre supérieur) ?

How well did you know this?
1
Not at all
2
3
4
5
Perfectly
16
Q

Validité de construit - Quels sont les 2 types de validité factorielle?

A

1- Analyse factorielle exploratoire

2- Analyse factorielle confirmatoire

17
Q

Validité de construit - Quelle est la validité factorielle exploratoire?

A

On identifie des regroupements d’items pour lesquels les individus donnent des réponses similaires

(Si les individus ont tendance à répondre oui à la Q#1 ont aussi tendance à répondre oui à Q#5 et à Q#8, ces items seront donc dans un même facteur)

On impose aucune restriction à la matrice de corrélations (ou de covariances) entre les items

18
Q

Validité de construit - Quelle est la validité factorielle confirmatoire?

A

Le chercheur impose une structure stricte a priori à la matrice de corrélations (ou de covariances) et teste si elle correspond aux données

Méthode qu’il faudrait normalement employer à l’étape de la validation d’un instrument de mesure puisqu’on est supposé connaitre sa structure

19
Q

Validité de construit - qu’est-ce que la validité convergente?

A

C’est de mettre en relation notre échelle avec une autre (ou des) échelle existante qui se rapporte au même construit théorique

20
Q

Validité de construit - qu’est-ce que la validité discriminante?

A

C’est de démontrer que notre échelle ne corrèle pas avec une (ou des) échelle qui ne se rapporte pas au même construit

21
Q

Validité de construit - quel outil emploie-t-on généralement pour tester les validités convergente et discriminante?

A

Une matrice multitraits et multiméthodes

22
Q

Qu’est-ce que la validité de critère?

A

C’est de trouver si les scores à l’échelle peuvent prédire l’adaptation (ou la performance) des individus?

23
Q

Comment fait-on pour déterminer la validité de critère?

A

Les scores à l’échelle sont comparés à un critère externe

24
Q

Validité de critère - le critère externe devrait respecter quels éléments?

A

Le critère devrait être une mesure objective et indépendante, mais reliée conceptuellement au construit d’intérêt (réseau nomologique)

25
Q

Quels sont les 3 types de validité de critère?

A

1- Concomitante

2- prédictive

3- postdictive

26
Q

Quels sont les 2 façons de mesurer la validité de critère concomitante?

A

1- Corrélation avec un critère indépendant
(Intelligence avec réussite académique)

2- Méthode des groupes contrastés
Différences de scores entre des groupes - échantillon d’enfants déjà identifiés PC et on les compare avec un groupe d’enfants sans PC afin de déterminer si les scores peuvent distinguer les groupes

27
Q

Qu’est-ce que la validité de critère prédictive?

A

Est-ce que notre échelle est capable de prédire un critère externe prospectivement ?

(les scores à une échelle d’impulsivité à l’enfance peuvent-ils prédire l’abus de psychotropes ultérieur lorsque les individus sont au début de l’adolescence?)

28
Q

Qu’est-ce que la validité de critère postdictive?

A

Est-ce que notre échelle est capable de prédire un critère externe qui s’est passé avant l’évaluation ?

(les scores à une échelle de problèmes extériorisés à l’adolescence sont-ils corrélés avec la supervision parentale alors que l’individu était enfant, cette dernière évaluée rétrospectivement?)

Forme la moins étudiée en raison des limites des informations rétrospectives (mémoire)