Brainscape's Knowledge GenomeTM

Browse over 1 million classes created by top students, professors, publishers, and experts.


See full index

Mesure, évaluation et dérontologie > Cours 9 - Validité > Flashcards

Cours 9 - Validité Flashcards

1
Q

Qu’est-ce que la validité ?

A

La validité d’un test est le degré avec lequel un test mesure ce qu’il prétend mesurer, et cela seulement !

How well did you know this?
1
Not at all
2
3
4
5
Perfectly
2
Q

Quelle est la question à se poser en ce qui a trait à la validité d’un test ?

A

Est-ce que je mesure vraiment ce que je suis censé mesurer ?

How well did you know this?
1
Not at all
2
3
4
5
Perfectly
3
Q

Vrai ou faux.

Plusieurs instruments de mesure ne permettent pas d’observer directement le concept qu’on cherche étudier

A

Vrai.

How well did you know this?
1
Not at all
2
3
4
5
Perfectly
4
Q

Que faut-il faire avec les instruments de mesure qui ne permettent pas d’observer directement le concept qu’on cherche à étudier ?

A

Il faut procéder au processus de validation.

How well did you know this?
1
Not at all
2
3
4
5
Perfectly
5
Q

Donne un exemple de ce que l’on peut mesurer directement.

A

Poids, taille.

How well did you know this?
1
Not at all
2
3
4
5
Perfectly
6
Q

Donne un exemple de ce que l’on ne peut pas mesurer directement.

A

L’intelligence, la personnalité.

How well did you know this?
1
Not at all
2
3
4
5
Perfectly
7
Q

Par exemple, que faut-il faire avec le concept de la dépression ?

A

S’assurer que l’instrument se rapporte uniquement à la dépression, et non pas à la tristesse, à la solitude, à l’ennui, etc.

How well did you know this?
1
Not at all
2
3
4
5
Perfectly
8
Q

Vrai ou faux.

La validité concerne l’instrument de mesure lui-même.

A

Faux.

How well did you know this?
1
Not at all
2
3
4
5
Perfectly
9
Q

Que concerne la validité ?

A

1- La validité ne concerne pas l’instrument de mesure lui-même.

2- Le contexte de son utilisation (clientèle et conditions).

3- L’interprétation des résultats de ses items.

How well did you know this?
1
Not at all
2
3
4
5
Perfectly
10
Q

Complète la phrase :

Le processus de ___ est une façon de déterminer le niveau de ___ qu’on peut avoir par rapport aux ___ qu’on fait en s’appuyant des ___ obtenus à un tests (par le biais des items, évidemment).

A

1- Validation
2- Certitude
3- Inférences
4- Résultats

How well did you know this?
1
Not at all
2
3
4
5
Perfectly
11
Q

Vrai ou faux.

La validité d’un instrument psychométrique est directement et uniquement lié au contexte dans lequel le processus de l’accumulation de preuves a été effectué.

A

Vrai.

How well did you know this?
1
Not at all
2
3
4
5
Perfectly
12
Q

Par rapport au contexte d’utilisation de l’instrument de mesure, que faut-il dire ?

A

On doit dire qu’on a démontré des preuves/évidence de validité avec telle clientèle et sous telles condition.

How well did you know this?
1
Not at all
2
3
4
5
Perfectly
13
Q

Qu’est-ce que l’évaluation de la validité ?

A

Un processus continu d’accumulation de « preuves » ou « d’évidences.

How well did you know this?
1
Not at all
2
3
4
5
Perfectly
14
Q

Vrai ou faux.

Il faut éviter de considérer le nom du test comme une « preuve » ou une évidence de ce que le test mesure.

A

Vrai.

How well did you know this?
1
Not at all
2
3
4
5
Perfectly
15
Q

Complète la phrase :

On ne dit pas qu’un test est valide, mais bien …

A

Que les items sont valides.

How well did you know this?
1
Not at all
2
3
4
5
Perfectly
16
Q

Que faut-il faire pour juger de la validité des items ?

A

Il faut interpréter les résultats.

How well did you know this?
1
Not at all
2
3
4
5
Perfectly
17
Q

Vrai ou faux.

Un test peut être valide à 100%.

A

Faux.

How well did you know this?
1
Not at all
2
3
4
5
Perfectly
18
Q

Complète la phrase :

La validité n’est pas une affaire de « ___ ___ ___ » (valide ou pas valide), mais plutôt une question de « ___ » selon les indices de validité vérifiés.

A

1- Tout ou rien

2- Degré

How well did you know this?
1
Not at all
2
3
4
5
Perfectly
19
Q

Vrai ou faux.

Il existe de multiples méthodes pour étudier la validité des instruments psychométriques (psychologiques), chacune ayant reçu un nom particulier.

A

Vrai.

How well did you know this?
1
Not at all
2
3
4
5
Perfectly
20
Q

Quelle est la « bible » de la validité ?

A

Standards for Educational and Psychologial Testing (2015)

How well did you know this?
1
Not at all
2
3
4
5
Perfectly
21
Q

Quelles sont les 3 grandes catégories pour recueillir les preuves ou évidences de validité ?

A
  1. Validation de contenu (contenu vs apparente)
  2. Validation pragmatique (critériée ou de critère, prédictive)
  3. Validation de construit (conceptuelle, théorique)
How well did you know this?
1
Not at all
2
3
4
5
Perfectly
22
Q

Qu’est-ce que la validité de contenu ?

A

Désigne la capacité d’un instrument à capturer (saisir) les aspects du contenu pour lesquels il a été conçu, et ceux-là seulement.

How well did you know this?
1
Not at all
2
3
4
5
Perfectly
23
Q

Quand examinons-nous la validité de contenu NORMALEMENT ?

A

Lors de la construction de l’instrument de mesure.

How well did you know this?
1
Not at all
2
3
4
5
Perfectly
24
Q

Dans la validité de contenu, que faut-il s’assurer ?

A

1- Que les contenus des items contribuent à évaluer les aspects fondamentaux de ce domaine étudié.

2- Et qu’ils forment un échantillon des items importants (qui représentent les contenus – création d’un pool d’items).

How well did you know this?
1
Not at all
2
3
4
5
Perfectly
25
Q

Dans la validité de contenu, comment la validité est habituellement estimée ?

A

Par la méthode des juges experts.

How well did you know this?
1
Not at all
2
3
4
5
Perfectly
26
Q

Qui sont les juges-experts ?

A

Les experts sont des personnes qui ont une connaissance reconnue du concept à mesurer et préférablement qui ont aussi une expertise dans l’élaboration d’instrument de mesure.

How well did you know this?
1
Not at all
2
3
4
5
Perfectly
27
Q

Combien de juges faut-il dans la méthode des juges-experts ?

A

3 à 5, pas plus, pas moins.

28
Q

Sur quel contenu de chacun des énoncés doivent se prononcer les juges-experts ?

A
  • Clarté
  • Représentativité
  • Exhaustivité
  • Dimensionnalité
  • Pertinence théorique
29
Q

Quelles sont les statistiques utilisées dans la validité de contenu ?

A

1- Coefficient de validité de contenu (CVC)

2- Corrélation intra-classe (ICC)

30
Q

Qu’est-ce que le coefficient de validité de contenu ?

A

Mesure la proportion (ou le pourcentage) des réponses des juges-experts qui sont d’accord sur certains aspects relatifs au contenu inhérent des items de l’instrument.

31
Q

Qu’est-ce que la corrélation intra-classe ?

A

Mesure l’association/corrélation des opinions entre juges-experts ayant un certain degré de formation en termes de trait quantitatif.

32
Q

Comment est aussi appelée la validité pragmatique ?

A

Validité de critère.

33
Q

Qu’est-ce que la validité pragmatique ?

A

Cette validation désigne la capacité d’un instrument à prédire (aussi explicite et invariable que possible) le niveau de performance d’un groupe d’individus par rapport à des situations qu’ils rencontreront (ou pourraient rencontrer) ultérieurement (dans un temps présent ou futur).

34
Q

Quelle est la procédure pour évaluer la validité pragmatique d’un instrument ?

A

La procédure la plus simple consiste à calculer la corrélation entre les résultats obtenus par un même groupe d’individus à 2 moments différents (pouvant être 2 moments « présents » ou un moment « présent » et l’autre « futur).

35
Q

Quelle est la MÉTHODE pour évaluer la validité pragmatique d’un instrument ?

A

L’analyse de régression.

36
Q

Quel est l’objectif de l’analyse de régression ?

A

Prédire la variance d’une variable (présente ou future) par le biais d’une (ou plusieurs) variable indépendante.

37
Q

Complète la phrase :

Évaluer cette qualité ___ de l’ensemble des items d’un instrument signifie précisément de déterminer dans quelle mesure les ___ retenus permettent de fournir une ___ valide (explicite et claire – qu’on peut démontrer empiriquement – et relativement invariable) des résultats qui seront obtenus ___ (pourcentage de ___ prédite ou « expliquée »).

A 
1- Psychométrique
2- Prédicteurs
3- Estimation
4- Ultérieurement
5- Variance
38
Q

Vrai ou faux.

Dans la validité pragmatique, nous avons la notion de cause/effet.

A

Faux.

39
Q

Quels sont les 2 types de validité pragmatique ?

A

1- Validité concominante/concourante

2- Validité prédictive

40
Q

Qu’est-ce que la validité concominante ?

A

L’administration du test et de la mesure du critère pratiquement en même temps – temps présent.

41
Q

Qu’est-ce que la validité prédictive ?

A

Administration du test et du critère séparée d’un laps de temps important, le test étant administré en premier – temps futur.

42
Q

Quelles sont les statistiques utilisées dans la validité pragmatique ?

A

1- Coefficient de détermination

2- Corrélation multiple (beta standardisé)

43
Q

Qu’est-ce que le coefficient de détermination ?

A

Pourcentage d’explication de la variance entre deux mesures, sans considérer l’ordre des mesures.

44
Q

Qu’est-ce que la corrélation multiple/beta standardisé ?

A

Pourcentage d’explication de la variance entre deux (ou plusieurs) mesures, en considérant l’ordre des mesures.

45
Q

Qu’est-ce que la validité de construit ?

A

La justesse/certitude avec laquelle l’ensemble d’items d’un instrument de mesure psychologique permet d’obtenir des résultats conformes aux concepts (ou construit, facteurs, traits) définis par le contexte théorique.

46
Q

Complète la phrase :

Dans de nombreuses situations en psychologie, on cherche à étudier des ___ ___ (construits ou traits), qui résultent d’une élaboration ___ et théorique (construis psycho-sociaux) : intelligence, personnalité, connaissances, compétences, dépression, motivation, intérêt, etc. Ces entités ne sont malheureusement pas directement ___ (on ne peut pas les mesurer directement). La seule façon de les mesurer, c’est par les ___.

A

1- Entité hypothétiques
2- Psychosociale
3- Accessibles
4- Comportements

47
Q

Comment étudier les entités hypothétiques ?

A

Par les comportements.

48
Q

Comment sont appelés aussi les construits ?

A
  • Mini théories

- Facteurs

49
Q

Qu’est-ce que les mini-théories expliquent ?

A

Les relations entre différents concepts (ou contenus) évalués par les items.

50
Q

Par quoi sont expliqués les facteurs ?

A

Par l’association linéaire entre les concepts (contenus) inhérent aux variables directement mesurables.

51
Q

Comment calculer la validité de construit ?

A

Analyse multitrait-multiméthode.

Analyse factorielle.

52
Q

Qu’est-ce que l’analyse multitrait-multiméthode ?

A

Une matrice de corrélation entre les résultats obtenus à différents traits (hétérotraits vs monotraits) et à différentes méthodes (hétérométhode vs monométhode).

53
Q

À quoi devrait-on s’attendre dans l’analyse multitrait-multiméthode ?

A

On s’attend à ce que la plus forte corrélation soit trouvé pour même trait-même méthode ; et la plus faible corrélation pour traits différents-méthodes différentes.

54
Q

Quelles sont les limites de l’analyse multitrait-multiméthode ?

A

Demande beaucoup de temps de la part des sujets (faire plusieurs tests… deux temps) + difficulté à trouver et à faire la passation des plusieurs tests qui évaluent les mêmes traits.

55
Q

Dans la validité de construit, combien y-a-t-il de temps ?

A

2, qui sont représentés par l’axe des y et x.

56
Q

Quel est le rationnel de l’analyse factorielle ?

A

D’avoir au moins 3 (préférablement plus) variables qui sont corrélées entre elles sur une nouvelle variable qui représente l’essentiel de la variance commune. Cette nouvelle variable représente le facteur.

57
Q

Quelles sont les questions typiques lors de l’analyse factorielle ?

A
  • Combien de facteurs l’analyse nous propose ?
  • Quel est le pourcentage d’explication de la variance ? –> colonne % cumulatif (prendre le dernier chiffre)
  • Est-ce que tous les items sont valides ou existe-t-il des items nécessitant une reformulation ?
58
Q

Vrai ou faux.

Le résultat du processus de validation de construit amène à un indice statistique unique.

A

Faux, mais bien à plusieurs résultats qui doivent être interprétés en lien avec les éléments théoriques sur lesquels le test est basé.

59
Q

Vrai ou faux.

La validité de construit d’un instrument sera plus facilement mesurable si la théorie utilisée est claire et bien définie.

A

Vrai.

60
Q

Qu’est-ce que la validité convergente ?

A

Tester la force de l’association entre les résultats des items de l’échelle cible et les autres qui mesurent le même construit. En ce sens, les résultats de l’outil devraient corréler avec les autres outils qui évaluent le même construit (dépression vs dépression = association plus forte).

61
Q

Qu’est-ce que la validité discriminante ?

A

Vérifier à quel point les résultats des items de l’échelle cible s’écarte d’autres mesures de construits différents. En ce sens, l’outil de devrait pas corréler de façon importante avec ces autres outils (dépression vs désespoir = association plus faible).

62
Q

Qu’indique la validité de construit ?

A

Dans quelle mesure les items d’un instrument sont cohérents (structure interne) avec la théorie (et les concepts rattachés), définis de façon opérationnelle (construction des facteurs).

63
Q

Qu’est-ce que l’analyse factorielle exploratoire ?

A

Les facteurs de premier ordre sont expliquées par toutes les variables manifeste. Un pourcentage de la variance des items explique le premier facteur et un autre pourcentage explique l’autre facteur.

  • On veut générer de la nouvelle information
64
Q

Qu’est-ce que l’analyse factorielle confirmatoire ?

A

Les 2 variables facteurs sont expliquées certaines des variables. Les items 1-2-3 (une partie des variances) expliquent le premier facteur les items 4-5-6 (une autre partie de la variance) expliquent l’autre facteur.

  • Le facteur 2 ne participe pas à l’explication du facteur 1 et vice versa.
65
Q

Pourquoi faisons-nous un processus de validation des preuves/évidences ?

A

Plusieurs instruments de mesure ne permettent pas d’observer directement le concept qu’on cherche étudier.

Mesure, évaluation et dérontologie (9 decks)

Brainscape helps you reach your goals faster, through stronger study habits.
© 2024 Bold Learning Solutions. Terms and Conditions