Cours 8 - Validité

Question 1

Validité

Définition validité:

Answer 1

Degré avec lequel test mesure ce qu’il prétend mesurer

cpt pas observable directement

Question 2

Validité

La validité concerne quoi?

Answer 2

Interprétation résultats associés items –>PAS instrument mesure

Contexte utilisation

Question 3

Validité

Contexte de l’utilisation d’un instrument par validité:

Answer 3

Démontrer preuves de validité à telle clientèle & conditions = contexte utilisation instrument relié au contexte

Question 4

Validité

Pourquoi ne pas considérer nom test comme preuve validité?

Answer 4

Mesure variation cpt pas construit directement

Question 5

Validité

Un test peux être 100% valide?

Answer 5

Non –> degré selon indices validités vérifiés

pas 0 ou 100% de validité

Question 6

Validité

Comment étudier degré validité?

Answer 6

Méthodes statistiques

Question 7

Validité

Sources de preuves validitié:

Answer 7

• Indices de contenu
• Indice de structure interne (construit, conceptuelle, théorique)
• Indice des relations avec autres variables (pragmatique, critériée, prédictive)
• Conséquences test
• Processus réponse = patron réponse

Question 8

Validité contenu

Définition validité contenu:

Answer 8

Fait référence à tous les aspects d’un concept donné

ex: échelle dépression mesure dimension affective mais pas conative

Question 9

Validité contenu

Besoin de quoi pour mesurer validité contenu?

Answer 9

Expert = connaissance reconnue du concept à mesurer

Question 10

Validité contenu

Les juges-experts peuvent se prononcer sur quoi?

Answer 10

Contenu chaque item:
* clarté
* représentativité
* exhaustivité
* dimensionnalité =
* pertinence

Question 11

Validité contenu

Validité contenu plus utilisée où?

Answer 11

Test académiques et professionnels
* items = connaissances requise domaine

Question 12

Validité contenu

Validité contenu dans contexte clinique:

Answer 12

Correspondance entre items et contenu sx de la maladie

Question 13

Validité contenu

Validité contenu évalue quoi?

Answer 13

Tous aspects théoriques concept qu’il est censé mesurer –> instrument couvre toutes parties pertinentes concept

Question 14

Validité contenu

Qu’est-ce qui pourrait aidé juges-experts à évaluer?

Answer 14

Synthèse théorie trait latent

Question 15

Contenu

Méthode Lawshe:

Answer 15

«La connaissance mesurée par cet item est-elle essentielle,** utile mais pas essentielle** ou pas nécessaire?»
* + moitié juges = validité

Question 16

Contenu

Formule ratio validité contenue Lawshe:

Answer 16

CVR = (ne - N/2)/(N/2)

• CVR = ratio de validité de contenu;
• ne = nombre de juges indiquant que la connaissance est « essentielle »;
• N = nombre total de juges.
• [-1:1]
• Valeurs positives = au moins moitié juges évaluée essentielle
• Indicateur validité globale contenu test

Question 17

Contenu

Validité contenu selon Standards:

Answer 17

Preuves peuvent inclure analyses empiriques à partir relation entre contenu chaque item et pertinence pour domaine étude

Question 18

Contenu

Examine quand validité contenu selon Balbinotti?

Answer 18

Construction instrument

Question 19

Pragmatique

Définition validité pragmatique:

Answer 19

Capacité instrument à prédire niveau performance groupe par rapport à situations

ex: évaluation QI et succès professionnel

Question 20

Pragmatique

Comment mesurer validité pragmatique?

Answer 20

Corrélation (r^2)
* deux passations test simultané
* deux passations test moment différent

Analyse régression (R^2)
* prédire variance VD (présente/future) par VI

Question 21

Pragmatique

Types validité pragmatiques:

Answer 21

1. Validité concomitante/concourante = déterminer degré association entre score & mesure référence
2. Validité prédictive = évaluer qualité prédiction par résultats test & réalité future

Question 22

Pragmatique

Statistiques & coefficient:

Answer 22

1. Coefficient détermination r² = % explication variance entre mesures sans considérer ordres mesures
2. Corrélation multiple au carré **R² **= % explication variance entre deux mesures en considérant ordre mesures

Simple multiple = 2V
Multiple multiple = 1 VD & 2+VI

Multiple multiple = combinaison linéaire VI associés à VD

Question 23

Validité construit

Définition validité construit:

Answer 23

Certitude avec laquelle ensemble des items permet obtenir résultats conformes aux concepts définis par contexte théorique

degré cohérences items avec théorie

Question 24

Construit

C’est quoi entité hypothétique?

Answer 24

Tout pas mesurable directement
ex: intelligence, perso, compétence, motivation

Question 25

# Construit Construit peuvent être considérés comme quoi?

Answer 25

Mini théories = explique relations entre concepts évalués par items & dimensions

Question 26

# Construit Synonymes dimensions:

Answer 26

Facteurs * expliqué par combinaison linéaire contenu items

Question 27

# Construit Modèles explication phénomène est _____.

Answer 27

Exploratoire = explorer quelles corrélations valide ou non

Question 28

# Construit Modèles relation:

Answer 28

**Modèle 1** * Mesure construits par dimension * Modèle exploratoire **Modèle 2** * Plus mesure construit mais mesure dimensions * Quel item explique davantage dimension? **Modèle 3** * Connait items associés aux dimensions * Modèle confirmatoire = confirmer modèles 1 & 2 **Modèle 4** * Modèle confirmatoire * création théorie

Question 28

# Construit Comment calculer validité construit?

Answer 28

* Analyse multitrait-multiméthode * Analyse factorielle

Question 29

# Construit C'est quoi analyse mutlitrait-multiméthode?

Answer 29

= matrice corrélation résultats de différents traits (hétérotraits vs monotraits) & différentes méthodes (hétérométhode vs monométhode) * + forte corrélation = même traits-même méthode * + faible corrélation = différents méthodes-traits * Traits (A,B,C) --> dépression (A), tristesse (B) * Méthodes (1,2,3) --> Observation directe (1), Questionnaire papier (2)

Question 30

# Construit Limites analyse m-m:

Answer 30

* Temps * Difficile trouver & faire passation plusieurs tests évaluent mm traits

Question 31

# Construit Analyse factorielle:

Answer 31

* Min 3 variables observées expliquées par variable lantente * Facteur = latente

Question 32

# Construit Questions typiques analyse facto:

Answer 32

1. Combien de facteurs l’analyse nous propose? 1. Quel est le pourcentage d’explication de la variance? 1. Est-ce que tous les items sont valides ou existe-il des items nécessitant une reformulation/exclusion?

Question 33

# Construit Problème saturation:

Answer 33

Item explique seulement un seul facteur (dimension) sinon item pas valide ex: Dédiée mesure seulement consciencieux

Question 34

# Construit Validation construit plus facilement mesurable quand?

Answer 34

Théorie utilisée claire et définie

Question 35

# Construit Deux types validité construit:

Answer 35

1. Validité convergente = force association entre résultats & items de l'instrument et autre instrument = mesure même construit (élevé) 2. Validité discriminante = résultats items instrument s'écarte constuit différent = mesure construit différent (faible)