Résumé

Question 1

Validité de contenu

Answer 1

Définition précise du concept, construction d’un instrument, quelle mesure les divers aspects d’un instru sont représentatifs d’un concept (quali + quanti), indicateurs valides du concept mesuré, exhaustivité (toutes les facettes d’un concept), manière proportionnelle, évalue aussi l’administration

Question 2

Exemple de validité de contenu

Answer 2

Tests de rendement (tableau de spécifications), tests d’aptitudes prof (comparaison contenu du test et les caractéristiques du poste), aptitudes intell + inv. prof (comparaison contenu à la définition du concept)

Question 3

Validité critériée

Answer 3

Relation entre résultats de l’instrument et un autre critère considéré comme important indice du construit à l’étude. Prédire…

Question 4

Validité de construit

Answer 4

Degré de certitude que reflète les comp. théoriques du concept visé. cogérence avec la structure théorique. Chapeaute et comprend critériée et de contenu. Indices de validité de construit; corrélations avec autres versions de l’instrument (r plus grand que 0,8), corrélations convergentes, analyse factorielle (poids des items, relève les facteurs, indice de saturation)

Question 5

Validité critériée

Answer 5

Preuve pragmatique de l’utilité de l’instrument. Degré d’association, Corrélation (validité convergente avec corr. élevée ou validité divergente avec corr. faible). Également validité concomitante (association transversale en mesure simultanée), validité prédictive (association longitudinale en mesure à intervalle de temps). Capacité à distinguer les gens entre eux… ou prédire

Question 6

Nom du coefficient de corrélation

Answer 6

Pearson = coefficient de validité

Question 7

Mesure de la validité

Answer 7

Sous-représentaiton du construit (SC) et variance non-reliée au construit (VNRC)

Question 8

On mesure en

Answer 8

Intensité de validité, en degrés de

Question 9

La validité dépend de…

Answer 9

La fidélité

Question 10

Validité

Answer 10

capacité à mesure ce qu’il prétend mesurer

Question 11

Validité de contenu: temps

Answer 11

attention: relative au temps, nécessite d’être réévaluée

Question 12

Validité apparente

Answer 12

se parlent entre professionnels, ce qu’il semble mesurer, sentiment subjectif. Impacts potentiels sur le style de réponse de la pers. évaluée (désirabilité sociale, biais)

Question 13

Validité différentielle

Answer 13

Refère au fait qu’un instru est biaisée lorsqu’il fonctionne différemment selon les groupes.

Question 14

Validité incrémentale

Answer 14

Vérifie la plus value de notre tests vs autre existant

Question 15

Validité de conséquence

Answer 15

S’intéresse aux conséquences souhaitées ou non de l’usage, impact de la communication des résultats sur la perception de soi de la personne évaluée

Question 16

Degré de validité

Answer 16

r plus grand que 0,5 convergente = corrélation élevée et r plus petit que 0,5 divergente = corrélation faible

Question 17

Théorie de la décision associée à la validité critériée

Answer 17

capacité de différencier les personnes évaluées, aussi l’aspect prédictif

Question 18

Sensibilité

Answer 18

Capacité à identifier les “cas” = vrais positifs ; VP/ (VP+FN) x 100; 2 décimales

Question 19

Spécificité

Answer 19

Capacité à identifier les “non-cas” = vrais négatifs; VN/(VN+FP) x 100 ; 2 décimales

Question 20

Objectif de la théorie de la décision

Answer 20

Maximiser la sensibilité et la spécificité

Question 21

Critères les plus choisis

Answer 21

-Adapté à la clientèle
-à l’aise à l’utiliser et interpréter
-répond le plus au besoin client
-facilité d,utilisation
-coût

Question 22

Critères les moins choisis

Answer 22

-durée d’existence du test
-exhaustivité de la mesure
-habitude d’utilisation
-possibilité de formation
-réputation de l’instrument

Question 23

Critères qui devraient être plus élevés

Answer 23

-prop. psychométriques
-qualité des normes
-normes québécoises

Question 24

Sources de biais

Answer 24

-administration (influence en situation de testage; variance d’erreur)
-à l’évaluateur (non-respect de la procédure d’administration, attention à avoir une neutralité bienveillante)
-à la personne évaluée (anxiété, âge (plus jeune, plus affecté), dérogation prévue pour genre aveugle)
-au contexte (passation individualisée vs massif (dérangement, distraction)

Question 25

Choix d’un instrument

Answer 25

DECÉVVT
-Définir les besoins
-Examiner les bases conceptuelles
-Choisir le bon format
-Évaluer les normes
-Vérifier fidélité (plus grand que 0,7)
-Vérifier la validité (surtout prédictive)
-Tenir comptes des contraintes pratiques (langue, coût, ext.)

Question 26

Considérations de l’admin d’un instru

Answer 26

-Choisir un ou plusieurs (batteries de test)
-Individuel ou groupal (tjrs mieux indivi)
-Bonnes dispositions pour passer le test
-Rassurer la nature confidentielle
-Nécessaire de standardiser la procédure d’admin pour (comp., éviter de biaiser, attention aux consignes abrégées ou temps alloué non resp.)

Question 27

Sources d’info sur les instru

Answer 27

1-Répertoires d’instru publiées ou non publiées
2-Séries périodiques de compte rendus critiques
3-Répertoires électroniques en version élec
4-Recueils spécialisés
5-Ouvrages consacrés à un instrument
6-Manuels de psychométrie
7-Revues scientifiques
8-Catalogues d’éditeurs
9-Utilisateurs d’instruments

Question 28

Admin. informatisée +

Answer 28

-meilleure efficacité pour calcul des scores
-moins cher
-contrôle de l’ordre de présentation des questions
-limiter le nombre de réponses manquantes
-sauvegarde de données numriques et à des fins stat
-utilisation de la plus récente version
-à distance, au meilleur moment
-contrôle le biais évaluateur

Question 29

Admin informatisée -

Answer 29

-Certains tests ne sont pas informatisables
-Études requises pour adapter de papier-crayon à informatique
-Biais de non-familiarité de l’informatique
-Danger que la personne le prenne à la légère
À distance;
-savoir si c’est réellement la personne évaluée qui répond ou si elle a été aidée

Question 30

Comptabilisation des résultats

Answer 30

-cumuler les réponses aux items ou épreuves en 1 ou plusieurs scores
-manuel indique les infos sur la façon de faire
-à l’aide d’un calque ou d’une grille
-pondération spécifique
-indications sur comment gérer les rép. manquantes
-échelles de validité pour rép aléatoires ou dites mensongères ou tend. à l’acqui.

Question 31

Normes

Answer 31

-score brut n’est jamais interprétable seul
-scores sont interprétés en référant à des normes d’un échantillon normatif
-on situe le score d’un individu à l’intérieur de la distribution de scores des personnes de l’échantillons normatif (indice sur la performance et situe sa position relative)

Question 32

Critères importants des normes

Answer 32

moins de 10 ans et N plus grand que 1000, échantillon doit être représentatif d’une population de la clientèle définie. Avant d’utiliser un instrument sur une personne, s’assurer que des normes sont dispos pour sa population

Question 33

Normes intragroupes

Answer 33

score pondéré: exprimant le rang d’un score ou sa position relative à la moyenne de manière standardisée (comme score Z)

Question 34

2 méthodes de normes intragroupes

Answer 34

1-mettre en rang tous les scores; rang centile, déciles, quartiles ou stanines
2-position du score individuel p/r à la moyenne de l’échelle normatif; score Z, T, ou QI de déviation

Question 35

score Z

Answer 35

transfo de score brut
distance à la moyenne exprimé en écart-type
M=0 ÉT=1; 2 décimales
Z=(X-M)/ÉT
On ressort ensuite la proportion de valeurs se situant entre la moyenne et la valeur de Z. Lorsque Z plus grand que 0; 50%+ la proportion de Z. Lorsque Z plus petit que 0; 50%-proportion de Z.

Question 36

Avantages du score Z

Answer 36

part du score brut, on peut comparer des scores d’instruments différents ou des scores de sous-échelles

Question 37

Désavantage du score Z

Answer 37

décimales

Question 38

Score T

Answer 38

M = 50 ÉT= 10; T=50 + 10 x Z. Pas de décimales, pas de négatif. On commence par trouver le Z. Largement utilisé dans les tests inventaires de perso et intérêts.

Question 39

QI de déviation

Answer 39

pas de négatif. M =100 et ÉT = 15 ou 16. QI = 100 + 15 x Z. tests d’intelligence WAIS-WISC

Question 40

Quantiles

Answer 40

position relative
quartiles; 4 classes des 25%
quintiles; 5 classes de 20%
déciles; 10 classes de 10%
centiles; 100 classes de 1% (le plus utilisé, fréquemment confondu avec %)
PAS de décimales, l’unité la plus haute. 22,4% sera 23e centile

Question 41

Stanines

Answer 41

Standard nine. 9 catégories. Rend compte de la distribution normale.
M= 5 ÉT= 2, dérivées des rangs centiles. Moins précis que les autres normes intragroupes cependant.

Question 42

Instruments critériées

Answer 42

ex: passer un examen à 60%, on tient compte de l’intervalle de confiance. Interprétation plus simple.