cours 1 exam 3 Flashcards
3 types de validité
1 contenu
2 pragmatique
3 construit
def genereale validité ?
La validité est le degré avec lequel un test mesure ce qu’il prétend mesurer, et cela seulement!
Pourquoi est-ce que le processus de validation est necessaire ?
Plusieurs instruments de mesure ne permettent pas d’observer directement le concept qu’on cherche étudier; alors, il est nécessaire de procéder au processus de validation
V/F test validité requis pour variable directement mesurable
F
V/F validité concerne l’instrument de mesure et l’interprétation des résultats de ses items ?
F (pas instru mesure)
L’évaluation de la validité est un processus continu de.. ?
d’accumulation de preuves ou d’évidences
On peut considérer le nom du test comme preuve ou évidence de ce que le test mesure ?
Faux
Un test peu être 100% valide ?
Non, une question de degré
3 grandes categ valid ?
construit
pragmatique
contenu
Qu’est-ce que validation de contenu ?
désigne la capacité d’un instrument à capturer (saisir) les aspects de contenu pour lesquels il a été conçu, et ceux-là seulement
Quand utiliser (normalement) la validation de contenu ?
lors de la construction de l’instrument de mesure (choix des contenus d’items)
par quelle méthode est estimé la validité de contenu ?
par la méthode des juges-experts
en validité de contenu, les experts vont se prononcer sur ? 5
clarté représentativité exhausitivé dimensionnalité pertinence
val contenu : Clarté
Est-ce que l’item est suffisamment clair, écrit de sorte que tt lmnde peut comprendre ? oui bah ok. Les experts vont se prononcer dans une echelle de 1 a 5 sur la clarté !
val contenu : représentativité
Chaque item présente 1 contenu, ces contenu touche la theorie ?
estceque l’item/contenu repres th ? experts prononcent dessus
val contenu : exhaustivité
ex th motiv humaine - plaisir = tête dans sa th a lui, alors est-ce que le test repres items qui couvrent TOUTE les elements de plaisirs de la théorie sur laquelle on se base ?
val contenu : dimensionnalité
test normalement multidim, on demande aux expert cet item fait partie desquels dimensions/facteur du test
val contenu : pertinence
désirabilité social proof ? question pertinente ? question à reformuler pour moin gêner gens ?
Validation contenu : type de stats ? (2)
Coefficient de Validité de Contenu (CVC)
Corrélation Intra-classe (ICC)
valid contenu qu’est-ce que le CVC ?
Coefficient de Validité de Contenu (CVC) - mesure la proportion (ou le pourcentage) des réponses des juges-experts qui sont d’accord sur certains aspects relatifs au contenu inhérent aux items de l’instrument;
valid contenu qu’est-ce que ICC ?
Corrélation Intra-Classe -mesure l’association des d’opinions entre juges-experts ayant un certain degré formation en termes de trait quantitatif (année exp etc)
Validation pragmatique désigne ?
désigne la capacité d’un instrument à prédire (aussi explicite et invariable que possible) le niveau de performance (comportement) d’un groupe d’individus par rapport à des situations qu’ils rencontreront (ou pourraient rencontrer) ultérieurement.
La validation pragmatique désigne la capacité de prédire le niv de perf dans quelle temporalité ?
présente ou future
Comment calculer validation pragmatique ?
calculer la corrélation entre les résultats obtenus par un même groupe d’individus à deux moments différents (pouvant être deux moments « présents » ou un moment présent et l’autre « future »).
% d’explication = variance
quelle analyse = good en pragmatique
analyse de regression pour predire variance d’une variable
Validation pragmatique
Que veut dire évaluer la qualité psychométrique de l’ensemble des items ?
signifie précisément déterminer dans quelle mesure les prédicteurs retenus permettent de fournir une estimation valide (explicite et invariable) des résultats qui seront obtenus ultérieurement (pourcentage de variance prédite ou « expliquée »).
V/F la cause effet est par design recherche
Non par regression (analyse)
2 types de validité pragmatique
validité concomitante/concourante
validité prédictive
Validation pragmatique : explication validité concomitante ?
on détermine le degré d’association entre les score obtenus au test et les scores obtenus à une mesure de référence (l’administration du test et de la mesure du critère pratiquement en même temps – temps présent);
Validation pragmatique : explication validité prédictive ?
on évalue la qualité des prédictions faites sur la base des résultats obtenus au test et une réalité future (administration du test et du critère séparée d’un laps de temps important, le test étant administré en premier);
stats utilies en validation pragmatique ?
Coefficient de Détermination (CD)
Corrélation Multiple au carré (R2)
Validation pragmatique CD ?
pourcentage d’explication de la variance entre deux mesures, sans considérer l’ordre des mesures;
Validation pragmatique R^2 ?(et, à la fois, Beta Standardisé - β):
pourcentage d’explication de la variance entre deux (ou plusieurs) mesures, en considérant l’ordre des mesures.
Validation de construit définition ?
La validité de construit se défini comme étant la justesse/certitude avec laquelle l’ensemble d’items d’un instrument de mesure psychologique permet d’obtenir des résultats conformes aux concepts (ou construits - ou traits) définis par son contexte théorique;
Qu’est-ce qu’indique la validité de construit ?
indique dans quelle mesure les énoncés d’un instrument sont cohérents (structure interne) avec la théorie (et les concepts y rattachés), définis de façon opérationnelle (construction des facteurs).
Validation de construit : les construits sont aussi considéré des… ? qui expliquent quoi ?
des mini-théories qui expliquent les relations entre différents concepts (ou contenus) évalués par les items. On les appelle aussi « facteurs » (ou dimensions, ou composantes) qui sont expliqués par l’association entre les concepts (contenus) inhérent aux variables directement mesurables (items).
voir analyse expl, fact confrim 1er ordre et fact confrim 2eme ordre
Facon reobuste de calculer validité de construit ? (approche corr)
Analyse multitrait multi methode
Analyse factorielle
Val construit : analyse multitrait multimethode ?
Une matrice de corrélation entre les résultats obtenus à différents traits (hétérotraits vs monotraits) et à différents méthodes (hétérométhode vs monométhode);
On s’attend à ce que la plus forte corrélation soit trouvé pour même trait-même méthode; et la plus faible corrélation pour traits différents-méthodes différentes;
Limite analyse multitrait multimethode de valid construit ?
Limite: demande beaucoup de temps de la part des sujets (faire plusieurs tests… Deux temps) + difficulté à trouver et faire la passation des plusieurs tests qui évaluent les mêmes traits.
temps ? validation de constuit ?
TOUJOURS deux temps à valid multitrait multimethode qui sont repres par les axes des abscisses x et des ordonnées y
Comprendre la matrice de validation de construit
Premiere diag = fidélité test retest pcq test de lui mm a 2 moment diff
Ensuite validité
Validité de construit : analyse factorielle (3 questions a se poser) et quel est le rationnel ?
Le rationnel de l’analyse factorielle est d’avoir au moins 3 (préférablement plus) variables qui sont corrélées entre elles sur une nouvelle variable qui retient l’essentiel de la variance commune. Cette nouvelle variable représente le facteur (voir le diapo « Relations entre différents concepts »). Questions typiques:
(1) Combien de facteurs l’analyse nous propose?
(2) Quel est le pourcentage d’explication de la variance?
(3) Est-ce que tous les items sont valides ou existe-il des items nécessitant une reformulation?
Regarder les colonnes d’analyse factorielle
(12345) avec % variance etc
V/F et expli : processus de validation de construit amène à un indice statistique unique
F Comme vous pouvez bien noter, le résultat du processus de validation de construit n’amène pas à un indice statistique unique mais bien à plusieurs résultats qui doivent être interprétés en lien avec les éléments théoriques sur lesquels le test est basé.
La validité de construit d’un instrument sera plus facilement mesurable si la théorie utilisée est claire et bien définie.
2 types de validité de construit ?
Validité convergente
Validité discriminante
types de validité de construits : Validité convergente
par exemple, tester la force de l’association entre les résultats des items de l’échelle cible et les autres qui mesurent le même construit. En ce sens, les résultats de l’outil devrait corréler avec les autres outils qui évaluent le même construit.
types de validité de construits : Validité discriminante
Validité discriminante: par exemple, vérifier à quel point les résultats des items de l’échelle cible s’écarte d’autres mesures de construits différents. En ce sens, l’outil ne devrait pas corréler de façon importante avec ces autres construits
