Cours 8 - Validité Flashcards
Validité
Définition validité:
Degré avec lequel test mesure ce qu’il prétend mesurer
cpt pas observable directement
Validité
La validité concerne quoi?
Interprétation résultats associés items –>PAS instrument mesure
Contexte utilisation
Validité
Contexte de l’utilisation d’un instrument par validité:
Démontrer preuves de validité à telle clientèle & conditions = contexte utilisation instrument relié au contexte
Validité
Pourquoi ne pas considérer nom test comme preuve validité?
Mesure variation cpt pas construit directement
Validité
Un test peux être 100% valide?
Non –> degré selon indices validités vérifiés
pas 0 ou 100% de validité
Validité
Comment étudier degré validité?
Méthodes statistiques
Validité
Sources de preuves validitié:
- Indices de contenu
- Indice de structure interne (construit, conceptuelle, théorique)
- Indice des relations avec autres variables (pragmatique, critériée, prédictive)
- Conséquences test
- Processus réponse = patron réponse
Validité contenu
Définition validité contenu:
Fait référence à tous les aspects d’un concept donné
ex: échelle dépression mesure dimension affective mais pas conative
Validité contenu
Besoin de quoi pour mesurer validité contenu?
Expert = connaissance reconnue du concept à mesurer
Validité contenu
Les juges-experts peuvent se prononcer sur quoi?
Contenu chaque item:
* clarté
* représentativité
* exhaustivité
* dimensionnalité =
* pertinence
Validité contenu
Validité contenu plus utilisée où?
Test académiques et professionnels
* items = connaissances requise domaine
Validité contenu
Validité contenu dans contexte clinique:
Correspondance entre items et contenu sx de la maladie
Validité contenu
Validité contenu évalue quoi?
Tous aspects théoriques concept qu’il est censé mesurer –> instrument couvre toutes parties pertinentes concept
Validité contenu
Qu’est-ce qui pourrait aidé juges-experts à évaluer?
Synthèse théorie trait latent
Contenu
Méthode Lawshe:
«La connaissance mesurée par cet item est-elle essentielle,** utile mais pas essentielle** ou pas nécessaire?»
* + moitié juges = validité
Contenu
Formule ratio validité contenue Lawshe:
CVR = (ne - N/2)/(N/2)
- CVR = ratio de validité de contenu;
- ne = nombre de juges indiquant que la connaissance est « essentielle »;
- N = nombre total de juges.
- [-1:1]
- Valeurs positives = au moins moitié juges évaluée essentielle
- Indicateur validité globale contenu test
Contenu
Validité contenu selon Standards:
Preuves peuvent inclure analyses empiriques à partir relation entre contenu chaque item et pertinence pour domaine étude
Contenu
Examine quand validité contenu selon Balbinotti?
Construction instrument
Pragmatique
Définition validité pragmatique:
Capacité instrument à prédire niveau performance groupe par rapport à situations
ex: évaluation QI et succès professionnel
Pragmatique
Comment mesurer validité pragmatique?
Corrélation (r^2)
* deux passations test simultané
* deux passations test moment différent
Analyse régression (R^2)
* prédire variance VD (présente/future) par VI
Pragmatique
Types validité pragmatiques:
- Validité concomitante/concourante = déterminer degré association entre score & mesure référence
- Validité prédictive = évaluer qualité prédiction par résultats test & réalité future
Pragmatique
Statistiques & coefficient:
- Coefficient détermination r² = % explication variance entre mesures sans considérer ordres mesures
- Corrélation multiple au carré **R² **= % explication variance entre deux mesures en considérant ordre mesures
Simple multiple = 2V
Multiple multiple = 1 VD & 2+VI
Multiple multiple = combinaison linéaire VI associés à VD
Validité construit
Définition validité construit:
Certitude avec laquelle ensemble des items permet obtenir résultats conformes aux concepts définis par contexte théorique
degré cohérences items avec théorie
Construit
C’est quoi entité hypothétique?
Tout pas mesurable directement
ex: intelligence, perso, compétence, motivation
Construit
Construit peuvent être considérés comme quoi?
Mini théories = explique relations entre concepts évalués par items & dimensions
Construit
Synonymes dimensions:
Facteurs
* expliqué par combinaison linéaire contenu items
Construit
Modèles explication phénomène est _____.
Exploratoire = explorer quelles corrélations valide ou non
Construit
Modèles relation:
Modèle 1
* Mesure construits par dimension
* Modèle exploratoire
Modèle 2
* Plus mesure construit mais mesure dimensions
* Quel item explique davantage dimension?
Modèle 3
* Connait items associés aux dimensions
* Modèle confirmatoire = confirmer modèles 1 & 2
Modèle 4
* Modèle confirmatoire
* création théorie
Construit
Comment calculer validité construit?
- Analyse multitrait-multiméthode
- Analyse factorielle
Construit
C’est quoi analyse mutlitrait-multiméthode?
= matrice corrélation résultats de différents traits (hétérotraits vs monotraits) & différentes méthodes (hétérométhode vs monométhode)
* + forte corrélation = même traits-même méthode
* + faible corrélation = différents méthodes-traits
* Traits (A,B,C) –> dépression (A), tristesse (B)
* Méthodes (1,2,3) –> Observation directe (1), Questionnaire papier (2)
Construit
Limites analyse m-m:
- Temps
- Difficile trouver & faire passation plusieurs tests évaluent mm traits
Construit
Analyse factorielle:
- Min 3 variables observées expliquées par variable lantente
- Facteur = latente
Construit
Questions typiques analyse facto:
- Combien de facteurs l’analyse nous propose?
- Quel est le pourcentage d’explication de la variance?
- Est-ce que tous les items sont valides ou existe-il des items nécessitant une reformulation/exclusion?
Construit
Problème saturation:
Item explique seulement un seul facteur (dimension) sinon item pas valide
ex: Dédiée mesure seulement consciencieux
Construit
Validation construit plus facilement mesurable quand?
Théorie utilisée claire et définie
Construit
Deux types validité construit:
- Validité convergente = force association entre résultats & items de l’instrument et autre instrument = mesure même construit (élevé)
- Validité discriminante = résultats items instrument s’écarte constuit différent = mesure construit différent (faible)
