Chapitre 5: Validité Flashcards
Complet
V ou F? Si la constance augmente, la validité aussi augmente?
Faux, ex: accord inter-juge élevé, les juges n’ont pas nécéssairement raison
V ou F? La corrélation & la régression simple sont =?
Vrai, ≠ rég multiple
Qu’est-ce que la validité convergente?
Test corrèle avec un autre test déjà valide
Qu’est-ce que la Validité divergente/discriminante?
Test corrèle pas avec un construit qui est non-pertinent
V ou F? Un test ne peut jamais être 100% valide?
Faux, seulement s’il y a corrélation parfaite
Qu’est-ce que la validité?
Est-ce qu’un test mesure ce qu’il devrait mesurer?
Si je change une variable dans mon test, je dois m’assurer que mon test est valide pour cette variable?
Vrai
EXPLIQUE :
Validité : 3 précision supplémentaire - Un score dans un but précis!!!
≠ juste dire c’est valide; c’est valide pour quelque chose de précis (ex: MMPI est très valide mais ≠ valide pour TOUT, pas la même validité pour dépression vs bipolarité)
EXPLIQUE:
La validité est une question de degré et non pas de tout ou rien
= pas juste Oui, ou non valide, = je prédis à. 0.8… (l’autre test à 0.5)
Ex: sondage intention de vote ≠ qui va aller voter pour de vrai
Validité vs exactitude des normes?
pas parce que valide que exactitude des normes
- Obtenir + info sur criminel en lui demandant que dans son dossier
Ex: questionnaire = golden standard pour détecter criminalité
≠ golden pour normes
C.J. vs détenus –> C.J. parait comme anges mais ≠ anges dans la pop normale
Ex: questionnaire anxiété
en psycho, le questionnaire est valide, mais le - anxieux en psycho est probablement ≠ le moins anxieux de l’uni (normes ne sont pas applicables à tous les étudiants
Qu’est-ce que la mesure valide ?
Superposition du test & du construit
S’assurer que le test mesure le - possible de variance non reliée au construit
Qu’est-ce que le construit sous-représenté
Pas représenter une des partie de notre construit
(ex: dépression =
- émo
- comport
- Cogn
Si test ≠ question sur cogn ≠ bonne validité
Qu’est-ce que la variance non pertinente?
test de math avec français compliqué
≠ évaluer math
= évaluer français
Quelles sont les composantes de la validité de critère?
- Concomitante
- Prédictive
Qu’est-ce que la validité concomitante?
Corréler test avec critère présent (en même temps)
ex: test agressivité compte nombre de coups de points
Qu’est-ce que la validité prédictive?
comment il sera dans le futur
ex: test de dépistage agressivité à enfance & voir s’il sera en prison à l’âge adulte
Corréler test avec critère présent (en même temps)
ex: test agressivité compte nombre de coups de points
validité concomitante
comment il sera dans le futur
ex: test de dépistage agressivité à enfance & voir s’il sera en prison à l’âge adulte
validité prédictive
Quel est un point faible de la validité prédictive?
difficile de garder les participants
gens ont + le temps de changer
Qu’est-ce que la validité de construit?
Est-ce que je mesure bien le concept au plan théorique (définition de la variable)
Analyse factorielle : solution à 3 facteurs –> si sort 4 facteurs ≠ pas assez théorie ou test mal fait
qu’est-ce que la validité test-critère?
correl entre test & critère comportemental ≠ correl 2 tests entre eux
Quel est un autre nom pour validité structure interne ?
de construit???
Si test explique pas un % de variance supplémentaire (par rapport aux infos déjà existantes; ex: examens d’admissions) ≠ validité ____________
validité incrémentielle
Quel type de validité est la moins scientifique ?
Validité d’apparence
Qu’est-ce que la validité d’apparence?
Est-ce que le test parait valide
Quel est le premier test à contourner la validité d’apparence?
MMPI
Dans quel contexte est-ce que la validité d’apparence peut-elle être utile?
Emploi (lors de l’entrvue, ça nous donne une idée de à quoi ressemblerait l’emploi)
Quest-ce que la validité de contenu?
examine si les items ou questions du test couvrent bien l’ensemble des facettes ou dimensions d’un domaine spécifique
Qu’est-ce que la validité de critère?
Relation du test avec un critère externe
ex : test agressivité devrait avoir lien avec comportement agressif
La validité de critère comporte 3 approche principale :
1. Critère externe et réaliste
Qu’est-ce que ça veut dire?
Comportment observable
abus substance –> nb de consommations
La validité de critère comporte 3 approche principale :
2. Contraste entre les groupes
Qu’est-ce que ça veut dire?.
Si test est valide : permet de distinguer/discriminer les groupes
La validité de critère comporte 3 approche principale :
3. Autre test
Qu’est-ce que ça veut dire?.
Correler avec un autre test qui mesure construit similaire
Validité de critère - groupes contrastés?
+ ex de difficulté obtenir groupe contrasté
Test abus alcool
Etudiant uni vs centre désintox
devrait avoir des scores différents
diffi: clients TAT vs bac en psycho
V ou F? + la corrélation est parfaite, moins il y a d’erreurs de prédiction face à y
Vrai
Qu’est-ce qui est utilisé pour mesuré les groupes constrastés?
D de Cohen
Que mesure le D de Cohen? (formule)
ampleure de différence entre 2 gr & écart type
(X2-X1)/e.t.
(X2-X1)/e.t.
De quelle formule s’agit-il?
D de Cohen
Est-il normal d’avoir un fiable D de Cohen?
Oui
Que veut dire un faible D de Cohen?
Que la distinction entre les 2 groupes n’est pas si grande
+ de chevauchement
- de contraste
S’il y a - de contraste, qu’arrive-t-il au D de Cohen?
diminue
Si le D de Cohen augmente, est-ce que ça veut dire que les groupes se ressemblent + ou -?
Ils se ressemblent moins
Si on évalue 2 groupes qui sont similaires, est-ce que cela risque de nous créer un fort contraste?
Non, pas grand contraste
Quel serait le but du D de Cohen (en lien avec le chevauchement)?
Éviter le chevauchement = notre test discrimine bien
Contretement, que signifie le chevauchement (gr contrôle/gr traitement)
Possible que les gens du groupe contrôle vont mieux que ceux du groupe traitement
Façon d’assurer la validité de critère?
Corrélation avec d’autres test/golden standard
Si pour la validité il faut corréler un test au golden standard, pourquoi est-ce qu’on referait les tests? (ne sont-ils pas déjà crées)
- Viser pop diffé
- Définitions changent
Validité de critère: considération spéciales
- Conditions affectant r
- Relations fidélité validité
Validité de critère: considération spéciales:
Considérations affectant r
- Homoscédascité ou non
r (coef. corrél) = beta standardisé
erreur de prédiction constante au travers tous les points de la droit ou non
Validité de critère: considération spéciales:
Considérations affectant r
- Homogénéité ou non
+ participants sont similaires = restriction de la variable = - corrélation
Validité de critère: considération spéciales:
Relations fidélité validité
Très important
Validité de critère: considération spéciales: Validité du critère?
Jusqu’à quel point il est bon
ex: juges ont une mauvaise fidelité inter-juges
Validité de critère: considération spéciales:
Contamination du critère
Éxamen psychométri corrélé à moy général fin bac –> nic donne bcp de cours… = aaugmente artificielle,ent
V ou F? La prédiction clinique > prédiction statistique
Faux, statistique >
minimise erreurs…
Qu’est-ce que la théorie de la décision?
Passer test pour prendre ou pas une décision (ex: dépression ou non)
Faux positif?
Vous n’avez pas la maladie, mais le test affirme que oui
Faux négatif?
Vous avec la maladie, mais test affirme que non
Quel serait le ration parfait sensibilité vs spécificité
100% sensibilité
100% spécificité
Qu’est-ce que la sensibilité?
Identifier correctement les membres du groupe critère
Qu’est-ce que la spécificité
Degré auquel le test détermine ou non les membres du groupe contrasté
Si on augmente la sensibilité d’un test, qu’arrive-t-il à la spécificité?
Elle diminue
SI j’augmente la spécificité d’un test, qu’est-ce qui arrive à la sensibilité?
Elle diminue
Si j’évalue le risque suicidaire, vaut-il mieux être + sensible ou + spécifique
+ sensible
Si je m’apprêtes à donner un dignostique, vaut-il mieux être + sensible ou + spécifique
+ spécifique, lourdeur du diagnostique
Qu’est-ce que le taux de base?
fréquence de la pathologie
Quelles sont les méthodes pour évaluer la validité de construit?
- Structure interne
- Analyse factorielle
Qu’est-ce que l’analyse factorielle?
Évalue la structure interne de mon questionnaire :
Devrait mesurer tous les éléments de notre définition
Saturation est synonyme de …
Corrélation
est-il possible d’avoir une bonne validité de contenu, mais items mals construits?
Oui
Qu’est-ce que la validité différentielle?
Est-ce qu’un test prédit également (aussi bien/mal) pour différents groupes
V ou F? Une différence de moyenne signifie automatiquement un biais?
Faux
ex: Les détenus en pénitencier obtiennent un score moindre à l’échelle d’agressivité que les étudiants en psycho. Pt reflet de réalité
Biais de la pente
Corrélation entre test & critère ≠ même pour les deux groupes
V ou F? Si j’ai un biais de la pente, j’ai la même validité prédictive pour mes deux groupes?
Faux
Biais de l’ordonnée à l’origine
2 groupes ont la même corrélation, mais n’ont pas le même point de départ
Qu’est-ce qui pourrait causer la biais de l’ordonné à l’origine
Pas considérer une variable
ex: étude sur les notes en fonction de la durée de l’étude (chaque heure = 10% de plus)
- groupe 1 (autodidacte): mesure de base 50%
- groupe 2 (meilleur prof du monde) : mais assumer que leur score de base serait 50 –> au final leur score de base si ils n’ont pas étudier est 60%
= différentes ordonnées à l’origine
Est-il possible d’avoir absence de biais, mais différences de moyennes?
OUI
Dessine biais de la pente
Dessine biais ordonnée à origine
Quel est le minimun % de prédiction (ROC)
50%
doit au moins être > que aléatoire
