Validité

Question 1

Quelle est la définition de la validité?

Answer 1

Est-ce qu’un test mesure ce qu’il est sensé mesuré?

-Le score a comme but de prédire une variable précise
-Selon un degré (corrélation) donc veut avoir le plus élevé possible

Question 2

Qu’est-ce qu’un construit sous-représenté? Avec exemple

Answer 2

Est-ce que le construit est représenté en intégralité ou a oublié des sous-construits?

Ex: mesure l’alcoolisme et mentionne la fréquence, le budget, etc. MAIS pas la dépendance = sous-représenté

Question 3

Qu’est-ce qu’une variable non pertinente?

Answer 3

Une variable qui n’a pas rapport avec le construit ou la population

Ex: Si je calcule l’alcoolisme auprès des italiens je ne vais pas considérer la quantité parce que ce serait non pertinent considérant que les italiens boivent beaucoup

Question 4

Quel est le truc pour ne pas avoir de variable non pertinente?

Answer 4

Partir avec une bonne définition complète pour y retrouver l’essentiel et discarter les variables non pertinentes

Question 5

Qu’est-ce qu’une mesure valide?

Answer 5

C’est la superposition du test et du construit sans construit sous-représenté ou variable non pertinente

Question 6

Qu’est-ce que la validité d’apparence?

Answer 6

Est-ce que le test “paraît” valide?
TRÈS subjectif

Question 7

Quelle est l’importance de la validité d’apparence?

Answer 7

Elle ne veut pas dire grand chose car très subjective MAIS elle importante pour la motivation des personnes font le test (si trop loin de la validité apparente, la personne perd de la motivation à faire le test)

Question 8

Quel est l’ambivalence à propose de la validité d’apparence?

Answer 8

Parfois pas utile car cause de la désirabilité sociale (ex: “ je mens souvent”)

Parfois utile car prépare la personne (ex: la personne sait à quoi s’attendre en entrevue pour son emploi)

Question 9

Qu’est-ce que la validité de contenu? Exemple

Answer 9

Les items que contient un test sont pertinents au construit visé (selon l’opérationnalisation)

Ex: Si j’ai un examen de psychométrie je ne vais pas séparer le nombre de question de manière proportionnelle aux chapitres (ex: 1/6 sur l’histoire, 1/6 sur validité), je vais plutôt y aller de manière proportionnelle au temps pour avoir plus de questions sur les chapitres les plus importants (ex: 3/6 sur validité)

Question 10

Qu’est-ce que la validité de critère?

Answer 10

Principe de base: relation du test avec un critère externe considéré comme important indicateur du construit

2 catégories de prédiction:
-Concomitante (en même temps)
-Prédictive (plus tard)

Question 11

Quelles sont les 3 approches principales de la validité de critère?

Answer 11

Critère externe et réaliste
Contrastes entre les groupes
Corréler avec autre test

Question 12

En quoi consiste l’aspect critère externe de la validité de critère?

Answer 12

À partir de la régression: forte corrélation positive si test prédit bien le comportement (différence entre y réel et y prédit sera petite)

-Pour prédire maintenant la position future d’une personne par rapport au critère
-Si difficile d’obtenir l’info sur le critère et on veut employer une méthode simple pour estimer la position d’une personne

Question 13

En quoi consistent les groupes contrastés de la validité de critère?

Answer 13

But: démontrer que le test est capable de différencier un groupe d’un autre (groupes ayant des résultats différents)

Groupe critère: ce que je cherche vraiment
Groupe contraste: point de comparaison

Question 14

À quoi devons-nous faire attention en ce qui concerne les groupes contrastées de la validité de critère?

Answer 14

**Attention:
-Parfois difficile de trouver un contraste significatif dépendamment des groupes utilisés (ex: Anxiété chez patients de TAG et étudiants en psycho)
-Contraste doit être pertinent. Ex: agressivité chez tueur en série VS étudiant udes = pas pertinent de connaître cette différence ALORS tueur en série VS criminel violent (plus difficile à distinguer les 2 groupes mais plus pertinent)

Question 15

En quoi la taille de l’effet a-t-elle un lien avec les groupes contrastés de la validité de critère?

Answer 15

+ le D de Cohen est élevé, plus la distinction entre ;es deux groupes est grande

Barème:
Petit: 0,2
Médium: 0,5
Large: 0,8

Question 16

Pourquoi veut-on idéalement des groupes les plus hétérogènes possible dans la validité de critère?

Answer 16

Parce que s’ils sont trop semblables (courbes normales collées), un plus grand nombre de scores permettent de faire partie des 2 groupes

Question 17

En quoi consistent les corrélations avec d’autres tests dans la validité de critère?

Answer 17

Corréler le test avec des tests valides déjà existants afin de savoir s’il est valide aussi

**Golden standard (simple étalon): corréler avec le meilleur test

Question 18

Quels sont les avantages des corrélations avec d’autres test pour la validité de critère?

Answer 18

Beaucoup moins long et moins coûteux
Ex: améliorer (mettre à jour, forme + courte) la version d’un test déjà existant
EX: Ex: Test sur la jalousie des années 80 ne prend pas compte de la surveillance de son partenaire sur internet

Question 19

Quelles sont les conditions qui affectent la corrélation?

Answer 19

Linéarité
Homoscédascité
Homogénéité

Question 20

Qu’est-ce que la contamination du critère?

Answer 20

Le résultat au test influe sur la valeur du critère

Ex: Tester une évaluation de psychométrie avec la moyenne générale mais beaucoup de cours avec Nic donc contamination du critère par le test

**Important de concevoir l’étude pour éviter la contamination

Question 21

Qu’est-ce que la validité convergente et discriminante?

Answer 21

Convergente: Corréler notre test avec un autre qui mesure le même construit

Divergente: Corréler notre test avec un autre mesurant un construit différent/contraire (corrélation nulle démontre que notre test est valide)

Question 21

Qu’est-ce que la matrice multitrait-multiméthode?

Answer 21

Multitrait (autre construit)
Multiméthode (autre test)

Notre construit et notre test
Autre construit et notre test
Notre construit et autre test
Autres construit et autre test

**très compliqué à faire donc moins appliqué en réalité

Question 22

En quoi consiste la régression multiple?

Answer 22

Signifie qu’il y a plusieurs prédicteurs: prédire y avec plusieurs bêtas DONC + il y a de prédicteurs, plus on diminue la variance inexpliquée

Ex: Étude sur l’adhésion à QS: prédite par âge, revenu, souveraineté, valeurs, etc.

Question 23

Peut-on ajouter pleins de prédicteurs uniquement pour augmenter la valeur expliquée?

Answer 23

Non! Pas pertinent d’ajouter des valeurs juste pour en ajouter (doit être basé empiriquement)
*chaque fois qu’on en ajoute = augmente ddl = affecte ratio f

Question 24

Qu’est-ce que la validité incrémentale/commune?

Answer 24

Ne pas avoir une variable dont la variance est déjà expliquée par une autre variable (2e VI doit avoir une variance différente)
Ex: Âge et préoccupations climatiques pour QS

Question 25

Qu’est-ce que le ratio f?

Answer 25

Est-ce que la différence entre les groupes est significative ou non?

Question 26

Qu’est-ce qui est meilleur: suivre les prédictions statistiques ou se fier à la prédiction clinique (intuition et expérience)?

Answer 26

Le résultat statistique est toujours meilleur que le résultat clinique (sauf si la banque de données est mauvaise)

Question 27

Si on détermine que l’achat d’une voiture provient du prix et du vendeur sympathique et qu’on va à deux shops avec deux autos au même prix, quel sera le pourcentage de variance expliqué par le vendeur sympathique?

Answer 27

100% !! Car Il n’y a pas de variance reliée au prix étant donné que c’est la même chose

Question 28

Qu’est-ce que la théorie de la décision?

Answer 28

Quelle décision je prends à partir du résultat du test?

Résultat approprié: “hit” = vrai positif, vrai négatif
Faux positif
Faux négatif (trop prudent de poser diagnostic)

Question 29

Quels sont les facteurs qui influent sur la proportion de résultats appropriés, de faux positifs et de faux négatifs?

Answer 29

-Le degré de corrélation entre test et critère: si parfaite = pas de faux, si nulle = autant de chances de faux que d’appropriés
-Point de coupure: faire un compromis entre faux négatif et faux positif
*Pas de réponse définitive (dépend de l’enjeu)

Question 30

Qu’est-ce que le taux de base?

Answer 30

Fréquence de la pathologie qui permet d’aller calculer la probabilité réelle d’un événement en fonction d’un score obtenu
*Change dépendant de la population
*Importance d’en prendre conscience avant de calculer le risque
*Gens s’empêchent souvent de faire des choses parce qu’ils imaginent un taux de base beaucoup plus élevé

Question 31

Qu’est-ce que les statistiques bayésiennes?

Answer 31

Mettre en relief le taux de base avec le taux de risque

*Si résultat positif, toujours mettre en relation avec le taux de base car pourrait être faux positif

Question 32

Qu’est-ce que la sensibilité?

Answer 32

Degré auquel le test permet d’identifier correctement les membres du groupe critère (vrai positif)

Ex: identifier correctement les personnes qui veulent se suicider pour les hospitaliser

Question 33

Qu’est-ce que la spécificité?

Answer 33

Degré auquel le test permet d’identifier correctement les membres du groupe contraste (vrai négatif)

Ex: Ne pas hospitaliser des personnes pour rien

Question 34

À quoi pouvons-nous nous fier pour prendre une décision sur le point de coupure?

Answer 34

Courbe roc: Courbe au dessus de la ligne pile ou face signifie que classifie mieux avec test que le hasard ET zone sous la courbe détermine les gens adéquatement identifiés

-Dans colonne des coordonnées de la courbe: on retrouve la sensibilité et spécificité pour chaque point = choisir selon les enjeux

*Importance d’être capable d’expliquer son choix

Question 35

Qu’est-ce que la validité de construit?

Answer 35

Justesse avec laquelle un test est structuré de manière à bien mesurer un construit: items vont dans bonnes dimensions

Ex: Construit sur l’anxiété a deux dimensions (cognitif et somatique) = test doit avoir des items qui représentent bien les deux

*Parfois une mauvaise question affecte la compréhension (ne mesure pas réellement le construit)
Ex: Question sur mémoire mais fait référence à un disque dure

Question 36

Qu’est-ce que l’analyse factorielle?

Answer 36

Permet de mesurer la validité de construit: détermine si les items sont corrélés avec les dimensions prévues

*Si item peut aller dans 2 catégories, on ajuste l’énoncé pour qu’il entre juste dans 1

Question 37

Quels sont les deux types d’analyse factorielle?

Answer 37

Analyse factorielle exploratoire: valide le modèle en ajoutant/enlevant des items aux dimensions

Analyse factorielle confirmatoire: Confirmer le modèle en l’appliquant à un nouvel échantillon

Question 38

Qu’est-ce que la validité différentielle (biais)?

Answer 38

Est-ce que le test prédit de manière égale (aussi bien ou aussi mal) pour différents groupes? (référence à la régression)

-Biais de la pente
-Biais de l’ordonnée à l’origine

Question 39

Selon la validité différentielle, est-ce qu’une différence de moyenne signifie automatiquement un biais?

Answer 39

Non! Normal que les détenus d’un pénitencier aient une moyenne supérieure sur l’échelle d’agressivité que les étudiants de psycho et peut suivre la même droite

Question 40

Qu’est-ce que le biais de l’ordonnée à l’origine?

Answer 40

Angle de la pente pareil, mais pas même ordonnée DONC si veut inférer le groupe B à partir du groupe A, il faut SOUS-ESTIMER le calcul pour arriver au vrai résultat

Question 41

Qu’est-ce que le biais de la pente?

Answer 41

Droites différentes pour chaque groupe donc pas capable de prédire de façon systématique pour les deux groupes (car bêtas différents)