4.2-Validité Flashcards

1
Q

Calcul bayésien

A

Vrai positif / (vrai positif+faux positif)

How well did you know this?
1
Not at all
2
3
4
5
Perfectly
2
Q

Pourquoi le biais de l’ordonnée à l’origine (test qui sous-estime par exemple), est-il moins pire que le biais de la pente?

A

Parce qu’on pourrait ajouter un bonus pour le groupe défavorisé pour rendre le test égalitaire

How well did you know this?
1
Not at all
2
3
4
5
Perfectly
3
Q

Qu’est-ce que le taux de base?

A

proportion d’individus qui présentent une certaine caractéristique au sein d’une population

How well did you know this?
1
Not at all
2
3
4
5
Perfectly
4
Q

Pourquoi on manque de précision quand on parle du manque de validité d’un test?

A

Le manque de validité est plus lié à l’objectif de la passation du test et non au test en tant que tel
ex. Le test de dépression est-il valide pour déterminer exemple, la gravité d’une dépression…

How well did you know this?
1
Not at all
2
3
4
5
Perfectly
5
Q

Qu’est-ce qu’un construit?

A

Trait ou une variable psychologique, donc une construction théorique

How well did you know this?
1
Not at all
2
3
4
5
Perfectly
6
Q

Comment la validité de construit est-elle exprimé graphiquement? (adéquation - test construit)

A

L’intersection du construit et du test représente la validité (le degré)

How well did you know this?
1
Not at all
2
3
4
5
Perfectly
7
Q

Qu’arrive-t-il par exemple si un questionnaire sur la dépression ne couvrent pas toutes les composantes du construit (ex, cognitive, émotive, comportementale)?

A

Le construit complet de la dépression est alors sous-représenté par le test

*Il pourrait aussi avoir une variance non reliée au construit ex. : devoir bien lire pour un test de math

How well did you know this?
1
Not at all
2
3
4
5
Perfectly
8
Q

Différence entre sous-représentation du construit et et variance non reliée au construit?

A

s-r du construit = degré auquel un test omet d’importants aspects du construit

variance n-reliée au construit = le degré auquel les scores du test subissent l’influence d’éléments extérieurs au construit en question

How well did you know this?
1
Not at all
2
3
4
5
Perfectly
9
Q

Types de validité?

A

-Validité d’apparence
-Validité de critère
-Validité de convergence/divergence
-Validité de construit
-Validité de conséquence (sauté en classe)
-Validité différentielle (biais de pente, biais de l’ordonnée à l’origine)

How well did you know this?
1
Not at all
2
3
4
5
Perfectly
10
Q

Qu’est-ce que la validité d’apparence?

A

tient au fait que le test semble mesurer le construit souhaité
*mais la validité d’apparence ne soit pas substituer la validité empirique
*utile dans le cas où la validité empirique de deux tests est égale
« a l’air » / pas scientifique

How well did you know this?
1
Not at all
2
3
4
5
Perfectly
11
Q

Vrai ou faux / l’accord interjuge a toujours de la validité

A

Faux, un groupe de personnes peut s’entendre sur le fait qu’une tasse de piètre qualité vaut 300 $

How well did you know this?
1
Not at all
2
3
4
5
Perfectly
12
Q

À quoi sert la régression multiple pour vérifier la validité et commence cela s’illustre-t-il en termes d’équation?

A

Parfois une seule VI n’explique pas toute la variance, mais autre volet aussi important

Y= a+b(x) +e
Régression multiple ajouter b2(x)
Y=a+ b1(x) + b2(x) +e

How well did you know this?
1
Not at all
2
3
4
5
Perfectly
13
Q

En termes de spécificité et sensibilité, que serait le but pour un test?

A

Avoir le plus de vrais positifs et de vrais négatifs possibles

How well did you know this?
1
Not at all
2
3
4
5
Perfectly
14
Q

Qu’est-ce qu’un test sensible vs un test spécifique?

A

sensible = détecte les choses
spécifique = détecte juste quand c’est nécessaire

How well did you know this?
1
Not at all
2
3
4
5
Perfectly
15
Q

Quel est le critère minimal en termes de sensibilité et de spécificité?

A

Test doit faire mieux que pile ou face sinon il fait quoi le test
(lien avec courbe de Roc)

How well did you know this?
1
Not at all
2
3
4
5
Perfectly
16
Q

Qu’est-ce que la validité de construit?

A

Est-ce que le test que vous avez fait correspond bien à votre construit théorique ?

How well did you know this?
1
Not at all
2
3
4
5
Perfectly
17
Q

V/F - Un test est automatiquement biaisé s’il y a une différence entre deux groupes.

A

Faux

How well did you know this?
1
Not at all
2
3
4
5
Perfectly
18
Q

Qu’est-ce que la validité de conséquences?

A

Qu’est-ce que ça coûte à l’organisation si vous l’utilisez et si vous ne l’utilisez pas?

How well did you know this?
1
Not at all
2
3
4
5
Perfectly
19
Q

Analyse factorielle exploratoire se fait dans quel logiciel?

A

SPSS, échantillon 1

How well did you know this?
1
Not at all
2
3
4
5
Perfectly
20
Q

Analyse factorielle confirmatoire se faire à l’aide de quel logiciel?

A

AMOS/Mplus +

How well did you know this?
1
Not at all
2
3
4
5
Perfectly
21
Q

3 précisions sur la validité à comprendre

A

-Un score doit avoir un but précis
L’entrevue est-elle valide pour déterminer la performance au travail?
-MMPI valide pour déterminer une pathologie?
-Une question de degré et pas tout ou rien *surtout comparativement aux autres test (C’est le GOLDEN ou pas)
-Validité VS exactitude des normes

How well did you know this?
1
Not at all
2
3
4
5
Perfectly
22
Q

Concernant l’adéquation test-construit il faut s’assurer que ue le test mesure le moins possible de

A

la variance non liée au construit
Ex. : construit du deuil / je pleure souvent peut être de la variance liée au deuil —- plus précis, je pleure souvent la perte de mon proche

How well did you know this?
1
Not at all
2
3
4
5
Perfectly
23
Q

2 types de validité de critère et explication…

A

concomitante : je corrèle mon test avec un critère present
ex. : test d’agressivité, coups de poing à la récré
concomitante (car deux éléments évalués en même temps)
predictive : critère d’évaluation vient plus tard, ex. agressivité, qui se retrouve en prison
*Plus difficile à faire, mais plus de retombées pk??? on veut savoir comment le client sera dans le futur

How well did you know this?
1
Not at all
2
3
4
5
Perfectly
24
Q

Différence entre validité de contenu et de construit?

A

Validité de contenu (théorique)
Selon la littérature

Validité de construit (statistique)
Selon l’analyse factorielle
Ex. : théorie d’intelligence multiple

How well did you know this?
1
Not at all
2
3
4
5
Perfectly
25
Q

Définition de validité de contenu précise

A

la relation existant entre le contenu d’un test et certains domaines bien définis de la connaissance et du comportement

How well did you know this?
1
Not at all
2
3
4
5
Perfectly
26
Q

2 applications principales validité de contenu

A

-échantillon représentatif de tous les éléments possibles du domaine
1-test de rendement scolaire
2-test d’aptitude professionnelle

How well did you know this?
1
Not at all
2
3
4
5
Perfectly
27
Q

De quel type de validité parle-t-on?

A

quelle pourcentage de % variance supplémentaire mon test ajoute

How well did you know this?
1
Not at all
2
3
4
5
Perfectly
28
Q

Vrai ou faux?Validité de contenu valide la validité de construit

A

faux c’est l’inverse

29
Q

Explique comment la validité de construit nie la théorie de l’intelligence multiple?

A

Item très corrélés entre eux même trop…. un seul facteur G (rocher de gibraltar) pour expliquer l’intelligence

30
Q

Donne un exemple de pourquoi la validité d’apparence peut être utile même si pas empirique?

A

selection de personnel / les items doivent representer bien la situation pour la personne qui passe le test, coherence, maintenir l’intérêt de la personne qui participle, policiers parcontre exemple vont s’attendre à faire tester ta santé mentale

31
Q

Quel test était le premier test à contourner la validité d’apparence et pourquoi??

A

MMPI - répertorié des items dans les notes des patients en psychiatrie, tels groupes, tels groupes sans qu’on sache pour toi

32
Q

Exemple de pourquoi la validité de contenu est utile en emploi?

A

représentatif des tâches ex. : sélection de questions 20%-30% sur le volet admin du travail des infirmières

33
Q

Quelles sont les deux catégories de prédiction de la validité de critère?

A

-validité Concomitante (en même temps)
-validité Prédictive (plus tard)

34
Q

Trois approches principales en termes de validité de critère?

A

-Critère externe et réaliste
-Contraste entre les groupes
-Autre test

35
Q

À quoi sert la validité critériée?

A

définir la relation entre les résultats au test et la position par rapport à un autre critère
(substituer le test au critère qui serait exemple plus évident à obtenir)

36
Q

Par quoi s’exprime la validité critériée externe?

A

Par le coefficient de corrélation de Pearson / de cette manière il est appelé coefficient de validité

37
Q

En termes de validité critériée, que réprésente chaque élément de la formule :
Y’=bx + a

A

Y’ = validité prédite du critère
X = résultat du test
b = pente de la droite de régression
a = ordonnée à l’origine

38
Q

barèmes : effets du d de cohen

A

telles que faible (0.2), moyenne (0.5) et importante (0.8) lorsqu’ils interprètent un effet

39
Q

Validité de critère : quel est le critère dans groupe contrasté?

A

la composition du groupe

40
Q

Avantage de validité de critère avec un autre test concomitant?

A

*avoir un critère comportemental pas si facile à aller chercher
*corréler deux tests entre eux

41
Q

Exemple de validité de critère avec un autre test?

A

test dépression = corrélé positivement avec test inventaire de Beck

42
Q

Validité avec d’autres tests = aussi…

A

validité convergente

43
Q

Le fait de croire que l’utilisation des mêmes mots ou de mots semblable pour désigner deux choses signifie que ces deux choses-là sont les mêmes

A

sophisme inductif de fausse analogie

44
Q

le fait de croire que deux choses sont vraiment différentes parce que leur nom contient des mots différents

A

sophisme déductif d’opposition

45
Q

Validité de critère, trois facteurs affectant le r

A

-linéarité(non fréquent)
-Homoscédascité ou non (moins fréquent, juste regardé nuages de point)
-Homogénéité du groupe (fréquent) (pareil dans le groupe, restriction de la variance, correlation affaiblit)

46
Q

Pk validité divergente n’est pas la même chose que groupes constrastés?

A

C’est pas tout à fait pareil pcq dans la validité divergente tu espères une corrélation nulle ou très faible avec un test différent de ton construit. Tandis que dans la validité par groupes, tu espères un score différent de tes 2 groupes sur ton test que tu cherches à valider.

47
Q

deux exemples qui illustre pk les critères utilisés ne sont pas tjrs bon?

A

Exemple How I Think Questionnaire et critère juridique
(influence autre…)

48
Q

Idéalement on vérifirait la validité convergente avec le ___________

A

Golden test

49
Q

Définition validité divergente/discirmante

A

pas corrélé avec qqch qui n’est pas le même construit).
ex. si on veut mesurer le deuil, on va vouloir différencier de la dépression

50
Q

Outil plus théorique que réellement utilisé… permettant d’analyser la validité convergente et discriminante

A

matrice multitraits multhiméthodes

51
Q

Quel type de corrélation est utilisée pour vérifier la validité selon plusieurs traits

A

régression multiple

52
Q

La corrélation ___________ est une technique cruciale pour déterminer____________

A

-multiple
-incrémentale

53
Q

Qu’est-ce que le validité incrémentale?

A

la quantité de données nouvelles et uniques qu’ajoute un test
Question à se poser
Est-ce que mon nouveau prédicteur apporte plus de variance que je n’avais pas

54
Q

À quoi sert la théorie de la décision?

A

Optimiser les résultats de décisions que l’a a prises en fonction de certains critères

55
Q

Un cas qui présente le même statut à la fois pour le test et pour le critère, c’est-à-dire que les résultats appropriés comprennent les cas dont les scores sont supérieurs aux point de coupure de critère du test ainsi que ceux dont les scores sont inférieurs aux points de coupure du critère et du test

A

résultat approprié (hit)

56
Q

Définition de faux positifs

A

les cas dans lesquels les scores sont supérieurs au point de coupure du test, mais qui représentent un échec par rapport au critère (cadran inférieur droit)

57
Q

Définition de faux négatifs

A

sont les cas dans lesquels les scores tombent sous le point de coupure du test mais qui représentent une réussite par rapport au critère

58
Q

En clinique, on veut juste….

A

des hits, soit des vrai positif et vrais négatif

59
Q

Spécificité et sensibilité : où doit se trouver la courbe de Roc?

A

doit être au dessus de la ligne de pile ou face sinon pas mieux ou pile ou face

60
Q

Quelle genre de question ça pose d’avoir trop de sensibilité éthique!?

A

question éthique… ca sert a quoi de donner un test avec plein de faux positifs
incarcérer plein de gens qui nont rien fait

61
Q

Quand est-ce qu’on emploie les notions de sensibilité et spécificité?

A

lorsqu’un test sert à classer les individus dans deux groupes (ex. critères groupes contrastés)

62
Q

sensiblité

A

degré auquel on pourra identifier correctement les membres du groupe critère

63
Q

spécificité

A

degré auquel le test détermine ou non les membres du groupe contraste

64
Q

Quels sont les deux facteurs qui influent sur la sensibilité et la spécifité d’un test

A

-degré de séparation entre les groupes
-emplacement du point de coupure

65
Q

Quand a la sensibilité augmente

A

la spécificité diminue

66
Q

2 bières comme point de coupure pour discrimer les alcooliques vs non-alcooliques =

A

trop sensible, pas assez spécifique pour détecter les non alcooliques

67
Q

Courbe de roc, dans le meilleur des mondes, quel devrait être le pourcentage sous la courbe?

A

100 %

68
Q
A