Examen 2 Flashcards
1
Q
3 “étapes” d’un test psychométrique/psychologique
A
Mesure, Évaluation, Analyse de données
2
Q
Définition de la mesure
A
Attribuer des chiffres aux construits psychosociaux selon des règles bien déterminées qui doivent établir une correspondance entre des cpts et des chiffres en respectant:
Cueillette de donnée, nature des données et propriété des construits
3
Q
L’application rigoureuse des règles dans le cadre de la mesure contribue à quoi ?
A
À ce que les résultats obtenus soient précis et reproductibles
4
Q
Le psychométriste se concentre sur 1 objectif. Quels sont les deux objectifs sur lesquels il peut se concentrer ?
A
- Passation des tests
- Élaboration des tests
5
Q
Si le psychométriste se concentre sur l’élaboration des tests (objectif), son attention sera portée sur quoi?
A
l’échantillon d’items
6
Q
Si le psychométriste se concentre sur la passation des tests (objectif), son attention sera portée sur quoi?
A
l’échantillon de personnes/participants / sur les résultats
7
Q
Quel domaine d’étude concerne la théorie et la méthodologie de construction et d’utilisation des échelles de mesure des caractéristiques mentales comme la mémoire
A
La mesure
8
Q
Domaine d’étude de la mesure concerne…
A
Concerne la théorie et la méthodologie de construction et d’utilisation des échelles de mesure des caractéristiques mentales comme la mémoire
8
Q
Exemples de caractéristiques mentales
A
Connaissances, traits de personnalité, composantes de la cognition (langage, intelligence)
9
Q
Un des seuls actes réservés au psychologue
A
L’évaluation
10
Q
Définition de l’évaluation
A
Processus technique qui vise à présenter une interprétation (jugement de valeur fondé) à une personne/groupes de personnes, en la comparant avec un barème préétabli
11
Q
2 choses à connaître avant de faire l’évaluation
A
connaître ce qu’on mesure (unité de mesure) et les limites du phénomènes (descriptifs, fidélité, validité, erreur, etc)
12
Q
Qu’est-ce qu’on mesure…
A
LA VARIANCEEEE(ex de la dépression) et non la dépression elle-même
13
Q
qu’est-ce qu’on veut dire par limites du phénomène?
A
Écart-type, indices de fidélité, analyses descriptives, etc.
14
Q
Comment on peut décrire l’évaluation?
A
Dynamique, source d’infos explicatives sur des phénomènes psychologiques
15
Q
Les résultats des évaluations psychologiques ont un grand impact sur quoi?
A
Personnes, groupes, société
16
Q
Comment on peut comprendre l’évaluation
A
Comme une démarche exploratoire et de communication qui soutient l’élaboration du plan d’intervention dans un cadre de soin et de rédaction d’un rapport d’expertise
17
Q
L’évaluation est un processus exhaustif qui sert à déterminer quoi?
A
Problèmes et troubles psychologiques
18
Q
Les analyses de données est un domaine important qui permet quoi
A
Faire progresser les connaissances et trouver réponses aux préoccupations. Implique la collecte et le traitement de données
19
Q
Ex de progression des connaissances
A
RIASEC de John Holland, on parlait de 6 composantes de la personnalité et ajd on parle de 7
20
Q
Analyses de données, processus qui nécessite compréhension approfondie de quoi ?
A
- Des méthodes statistiques
- une capacité à interpréter correctement les résultats
21
Q
L’analyse stats est utilisée pourquoi?
A
Synthétiser données sous forme de :
résumés numériques, tableaux, représentations graphiques
afin de :
Répondre à des questions, tester hypothèses, évaluer ou construire des nouveaux modèles explicatifs du comportement
22
Q
Qu’est-ce qu’il faut toujours prendre en compte concernant les analyses de données?
A
Les dernières recommandations de l’APA concernant les analyses de données (taille d’effet, inférences, estimateur)
23
Q
Qui propose de classer des échelles de mesure en fonction des propriétés des valeurs qui peuvent être rangées en 4 niveaux (ou dimensions)
A
Stevens 1946
24
Les corrélations et régressions sont basées sur quoi
Moyenne
25
Abérrations sur les échelles de type likert
Échelle de type likert qui contient l'absence de phénomène sauf si c'est pour discriminer les participants
26
4 types d'échelles
Ordinale, nominale, ratio, intervalle
27
Quelles stats ont fait sur une échelle nominale
Corrélations (phi, tétrachorique)
28
l'échelle nominale (5)
1. Chaque observation se trouve dans une seule catégorie
2. Son utilisation est limitée aux sciences humaines pcq fournit pas d'indications sur amplitude des attributs
3.Rigueur de la discrimination dépend de la capacité d'observation de l'évaluateur
4. Aucune opération arithmétique permise
5. Permettent de ranger les individus dans des catégories différentes sur la base de leur égalité selon une variable donnée
29
Stats sur échelle ordinale
Corrélations (spearman, polychorique)
30
8 points échelles ordinale
1. permettent de ranger individus selon la relation "plus petit" ou "plus grand"
2. Ordre relatif des individus est important (variable doi tavoir un ordre inhérent)
3. Symboles numériques sont attribués aux individus sont des rangs
4. Distances pas égales
5. On ne peut pas dire "combien de fois plus que"
6. permet pas de savoir si absence totale de l'attribut
7. relation entre observations est transitive : si A>B et B>C alors A>C
8. Par convention, on peut encore calculer une moyenne d'une échelle ordinale (likert seulement), mais est cible de fortes critiques
31
Critiques stats sur échelle ordinale
Par convention, on fait encore moyenne sur échelle likert mais critiqué
32
Quelles stats sur échelles d'intervalles égaux
Corrélations (pearson)
33
Échelles d'intervalles (4)
1. Également distant, selon le degré auquel ils présentent l'attribut, la distance qui les sépare peut être comprise comme une unité linéaire de mesure (et cela ouvre tout en espace au domaine de la statistique)
2. Permettent d'ordonner les individus, prennent en compte la distance existante entre eux
3. L'échelle d'intervalle peut être transformée en ordinale, mais pas l'inverse
4. Permettent la mesure des différences entre les degrés de présence des attributs, mais elles n'indiquent pas l'amplitude absolue de ces degrés, car elles n'admettent pas le zéro absolu - le point zéro est défini de façon arbitraire
34
Échelle proprotionnelle/Ratio quelles stats
Corrélations (pearson)
35
Échelle de ratio 4 points
1. Ordonnement, prend en compte distance, zéro absolu (absence de caractéristique mesurée)
2. Chiffres représentent le degré de présence d'un attribut chez un individu
3. On peut établir que l'individu a le double du degré de l'attribut présenté par l'individu 1
36
Quelle est la seule échelle qui accepte l'absence d'un phénomène
Ratio
37
La classification des échelles de mesure c'est un affaire de ___________ et _______________
Convention et utilité
38
Vrai ou faux, par convention, les données relatives aux attributs psychologiques sont encore acceptées comme compatibles avec les techniques puissantes d'analyse stats paramétrique?
Vrai
39
Utilité des échelles de mesure
Auteurs ont tjrs accepté l'utilisation de logiciels stats avec ressources d'analyses (estimateurs) limités parce qu'historiquement pas bcp d'option. Les logiciels disponibles avaient le stigma d'être utiles. Actuellement, la notion d'utilité est remise en question avec le développement de nouveaux logiciels.
40
Quel problème comporte la classification et les échelles de mesures
problème d'échantillonnage
41
Qu'est-ce que le problème d'échantillonnage?
ne pas sélectionner bon échantillon
42
2 types d'échantillons
individus et ontenu
43
V ou F, il est possible de gérer 2 échantillons simultanément (d'individu et d'items)
Faux
44
Comment faire face au problème d'échantillonnage
Tenir compte explicitement d'un échnatillon, en gardant à l,esprit que l'autre peur influencer négativement les résultats
45
Que dit l'approche préconisé lorsqu'on fait face au problème d'échantillonnage
Utiliser un échantillon d'individus suffisamment grand pour que l'erreur 'échantillonnage soit minime. Le problème de représentativité de l'échnatillon du contenu des items du test devient alors la préoccupation centrale du psychométriste
46
Qu'est-ce qu'on peut utiliser comme normes pour interpréter les scores
les centiles
47
considérations initiales des normes et interprétation des scores
Dans le but d'établir de façon plus précise la position d'une personne à l'intérieur de l'échantillon normatif, un score brut doit être transformé en une mesure relative
48
2 fonctions des centiles
1. déterminent position de l'individu à l'intérieur de l'échantillon normatif, en permettant de comparer sa performance à celle des autres personnes
2. permettent de comparer directement la performnce d'une même personne à des différents tests ou moments
49
Pourquoi est-ce intéressant d'utiliser les centiles
normes parfois trp larges, si on veut de la précision, la moyenne pas vrm best option. Avec les centiles, on peut dire que 110e centile est plus grand que 60e centile, moyenne on ne peut pas dire si + ou -
50
Les centiles sont ...
score brut et relative
51
comment interpréter (en centile) : 28% des personnes réussissent 15 problèmes dans un test de raisonnement
un score brut de 15 = 28e centile, plus le centile est bas, plus le score de l'individu est faible
52
centile d'un score brut inférieur ;a tout autre score obtenu dans l'échnatillon normatif ?
0, C(0)
53
Centile d'un score brut plus élevé que tout autre score de l'échantillon normatif
100, C(100)
54
avantages des centiles (4)
Facile à calculer
Facilement compris
Universellement applicables
Conviennent à tous les types de tests
55
Inconvénient des centiles
Inégalité des distances entre les unités
56
Échelle de mesure et stats à faire avec centiles
Ordinale, corrélations spearman/polychorique
57
Quand faire spearman/polchorique?
0 pas absolu, pas de linéarité
58
Pourquoi on fait spearman/polychorique avec centiles
0 non absolu, pas de linéarité
59
À quoi fait référence l'analyse d'items dans le cadre de la psychométrie
aux analyses statistiques utilisées pour sélectionner les meilleurs items d'un test psychologique/psychométrique
60
comment on sélectionne les meilleurs items/qu'est-ce qu'on fait avec les items
inclure, retirer, maintenir
61
5 stats/normes dans l'analyse d'items
1. Moyennes/écart-type
2. Analyse de corrélation inter-item (matrice de corrélation)
3. Alpha de cronbach
4. Statistiques item-total
5. Autres stats/stats complémentaires
62
L'alpha de cronbach ordinal fourni quel genre d'Estimateur
un estimateur congénérique
63
alpha de cronbach pas ordinal fourni quel genre d'estimateur
tau-équivalent
64
qu'est-ce que la tau-équivalence
les items ont la même importance
65
Omega a quel genre d'estimateur
Congénérique
66
Que dois inclure une interprétation de résultats
force, sens, niveau de signification, coefficient de détermination
67
calcul du coefficient de détermination
valeur corrélation x elle même
68
forces de corrélations
<30 = faible
3049 = modérée
>50 = forte
69
Compléter : Les corrélations sont en majorité classifiées comme modérées-fortes (entre r(109)>0,206 et r(109)<0,834), positives (conditions adéquate pour l'analyse d'items) et probablement significatives (condition non testée). Ces résultats suggèrent....
Que quelques items (les plus faibles corélations) pourraient être des candidats à élimination du pool d'items de cette dimension
70
Qu'est-ce qu'on fait pour vérifier le nombre de contenu par item
Il faut que le % variance réelle soit plus grand que le %de la variance randomisée et plus grand que % la variance au percentile 95
71
Comment vérifier la variablité des items
ÉT doit être plus petit que 1/2 de la moyenne et variance doit être plus grande que la moyenne
ÉT < X/2 < Variance
72
Calcul coefficient de corrélation
1. calculer somme, moyenne des 2 variables (X,Y)
2. calculer différence entre moyenne et chaque résultat, dans chaque variable
3. faire ces résultats de différence avec la moyenne exposant 2
4. faire multiplications des différences de moyennes entre chaque variable
5. calculer écart-type de chaque variable
6. calculer f corrélation
73
Quoi pour effectuer Analyse de corrélation inter-items
Grand nombre d'items candidats est présenté à un large échantilon ed paricipants de la population cible
74
Combien d'item de + idéalement dans analyse corrélation inter-item
5 à 10 fois + d'items candidats que la quantité finale souhaitée d'items du test/de la dimension
75
Que font les chercheurs dans l'analyse de corrélation inter-items
Appliquent diverses procédures stats basées sur corrélations afin d'éliminer les items moins satisfaisants
76
Critères pour éliminer items
ITEMS :
1. pas d'accord avec contexte exploré (ex : qualitative)
2. moyennes extremes (1 ou 5 dans échelle de likert)
3. peu de variation (1.1, 1.2, 4.8 4.9)
4. fortement corrélé (0.90+)
5. faiblement corrélés avec totalité des items restants
77
que fait la fidélité
Mesure qualité du test, degré de précision et de constance des scores obtenus par un test. Plusieurs dimensions de cette mesure sont importantes
78
Fidélité est formellement définie comme...
le rapport de la variance vraie à la variance totale du test
79
À quoi sont liés les critères de fidélité d'un test psychométrique
sont liées à sa précision et à sa constance (au temps). On espère que les score d'un test doivent présenter la plus petite marge d'erreur (variance d'erreur) possible
80
Qu'es-tce qu'on espère en fidélité par rapport à l'erreur
plus petite marge d'erreur possible (variance d'erreur)
81
Rapport entre corrélation, variance d'erreur et variance vraie
Plus corrélation = - erreur = + variance vraie
82
formule pour variable observable, variance vraie et variance d'erreur et que dire de ce modèle
X=t+e, modèle non défini
83
qu'est-ce qu'on veut pour augmenter fidélité
augmenter variance vraie et diminuer erreur, qui donne l'augmentation des corrélations
84
la variance d'erreur est réduite si...
les conditions de testage uniformes sont maintenues
85
qu'est-ce que les conditions de testage
1. environnement
2. consignes
3. limites de temps
4. climat interpersonnel
86
v/f aucun test n'est 100% fidèle. Quelle en est son importance?
vrai, importance du rapport sur le degré de fidélité (indice de fidélité) pour tout test
87
sous quelle réserve l'indice de fidélité caractérise bien le test
que le test soit administré dans les mêmes conditions standardisées et à des personnes similaires à celles qui composent l'échantillon normatif (caractéristiques de l'échantillon devraient être présentées ainsi que le type de fidélité)
88
qu'exprime le coefficient de fidélité?
corrélation, comprise entre 1 et 0
89
minimum et maximum corrélation/coefficient de fidélité
0.80 pour clinique
0.7 pour recherche
90
tests d'intelligence ont quoi comme coefficient
0.85 ou 0.90
91
V/F on veut stabilité et précision dans les tests psycho
vrai
92
à quoi il faut faire attention lorsqu'on veut augmenter la fidélité
attention pas trop augmenter corrélations pcq engendre colinéarité
93
types de fidélité
1. test-retest 2.versions parallèle 3. Homogénéité 4. bissection 5. inter-juges
94
test retest explication
administer même test aux mêmes sujets
95
c'est quoi le coefficient de fidélité dans fidélité test-retest
corrélation entre scores obtenus par les mêmes personnes au cours des deux administrations
96
qu'indique le coefficient de fidélité test retest
l'ampleur que les scores peuvent être généralisés à différentes occasions.
97
relation fidélité et score des sujets test retest
+ fidélité test-retest = - scores sont susceptibles d'être affectés par les sources d'erreurs
98
que comprend les sources d'erreur
comprennent fluctuations aléatoires de la performance d'une session à l'autre
99
fluctuations peuvent résulter de quoi
conditions de testing mal contrôlées ou changement internes du sujet entre les passations
100
quel genre d'erreur est souhaite et non souhaitable
erreur aléatoire souhaitable, pas une tendance d'erreur
101
moyenne d'une fluctuation aléatoire (erreur aléatoire)
M=0
102
plus le coefficient de corrélation test-retest est élevé...
plus l'instrument a une bonne fidélité (stabilité) temporelle
103
avantages test-retest
1. stabilité des résultats : résultats peuvent être reproduits
2. indicateur de qualité : excellent indicateur de qualité métrique d'un instrument de mesure psychologique
104
inconvénients test retest
1. effet de pratique
2. changement d'opinion
3. intervalle entre les deux administrations/passation
105
relation entre intervalle de temps et corrélation dans fidélité test-retest
plus d'intervalle de temps = moins de corrélation
106
version parallèle explication
deux versions différentes mais équivalentes en terme de contenu, difficulté, etc. , aux mêmes sujets.
107
coefficient de fidélité dans fidel. parallèle
coefficient de corrélation entre les scores de deux passations
108
précautions pour assurer parallélisme dans fidélité versions parallèle
1. items même nombre, format, contenu
2. item même niveau de difficulté stastistiquement (p<0.05)
3. Passation (équivalence consignes, minutage, exemples, etc)
109
inconvénients versions parallèles
1. coute cher et temps
2. équivalence imparfaite
110
l'équivalence imparfaite s'ajoute à quoi dans versions parallèles
fluctuation s'ajoute à l'erreur de mesure, ce qui donne une suretimation de l'erreur
111
explication fidélité bissection/splithalf
diviser ensemble des items en 2 moitiés équivalentes, calculer corrélation entre scores obtenus pour chaque moitié
112
méthode split half permet quoi
de mesurer cohérence interne du test (à quel point les deux moitiés du test mesurent une même caractéristique)
113
inconvénientsplit half/bissection
1. équivalence des deux parties
2. influence de la méthode de bissection choisie
3.sous-estimation de la fidélité (le nombre d'item diminue, sous estime la fidélité)
114
avantages split half
1. Pas de double administration
2. mesure la cohérence interne
115
quel type de fidélité mesure la cohérence interne
homogénéité, split half
116
explication fidélité homogénéité
évaluer degré de cohésion des items qui composent un instrument
117
Indice de fidélité de fidélité par homogénéité
s'exprime par la mesure de la cohérence entre les items
118
inconvénients fidélité par homogénéité
1. pas de stabilité temporelle
2. dépendance à la longueur du test
119
avantages de fidélité par homogénéité
1. pas de double administration
2. mesure de cohérence interne
120
dans fidélité homogénéité, quel est le problème d'échantillonage
Focus sur quantité d'item pas de personne, consistance interne augmentée par le nombre d'item et par la quantité de possibilité réponse, attention variabilité artificielle
121
Quelle norme fait augmenter fidélité si on enlève item
Omega de mcdonald
122
Alpha de cronbach quelle fidélité
Par homogénéité
123
alpha de cronbach mesure quoi
Cohérence interne
124
Coefficient de cronbach élevé =....
n'égale pas bonne cohérence interne
125
Alpha de cronbach est influencé par quoi
nombre d'item, longueur du test (quantité item + = alpha augmenté, trop court = souffre)
126
modèle stats fidélité par homogénéité
mesures parallèles
127
ALpha de cronbahc est tau-équivalent ou mesure congénérique?
Tau-équivalent
128
MEsures parallèles dans fidélité homogénéité, (2 points(
1. tau-équivalene
2. items ont variances égales
129
Mesures congénériques, vrai ou faux On suppose que chaque item a sa propre charge factorielle unique, ce qui signifie que chaque item est corrélé de manière unique avec son construit sous-jacent. Cela permet une plus grande précision dans l'évaluation de la fidélité par homogénéité.
Des mesures de fidélité (comme composite et Omega de Mcdonald) sont utilisées lorsqu'on suppose un modèle congénérique
vrai
130
explication mesures congénériques dans fidélité homogénéité
Supposent que chaque item du test mesure le même construit, mais pas nécessairement avec la même importance. En d'autres termes, chaque item contribue de manière unique à la mesure du construit. Ces mesures n'exigent pas de variances statistiques égales.
131
fidélité interjuge mesure quoi
degré d'accord entre deux évaluateurs
132
situations utilisation fidélité interjuges
évaluations sont subjectives, comme l'évaluation des performances en milieu de travail, des compétences en éducation, des sx cliniques en psychologie, etc.
133
comment est évalué fidélité inter-juge
à l'aide de mesures statistiques telles que le coefficient de corrélation intra-classe, le coefficient Kappa de Cohen, ou d'autres mesures d'accord inter-juges (CVC)
Ex de test subjectif : Rorchach
134
inconvénient fidélité inter-juges
cout et temps
variabilité des évaluateurs
135
Avantages fidélité inter-juges
1. réduction biais d'évaluation
2. amélioration de la précision (en moyennant les scores de plusieurs évaluateurs)
136
Explication fidélité des tests de vitesse
Rapidité de la performance explique les différences individuelles observées (mesurées). On prépare ce type de test à l'aide d'items qui sont tous faciles et qui font partie eds habiletés maîtrisées par les sujets auxquels il est destiné. On fixe une limite de temps si courte que la personne ne peut pas compléter tous les items. Dans de telles conditions, le score de chaque personne reflète son rythme (ou sa vitesse) de travail.
137
explication fidélité des tests de puissances
Offre une limite de temps suffisamment longue pour que tous puissent tenter de répondre à chacun des items sans problèmes. Ceux-ci sont cependant ordonnés selon une échelle de difficulté qui augmente très rapidement jusqu'à des items à peu près insolubles, ainsi personne ou presque ne peut obtenir un score parfait
138
la variabilité est ou dans fidélité des tests de puissance et de vitesse?
nombre de questions bien répondues
139
Les tests de vitese et de puissance sont tous les deux...
Les 2 sont conçus pour empêcher une réussite parfaite. Pareille précaution s'explique par le fait qu'un score parfait est indéterminé. En ce sens, il est impossible de savoir quel score plus élevé le sujet aurait atteint si le test avait plus d'items ou des items encore plus difficiles.
La variation des résultat indique l'indice de fidélité = plus de variation, moins de fidélité
140
Variation fidélité puissance/vitesse indique quoi
La variation des résultat indique l'indice de fidélité = plus de variation, moins de fidélité
