cours 6 Flashcards

1
Q

Qu’est-ce que la fidélité ?

A
  • réfère à la reproductibilité des scores obtenus par les mêmes personnes
How well did you know this?
1
Not at all
2
3
4
5
Perfectly
2
Q

Quelles sont les 2 conditions pour que ce soit les mêmes personnes ?

A
  • on leur administre un même test à des occasions différentes
  • on leur administre des ensembles différents d’items équivalentes
How well did you know this?
1
Not at all
2
3
4
5
Perfectly
3
Q

Pourquoi les mesures physiques sont plus «faciles» à mesurer que les mesures psychologiques ?

A
  • niveau de précision des mesures physiques est plus élevé qu’au niveau psychologique
How well did you know this?
1
Not at all
2
3
4
5
Perfectly
4
Q

Qu’est-ce qui peut influencer la différence de résultats aux tests ?

A
  • variance réelle

- variance d’erreur

How well did you know this?
1
Not at all
2
3
4
5
Perfectly
5
Q

Qu’est-ce que permet de déterminer la fidélité d’un test ?

A
  • dans quelle mesure les différences individuelles dans les scores aux tests peuvent être attribuées à de réelles différences sur le plan des caractéristiques mesures (variance réelle)
  • dans quelle mesure elles doivent être attribuées à des erreurs dues au hasard (variance d’erreur)
How well did you know this?
1
Not at all
2
3
4
5
Perfectly
6
Q

Qu’est-ce que la variance d’erreur

A

Tout ce que je ne peux pas contrôler dans la différence de reproductibilité entre les 2 passations

  • changement du à l’erreur
  • toute condition non pertinente à l’objectif d’un test
How well did you know this?
1
Not at all
2
3
4
5
Perfectly
7
Q

Qu’est-ce qu’une variance réelle ?

A
  • la personne a changé par son vécu, expérience ou traitement psychologique
  • changement voulu
How well did you know this?
1
Not at all
2
3
4
5
Perfectly
8
Q

Comment fait on pour minimiser la variance d’erreur ?

A

Essayer de tout contrôler

  • examinateurs s’efforcent de maintenir des conditions de testage uniformes
  • réduisent l’erreur de mesure et rendent ainsi plus fidèles les scores aux tests
How well did you know this?
1
Not at all
2
3
4
5
Perfectly
9
Q

Quelles sont les choses que les examinateurs s’efforcent de contrôler ?

A
  • l’environnement du testage
  • les consignes
  • les limites de temps
  • le climat interpersonnel avec les sujets
  • etc.
How well did you know this?
1
Not at all
2
3
4
5
Perfectly
10
Q

Est-ce qu’un test peut être parfaitement fidèle ?

A

Aucun test n’est parfaitement fidèle

- tout test devrait être accompagné d’un rapport sur son degré de fidélité (manuel)

How well did you know this?
1
Not at all
2
3
4
5
Perfectly
11
Q

Dans quelle circonstance considère-t-on que l’indice de fidélité caractérise bien le test dans le rapport ?

A
  • le test soit administré dans les mêmes conditions standardisées
  • administré à des personnes similaires à celles qui composent l’échantillon normatif
  • les caractéristiques de l’échantillon devraient être précisées, de même que le type de fidélité qui fut évalué
How well did you know this?
1
Not at all
2
3
4
5
Perfectly
12
Q

Quel est l’objet de tous les types de fidélité ?

A
  • un degré d’association
  • entre 2 séries indépendantes de scores à un test
  • ces associations peuvent prendre forme comme un coefficient de corrélation ou coefficient d’association
How well did you know this?
1
Not at all
2
3
4
5
Perfectly
13
Q

Qu’est-ce qu’un coefficient de corrélation ?

A

exprime le degré de correspondance (ou relation) entre deux séries indépendantes de scores

How well did you know this?
1
Not at all
2
3
4
5
Perfectly
14
Q

Quelles sont les 6 corrélations les plus importantes ?

A
r : pearson
rho : Spearman
r(t) : tétrachorique
r(po) : polychorique
r(pa) : partielle
R : multiple
How well did you know this?
1
Not at all
2
3
4
5
Perfectly
15
Q

Qu’est-ce qu’un problème de colinéarité ?

A
  • Une variable d’une façon non voulu influence beaucoup l’autre variable
  • Alors que la variance n’est pas voulu ; amène réflexion
  • p. ex., 2 items avec du contenu différent avec une colinéarité, théoriquement les items sont différents, mais pratiquement et selon la psychométrie ils sont vues pareillement
How well did you know this?
1
Not at all
2
3
4
5
Perfectly
16
Q

Pourquoi les problèmes de colinéarité n’est pas le cas dans les mesure de fidélité ?

A

Pcq on veut des corrélation TROP élevé

How well did you know this?
1
Not at all
2
3
4
5
Perfectly
17
Q

Quelle est le rationnel du coefficient de corrélation ?

A
  • obtenir une corrélation parfaite entre variables 1 et 2
  • si pas une corrélation parfaite = il y a des choses pas parfaites = variance d’erreur
  • Corrélation à la 2 = coefficient de détermination = façon de trouver la variance réelle
How well did you know this?
1
Not at all
2
3
4
5
Perfectly
18
Q

Qu’indique une corrélation de zéro (ou presque zéro) ?

A
  • l’absence complète de relation
  • ce qui produirait le hasard
  • on ne peut pas prédire de comportement
How well did you know this?
1
Not at all
2
3
4
5
Perfectly
19
Q

Qui a trouver les corrélations poly et tétra ?

A

Pearson ???

How well did you know this?
1
Not at all
2
3
4
5
Perfectly
20
Q

Comment est-il possible de calculer le coefficient de corrélation ?

A

VOIR NOTE DE COURS POUR APPRENDRE CALCUL

How well did you know this?
1
Not at all
2
3
4
5
Perfectly
21
Q

Comment interpète-on un score ?

A
  • signe
  • force
  • p. ex., variable x tendent (R(degré de liberté) = 0,x) dans une certaine mesure à variable x et vice versa, bien que la relation ne soit pas très étroite (forte)
How well did you know this?
1
Not at all
2
3
4
5
Perfectly
22
Q

Comment interprète on la force d’une corrélation ?

A

,15 = faible
,35 = modéré
,55 = élevé
, 75 = très élevé

How well did you know this?
1
Not at all
2
3
4
5
Perfectly
23
Q

Comment détermine t-on le degré de liberté ?

A
  • degré de liberté est constante
  • lorsque c,est une corrélation bivarié (r) = n-2
  • comparation de moyenne = n-1
  • comparaison des fréquences = variable
How well did you know this?
1
Not at all
2
3
4
5
Perfectly
24
Q

Quel est le 3e élément qu’on doit considérer dans une interprétation ?

A
  • cette corrélation est elle significativement différente de zéro ?
  • affirme qu’une corrélation est significative au seuil de 0,05, nous voulons dire que les chances ne sont pas supérieurs à 5 sur 100 que la corrélation dans la population soit zéro
How well did you know this?
1
Not at all
2
3
4
5
Perfectly
25
Q

Qu’est-ce qui peut influencer la significativité ?

A
  • petit échantillon
26
Q

Qu’est que la taille de l’échantillon peut influencer ?

A
  • la corrélation

- la significativité

27
Q

En quoi n influence la corrélation ?

A
  • n influence le résultat d’une corrélation

- fondamentalement dans une corrélation n est partout dans la formule de corrélation

28
Q

En quoi n influence la significativé ?

A
  • plus on a de personnes plus la corrélation ne nécessite pas d’être forte pour être significative
  • avec un grand n, tout devient significatif, alors il ne faut ni un trop petit (pas significatif) ni un trop grand n (tout significatif)
  • un grand n = varie artificiellement les résultats = tout est significatif
29
Q

En psychométrie est-ce qu’on accorde plus d’attention à la significativité ou à la corrélation ?

A
  • corrélation
  • coefficients de fidélité considérable est au dessu de 0,80 ou même 0,90
  • pcq au dessu de 0,80 on dépasse le seuil de chance = 64% de variance réelle
  • on va parler de significativité, mais on va focusser sur la force de la relation
  • par convention on va dire un coefficient de 0,72 = 52% de variance (la différence est expliqué plus par le contenu des items que par la chance et autre chose)
30
Q

Donne des exemples de significativité avec le nombre de personne dans un échantillon

A
  • avec un échantillon de 10 personnes, la plus petite corrélation significative au seuil de 5% est de 0,63
  • toute indice de corrélation inférieur à cette valeur laisse sans réponse la question de savoir si les 2 variables sont statistiquement corrélées
  • avec 104 sujets, toute corrélation égale ou supérieur à 0,25 serait statistiquement significative (mais inférieur à ce que l’on considère désirable pour des coefficients de fidélité)
  • avec 1000 personne significativité à 0,008
31
Q

Quels sont les types de fidélité ?

A
  • fidélité par test-retest (stabilité)
  • fidélité par versions parallèles (l’équivalence)
  • fidélité par bissection (cohérence interne)
  • fidélité de Kider-Richardson (KR20) et coefficient d’alpha (Alpha de Cronbach) (l’homénéité)
  • fidélité intercorrecteurs (équivalence interjuges
32
Q

Qu’est-ce que la fidélité par test-retest (stabilité temporelle) ?

A
  • on ré-administre un même test aux mêmes sujets
  • coefficient de fidélité (r(tr)) = corrélation entre les scores obtenus par les mêmes personnes aux deux passations
  • la variance d’erreur correspond aux fluctuations aléatoires des performances d’une séance de testage à l’autre
33
Q

La fidélité test reteste indique quoi ?

A
  • Dans quelle mesure il est possible de généraliser à des occasions diverses, les scores d’un test
  • plus fidélité est élevée, moins les scores sont influencés par des changements quotidiens imprévisibles
  • plus fidélité est élevée = moins les changements sont due à la variance d’erreur
34
Q

Lorsqu’on inclut la fidélité test retest dans un manuel d’un test qu’est-ce qui faut spécifier ?

A
  • l’intervalle de temps entre les deux passations

- corrélations test-retest diminuent progressivement à mesure que s’accroît l’intervalle de temps

35
Q

Qu’elles sont les difficultés/désavatange associés à la fidélité test-retest ?

A
  • effet de pratique
    - augmenter les scores au retest
  • effet de mémoire
    - si l’intervalle est très court les sujets peuvent se rappeler de leurs réponses
  • normalement ils prennent 3-6-9 semaines entre les passations
36
Q

Pourquoi utiliser des versions parallèle ?

A
  • contourner les difficultés soulevés par le test-retest
  • servir à d’autres fin que celle d’estimer la fidélité d’un test (p. ex., étudier l’impact d’une variable intermédiaire : ce qui se passe entre A et B)
  • l’emploi de versions parallèles permet de réduire l’impact du monitorat et de la tricherie
37
Q

Qu’est-ce que la fidélité par versions parallèles ?

A
  • individus passent une version lors de la première séance de testage et une autre version (parallèle ou équivalente) lors de la seconde séance
  • corrélation obtenue entre les 2 séries de scores deviendra le coefficient de fidélité
38
Q

Le coefficient de fidélité par versions parallèles mesure quoi ?

A
  • stabilité
  • similitude des réponses à des échantillons d’items différents
  • combine 2 types de fidélité
39
Q

Quelles précautions faut-il prendre lors de la rédaction de versions parallèles pour assurer un véritable parallélisme ?

A
  • contenir le même nombre d’items, la même forme et couvrant le même type de contenu
  • respecter l’étendue des difficultés et le niveau de difficulté moyen devraient être les mêmes
  • Assurer l’équivalence des consignes, de minutages, des exemples, du format de présentation, bref de tous les aspects du cadre de passation du test
40
Q

Quel est le désavantage d’utiliser la fidélité par versions parallèles ?

A
  • les sujets différeront quant à leur degré d’amélioration due à la pratique
  • n’auront pas les mêmes occasions de se pratiquer
  • ne seront pas également motivés à repasser le test
  • implique une autre forme de variance d’erreur qui tend à réduire la corrélation entre les 2 versions
41
Q

Qu’est-ce que la fidélité par bissecton (split-half)?

A
  • 1 seule administration et 1 seule version
  • Diviser le test en 2 parties équivalentes
  • permet de calculer deux scores pour chaque passation
  • coefficient de fidélité = indice de cohérence interne
42
Q

Comment divison-ton le test en 2 lors d’une fidélité par bissection ?

A
  • pair et impair
  • permet d’obtenir un niveau de difficulté équilibré pour chaque groupe d’items
  • de manière à ce que les deux moitiés soient aussi équivalentes que possible
43
Q

Quels sont les désavantages de la fidélité par bissection ?

A
  1. on calcul la fidélité de la moitié du test parce qu’on fait une corrélation d’une des 2 demi
    - une demi va donner le support à l’autre demi
    - on va utiliser la moitié pour validé (dans le sens fidélité) l’autre moitié
  2. ne tient aucunement compte de la stabilité temporelle des scores
44
Q

Que permet la formule Spearman-Brown ?

A

Permet d’estimer l’impact que le raccourcissement d’un test (lors de la fidélité par bissection) aurait sur son coefficient de cohérence interne
- formule qui intègre les 2 moitiés

45
Q

Qu’est-ce que la différence entre la fidélité de Kuder-Richardson et le coefficient d’alpha ?

A
  • Kuder-Richardson inventé pour vérifier la fidélité dans les échelles dichotomiques
  • coefficient d’alpha : utilise la formule de K-R pour les échelles de Likert
  • maintenant alpha fait dichotomique et multiple
46
Q

Qu’est-ce que la fidélité de Kuder-Richardson et Coefficient Alpha (homogénéité) ?

A
  • 1 seule passation, 1 seule version

- cohérence entre les réponses de tous les items du test

47
Q

La cohérence interitems est sensible à quelle source de variance d’erreur ?

A
  • Le degré d’hétérogénéité du domaine des contenus échantillonnés
  • plus le domaine est homogène, plus la cohérence interitems sera élevée
48
Q

Pourquoi la formule KR est 20 ?

A

Pcq c’est la 20e fois que la fomule a fonctionné

49
Q

Pourquoi le coefficient oméga prend de plus en plus une place importante dans les articles scientifiques en psychologie ?

A
  • Thomas Kuhn
  • à cause des certaines difficultés associées aux calcules Alpha
  • Beaucoup d’article demande les 2 ; oméga et alpha
50
Q

Quelle est la différence entre oméga et alpha ?

A

la quantité d’items (n asocié à l’item)

  • omega minimise l’influence du n
  • Alpha maximise l’effet du n sur la fidélité
51
Q

Lors des grands échantillons (personnes ou items) qu’utilisons nous ? Alpha ou Oméga ?

A

1000 personnes et plus

  • omega
  • pour éviter la variabilité artificiellement
  • n a un trop grand impact sur le alpha de Cronbach, alors l’alpha va être grand, mais ne signifie pas que le test est fidèle
52
Q

Qu’est-ce que la fidélité par intercorrecteurs ?

A
  • Faire corriger un test séparément par au moins 2 examinateurs
  • les 2 scores qu’obtiendront ainsi les sujets seront alors mis en corrélation de façon usuelle
  • correction subjective
53
Q

Combien de juges est impliquer dans la fidélité intercorrecteur ?

A
  • pas plus de 5 juges pcq sinon augmente artificiellement la variabilité = variance d’erreur
  • exception 2 juges
  • idéal : 3 à 5 juges
54
Q

Quand est-ce qu’on utilise des calcules à la mains lors de la fidélité intercorrecteur ?

A
  • on peut faire calcule avec SPSS ; 2juges

- plus de 2 = calcules à la mains

55
Q

En quoi les tests de personnalité sont différents ?

A
  • accorde un rôle important au jugement du correcteur
  • grilles de correction
  • nécessaire d’évaluer la fidélité intercorrecteur
  • une grande part de subjectivité va venir expliquer la différence entre 2 passation d’un individu avec 2 évaluateurs différents
56
Q

Exepté l’équivalence interjuge, quel autre type d’associations mesure la fidélité par interrroecteur ?

A

Kappa de Cohen

  • mesure le niveau de concordance entre ce que les 2 juges disent
  • pertinence à partir de 0,8, mais convention à partir de 0,7
57
Q

Qu’est-ce qu’un test de vitesse ?

A

La rapidité de la performance explique les différences individuelles observées

  • les items sont tous faciles
  • limite de temps si court que la personne ne peut pas compléter tous les items
  • le score de chaque personne reflète exclusivement son rythme de travail
58
Q

Quelle est la variance des scores d’un test de vitesse ?

A
  • la différence entre les individus c’est le nombre de bonnes réponses en x temps
  • nombre de questions réussies qui représentent la vitesse
59
Q

Qu’est-ce qu’un test de puissance ?

A
  • limite de temps suffisamment longue pour que tous puissent tenter de répondre à chacun des items
  • niveau de difficulté des items augmentent très rapidement jusqu’à des items à peu près insolubles
60
Q

Quelle est la comparaison entre les test de puissance et de vitesse ?

A
  • les 2 sont conçus pour empêcher une réussite parfaite
  • aucun score parfait est déterminer
  • permet de discriminer
  • sinon comment savoir la variance entre les 3-4 personnes qui auraient un score parfait