Brainscape's Knowledge GenomeTM

Browse over 1 million classes created by top students, professors, publishers, and experts.


See full index

PSY2003 Intra > 4) Concept statistiques (partie 2) > Flashcards

4) Concept statistiques (partie 2) Flashcards

1
Q

La fidélité est une propriété (qualité) psychométrique. C’est quoi ?

A

La fidélité détermine si les scores sont stables après plusieurs passations du même test (Crocker & Algina, 1986)
- Être sur de mesurer qqch comme il faut

Repose sur l’hypothèse selon laquelle il est possible de mesurer un «attribut» (ex: stress) en posant plusieurs questions dont les réponses forment un ensemble :

- consistant
- stable d’un contexte à l’autre 
- stable d’un moment à l’autre

(Si je passe mon questionnaire avec le groupe 1 ou avec le groupe 2 on devrait avoir la même chose d’étudiants du même programme de l’UdeM)

How well did you know this?
1
Not at all
2
3
4
5
Perfectly
2
Q

La fidélité d’un instrument psychométrique représente quoi ? Comment déterminer qu’un instrument de mesure est fidèle ?

A

Le degré de précision et de constance de ses scores.
- Un instrument de mesure fiable donne de façon consistante et précise les mêmes résultats lorsqu’il n’y a pas eu des changements réels

How well did you know this?
1
Not at all
2
3
4
5
Perfectly
3
Q

Je suis la capacité à produire un score observé qui est le

plus proche possible du score vrai de la personne évaluée (erreur de mesure)

A

La précision

How well did you know this?
1
Not at all
2
3
4
5
Perfectly
4
Q

«La fidélité d’un instrument psychométrique représente le degré de précision et de constance de ses scores»
- C’est quoi la constance ?

A

La constance fait référence à l’obtention des résultats hautement similaires lorsqu’une personne est évaluée à l’aide du même instrument psychométrique à deux moment dans le temps

How well did you know this?
1
Not at all
2
3
4
5
Perfectly
5
Q

Quand est-ce qu’un test est considéré «fidèle» ?

A

Un test est considéré comme un test fiable lorsqu’il fournit des scores similaires lorsqu’une personne le passe à plusieurs reprises

How well did you know this?
1
Not at all
2
3
4
5
Perfectly
6
Q

La fidélité est influencée par quoi ?

A

L’échelle de mesure, le mode d’administration, la clarté des concepts à mesurer, la consistance des évaluations, etc.

How well did you know this?
1
Not at all
2
3
4
5
Perfectly
7
Q

Trois principales méthodes sont utilisées pour trouver le coefficient de fidélité … Lesquelles ?

A
  1. La méthode de stabilité (dans le temps) [RÉPÉTABILITÉ]
  2. La méthode d’équivalence (entre deux “versions” d’un même instrument psychométrique) [REPRODUCTIBILITÉ]
    – Pour 1 et 2, l’indice de fidélité est un coefficient de corrélation (r).
  3. La méthode de cohérence interne (ou d’homogénéité des items)
    – Split-half ou méthode de bissection
    – Coefficient alpha de Cronbach (α) (ou coefficient KR-20 (r) pour items dichotomiques
How well did you know this?
1
Not at all
2
3
4
5
Perfectly
8
Q
  1. La méthode de stabilité (dans le temps) permet de déterminer quoi par rapport au test ?
  2. Comment on s’y prend dans cette méthode (quelle épreuve on utilise) ?
A
  1. À quel point le test est répétable (répétabilité)

2. L’épreuve Test-Retest (on compare les mesures au T1 et au T2)

How well did you know this?
1
Not at all
2
3
4
5
Perfectly
9
Q

Je suis la variabilité intra-opérateur («même expérimentateur») et je permet d’avoir déjà des informations sur une possible erreur de mesure aléatoire.

A

La répétabilité

How well did you know this?
1
Not at all
2
3
4
5
Perfectly
10
Q

Qu’est-ce que la méthode de stabilité (fidélité du test-retest) permet de regarder ?

A

Regarde la stabilité de la mesure au cours du temps chez un individu dont l’état est supposé “constant”

- Le coefficient de corrélation (r) représente donc la corrélation entre les résultats obtenus aux deux passations 
- Plus la corrélation entre les deux tests est importante plus le test est considéré comme "répétable"
How well did you know this?
1
Not at all
2
3
4
5
Perfectly
11
Q

Je suis un bon indicateur de la qualité métrique de fidélité.

A

Le coefficient de corrélation (r) obtenu par l’épreuve test-retest

How well did you know this?
1
Not at all
2
3
4
5
Perfectly
12
Q

Une corrélation T1-T2 suppose quoi ?

A

Que la variable mesurée est stable (donc les variations dans le temps proviennent de l’erreur de mesure)

How well did you know this?
1
Not at all
2
3
4
5
Perfectly
13
Q

La stabilité est influencée par quoi ?

A

– Le temps entre les passations – Les changements “naturels” durant cette période

How well did you know this?
1
Not at all
2
3
4
5
Perfectly
14
Q

Pourquoi il fait un temps «raisonnable» entre les 2 passations ?

A

Assez long pour qu’ils ne se souviennent pas de leur réponses, mais pas trop court pour qu’il y ait des changements naturels

How well did you know this?
1
Not at all
2
3
4
5
Perfectly
15
Q

[La fidélité test-retest par la corrélation]
Corrélation entre temps 1 et temps 2

  • Pour les tests PERCEPTIFS sur le terrain, les corrélations supérieures ou égal à _____ sont bonne.
  • Pour les tests SUBJECTIFS, des corrélations supérieures ou égales à _____ sont acceptables

• Pour les MESURE D’ATTITUDE, les corrélations supérieures ou
égales à _____ sont significatives

(Robert, 2004)

A
  • Pour les tests PERCEPTIFS sur le terrain, les corrélations supérieures ou égal à 0,90 sont bonne.
  • Pour les tests SUBJECTIFS, des corrélations supérieures ou égales à 0,50 sont acceptables

• Pour les MESURE D’ATTITUDE, les corrélations supérieures ou
égales à 0,70 sont significatives

How well did you know this?
1
Not at all
2
3
4
5
Perfectly
16
Q

La méthode d’équivalence est un autre méthode d’estimation de la fidélité.

  1. Quel autre nom donne-t-on à cette méthode ?
  2. Elle permet de vérifier la _____________ du test.
  3. Elle consiste à faire quoi ?
A
  1. La méthode des formes parrallèles
  2. REPRODUCTIBILITÉ
  3. On administre 2 versions (presque identiques ou très similaires) d’un même instrument
    • corrélation T1 (forme A) - T2 (forme B)
How well did you know this?
1
Not at all
2
3
4
5
Perfectly
17
Q

[MÉTHODE D’ÉQUIVALENCE — Fidélité]
• Le coefficient de corrélation (r) représente quoi ?
• Quel sont les désavantages de cette méthode ? (2)

A
  • (r) représente la corrélation entre les résultats obtenus aux deux tests

Désavantages :

  • 2 versions d’un même instrument est $$ et long.
  • 2 formes parallèles ne sont jamais pareilles à 100 % -
How well did you know this?
1
Not at all
2
3
4
5
Perfectly
18
Q
  1. S’il y a une corrélation T1 (forme A) - T2 (forme B), ça veut dire quoi ?
  2. Qu’est-ce qui influence la stabilité entre les deux versions du test ?
A
  1. Les variations entre A et B proviennent de l’erreur de mesure…
  2. – Le temps entre les passations
    – Les changements “naturels” durant cette période
    – La qualité de la “similarité” (parallélisme) entre les deux formes
19
Q

On peut considérer que deux formes d’un même instrument sont «parallèles» quand…

A
  • Les items sont très similaires et de même nombre
  • Les mêmes directives d’administration
  • Les deux formes ont la même moyenne et le meme écart-type
20
Q

La méthode de la cohérence interne (ou consistance interne ou l’homogénéité) est une méthode d’estimation de la fidélité.

  1. Permet de vérifier quoi ?
  2. Cette méthode peut se faire de 2 manières … lesquelles ?
A
  1. Que le test est composé d’items qui mesurent tous le même construit (par le degré de cohésion des items de l’instrument)
  2. a) Méthode de bissection (split-half)
    b) Alpha (α) de Cronbach
21
Q

Je suis la méthode d’estimation de la fidélité la plus fréquemment utilisée.

A

La méthode de la cohérence interne

22
Q

La corrélation split-half est une des manières de déterminer s’il y a une cohérence interne dans le test (estimation de la fidélité).

  1. En quoi ça consiste ?
  2. Vu que c’est difficile de séparer vraiment «également», qu’est-ce qu’on fait ?
A
  1. On coupe en 2 le questionnaire et on compare chaque moitié
    • Répartition aléatoire (random split)
    • Séparation des items pairs impairs
    • La partition appariée (on fonction du contenu et de la difficulté - matched split)
23
Q

V ou F : 2 administrations sont nécessaires pour faire la corrélation split-half.

A

Faux, une seule administration est nécessaire.

24
Q

[Corrélalation split-half]

  • Comment on sépare le questionnaire en 2 ? (3)
  • On fait quoi pour tenir compte du nombre réduit d’item ?
A
  1. La partition aléatoire (random split)
  2. La séparation des items pairs et impairs (plus souvent)
  3. La partition appariée (en fonction du contenu et de la difficulté = matched split)

Pour tenir compte du nombre réduit d’items, on fait un Spearman-Brown

25
Q

Je suis le meilleur indice de cohérence interne

A

L’alpha de Chronbach

26
Q

Il y a 3 manières d’avoir la cohérence interne (l’alpha de Cronbach en fait parti) … quel sont-elles ?

A
  1. Matrice de corrélation inter-items
  2. Matrice de corrélation item-total
  3. Alpha de Cronbach
27
Q

Comment fait-on pour examiner la matrice de corrélation des items entre eux (matrice inter-item)
- matrice de 6 items

A

Si t’as une matrice de 6 items, alors t’as 36 coefficient de corrélations (6x6). Les normes ne sont pas clairs il y a BEAUCOUP de variation entre les valeurs de corrélation inter-items, MAIS il y a un minimum :
— 0 à 0,15 = éléments ne sont pas bien corrélés
— 0,15 à 0,5 = un bon résultat
— 0,50 et + = éléments sont corrélés dans une plus grande mesure et que les éléments peuvent être répétitifs

[Suggéré d’avoir une valeur entre 0,3 et 0,8 et que les mesures soient de même échelle pour mesurer la même cible (assez élevé pour mesurer le même concept)]

28
Q

Ça veut dire quoi si une corrélation est trop élevée (cohérence interne)

A

On mesure deux fois la même chose (not good)

29
Q

Comment fait-on pour déterminer le degré d’association entre chaque élément et le score total ? (Matrice de corrélation item-total)
- matrice de 6 items

A

Encore une fois, les normes sont pas claires, il y a beaucoup de variations dans les valeurs de corrélation item-total, mais il y a un minimum :
— 0 à 0,20 = peuvent ne pas être représentatifs du même domaine de contenu
— 0,20 à 0,40 = items sont raisonnablement homogènes
— 0,40 et + = peuvent ne capturer qu’une petite bande passante de la construction

30
Q

Ça signifie quoi si l’indice de cohérence interne est très faible (ou négatif) ? (3)

A
  • soit que plus d’un concept est mesuré
  • soit que certains items mesurent mal le concept
  • soit que l’échelle aurait due être inversée pour cet item
31
Q

Comment peut-on évaluer de manière simple et rapide la cohérence interne des items ?

A

En examinant la matrice de corrélation des éléments entre eux
– Plus les réponses aux éléments sont corrélées entre eux et/ou
au score total de l’échelle, plus la cohérence de cette échelle est
élevé
- Varie entre 0 et 1
- Plus s’approche de 1, plus la fidélité est bonne
- But raisonnable = 0,8
- Seuil minimal = 0,7

32
Q

C’est quoi la limite de indices de cohérence internes (matrices de corrélations inter-item, item-total et Cronbach) ?

A
  1. Lorsqu’il est élevé, il indique que le test mesure quelque chose mais ça ne dit pas quoi (et ça peut-être plusieurs choses)
    • Donc n’assure pas l’unidimensionnalité (= ne mesure qu’une seule chose)
  2. Il n’y a pas de règle stricte dans l’interprétation des valeurs de coefficient de fidélité :
    • Assez élevé = mesurent le même concept
    • Trop élevé = mesure la même chose
33
Q

C’est quoi la différence entre validité et fidélité ?

A

• La fidélité concerne la PRÉCISION avec laquelle un test mesure
certaines caractéristiques (donc en lien avec l’erreur de mesure)

• La validité est en lien avec la QUALITÉ de ce qui est mesuré : la
ressemblance existant entre ce que l’on veut mesurer et ce que
mesure le test

• Fidélité et validité sont deux notions distinctes liées par une
relation d’implication : la fidélité est une condition nécessaire mais non suffisante pour la validité d’un test

34
Q

V ou F : Un test non fidèle est nécessairement non valide

A

Vrai !!!

35
Q

Je suis le concept le plus important et le plus fondamental en psychométrie

A

LA VALIDITÉ
- En effet, même l’instrument de mesure le plus précis n’est pas
utile si cet instrument ne mesure pas le concept qu’il doit mesurer

36
Q

À quoi correspond le concept de validité ?

A

C’est la relation qui existe entre les éléments théoriques (modèles, concepts, définitions, hypothèses, etc.) et la réalité empirique qui doit les représenter

On veut mesurer quel est son degré de validité donné pour un attribut précis pour une population cible précise et pour un contexte d’application spécifique

37
Q

Nous sommes les processus mis en place pour évaluer la validité d’un test

A

La validation

38
Q

La validité peut être analysée sous différents aspects et chacun apporte des informations complémentaires et importantes

On peut regrouper (classiquement) les différentes manières de vérifier le degré de validité d’un instrument en trois grands types de validité … Quels sont-ils ?

A
  1. Validité de contenu
  2. Validité de construit
  3. Validité de critère (ou d’apparence)
    Aussi : Validité d’apparence -
39
Q

C’est quoi la validité d’apparence (ou manifeste) d’un instrument ?

A

C’est à quel point le test est crédible pour les personnes qui le passent

C’est une analyse SUBJECTIVE basée sur un jugement subjectif, superficiel de l’utilisateur

40
Q

Je suis la méthode la moins rigoureuse pour évaluer la validité d’un test

A

Validité d’apparence …

- MAIS c’est une étape pour tous les instruments de mesure reconnus comme valides … 
- Si le participant ne croit pas le processus, il sera moins motivé à s'investir et ses résultats ne seront pas représentatifs du construit évalué * Souvent fait par des experts *
41
Q

La validité de contenu évalue quoi ?

A

La validité de contenu évalue dans quelle mesure les divers items
ou épreuves d’un instrument sont représentatifs du ou des construits mesurés et de leur différentes facettes

[• Cronbach et Meehl (1955)
• Ce n’est pas une méthode unique (et explicite) mais bien un ensemble de méthodes
• Nécessite une définition explicite du construit que l’on veut mesurer]

42
Q

Certains aspects de la validité de contenu sont évalués de manière plus qualitatives et d’autres de manières plus quantitatives
Quels sont les aspects qualitatives VS quantitatives

A

QUALITATIVES :
- validation de la définition des construits

QUANTITATIVES :

  • calcul de coefficient d’accord inter-juges (items pertinents ? exhaustifs ? représentatifs ?)
  • corrélations
43
Q

[Validité de contenu]
Des _____________________ vont permettre d’identifier les items
qui ne sont pas liés (empiriquement) au construit mesuré (donc pas pertinents)

A

Analyses factorielles

44
Q

[Validité de contenu]
Quelles sont les 7 règles essentielles de la validation du contenu d’un instrument psychométrique ? (Haynes, Richard, & Kubany, 1995)

A
  1. Définir soigneusement le domaine et les facettes du construit et valider cette définition
  2. Soumettre tous les éléments de l’instrument à une validation de contenu (forme, différentes conditions et situations d’utilisations possibles)
  3. Utiliser un échantillon de la population cible (des personnes de la population à laquelle est dédié l’instrument
  4. Consulter plusieurs juges (experts) pour valider le contenu de l’instrument et quantifier ces jugements à l’aide d’échelles formalisées
  5. Examiner la représentation proportionnelle des items aux différentes facettes du construit
  6. Présenter les résultats de la validation de contenu dans la publication de tout nouvel instrument
  7. Utiliser toutes les analyses psychométriques ultérieures pour améliorer la validité du contenu

PSY2003 Intra (4 decks)

Brainscape helps you reach your goals faster, through stronger study habits.
© 2024 Bold Learning Solutions. Terms and Conditions