Brainscape's Knowledge GenomeTM

Browse over 1 million classes created by top students, professors, publishers, and experts.


See full index

Mesure, évaluation et déontologie > Cours 07 ppt > Flashcards

Cours 07 ppt Flashcards

1
Q

Qu’est-ce que la composition de la fidelité?

A
  1. Le degré de précision
  2. La constance temporelle
How well did you know this?
1
Not at all
2
3
4
5
Perfectly
2
Q

La fidelité est le rapport entre …

A

la variance vraie et la variance totale du test

How well did you know this?
1
Not at all
2
3
4
5
Perfectly
3
Q

Quelle est la formule de la variance observable?

A

X = t+e

X=variable observable
t=variance vraie/réelle
e=variance d’erreur

How well did you know this?
1
Not at all
2
3
4
5
Perfectly
4
Q

Pourquoi est-ce qu’on considère la modèle de la variance observable comme non-identifiée?

A

Je ne peux pas calculer chaque variable avec précision si j’ai deux variables.

X+Y=2, il y une infinité de possibilité

How well did you know this?
1
Not at all
2
3
4
5
Perfectly
5
Q

Toute condition non pertinente à l’objectif d’un test représente la “____”.

A

variance d’erreur

How well did you know this?
1
Not at all
2
3
4
5
Perfectly
6
Q

Qu’est-ce que le degré de fidelité?

(ou indice de fidelité)

A

La précision avec laquelle le test mesure un construit donné.

How well did you know this?
1
Not at all
2
3
4
5
Perfectly
7
Q

Vrai ou Faux. Aucun test n’est parfaitement fidèle (100%).

A

Vrai

How well did you know this?
1
Not at all
2
3
4
5
Perfectly
8
Q

Un indice de fidelité représente bien un test à quels conditions?

A
  1. administré dans les mêmes conditions standardisés;
  2. À des personnes similaires que l’échantillon normatif.
How well did you know this?
1
Not at all
2
3
4
5
Perfectly
9
Q

Quel est la conséquence de trop minimiser l’erreur?

A
  • Colinéarité: deux items se corrèlent très fortement ensemble.
  • Multicolinéarité: un emseble d’items se corrèle très fortement ensemble.
How well did you know this?
1
Not at all
2
3
4
5
Perfectly
10
Q

La fidelité peur varier en fonction du contexte d’administration. Par exemple…

A
  • conditions environnementales
  • consignes données
  • population cible
How well did you know this?
1
Not at all
2
3
4
5
Perfectly
11
Q

Pourquoi connaître le degré de fidelité?

A

Mieux comprendre les limites du test et l’interpréter correctement.

How well did you know this?
1
Not at all
2
3
4
5
Perfectly
12
Q

Une faible fidelité signifie globalement…

A

que les résultats sont affectés par des erreurs de mesure

How well did you know this?
1
Not at all
2
3
4
5
Perfectly
13
Q

Une grande fidelité signifie que…

A

le test produit des résultats cohérents et reproductibles

How well did you know this?
1
Not at all
2
3
4
5
Perfectly
14
Q

En somme, pour garantir une interprétation valable des résultats, il est essentiel de considérer la fidélité du test dans le contexte…

A

spécifique où il est utilisé

How well did you know this?
1
Not at all
2
3
4
5
Perfectly
15
Q

Qu’est-ce qu’un coefficient de fidelité?

A

Une corrélation variant entre 0 (aucune corrélation, doc aucune fiabilité) et 1 (corrélation parfaite, donc fiabilité parfaite).

How well did you know this?
1
Not at all
2
3
4
5
Perfectly
16
Q

Quels sont les seuils conventionnels du coefficient de fidelité minimale selon les contextes?

Pourquoi cette différence?

A

Clinique: 0,80 ou plus est requis.
Recherche: 0,70 ou plus est requis
Test d’intelligence: 0,85 à 0,90

  • une marge d’erreur plus grande est acceptable en recherche surout dans les études exploratoires.
How well did you know this?
1
Not at all
2
3
4
5
Perfectly
17
Q

Quels sont les 5 types de fidelités fondamentales?

A
  1. Fidelité test-retest
  2. Fidelité par versions parallèles
  3. Fideèlité par bissection
  4. Fidelité par homogénéité
  5. Fidelité par équivalence inter-juge
How well did you know this?
1
Not at all
2
3
4
5
Perfectly
18
Q

Qu’est-ce que l’administration d’un test à fidelité test-retest?

A

Administrer le même test à deux moments distincts aux mêmes sujets.

How well did you know this?
1
Not at all
2
3
4
5
Perfectly
19
Q

Qu’est-ce que le coefficient de fidelité test-retest mesure?

A

La corrélation entre les scores obtenus au deux passations.

How well did you know this?
1
Not at all
2
3
4
5
Perfectly
20
Q

Comment interpréter la fidelité test-retest?

A

Dans quelle mesure les scores peuvent être généralisés à travers différentes occasions de passation.

Plus la fidelité est élevé, moins les scores sont affectés par des sources d’erreurs liées au temps ou aux conditions de passation.

How well did you know this?
1
Not at all
2
3
4
5
Perfectly
21
Q

Nommez fluctuations aléatoires pouvant expliquer les erreurs dans la fidelité test-retest?

A
  1. Conditions de test mal contrôlé
  2. changements internes chez le sujet
How well did you know this?
1
Not at all
2
3
4
5
Perfectly
22
Q

Quels sont les avantages de la métode test-retest?

Définissez-les.

A
  1. Évaluation directe de la stabilité temporelle
    - Un coefficient élevé indique que l’instrument produit des résultats stables dans le temps.
  2. Appropriée pour les traits stables
    - Traits de personnalité, compétences ou habiletés intellectuelles.
  3. Facile à interpréter
    - Entre 0 et 1
How well did you know this?
1
Not at all
2
3
4
5
Perfectly
23
Q

Quels sont les inconvénients de la fiadèlité test-retest?

A
  1. Effet de mémoire
    - Les participants peuvent se souvenir des réponses.
    - Biais de rappel entraîne une surestimation de la fiabilité
    - mesure la mémoire et non le trait.
  2. Variations interne et externes entre les sessions
    - facteurs environnementaux
    - changements interne (fatigue, humeur, motivation)
    - sous-estimation de la fiabilité
  3. Difficulté à définir l’intervalle de temps optimal entre les tests
    - court : l’effet de mémoire
    - long: changement réel
  4. Temps et coût supplémentaire
    - deux administrations
    - disponibilité des participants
  5. Non-approprié pour certains traits de personnalité ou états émotionnels
How well did you know this?
1
Not at all
2
3
4
5
Perfectly
24
Q

Qu’est-ce que la fidelité par versions parallèles?

A
  • Administration de deux versions différentes, mais équivalente.
  • Même construit avec des items différents.
How well did you know this?
1
Not at all
2
3
4
5
Perfectly
25
Q

Qu’est-ce que le coefficient de fidelité par version parallèle mesure?

A

Corrélation entre les scores obtenus des deux passations

26
Q

Comment interpréter le coefficient de de la fidelité par versions parallèles?

A

Une forte corrélation indique que les versions sont cohérentes et mesurent de manière fiable le même concept, malgré les différences d’items.

27
Q

Comment assurer un parallélisme “rigoureux” dans la création de fidelité par versions parallèles?

A
  1. structure équivalente
  2. niveau de difficulté similaire ( p<0,05)
  3. consignes et temps alloués identiques
  4. interprétations des scores cohérents
28
Q

Quels sont les avantages de la fidelité par versions parallèles?

A
  1. Réductionde l’effet de mémoire
    - les items sont différents par passation
  2. évaluation de la constance du construit
    - vérification si le construit est cohérent avec items différents
  3. Utilisation dans des contextes variés
  4. Mesure plusieurs facettes d’un même concept
    - renforce la compréhension globale du construit.
29
Q

Quels sont les inconvénients de la fidelité par versions parallèles?

A
  1. Difficulté de créer des versions réellement équivalentes
    - lègères différentes peuvent induire des variations des scores
  2. Coût en temps et ressource
    - développer et tester deux versions
  3. Complexité des analyses statistiques
    - analyse factorielle confirmatoire pour vérification
  4. Biais potentiel
    - résultats biaisé si les versions ne sont pas équivalentes
30
Q

Quel est la différence entre un construit et un concept?

A

Construit: empirique (expérience, observation), un concept mesuré, latent.

Concept: théorique.

31
Q

Qu’est-ce que la fidelité par bissection?

A
  • dividion des items du test en deux moitié équivalentes
32
Q

Qu’est-ce que le coefficient de corrélation mesure dans la fidelité par bissection?

A
  • Mesure de la cohérence interne
  • Dans quelle mesure les deux moitié évaluent la même caractéristique.
33
Q

Quels sont les avantages de la fidelité par bissection?

A
  1. facilité d’application
    - une seule administration
  2. Évaluation de la cohérence interne
  3. Réduction de l’effet de fatigue
    - une seule administration
  4. Utilisation efficace des données
    - maximiser les données disponibles sans nécessité des données supplémentaires
34
Q

Quels sont les inconvénients de la fidelité par bissection?

A
  1. Problème de division
    - pour des moitiés équivalentes
  2. Fiabilité sous-estimée
  3. Sensibilité de la méthode de dividion
    - la fiabilité dépend si la divison est aléatoire ou équilibré.
35
Q

Pourquoi l’échelle de Rosenburg est unidimensionnel pour certains, mais bidimensionnel pour d’autres?

A
  • Il y a des items qui sont négatifs et d’autres non (deux dimensions), mais si je transforme (positiver la négation) les items (1 en 5, 2 en 4 et 3 = 3), je ne vais pas trouver deux dimensions, mais bien une.
36
Q

Que mesure la fidelité par homogénéité?

A

À quel point les items d’un instrument sont étroitement liés au construit.

37
Q

Comment fonctionne la fidelité par homogénéité?

ou cohérence interne

A
  • La corrélation d’un item avec un second item en contrôlant les effets des autres items. (Corrélation partielle)
  • La moyenne des corrélations partielles
  • Pour plusieurs dimensions, c’est une moyenne par dimensions.
38
Q

Comment interpréter la fidelité par homogénéité?

A
  • Omega ou alpha ordinal
  • Une bonne cohérence indique que les items réflètent de manière cohérente le concept psychologique étudié.
39
Q

Quels sont les avantages de la fidelité par homogénéité?

A
  1. Facilité de calcul
  2. Évaluation de la cohésion
  3. Adapté aux test unidimensionnels
  4. Économie de temps
    - une seule passation
40
Q

Quels sont les inconvénients de la fidelité par homogénéité?

A
  1. Ne détecte pas l’hétérogénéité
    - Si le test est multidimensionnel, la cohérence interne peut être trompeuse.
  2. Sensibilité à la longeur du test
    - L’alpha est sensible au N (nombre d’items) et peut produire des résultats plus élevés qu’ils ne le sont.
  3. Influencé par la redondance des items
    - items trop similaires augmentent la cohérence sans améliorer la qualité du test. (colinéarité)
41
Q

Qu’est-ce que la cohérence par inter-correcteurs?

A

Le degré d’accord entre deux ou plusieurs évaluateurs qui jugent indépendamment le même ensemble d’items.

Utile pour des évaluations subjectives commes des symptômes cliniques.

42
Q

Comment est calculé la fidelité par inter-correcteurs?

A
  • le kappa de Cohen
  • CVC
  • CCI
43
Q

Comment interpréter la fidelité par inter-correcteurs?

A

Un accord élevé entre les juges indique que l’évaluation est fiable et cohérente entre les correcteurs.

44
Q

Quels sont les avantages de la fidelité par inter-correcteurs?

A
  1. Évaluation de la subjectivité
  2. Identification des biais d’évaluation
    - correction des juges pour garantir plus d’objectivité
  3. Application dans plusieurs domaines
    - éducation, travail, psychologie
  4. Mesure de la cohérence entre les juges
45
Q

Quels sont les inconvénients de la fidelité par inter-correcteurs?

A
  1. Dépendance aux compétences des évaluateurs
    - moins qualifiés = baisse de la fiabilité
  2. Coût en temps et ressource
  3. Variabilité des critères
    - critères d’interprétations différentes
  4. Complexité des analyses.
46
Q

En quoi consiste des tests de vitesse?

A
  • la capacité d’un individu à réussir le plus grand nombre possible d’items ou de tâches dans un laps de temps limité.
  • Les items de ses tests sont simples.
47
Q

Comment évaluer la fidelité des tests de vitesse?

A
  • fidelité test-retest
  • fidelité pas bissection
48
Q

En quoi consiste un test de puissance?

A
  • La capacité d’un individu à résoudre des tâches complexes et/ou difficiles, sans limite de temps stricte.
  • Un accent mis sur la qualité et la précision des réponses.
  • Évalue le potentiel ou les capacités intellectuelles maximales d’une personne.
49
Q

Comment évaluer la fidelité d’un test de puissance?

A
  • fidelité par homogénéité (cohérence interne)
50
Q

Les tests de vitesse et les tests de puissance sont conçus pour éviter les ____ ________, et cela pour plusieurs raisons liées à la __ ___.

A
  • scores parfaits
  • discrimination psychométrique
51
Q

Qu’est-ce que la discrimination psychométrique?

A

La capacité d’un test à différencier les individus sur la base de leurs compétences ou capacité.

52
Q

Quels sont les impacts d’un score parfait sur les tests de vitesse et de puissance?

A

Test de vitesse:
- Si un participant termine toutes les tâches, cela indique qu’il aurait pu en faire mieux, donc on ne distingne pas sa capacité réelle.

Test de puissance:
- Si tous les participants réussissent tous les items, il devient difficile de différencier les niveaux de compétence.

53
Q

Quels sont les trois qualités d’un test psychométrique?

A
  • Validité
  • Fidelité
  • Discrimination psychométrique
54
Q

Qu’est-ce que l’erreur type de mesure? ETM)

ou erreur strandard de mesure (ESM)

A
  • mesure essentielle en psychométrie
  • quantifie l’ampleur des erreurs aléatoires dans un test et aide à estimer dans quelle mesure un score observé peut diverger du score vrai.
55
Q

De quoi est composé un score observé?

(ou score manifesté)

A

Score vrai: capacité réelle de l’individu.
Erreur de mesure: facteurs aléatoires qui influencent le score

56
Q

Quelle est la formule de l’erreur type de mesure?

A

𝐸𝑇𝑀=𝜎√(1−𝑟)

Où :
𝜎 = écart-type des scores observés;
r = coefficient de fidélité du test

57
Q

Comment interpréter un erreur type de mesure (ETM)?

A

Faible ETM :)
- moins de 5% du score de l’individu
- l’incertitude liée aux erreurs aléatoires est faible
- le score observé est proche du score vrai

ETM modéré
- entre 5 et 10% du score de l’individu
- le score observé s’écarte du score vrai
- marge acceptable

ETM élevé
- suppérieur à 10%
- grande imprécision entre le score observé et score réelle
- forte présence d’erreurs aléatoires

58
Q

Quel est un lien entre l’erreur type de mesure et la fidelité?

A

Plus un test est fidèle, plus l’ETM est faible.

Fidelité faible = ETM élevé
Fidelité élevé = ETM faible

59
Q

Quels sont les applications concrètes de l’ETM?

A
  1. Évaluer la précision des scores individuelles
    - intervalle de confiance
  2. Comparer la précision des tests
  3. Prendre des décisions
    - en contexte clinique ou professionnel
60
Q

Quel est la différence entre l’écart-type et l’erreur-type?

A

Écart-type: 2 personne sou plus
Erreur-type: une personne

61
Q

Quels sont les limites de l’ETM?

A
  • Elle ne tient compte que des erreurs aléatoires (fatigue stress).
  • Elle ne mesure pas les erreurs systématiques (erreurs dues à un biais).
62
Q

Pourquoi est-il crucial de minimiser l’erreur de mesure type dans un test à objectif important?

A
  • garantir des décisions justes et fiables
  • cela touche à la déontologie

Mesure, évaluation et déontologie (7 decks)

Brainscape helps you reach your goals faster, through stronger study habits.
© 2024 Bold Learning Solutions. Terms and Conditions