Cours 10 : Usage recommandé et traduction

Question 1

Quelle est l’étape de l’usage recommandé selon le modèle de la cible ?

Answer 1

C’est l’étape de la vérification de l’utilité.

Question 2

Quel est le but de l’étape de l’usage recommandé ?

Answer 2

Vérifier si par rapport à ce qui a été élaboré à l’usage anticipé (buts, contexte, population cible), l’instrument répond à ses objectifs.

Question 3

Quelle question faut-il se poser quand on évalue l’utilité d’un instrument ?

Answer 3

« Quelles décisions mon instrument doit-il m’aider à prendre ?»

Question 4

Quelle question faut-il se poser à l’étape de l’usage recommandé ?

Answer 4

« Quel est le degré de certitude associé aux conclusions tirées de mon instrument ? »

Question 5

Quels sont les objectifs de l’usage recommandé ?

Answer 5

• préciser les buts, la population visée et les conditions d’utilisation en fonction du reste de la création
• guider l’interprétation

Question 6

Quels sont les moyens pour atteindre les objectifs de l’usage recommandé ?

Answer 6

• article scientifique (contenu généré peut ainsi être revu par d’autres chercheurs)
• manuel de test (régir comment administrer l’instrument)
• normes (comment interpréter les scores au test)

Question 7

_____ les qualités psychométriques sont détaillées, plus les autres chercheurs vont pouvoir _____ l’instrument

Answer 7

Mieux

Utiliser

Question 8

Quelles sont les questions majeures à se poser quand on pose un jugement critique sur un instrument ? (3)

Answer 8

• Peut-on accomplir les buts ?
• Le test convient-il à la population visée ?
• Est-il fiable, valide, utile ?

Question 9

Quelles sont les sujets majeurs dont il faut traiter lorsqu’on formalise notre analyse de l’instrument dans un document / article ? (3)

Answer 9

• Processus d’élaboration, de validation (3b, 3c)
• Présentation de preuves de validité et fidélité (4, 5)
• Procédures qui rendent optimales l’utilisation du test.

Question 10

Qu’est-ce qu’un score brut ?

Answer 10

Le résultat direct d’un test

Question 11

Un score brut est-il interprétable ?

Answer 11

Pas nécessairement, cela dépend de la cotation et du type d’instrument (normatif ou critériée)

Question 12

Définis un groupe de référence

Answer 12

Un groupe de personnes auquel est comparé le résultat d’un participant. Permet de donner un sens, une utilité à un score individuel.

Question 13

Le groupe de référence doit avoir une taille …..

Answer 13

Suffisante pour avoir assez de représentativité de ce qu’on veut comparer et donc diminuer l’erreur-type de mesure

Question 14

Comment se détermine la représentativité ?

Answer 14

En fonction de la population visée par l’instrument (usage anticipé)

Question 15

Comment la représentativité d’un échantillon (groupe de référence) peut-elle être vérifiée ?

Answer 15

En comparant le groupe de référence avec la population cible sur les variables importantes (ex : sexe, âge, SSE)

Question 16

La représentativité s’assure à l’aide d’une méthode d’échantillonnage. On en voit 2 dans le cadre du cours, lesquelles ?

Answer 16

• Aléatoire simple / probabiliste

- Convenance / non-probabiliste

Question 17

Qu’est-ce qu’une méthode d’échantillonnage aléatoire simple ?

Answer 17

Chaque personne de la population cible est connue et a donc chance égale de faire partie de l’échantillon. Les participants sont sélectionnés au hasard dans la population.

Question 18

Qu’est-ce qu’une méthode d’échantillonnage de convenance ?

Answer 18

Les participants sont choisis sur la base de la facilité d’accès, des contacts, de la disponibilité (ex : ma population cible est les étudiants de l’UdeM donc je vais prendre les élèves de mon cours de psychométrie)

Question 19

Quels sont les avantages (1) et les limites (2) de la méthode d’échantillonnage aléatoire simple / probabiliste ?

Answer 19

A : Objective (mêmes chances pour tout le monde, optimisation de la représentativité de l’échantillon)

L : Cette méthode ne fonctionne que quand on connait tous les individus d’une population visée (ex : ado canadiens = très complexe, étudiants de l’UdeM = plus facile). Méthode très couteuse

Question 20

Quels sont les avantages (2) et les limites (1) de la méthode d’échantillonnage de convenance / non-probabiliste ?

Answer 20

A : commode, peu coûteux

L : la procédure n’est pas aléatoire. La représentativité est donc compromise / limitée.

Question 21

Quels sont les 5 niveaux d’ampleur des normes ? Nomme-les et donne un exemple pour chacun.

Answer 21

1. Nationales (ex : Canada)
2. Internationales (ex : pays occidentaux)
3. Locales (ex : Montréalais)
4. Utilisateurs (ex : les gens qui ont passé le SAT en 2021 sont ajoutés aux normes du SAT)
5. De sous-groupes (ex : les femmes et les hommes du groupe forment 2 sous-groupes)

Question 22

Quel est le risque des normes de sous-groupes ?

Answer 22

Plus il y a de sous-groupe, moins il y a d’individus par sous-groupe. Le fait de fragmenter un groupe d’individus peut diminuer la puissance statistique d’un test / de ce groupe.

Question 23

Nous avons vu 2 types de normes dans le cours. Lesquelles ?

Answer 23

1. Percentiles

2. Score Z

Question 24

Quelles sont les deux informations que la norme (métrique) choisie doit fournir ?

Answer 24

• Performance du participant

- La position relative du participant par rapport à son groupe de référence

Question 25

Que veut dire être au 66e percentile d’une distribution ? Cela veut-il dit qu’on a obtenu une note de 66% ?

Answer 25

Non, le bénéficiaire peut avoir obtenu 80% comme score brut. Le percentile représente le pourcentage de personnes du groupe de référence qui a obtenu un score plus bas ou égal au bénéficiaire. Le percentile dépend donc de la distribution du groupe de référence

Question 26

Quels sont les avantages (3) et les limites (2) des normes percentiles ?

Answer 26

A :

• facile à comprendre, à expliquer
• de 1 à 99
• pas influencé par la FORME de la distribution (normale ou pas)

L :

• confusion avec pourcentages
• de petites variations du score brut au milieu de la distribution peuvent avoir un impact majeur sur la valeur du percentile (et l’inverse pour les extrêmes : gros changements dans le score brut = peu de changement dans les percentiles)

Question 27

Quels sont les avantages (2) et les limites de la méthode d’échantillonnage des scores Z ?

Answer 27

A :

• les écarts entre les scores bruts ont tous le même impact sur le score Z peu importe où les données sont dans la distribution
• fonctionne bien avec une courbe normale

L :

• fonctionne SEULEMENT avec une courbe normale
• la distribution doit être transformée avant d’être utilisée en score Z pour être standardisée

Question 28

Quelle est la moyenne et l’écart-type en scores Z ? Peut-on obtenir un score Z négatif ?

Answer 28

La moyenne est de 0 et l’écart-type est de +/- 1.

Oui, le score peut être négatif.

Question 29

De quelles informations a-t-on besoin pour passer d’une norme à l’autre ?

Answer 29

1. Zone de concentration des scores (moyenne et é-t)

2. Étendue des scores (max et min)

Question 30

Vrai ou Faux : un test traduit est validé

Answer 30

Faux. Il faut valider une traduction (évaluer ses qualités psychométriques)

Question 31

Qu’est-ce qu’une traduction traditionnelle ? Quelle est sa principale limite ?

Answer 31

Le chercheur traduit par lui-même le questionnaire. Elle est sujette aux biais du chercheur (linguistique, culturel, de compréhension, etc.)

Question 32

Qu’est-ce qu’une traduction par comité ? Pourquoi est-elle meilleure que la traduction traditionnelle ? Quelle est sa principale limite ?

Answer 32

Traduction en équipe, plusieurs personnes délibèrent sur les items. Elle est meilleure parce que moins sujette aux biais d’un chercheur (plusieurs visions différentes), mais le travail en équipe est complexe (limite)

Question 33

Qu’est-ce qu’une traduction parallèle aveugle ? (3 étapes)

Answer 33

1. Plusieurs traductions simultanées par des chercheurs qui ne se sont pas parlés préalablement (aveugle)
2. Chaque item traduit est ensuite évalué par un comité et les meilleurs items sont retenus
3. Les items retenus sont comparés avec la version originale. On regarde l’équivalence.

Question 34

Qu’est-ce qu’une traduction renversée ?

Answer 34

• La version originale (1) est traduite par un traducteur (A).
• La version traduite (2) est ensuite re-traduite dans la langue originale par un traducteur (B).
• La version en langue originale (3) est ensuite comparée à la version originale (1) à savoir si elles sont équivalentes.

Question 35

Quelles sont les meilleures méthodes de traduction ?

Answer 35

Parallèle aveugle et renversée. L’idéal = combinaison des deux (on fait la traduction avec méthode parallèle aveugle et on vérifie nos choix avec la méthode renversée)

Question 36

Que cherche à faire une traduction parallèle aveugle ?

Answer 36

S’approcher de l’accord interjuges.

Question 37

Quels sont les avantages (2) et les limites (2) d’une traduction renversée ?

Answer 37

A :

• au moins deux personnes impliquées (moins de biais)
• permet de vérifier la qualité de la traduction

B :

• difficile d’obtenir une équivalence parfaite
• la variabilité culturelle / contextuelle peut affecter l’équivalence (les 2 traducteurs sont soumis à des variables culturelles et contextuelles différentes)

Question 38

La validation d’instruments traduits peut se faire avec la méthode avec 2 groupes. En quoi consiste-t-elle ? Quelle est la procédure complète ?

Answer 38

1. Traduction
2. Pré-test où on présente la moitié des items traduits et l’autre moitié des items originaux au groupe 1 et l’inverse au groupe 2 de participants
3. Ajustement si les items sont problématiques
4. Pré-test 2 avec les ajustements et la même méthode
5. Enlever les items problématiques s’ils le sont encore
6. Analyse de l’instrument selon le modèle de la cible.

Question 39

Quels sont les 3 critères de décision quant à la fiabilité de la traduction pour la méthode avec 2 groupes ?

Answer 39

• Moyenne des scores totaux équivalentes entre les deux groupes
• Corrélations entre la version originale et la version traduite pour chaque groupe sont fortes et équivalentes (consistance interne)
• Comparaison des fréquences de réponses des items (si ce sont les mêmes qui varient plus ou moins dans les deux versions)

Question 40

Quels sont l’avantage et la limite majeure de la méthode de vérification de traduction avec 2 groupes ?

Answer 40

• On compare 2 groupes donc on peut faire l’étude de validation en 1 temps.
• On ne sait pas si la valeur des corrélations entre VT et VO est attribuable à la consistance interne ou à la traduction.

Question 41

En réponse à la méthode avec 2 groupes, une autre technique a été élaborée, laquelle ? En quoi se distingue-t-elle de la méthode avec 2 groupes ?

Answer 41

La technique par groupe unique et corrélations croisées. On mesure ici un seul groupe en 2 temps (vs 2 groupes en même temps) et on effectue plusieurs corrélations croisées.

Question 42

Quels sont les critères de décision quant à la fiabilité de la traduction pour la technique par groupe unique ?

Answer 42

Corrélations croisées toutes fortes et équivalentes (scores totaux, scores des dimensions de l’instrument, scores des items).

Question 43

Pourquoi on calcule plusieurs corrélations croisées dans la technique par groupe unique ?

Answer 43

Pour évaluer la cohérence interne, la stabilité temporelle ET la traduction de l’instrument. Cela permet de dissocier les qualités psychométriques et les qualités de traduction.

Question 44

Dans la technique par groupe unique, les indices psychométriques deviennent __________ de l’équivalence des traductions.

Answer 44

Indépendants.

Question 45

Nomme moi les 3 avantages de la technique par groupe unique par rapport à la méthode par 2 groupes.

Answer 45

• Sépare les qualités psychométriques et de traduction
• Détecte les erreurs de traduction
• Évalue la stabilité temporelle.

Question 46

Quels sont les problèmes relatifs à l’utilisation de participants bilingues ? (3 questions à se poser)

Answer 46

• Le niveau de bilinguisme est-il vraiment équivalent ?
• Les participants qui répondent dans la langue des items font-ils une traduction implicite dans leur tête altérant les résultats ?
• Est-ce que les participants représentent bien la population bilingue ET la population unilingue visée par la traduction ?

Question 47

De quel type de participants avons-nous besoin lorsqu’on veut valider une traduction ?

Answer 47

Participants bilingues