Cours 4 - Usage recommandé et traduction Flashcards
Qu’observe-t-n dans l’usage recommandé?
Quel degré de confiance est-ce que je peut accorder à mon instrument et ses résultats?
Que doit-on formaliser dans un document concernant notre instrument?
1- Processus d’élaboration et de validation
2- La présentation des preuves de la validité
3- Les procédures qui rendent optimales l’usage de l’instrument
Les personnes qui choisiront d’utiliser l’instrument devront le faire de manière éclairée. En tant que concepteur, on doit donc porter un jugement critique et être honnête.
Peut-on accomplir le but fondamental? Convient-il à la population visée?
Est-il fiable? Valide? Utile?
Qu’est-ce que le score brut
Correspond au résultat direct d’un test.
Moyenne ou sommes des réponses
Quel est l’inconvénient des scores bruts?
Difficiles à interpréter, on doit le comparer pour savoir si c’est un score pertinent. Toutefois, ce n’est pas un score qui est standardisé, alors il faut nuancer nos interprétations. On doit avoir un référant clair et non approximatif.
Qu’est-ce que le groupe de référence?
Le score du participant doit être comparé avec celui d’autres participants
Comment forme-t-on un groupe de référence?
- Le groupe étalon car nous permet de créer un plan d’étalonnage. Plan : se faire un plan de la population, de qui ont veut avoir dans notre étude etc. On va se baser là-dessus pour créer le groupe de référence.
- Le groupe de référence se constitue à travers un plan d’étalonnage.
Que doit-on faire attention à bien faire lorsqu’on fait un groupe de référence ? 3
1- ressemble à la population
2- Taille suffisante pour avoir peu d’ETM
3- Représentativité
Il y a 4 scénarios possibles concernantnle représentativité. Quels sont-ils?
1- Fonction de l’usage anticipé et de la population visée
2- Assurée grâce à la méthode échantillonnage
3- Vérifié en comparant le groupe de référence à la population visée
4- S’il n’y avait pas population visée, alors on peut l’extrapoler à partir des caractéristiques du groupe de référence.
Quelles sont les méthodes d’échantillonage: expliquez
Aléatoire simple: chaque participant a une chance égale de faire partie de l’échantillon
Convenance: Inclure des participants sur la base de la facilité d’accès aux contacts
Quels sont les avantages et inconvénients de l’aléatoire simple?
Avantage: Objectif
Inconvénients: Couteux et on doit connaître la liste de toute la population…
Quels sont les avantages et inconvénients de convenance?
Avantages: Commode et peu couteux
Inconvénients: La procédure n’est pas aléatoire et la représentativité peut être compromise
Concernant l’ampleur des normes, quels sont les 5 types de normes possibles? Expliquez les.
a. Normes nationales : représentatives de la population visée au niveau national
b. Normes internationales : représentatives de la population visée au niveau mondial
c. Normes locales : représentatives de la population visée dans un milieu restreint (EX: test d’admission pour une école)
d. Normes d’utilisateurs : l’éditeur du test ajoute chaque groupe qui passe le test à ses normes (EX: normes pour les directeurs, professionnels, etc.)
e. Normes de sous-groupe : lorsqu’il existe des différences entre les individus en fonction de certaines variables (âge, sexe, statut socio-économique, groupe professionnel, etc. lorsque c’est pertinent de comparer la personne avec son sous-groupe.
Dans l’ampleur des normes, est-il possible d’avoir plusieurs types de normes?
Oui
La métrique doit fournir deux informations:
- La performance du participant
2. Sa position relative comparativement au groupe de référence
Pourquoi les scores bruts sont-ils difficiles à interpréter?
Parce qu’ils ne respectent pas les deux informations que la métrique dit fournir.
Quels sont les deux types de normes?
- Percentile
2. Score Z
Qu’est-ce qu’un percentile?
Pourcentage de gens qui sont en dessous ou égal à un score X
Quels sont les avantages des percentiles?
- Facile à comprendre
- De 1 à 99
- Pas influencé sur la forme de la distribution (pourrait être anormale et ça serait ok)
Quels sont les inconvénients des percentiles?
- Confusion avec les pourcentages
- Des petites variations du score brut au centre de la distribution ont une incidence majeure sur le percentile. (les extrémités sont épargnées)
Qu’est-ce que le score Z?
Moyenne = 0, ET = 1, scores négatifs possibles
Un écart entre deux scores bruts a le même impact sur le score Z, et ce peu importe l’endroit dans la distribution où se trouvent les deux données
S’agence très bien avec la courbe normale
Ce qu’on appelle un score standardisé.
Utilisé dans les tests scolaires
Vrai ou Faux? La même augmentation a le même impact sur le score Z et les percentiles.
Faux
Vrai ou Faux? Le français est la langue de la science
Faux
Vrai ou Faux? Lorsqu’on traduit un test validé, la traduction est automatiquement validée
Vrai
Vrai ou faux? Il n’est pas nécessaire que les propriétés psychométrique de l’instrument traduit soit les mêmes que l’original
Faux
Epxliquez la traduction traditionnelle et ses limites
o Le chercheur traduit lui-même le questionnaire (parfois avec l’aide de traducteurs)
o Biais du chercheur (biais linguistiques, psychologiques et de compréhension)
Expliquez la traduction par comité
o En équipe (si possible avec le chercheur original)
o Moins de biais du chercheur, mais traduire en équipe peut être un défi.
Expliquez les traduction parallèles aveugles
o Plusieurs traductons simultannées
o Chacun des items est évalué par un comité pur sélectionner la meilleure version possible
o Deux experts évaluent l’équivalence des items retenus et des items originaux
Expliquez la traduction renversée et ses avantages
o On traduit de l’anglais en français avec Traducteur A
o On retraduit de français à anglais avec traducteur B
o Est-ce que la première version et la version qui a passée par 2 traductions sont équivalentes?
o But : voir si on perd de l’info/changements importants entre la version originale et traduite?
o Avantages : 1- au moins deux personnes traduisent et 2- permet de vérifier la qualité de la traduction
Quels sont les 3 problèmes reliés à l’utilisation de participants bilingues dans les études de validation?
o Est-ce que le niveau de bilinguisme des participants est vraiment équivalent ?
o Est-ce que les participants bilingues « répondent dans la langue » des items ou ne font-ils pas une sorte de traduction implicite « dans leur tête » qui affecte l’évaluation de la traduction de l’instrument ?
o Est-ce que les participants bilingues sont représentatifs
de la population bilingue ?
de la population unilingue visée par la traduction ?
Expliquez la méthode de validation de Prince et Mombour
- Tout le monde est bilingue
- On montre les mêmes items à tout le monde mais les items sont traduits de différentes façon (EX : 1-10 sont traduits pour Groupe A alors que c’est 11-20 pour groupe B)
- On va ensuite comparer la moyenne des scores des deux groupes. Autres calculs vont être effectués pour observé le lien entre les deux.
- On va corréler la partie en langue originale et la partie traduite. On va arriver à 2 corrélations, une pour le groupe A et une pour le groupe B.
- On compare les tests des deux groupes entre eux mais on compare aussi les deux formes du test dans le même groupe. (un peu comme un slipt-half)
Fréquence : est-ce que c’est à cause de la traduction ou c’est parce que la fréquence est réellement touchée par un aspect externe à la langue. On tente d’aller trouver tout ça.
Quels sont les critères de décision pour la méthode de Prince et Mombour?
o Moyennes des scores totaux équivalentes entre les 2 groupes
o La corrélation entre V.O. et V.T. pour chacun des groupes devra être élevée et équivalente.
o Comparaison des fréquences de réponse pour les items (Item langue A VS Item langue B)
Expliquez la méthode de validation de Haccoun
- On fait passer la VO et la VT à un groupe à deux reprises. Chaque test passé est split en deux (1-10= français et 11-20 = anglais, mais inversé pour le temps 2)
- Encore une fois, tous des gens bilingues.
- En premier lieu, on regarde si la moitié 1 du T1 corrèle avec la moitié 1 du temps 2 et même chose pour la deuxième moitié. On, directement, utilise les moitiés de tests. Est-ce que les deux corrélations des deux moitiés sont équivalentes?
- On pourrait même regarder ces corrélations par items, et dimensions.
- On peut aussi corrélé les deux parties en V.O et en V.T. Ces deux corrélations devraient être corrélées fortement.
- Corrélation pour les deux parties du même temps de passation. Devrait encore une fois très élevée.
- On peut donc faire énormément de relations entre les éléments du test. Si on fait cette façon, on risque très peu de se faire critiquer car c’est très exhaustif. Touteofis prend énormément de temps.
- Ça implique que toutes ces relations sont déjà fortes et existantes dans le test initial, original.
- Rare qu’on voit une méthode aussi complexe. On va plutôt voir des méthodes plus psychométriques.
- Ceci se voit plus dans les tests de personnalité ou de sélections du personnel.
