Ppt 11 Flashcards
Vrai ou faux
La construction d’un test se fait en étapes successives.
Vrai
Quelles sont les deux grandes méthodes de construction des tests ?
- Déductive
- Inductive
Déductive ou inductive ?
Méthode qui part d’un cadre théorique
Déductive
Déductive ou inductive ?
Méthode qui part d’une démarche empirique ou factuelle
Inductive
Qui suis-je ?
Ma méthode a une plus grande objectivité et est plus représentatif de la réalité; on vérifie notre compréhension d’un construit, appuyée explicitement par des données
Méthode Inductive
Qui suis-je ?
Ma méthode a un contexte théorique clair, cohérence logique (i.e., réseau nomologique souvent connu a priori)
Méthode déductive
Comment fait-on une analyse factorielle dans la méthode inductive ?
Les items statistiquement liés au construits sont sélectionnés (corrélations item-total, saturations factorielles = les items avec des saturations faibles sont rejetées, etc.)
Après l’analyse factorielle, st-ce que nous pouvons retenir des items avec une saturation faible ?
Oui, si cet item est important dans l’instrument
Nommez un désavantage de la méthode inductive
- On n’arrive pas nécessairement au résultat qu’on voulait, les données dictent le résultat final (e.g., structure factorielle, etc.)
e.g., les données suggèrent que les items d’anxiété et de dépression sont combinés dans un seul facteur - Les statistiques peuvent parfois dénaturer les concepts en raison de biais d’échantillonnage
e.g., les statistiques suggèrent d’éliminer un aspect clinique important, alors que les résultats discordants sont surtout le fruit d’un mauvais échantillonnage, ou trop petit échantillon
Nommez un désavantage de la méthode déductive
- Subjectivité face à la théorie, théorie implicite des auteurs.trices
- On ne sait pas si cela fonctionne dans la réalité sans faire des études empiriques (i.e., la structure factorielle, validité de critère, etc.) : Tant qu’on a pas de données sur les résultats de propriétés psychométriques, soulève des questionnements.
- On ne sait pas si les répondants.es interpréteront les items inspirés de la théorie (et en conséquence, les construits) de la même manière que le concepteur.trice du test le croyait
Qui suis-je ?
Une étape classique dans le développement d’un nouveau instrument d’évaluation
l’analyse d’items
Qu’est-ce que la difficulté de l’item ?
Difficulté de l’item (une question difficile) : la proportion (ou pourcentage) d’individus qui endossent ou répondent correctement à l’item. Ex : dans l’exam intra, 90% des personnes n’ont pas eu la bonne réponse à la question 1.
Qu’est-ce que la discrimination de l’item ?
Discrimination de l’item : le degré auquel les individus avec un score élevé sur un test répondent correctement à un item particulier – ou l’inverse
Quelle est la différence entre les items à réponses construites et les items à réponses sélectionnées ?
Items à réponse construites sont des questions ouvertes avec aucune contrainte sur un choix de réponse fixe tandis que les items à réponses sélectionnées sont souvent des réponses fixes. Ex : Vrai ou faux
Pourquoi les items à réponses sélectionnées sont les plus utilisés dans les instruments d’évaluation en sciences humaines, sociales et psychologiques ?
o Parce que sont plus objectifs, plus facile de dériver un score numérique, plus fiables, souvent plus brefs, etc.
Lorsqu’une personne doit répondre à une question à réponse sélectionnée, elle doit effectuer quatre tâches cognitives, nommez-les.
o Compréhension : comprendre le contenu pertinent
o Récupération : récupérer l’information pertinente en mémoire qui est nécessaire pour répondre
o Jugement : porter un jugement sur la base de l’information récupérée
o Répondre : rapporter ce jugement, sur la base du choix de réponse disponible
Vrai ou faux
Des biais peuvent être introduits à chacune des tâches cognitives ?
Vrai
Qu’est-ce qui est le plus important lorsqu’on traduit des instruments ?
La compréhension du contenu, le sens/signification des items est plus important que la traduction exacte
Quelle est la première étape de l’adaptation transculturelle ?
Traduire et adapter les items (2 personnes minimum)
o Méthode de choix : Traduction à rebours F-E et E-F (« back translation »)
Quelles sont les six étapes de l’adaptation transculturelle ?
- Traduire et adapter les items (2 personnes minimum)
o Méthode de choix : Traduction à rebours F-E et E-F (« back translation ») - Experts.es indépendants.es révisent la traduction
- Éliminer ou adapter les items selon leurs commentaires
- Étude pilote auprès des individus ciblés
- Validation empirique formelle (évaluation détaillée des propriétés psychométriques)
- Standardisation (établir des normes) ex : normes québécoises.
Il existe cinq façons d’établir l’équivalence transculturelle, nommez-les.
- Équivalence sémantique
- Équivalence de contenu
- Équivalence factorielle
- Équivalence critériée
- Équivalence de la fidélité
Qu’est-ce que l’équivalence de contenu ?
o S’assurer que chaque item est pertinent dans les deux langages / cultures pour mesurer le construit (P.ex : centre ville de Montréal vs centre ville de Kuujuapik)
Quelles sont les deux techniques employées pour utiliser une approche empirique/inductive?
Analyse d’items/factorielle : on choisit les items statistiquement liés aux construits
Sélection critériée : ce qui permet de différencier des groupes
