Cours # 10 Flashcards
Vrai ou faux : La construction des test un un processus très long et dynamique
Vrai
Vrai ou faux: La validation d’un instrument psychométrique peut donner lieu à de nombreux travaux complémentaires
Vrai
Quelles sont les étapes de la construction (et adaptation) d’un instrument de mesure?
- Analyser les besoins
- Identifier les comportements
- Spécifier quelques principes
- Rédiger (adapter) les items
- Expertiser la première version (construite ou adapté)
- Pré tester
- Analyser les items
- Dimensionner/calibrer
- Rédiger un manuel
Expliquer l’étape #1: Analyser les besoins
- Identifier les motifs qui justifient les besoins d’éval;
- Mesures existante : certaines d’entre elles répondent-elles à nos besoins ?
- Devons-nous créer (ou adapter) une mesure pour répondre à nos besoins ?
- Quels sont les objectifs de cette nouvelle mesure ?
Expliquer l’étape #2 : Identifier les comportements
Quels sont les comportements OBSERVABLES susceptibles de représenter le construit qu’on
veut mesurer ?
Expliquer l’étape 3 : Spécifier quelques principes
- Le nbr d’items
- Caractéristiques du matériel (et de la population)
- L’échelle Likert
Il faut un nombre bien plus ___ d’items candidats. Entre __ et __ plus que le nombre voulu.
Grand
5 à 10
Qu’est-ce qu’on doit fondamentalement observer lorsqu’on rédige les items (étapes 4)
- Le contenu des questions (Un contenu par question)
- Formulation des questions
- Séquence des questions (Niveau de difficulté)
- Format des réponses souhaitées
- Présentation du matériel (pour ch. item)
Quels sont les aspects à s’assurer lorsqu’on rédige les items (étapes #4)?
- Utilisez une communication simple et des mots familiers;
- Évitez des mots ambigus ou de compréhension difficile;
- Évitez des items qui suggèrent déjà les réponses; Ou,
qu’une question répond à une autre (effet de halo);
- Évitez des items qui suggèrent déjà les réponses; Ou,
- Évitez les items dont le contenu suscite des sentiments
d’approbation ou de désapprobation émotionnelle;
- Évitez les items dont le contenu suscite des sentiments
- Éviter les questions longes (plus courte c’est mieux);
Qu’est-ce que l’effet de halo? (Étape #4 : Rédiger les items)
C’est lorsqu’une question (item) répond à une autre question (item)
ÉTUDIER LES DIAPO 14 et 15.
Questions à se demander
Expliquer l’étape #5 d’expertiser la première version
Soumettre à la vérification de la
clarté du langage, pertinence théorique et dimensionnalité par un groupe d’expert
Quelles sont les questions les plus récurrentes demandés aux experts pour évaluer les items d’un test? (3)
- Clarté du langage
- Pertinence théorique
- Dimensionnalité
Qu’est-ce qui est important d’observer quant au groupe d’expert sélectionnée pour faire l’expertise de la première version d’un questionnaire?
- Combien d’années de formation
- Combien d’années de pratique
- Location géographique
- Lieu de formation : Attention à la CONSANGUINITÉ INTELLECTUELLE
Qu’est-ce que la consanguinité intellectuelle?
C’est lorsqu’une personne est formée académiquement dans le même lieu/par le même professeur
Expliquer l’étape #6 : Pré-tester
C’est de pré-tester la première version avec un échantillon suffisamment grand pour éviter l’erreur d’échantillonnage.
Expliquer la combinaison linéaire
C’est lorsque plusieurs items explique la variance d’un autre item. Cet item devient donc un candidat à être éliminer (Ex : la combinaison linéaire des items 2-3 et 4 explique la variance de l’item 1.)
Expliquer l’étape #7 : Analyser les items (analyse initiale)
- Vérifier/explorer, premièrement, les résultats descriptifs et corrélationnels ;
- Explorer/détecter les possibles problèmes d’acquiescence
- Tester la normalité des variables latentes
- Chercher les possibles problèmes de colinéarité.
- Autres tests : Matrice anti-image, Analyse factorielle, Qualité de la représentation (Communalities), variance total expliqué, matrice de forme et matrice de corrélation reproduit.
Nommer des analyses descriptives
Moyenne,
Écart-type
Médiane, mode
Qui suis-je? Phénomène par lequel les individus sont susceptibles d’être d’accord avec quelque chose, indépendamment de ce qu’ils ressentent réellement
Biais d’acquiescement
Expliquer le biais d’acquiescement
Phénomène par lequel les individus sont susceptibles d’être d’accord avec quelque chose, indépendamment de ce qu’ils ressentent réellement
Nommer des tests de normalité des variables latente (Univarié et multivarié)
Univarié : K-s avec correction de Lilliefors, S-W.
Multivarié : Test de Mardia ou test de distance de Mahalanobis
Qu’est-ce qu’un test de normalité univarié?
…
Qu’est-ce qu’un test de normalité multivarié?
…
Qu’est-ce que la problèmes de Colinéarité? Pourquoi on n’aime pas ce problème?
- Lorsqu’un item est trop corrélé avec un autre item
- Car cela va potentialité les résultats (Résultats trop beau)
Étudier matrice anti-image (Tableau)
Comment pouvons-nous interpréter les résultats de la matrice anti-image?
- Valeur hors diagonale principale : doivent être majoritairement petites
- Diagonale principale : Doivent être le plus élevé possible
Qu’est-ce que la qualité de la représentation « initial »?
Une mesure de la variance de chaque variable qui peut être
expliquée par l’ensemble des toutes les autres variables (Ex: Variable 2 à 12 expliquent la variable 1).
C’est la combinaison linéaire de tous les items qui explique un seul items.
Qu’est-ce que la qualité de la représentation « extraction» ?
Une mesure de la variance de chaque variable qui peut être
expliquée par le nombre de facteurs retenus
Comment pouvons-nous interpréter la qualité de la représentation?
À partir de 0.3 = acceptable
À partir de 0.4 = satisfaisant
- de 0.3 = ‘‘mauvais’’/’‘inacceptable = il y a un problème.
Quelle est la meilleure qualité de la représentation (Communalities) entre l’initial et l’extraction? Pourquoi?
Extraction, puisqu’il est préférable d’expliquer la qualité selon le nombre de facteurs/dimensions
ÉTUDIER LA VARIANCE TOTAL EXPLIQUÉE (DIAPO # 23)
Pourquoi devons-nous effectuer la matrice de corrélation reproduite?
Puisque après plusieurs analyses, il y a une perte du degré de liberté (et donc les données sont plus instables). On doit donc recalculer la matrice de corrélation.
Quels sont les informations fournie par la matrice de corrélation reproduite?
- La corrélation reproduite
- Les résidus (Donc les erreurs)
Comment devons-nous interpréter la matrice de corrélation reproduite?
Corrélation reproduite : Comme une corrélation normale
Résidus : Doivent être plus petite que 0.3
Qu’est-ce que les résidus dans la matrice de corrélation reproduite?
Ce sont les erreurs, donc la différence entre la 1ere corrélation et la dernière corrélation (après plusieurs analyses où on a perdu des degré de liberté)
Quel information est fourni par la matrice de forme?
Permet de déterminer quels items font partie des différents facteurs
Quelles sont les analyses de la fidélité?
- Test-retest
- Formes parallèles
- Méthode de moitié (split-half)
- Homogénéité (consistance interne)
- Accord inter-juges
Expliquer l’étape #8 : Dimensionner/calibrer (Notre version adaptée de notre instrument)
Création des norme après avoir fait l’exploration minutieuse des indices de validité et fidélité.
Vrai ou faux: Il est seulement pertinent pour les gens qui font la construction (ou l’adaptation) d’un test de comprendre les résultats obtenu
Faux : Aussi pour les personnes vont utiliser les tests, afin de savoir quel test est mieux d’être selectionner.
Qu’est-ce qui est présenté dans le manuel d’utilisateur d’un test?
- Les objectifs pour lesquels il a été créé
- Les bases théoriques du test;
- Les qualifications requises pour l’appliquer et l’interpréter;
- les consignes et les principes d’interprétation des résultats;
- Les données métriques
- Définition de l’échantillon + passation
- Administration (procédures), directives, limites de temps, mode de correction
Le constructeur doit assumer une responsabilité ___.
éthique
