Cours 10 Flashcards

1
Q

Les étapes qui décrivent les principales composantes et considérations techniques d’une construction efficace d’instrument de mesure, permettent quoi ?

A

Fournir une approche cohérente
De favoriser les arguments concernant l’adéquation des preuves de validité.

How well did you know this?
1
Not at all
2
3
4
5
Perfectly
2
Q

La construction des tests est un processus _____ _____ qui ne se termine pas …

A

Très long
Pas nécessairement au moment de sa publication.
La validation d’un instrument psychométrique peut donner lieu à de nombreux travaux complémentaires.

How well did you know this?
1
Not at all
2
3
4
5
Perfectly
3
Q

Plusieurs des étapes présentés ici se chevauchent …

A

Avec les préoccupations principales d’adaptation transculturelle d’instruments de mesures.

How well did you know this?
1
Not at all
2
3
4
5
Perfectly
4
Q

Nomme les 9 étapes de la construction (adaptation) d’un instrument de mesure.

A

-Analyser les besoins
-Identifier les comportements
-Spécifier quelques principes
-Rédiger (adapter) les items
-Expertiser la premières version (construite ou adapté)
-Pré tester
-Analyser les items
-Dimensionner/Calibrer
-Rédiger un manuel

How well did you know this?
1
Not at all
2
3
4
5
Perfectly
5
Q

Nomme les 4 points qu’on retrouve dans l’étape d’analyser les besoins.

A

-Identifier les motifs qui justifient les besoins d’évaluation.
-Si nous examinons les mesures déjà existantes, certaines d’entre elles répondent-elles à nos besoins.
-Devons-nous créer (ou adapter) une mesure pour répondre à nos besoins.
-Quels sont les objectifs de cette nouvelle mesure.

How well did you know this?
1
Not at all
2
3
4
5
Perfectly
6
Q

Nomme le point qu’on retrouve dans l’étape d’identifier les comportements.

A

-Quels sont les comportements observables susceptibles de représenter le construit qu’on veut mesurer.

How well did you know this?
1
Not at all
2
3
4
5
Perfectly
7
Q

Nomme les 3 points qu’on retrouve dans l’étape de spécifier quelques principes.

A

-Nombre d’items (préoccupation de la construction)
-Caractéristiques du matériel (et de la population)
-L’échelle Likert (pair ou impair) 4,5,6 ou 7 points = fortement en désaccord à fortement en accord ?

How well did you know this?
1
Not at all
2
3
4
5
Perfectly
8
Q

Nomme le point principal qu’on retrouve dans l’étape de rédiger les items.

A

-Il faut un nombre bien plus grand d’items au départ (construction ou d’option d’adaptation) pour avoir un certain nombre d’items utiles. Fondamentalement il faut observer :
-le contenu des questions (un contenu par question)
-la formulation de questions
-la séquence de questions (niveau de difficulté)
-le format des réponses souhaitées
-la présentation du matériel

How well did you know this?
1
Not at all
2
3
4
5
Perfectly
9
Q

Nomme les 5 points de l’étape de rédiger les items.

A
  1. Utilisez une communication simple et des mots familiers
  2. Évitez des mots ambigus ou de compréhension difficile
  3. Évitez des items qui suggèrent déjà les réponses ou qu’une question réponde à une autre (effet de halo)
  4. Évitez les items dont le contenu suscite des sentiments d’approbation ou de désapprobation émotionnelle
  5. Évitez les questions longues (plus courte c’est mieux)
How well did you know this?
1
Not at all
2
3
4
5
Perfectly
10
Q

Nomme les questions qu’on doit se poser lors de l’évaluation d’un test (ce qu’il faut Observer).

A

-L’items est inutilement détaillée ou trop spécifique ?
-Plusieurs items sont nécessaires pour évaluer ce contenu ou l’une seule est déjà suffisante ?
-Tous les éléments importants de ce contenu sont obtenus sur la façon dont les items ont été formulés ou adaptés ?
-Les gens ont les informations (les vécus, les formations) nécessaires pour répondre aux items proposés ?
-Les items contiennent des jugements liés au sujet d’évaluation ?
-Les répondants sont prêts à répondre les contenus demandés ?
-Faut-il que les items soient plus concrètes, spécifiques et plus directement liés à l’expérience personnelle ?
-Le contenu de la question est biaisé dans une certaine direction ?
-Quelles réactions pourrait-on avoir quand on va répondre aux items (aurons-nous de fausses réponses) ?

How well did you know this?
1
Not at all
2
3
4
5
Perfectly
11
Q

Nomme le point qu’on retrouve dans l’étape d’expertiser la première version.

A

-Soumettre, au moins, à la vérification de la clarté du langage, pertinence théorique et dimensionnalité par un groupe d’expert (observer : cb d’années de formation, de pratique, localisation géographique, lieu de formation).
–> provenant même labo ou formé par les mêmes profs = on ne veut pas ça.

How well did you know this?
1
Not at all
2
3
4
5
Perfectly
12
Q

Nomme les 2 points de l’étape de pré-tester.

A

-Pré-tester la première version (construite ou adaptée) à l’aide d’un échantillon de la population ciblée, visant peaufiner cette première version (et peut-être déjà développer la version définitive).
-Cet échantillon doit être suffisamment grand (la problématique de l’échantillonnage) pour garantir une bonne qualité des résultats au pré-test.

How well did you know this?
1
Not at all
2
3
4
5
Perfectly
13
Q

Dans l’étape pré-tester, pourquoi il faut avoir un grand échantillon ?

A

Parce qu’on ne veut pas que l’erreur associée au processus d’échantillonnage intervienne dans mes analyses.
–> l’erreur d’échantillonnage est diluée dans le grand échantillon.

How well did you know this?
1
Not at all
2
3
4
5
Perfectly
14
Q

Nomme les 4 points qu’on retrouve dans l’étape d’analyser les items : analyse initiale.

A

-Vérifier/explorer, premièrement, les résultats descriptifs (relation variance et é-t) et corrélationnels.
-Explorer/détecter les possibles problèmes d’acquiescence (positive ou négative).
-Tester la normalité des variables latentes (“K-S” avec correction de Lilliefors, “S-W”, test de Mardia ou le test de distance de Mahalanobis), si cela s’applique.
-Chercher les possibles problèmes de colinéarité. (item 1 et 2 = trop corrélés)

How well did you know this?
1
Not at all
2
3
4
5
Perfectly
15
Q

Qui suis-je : Phénomène par lequel les individus sont susceptibles d’être d’accord avec quelque chose, indépendamment de ce qu’ils ressentent réellement.

A

Biais d’acquiescement

How well did you know this?
1
Not at all
2
3
4
5
Perfectly
16
Q

Dans l’étape d’analyser les items : analyse initiale, quels sont les deux tests de normalité multi-variés (pls items) ?

A

Test de Mardia
Test de distance de Mahalanobis

17
Q

Matrice anti-image : En ce qui a trait à la matrice de corrélation anti-image, les valeurs hors diagonale principale doivent être quoi ? Pourquoi?

A

Doivent être majoritairement petites, parce que les effets linéaires des autres variables (qui n’expliquaient pas le phénomène) ont été éliminés (variance unique).
Dans le cas à l’étude, on remarque que les corrélations sont majoritairement petites, quelques fois presque inexistantes (nulles).

18
Q

Matrice anti-image : En ce qui a trait à la diagonale principale de la matrice de corrélation anti-image, …

A

Elle mesure précisément l’adéquation de la solution factorielle en comparant la force des coefficients de corrélation observés en relation avec la force des coefficients de corrélation partielle (mesure de la force de l’association entre deux variables quand toutes les autres sont maintenues constantes) ; plus précisément, il s’agit d’une mesure KMO par chacune des variables à l’étude.
–> KMO = Statistique d’adéquation de l’échantillonnage.

19
Q

Qualité de la représentation (communalities) : Explique la colonne “initial” et “extraction”.

A

-La qualité de la représentation “initial” est une mesure de la variance de chaque variable qui peut être expliquée par l’ensemble (combinaison linéaire) de toutes les autres variables.
-La qualité de la représentation “extraction” est une mesure de la variance de chaque variable qui peut être expliquée par le nombre de facteurs retenus.

20
Q

Qualité de la représentation : Dans la colonne “initial”, quelles sont les variables dépendantes/indépendantes ?

A

Item 1 = dépendant
Tous les autres = indépendants
–> Variance obtenue par la régression de tous les items par rapport à cet (un) item.

21
Q

Qualité de la représentation : Quelle colonne est la plus importante ?

A

Extraction, car on est là pour expliquer les dimensions/facteurs.

22
Q

Quelles sont les 2 colonnes importantes de la variance totale expliquée ?

A

% de variance
% cumulative

23
Q

Matrice de corrélation reproduite : Explique le premier point.

A

-Ce tableau, divisé en deux parties. La première partie contient les coefficients de corrélation reproduite entre toutes les variables du modèle factoriel. La diagonale principale de la première partie de ce tableau présente les qualités de représentation. Si l’on compare les valeurs hors diagonale avec la matrice de corrélation originale, on voit que les résultats ne sont pas exactement les mêmes. En effet, la matrice de corrélation reproduite est la matrice de corrélation basée sur les facteurs extraits (ou retenus). On s’attend que les valeurs de la matrice reproduite soient les plus proches possible des valeurs de la matrice de corrélation originale.

24
Q

Matrice de corrélation reproduite : Explique les 2 points de la 2e diapositive.

A

-La deuxième partie contiens les résidus (les différences entre les corrélations originales et les corrélation reproduites). La diagonale est inexistante, et les résultats hors diagonale doivent être les plus petits possibles.
-Plus la solution factorielle est bonne, plus la matrice reconstituée s’approche de la matrice de corrélation initiale et moins les résidus sont importants (valeurs absolues <0,05). L’indication d’une proportion faible de résidus plus grands que 0.05 signifie que tous les items contribuent pour une solution factorielle appropriée.

25
Q

Explique le point de la matrice de forme (Pattern Matrix).

A

-Le tableau “Pattern Matrix” indique que la rotation oblique a été effectuée. Cette matrice présente les charges - saturations - factorielles. Puisqu’on n’a pas demandé de retirer de la matrice les valeurs plus petites que 0,30, on voit toutes les valeurs corrélées avec les facteurs. De cette façon, on ne retire pas la pollution (saturation non significative) de la matrice. Les facteurs sont interprétés à partir du nom que nous leurs accordons (c’est arbitraire, la seule règle est qu’il doit expliquer le contenu des items).

26
Q

Comment on peut analyser les items : analyse de la fidélité.

A

-Test-retest
-Formes parallèles
-Méthode de moitié (split-half)
-Homogénéité (consistance interne)
-Accord inter-juges

27
Q

Dans la construction d’un instrument, que veut-on dire par “Dimensionner/calibrer” ?

A

Après une exploration minutieuse des indices de validité et fidélité, on doit créer les normes.

28
Q

Vrai/Faux : Il peut y avoir plusieurs normes pour un même instrument.

A

Vrai ; tout instrument psychométrique doit avoir des normes pour les populations auxquelles il est destiné (ex: certains instruments proposent des normes distinctes selon le sexe, le niveau de scolarité, l’âge, l’origine ethnique).

29
Q

Rédiger un manuel : La rédaction d’un manuel d’utilisateur, on présente :

A

-Les objectifs pour lesquels il a été créé
-Les bases théoriques du test
-Les qualifications requises pour l’appliquer et l’interpréter
-Les consignes et les principes d’interprétation des résultats
-Les données métriques

30
Q

Rédiger un manuel : Le constructeur doit assumer une responsabilité éthique :

A

-Les informations du manuel doivent garantir un usage correct du test, dans le respect des principes éthiques.

31
Q

Nomme des exemples de questions qu’on peut se poser dans la rédaction d’un manuel d’utilisateur, les objectifs pour lesquels il a été créé.

A

-À quoi serve-t-il ?
-Dans quel contexte sera-t-il utilisé ?
-Que doit-il mesurer ?
-Est-ce une variante d’un test existant ?
-Quelle population est concernée ?

32
Q

Vrai/Faux : Dans la rédaction d’un manuel d’utilisateur, il y a une définition de l’échantillon et de la passation.

A

Vrai

33
Q

Vrai/Faux : Dans la rédaction d’un manuel d’utilisateur, il y a administration, directives, limites de temps, mode de correction.

A

Vrai