Cours 10

Question 1

Décrit le processus de construction d’un test

Answer 1

La construction des tests est un processus très long qui ne se termine pas nécessairement au moment de sa publication;
La validation d’un instrument psychométrique peut donner lieu à de nombreux travaux complémentaires.
Plusieurs des étapes présentées ici se chevauchent avec les préoccupations principales d’adaptation transculturelle d’instruments de mesures

Question 2

Nommes toutes les étapes de la construction et de l’adaptation d’un instrument de mesure

Answer 2

1: Analyser les besoins
2: Identifier les comportements
3: Spécifier quelques principes
4: Rédiger (adapter) les items
5: Expertiser la première version (construite ou adapté)
6: Pré tester
7: Analyser les items
8: Dimensionner/Calibrer
9: Rédiger un manuel

Question 3

Décrit l’étape de l’analyse des besoins (4)

Answer 3

1) Identifier les motifs qui justifient les besoins
d’évaluation;
2) Si nous examinons les mesures déjà existantes,
certaines d’entre elles répondent-elles à nos besoins ?
3) Devons-nous créer (ou adapter) une mesure pour
répondre à nos besoins? (exemple de l’Afrique)
4) Quels sont les objectifs de cette nouvelle mesure ?

Question 4

Quelle est la question à se poser lors de l’étape d’identifier les comportements?

Answer 4

Quels sont les comportements observables susceptibles de représenter le construit qu’on veut mesurer ?

Question 5

Quels sont les principes à spécifier?

Answer 5

• Nombre d’items (préoccupation de la construction),
• Caractéristiques du matériel (et de la population);
• L’échelle Likert (pair ou impair)? 4, 5, 6 ou 7 pts =
  Fortement en désaccord à fortement en accord (?)

Question 6

Combien faut-il d’items au départ de la construction de l’outil?

Answer 6

Il faut un nombre bien plus grand d’items au départ
(construction ou d’option d’adaptation) pour avoir un
certain nombre d’items utiles

Question 7

Qu’est-ce qu’il faut observer lors de la rédaction des items?

Answer 7

• le contenu de questions (un contenu par question),
• la formulation de questions,
• la séquence de questions (niveau de difficulté),
• le format des réponses souhaitées,
• la présentation du matériel.

Question 8

Quels sont les règles à respecter lors de la rédaction des items?(5)

Answer 8

1. Utilisez une communication simple et des mots familiers;
2. Évitez des mots ambigus ou de compréhension difficile;
3. Évitez des items qui suggèrent déjà les réponses; Ou,
   qu’une question répond à une autre (effet de halo);
4. Évitez les items dont le contenu suscite des sentiments
   d’approbation ou de désapprobation émotionnelle;
5. Éviter les questions longes (plus courte c’est mielleux);

Question 9

qu’est-ce qu’il faut observer lors de la rédaction d’items?

Answer 9

• L’item est inutilement détaillée ou trop spécifique?
• Plusieurs items sont nécessaires pour évaluer ce contenu ou l’une seule est déjà suffisante ?
• Tous les éléments importants de ce contenu sont obtenus sur la façon dont les items ont été formulés ou adaptés?
• Les gens ont les informations (les vécus, les formations, etc.) nécessaires pour répondre aux items proposés ?
• Les items contiennent des jugements liés au sujet d’évaluation?
• Les répondants sont prêts à répondre les contenus demandés ?
• Faut-il que les items soient plus concrètes, spécifiques et plus directement liés à l’expérience personnelle ?
• Le contenu de la question est biaisé dans une certaine direction?
• Quelles réactions (ou objections, ou résistance) pourrait-on avoir quand on va répondre aux items (aurons-nous de fausses réponses ?) ?

Question 10

Qu’est-ce que signifie l’étape d’expertiser la première version?

Answer 10

Soumettre, au moins, à la vérification de la clarté du langage, pertinence théorique et dimensionnalité par un groupe d’expert

Question 11

Que faut-il observer du groupe d’experts?

Answer 11

Combien d’années de formation, de
pratique, localisation géographique, lieu de
formation, etc., car on ne veut pas de consanguinité intellectuelle

Question 12

Comment va-t-on prétester la première version d’un instrument de mesure?

Answer 12

À l’aide d’un échantillon de la population ciblée et cet échantillon doit être suffisamment grand (la problématique de l’échantillonnage) pour garantir une bonne qualité des résultats au pré-test.

Question 13

En quoi consiste l’analyse initiale de l’analyse des items?

Answer 13

1) Vérifier/explorer, premièrement, les résultats descriptifs (relation variance et écart-type) et corrélationnels ;
2) Explorer/détecter les possibles problèmes d’acquiescence (positive ou négative) ;
3) Tester la normalité des variables latentes («K-S» avec correction de Lilliefors, «S-W», test de Mardia ou le test de distance de Mahalanobis), si cela s’applique (évidement) ;
4) Chercher les possibles problèmes de colinéarité.

Question 14

Quels sont les tests de normalité univariés?

Answer 14

«K-S» avec correction de Lilliefors, «S-W»

Question 15

Quels sont les tests de normalité multivariés?

Answer 15

test de Mardia ou le test de distance de Mahalanobis

Question 16

Qu’est-ce que le biais d’acquiescence?

Answer 16

Un phénomène par lequel les individus sont susceptibles d’être d’accord avec quelque chose, indépendamment de ce qu’ils ressentent réellement. Dans les enquêtes, il s’agit d’un type de biais de réponse dans lequel les personnes interrogées ont tendance à être d’accord avec les énoncés de la question de l’enquête plutôt que de donner leur avis personnel et impartial.

Question 17

Décrit les valeurs hors diagonale principale de la matrice anti-image

Answer 17

Elles doivent être majoritairement petites, parce que les effets linéaires des autres variables ont été éliminés (variance unique). Dans le cas à l’étude, on remarque que les corrélations sont majoritairement petites, quelque fois presque inexistantes (pratiquement nulles).

Question 18

Qu’est-ce que mesure la diagonale principale de la matrice de corrélation anti-image?

Answer 18

elle mesure précisément l’adéquation de la solution factorielle en comparant la force des coefficients de corrélation observés en relation avec la force des coefficients de corrélation partielle (mesure de la force de l’association entre deux variables quand toutes les autres sont maintenues constantes); plus précisément, il s’agit d’une mesure KMO par chacune des variables à l’étude.

Question 19

Qu’est-ce que la qualité de la représentation “initial”?

Answer 19

C’est une mesure de la variance de chaque variable qui peut être expliquée par l’ensemble des toutes les autres variables

Question 20

Qu’est-ce que la qualité de la représentation “Extraction”?

Answer 20

C’est une mesure de la variance de chaque variable qui peut être expliquée par le nombre de facteurs retenus

Question 21

Qu’est-ce que la première partie de la matrice de corrélation reproduite?

Answer 21

La première partie contient les coefficients de corrélation reproduite entre toutes les variables du modèle factoriel. La diagonale principale de la première partie de ce tableau présente les qualités de représentation. Si l’on compare les valeurs hors diagonale avec la matrice de corrélation originale, on voit que les résultats ne sont pas exactement les mêmes. En effet, la matrice de corrélation reproduite est la matrice de corrélation basée sur les facteurs extraits (ou retenus). On s’attend que les valeurs de la matrice reproduite soient les plus proches possible des valeurs de la matrice de corrélation originale.

Question 22

Quest-ce que la deuxième partie de la matrice de corrélation reproduite?

Answer 22

La deuxième partie contiens les résidus (les différences entre les corrélations originales et les corrélations reproduites). La diagonale est inexistante, et les résultats hors diagonale doivent être les plus petits possibles.

Question 23

Comment peut-on interpréter la matrice de corrélation reproduite?

Answer 23

Plus la solution factorielle est bonne, plus la matrice reconstituée s’approche de la matrice de corrélation initiale et moins les résidus sont importants (valeurs absolues < 0,05). L’indication d’une proportion faible de résidus plus grands que .05 signifie que tous les items contribuent pour une solution factorielle appropriée.

Question 24

Qu’est-ce que le tableau “Pattern Matrix” indique et qu’est-ce que ça présente?

Answer 24

Le tableau « Pattern Matrix » indique que la rotation oblique a été effectuée. Cette matrice présente les charges – saturations – factorielles. Puisqu’on n’a pas demandé de retirer de la matrice les valeurs plus petites que 0,30, on voit toutes les valeurs corrélées avec les facteurs. De cette façon, on ne retire pas la pollution (saturation non significative) de la matrice. Les facteurs sont interprétés à partir du nom que nous leurs accordons (c’est arbitraire, la seule règle est qu’il doit expliquer le contenu des items).

Question 25

Quelles sont les 5 types d’analyse de la fidélité?

Answer 25

1) Test-retest
2) Formes //
3) Méthode de moitié, split half
4) Homogénéité (consistence interne)
5) Accord inter-juges

Question 26

Décrit l’étape de dimensionner/calibrer?

Answer 26

Après une exploration minutieuse des indices de validité et fidélité, on doit créer les normes.

Question 27

La rédaction d’un manuel d’utilisateur, on présente:
(7)

Answer 27

1) Les objectifs pour lesquels il a été créé;
2) Les bases théoriques du test;
3) Les qualifications requises pour l’appliquer et l’interpréter;
4) Les consignes et les principes d’interprétation des résultats;
5) Les données métriques
6) Définition de l’échantillon + passation
7)Administration (procédures), directives, limites de temps, mode de correction

Question 28

Le constructeur doit assumer une responsabilité éthique:

Answer 28

Les informations du manuel doivent garantir un usage correct du test, dans le respect des principes éthiques.

Question 29

Quels sont les questions qu’on doit se poser pour les objectifs pour lesquels le manuel a été créé?

Answer 29

A quoi serve-t-il ?
Dans quel contexte sera-t-il utilisé ?
Que doit-il mesurer ?
Est-ce une variante d’un test existant?
Quelle population est concernée ?
Précision de la forme (individuel, collectif, papier-crayon, internet, etc.