Cours 8 : Élaboration et adaptation de tests Flashcards

1
Q

Quelles sont les 6 étapes de l’élaboration d’un test

A
  1. Définition de l’objectif du test
  2. Questions de conception préliminaire
  3. Préparation des items
  4. Analyse d’items
  5. Étalonnage et programmation de recherches connexes
  6. Préparation du matériel définitif et publication
How well did you know this?
1
Not at all
2
3
4
5
Perfectly
2
Q

Dans la définition des objectifs d’un test, par quoi l’élaboration d’un test commence

A

Une déclaration d’intention (aussi appelée “usage anticipé”)

How well did you know this?
1
Not at all
2
3
4
5
Perfectly
3
Q

À quoi consiste la déclaration d’intention (2 éléments)

A
  1. Une description détaillé du construit que mesure le test
  2. Le public cible du test
How well did you know this?
1
Not at all
2
3
4
5
Perfectly
4
Q

Vrai ou faux, l’élaboration d’un nouveau test est un travail facile et peu coûteux

A

Faux, c’est un travail long, difficile et coûteux (d’où l’importance de vérifier s’il existe déjà un test approprié pour notre construit)

How well did you know this?
1
Not at all
2
3
4
5
Perfectly
5
Q

Vrai ou faux, la réponse aux questions de conception préliminaire tels que la formation des utilisateurs peut entrainer une reformulation de l’énoncé d’intention du test

A

Vrai (aussi vrai pour le mode d’administration, la longueur, les formats d’items et le nombre de scores)

How well did you know this?
1
Not at all
2
3
4
5
Perfectly
6
Q

Quelles sont les 3 raisons principales qui motivent l’élaboration de nouveaux tests

A
  1. La nécessité de combler un besoin concret/un besoin pratique
  2. Apporter des données probantes/soutenir une théorie
  3. Réviser ou adapter des tests existants
How well did you know this?
1
Not at all
2
3
4
5
Perfectly
7
Q

Quels 2 éléments sont compris dans la préparation des items

A
  1. Formulation
  2. Révision
How well did you know this?
1
Not at all
2
3
4
5
Perfectly
8
Q

Quelles sont les 3 “structures anatomiques” d’un item

A
  1. Stimulus
  2. Format de réponse (conditions de réponse à l’item)
  3. Procédures de cotation
How well did you know this?
1
Not at all
2
3
4
5
Perfectly
9
Q

Qu’est-ce qu’un stimulus

A

Toute question, phrase, image, etc. qui demande une réponse

How well did you know this?
1
Not at all
2
3
4
5
Perfectly
10
Q

Les choix multiples ou à développement sont un exemple de quel structure de l’item

A

Le format de réponse

How well did you know this?
1
Not at all
2
3
4
5
Perfectly
11
Q

La limite de temps, les versions en ligne/papier sont des exemples de quelle structure de l’item

A

Conditions de réponse

How well did you know this?
1
Not at all
2
3
4
5
Perfectly
12
Q

Qu’est-ce qu’implique un item à choix de réponse

A

Le choix parmi 2 ou plus des options de réponse

How well did you know this?
1
Not at all
2
3
4
5
Perfectly
13
Q

Vrai ou faux, un échelle de Likert est un exemple d’items à choix de réponse

A

Vrai

How well did you know this?
1
Not at all
2
3
4
5
Perfectly
14
Q

Qu’est-ce qu’implique un item à développement

A

La personne n’est pas contrainte de choisir une réponse, elle doit formuler sa propre réponse

How well did you know this?
1
Not at all
2
3
4
5
Perfectly
15
Q

Vrai ou faux, un item à développement implique que la réponse soit libre et sans règles

A

Faux. Bien qu’elle implique une réponse “libre”, elle est soumise à certaines règles (ex. limite de temps, réponse orale/par écrit, etc.)

How well did you know this?
1
Not at all
2
3
4
5
Perfectly
16
Q

La cotation des items à développement s’accompagne de 2 défis particuliers, lesquels

A
  1. Garantir la fidélité inter-juges
  2. Conceptualise un système de cotation
How well did you know this?
1
Not at all
2
3
4
5
Perfectly
17
Q

Qu’est-ce que l’analyse statistique des données obtenues lors de la mise à l’essai des items (prétest)

A

L’analyse d’items

How well did you know this?
1
Not at all
2
3
4
5
Perfectly
18
Q

Quelles sont les 3 phases de l’analyse d’item

A
  1. La mise en essai (prétest)
  2. L’analyse statistique
  3. La sélection d’items
How well did you know this?
1
Not at all
2
3
4
5
Perfectly
19
Q

Lors du prétest, un essai auprès de quelques participants consiste en quel type de mise en essai

A

Mise en essai informelle

How well did you know this?
1
Not at all
2
3
4
5
Perfectly
20
Q

Lors du prétest, un essai administré à un échantillon de participants consiste en quel type de mise en essai

A

Mise en essai formelle

How well did you know this?
1
Not at all
2
3
4
5
Perfectly
21
Q

Vrai ou faux, lors de la réalisation du prétest, on obtient des données brutes

A

Faux, on obtient des données préliminaires

22
Q

Vrai ou faux, lors de la réalisation du prétest, on peut identifier des détails importants qui ont pu passer inaperçus lors de la rédaction des items

A

Vrai

23
Q

Qu’est-ce que le pourcentage de participants qui ont répondu correctement à l’item. C’est un indice de la “facilité” des items

A

La difficulté de l’item

24
Q

Quelle valeur est représentée par la difficulté de l’item

A

La valeur p (pourcentage ou proportion)

25
Q

Vrai ou faux, un item avec une valeur p de 0.85 indique que 85% des participants n’y ont pas répondu correctement

A

Faux, 85% des participants y ont répond correctement

26
Q

Vrai ou faux, la valeur p permet de calculer si les résultats sont significatifs ou non

A

Faux (ne pas mélanger avec le seuil de signification p)

27
Q

Qu’est-ce que la capacité de l’item à distinguer divers groupes de participants

A

Pouvoir discriminant de l’item

28
Q

Quelle méthode du pouvoir discriminant de l’item est représentée par 2 groupes contrastés par rapport au trait mesuré, selon un critère externe

A

Méthode externe

29
Q

Quelle méthode du pouvoir discriminant de l’item est représentée par des groupes contrastés selon le score au test

A

Méthode interne

30
Q

Quelle valeur est représentée par le degré de discrimination

A

La valeur D (différence)

31
Q

Vrai ou faux, 80% de réponses correctes dans le groupe 1 et 50% de réponses correctes dans le groupe 2 correspondent à une valeur D de 0.30

A

Vrai (80% - 50% = 30%)

32
Q

Quelle est la corrélation utilisée entre la performance à un item et la performance au score total du test

A

Le coefficient de corrélation bisérial (r)

33
Q

Quelle analyse utilise-t-on afin de déterminer si les items sont appropriés (en termes de fidélité)

A

L’analyse de la cohérence interne

34
Q

Quelle analyse utilise-t-on afin d’explorer la structure du test

A

L’analyse factorielle (exploratoire)

35
Q

À quel concept correspond le fait de choisir, parmi tous les items rédigés et mis à l’essai, ceux qui composeront le test à standardiser

A

Sélection des items

36
Q

Quels sont les 5 éléments à considérer lors de la sélection d’items

A
  1. Déterminer le nombre d’items
  2. Déterminer le niveau de difficulté moyen du test
  3. Utiliser des items avec un bon indice de discrimination
  4. Vérifier si l’ajout/suppression des items modifie l’alpha de Cronbach du score total
  5. Vérifier comment l’ajout/suppression des items modifie les facteurs du test
37
Q

À quel concept correspond l’établissement des normes pour le test/comment les scores vont-ils être interprétés

A

Étalonnage (plan de normalisation)

38
Q

Quel concept implique de rendre disponible le test (commercial ou non commercial)

A

Publication du test

39
Q

Vrai ou faux, au moment de leur publication, tous les tests font la démonstration infaillible de leur validité

A

Faux, aucun test ne fait la démonstration infaillible de sa validité

40
Q

Quelles sont les 3 étapes de conception et validation des outils de mesure

A
  1. Planification
  2. Opérationnalisation
  3. Validation
41
Q

À quels 4 éléments correspond la planification

A
  1. Formuler l’objectif de l’outil et donner une première définition du concept
  2. Faire une recension des écrits scientifiques (outils existants, théories, dimensions du concept)
  3. Si nécessaire, faire appel à des experts dans le concept d’intérêt
  4. Formuler une nouvelle définition du concept, en spécifiant les dimensions à mesurer
42
Q

À quelle étape de la conception et validation des outils de mesure correspond la tâche d’attribuer un certain nombre d’items, pour chaque dimension

A

Opérationnalisation

43
Q

Quelles sont les 3 éléments de l’opérationnalisation

A
  1. Générer les items
  2. Choisir les items
  3. Choisir l’échelle de réponse
44
Q

Qu’est-ce qu’implique l’étape de validation (4)

A
  1. Prétester les items auprès de la population cible (étude pilote)
  2. Évaluer les différents types de fidélité
  3. Évaluer les différents types de validité
  4. Évaluer la sensibilité au changement et la réactivité clinique
45
Q

À quel concept correspond le processus où il est nécessaire de considérer les aspects de la traduction (linguistiques) et aussi les aspects de l’adaptation contextuelle (culture)

A

La traduction et l’adaptation transculturelle d’un outil de mesure

46
Q

Vrai ou faux, l’évaluation d’un phénomène peut être réalisée à différents niveaux : intraindividuel, interindividuel, intergroupe, transcullturel et transcontextuel

A

Vrai

47
Q

Au cours des dernières décennies, notamment grâce à la mondialisation et les nouvelles techonologies, l’analyse transculturelle ou transcontextuelle est devenue de plus en plus essentielle sur quelle plan

A

Sur le plan de la recherche

48
Q

Quelles sont les 3 sources d’erreurs possibles en recherche transculturelle

A
  1. Définitions des concepts
  2. Idiosyncrasie du contexte
  3. Formulation et traduction des items
49
Q

Quelles sont les 6 étapes pour la traduction et l’adaptation transculturelle d’un outil de mesure

A
  1. Traduction
  2. Synthèse
  3. Traduction inversée
  4. Révision par un comité d’expert
  5. Prétest du questionnaire
  6. Évaluation des qualités psychométriques
50
Q

Vrai ou faux, il existe un outil de mesure parfait

A

Faux