Cours 9.2 Flashcards

1
Q

Qu’est-ce que le contenu d’un test?

A

Tous les éléments qui constituet un test.
- items
- stimuli
- consignes
- etc.

How well did you know this?
1
Not at all
2
3
4
5
Perfectly
2
Q

Que détermine la finalité du test?

A

le contenu de la mesure

How well did you know this?
1
Not at all
2
3
4
5
Perfectly
3
Q

Les évidences de valifité d’un test se cumulent selon un processus de quel type?

A

Séquentiel

How well did you know this?
1
Not at all
2
3
4
5
Perfectly
4
Q

**

Qu’est-ce que la validité de contenu?

A

Le degré d’adéquation de la mesure à l’estimation du «construit cible », retenu pour la mesure.

How well did you know this?
1
Not at all
2
3
4
5
Perfectly
5
Q

Quels sont les domaines de définition du contenu?

A
  1. domaine de définition conceptuelle du construit.
    (contenu théorique)
  2. domaine de définition opérationnelle du construit. (contenu pratique)
How well did you know this?
1
Not at all
2
3
4
5
Perfectly
6
Q

Décrivez la définition conceptuelle du construit?

A
  • l’interprétation du construit théorique
How well did you know this?
1
Not at all
2
3
4
5
Perfectly
7
Q

Décrivez la définition opérationnelle du construit.

A
  • Opérationnalisation du construit théorique au moyen de la mesure.
  • La mise en fonction de la théorie par le biais des items que j’élabore.
How well did you know this?
1
Not at all
2
3
4
5
Perfectly
8
Q

Quels sont les caractéristiques du contenu?

A
  • représentatif théoriquement
  • relevant théoriquement
  • pertinent pratiquement
  • dimensionel (uni ou multi)
  • clair (langage)
  • originale (créatif)
  • exclusif (sélections des items)
How well did you know this?
1
Not at all
2
3
4
5
Perfectly
9
Q

Parmi les caractéristiques du contenu, lesquelles sont obligatoires?

(aspects fondamentaux)

A
  • représentatif théoriquement
  • relevant théoriquement
  • pertient pratiquement
  • dimensionnel
How well did you know this?
1
Not at all
2
3
4
5
Perfectly
10
Q

Qu’est-ce que la représentativité théorique?

A

Le degré d’adéquation de la globalité de la mesure à la représentation théorique.

La globalité des items reflètent l’ensemble de la théorie.

How well did you know this?
1
Not at all
2
3
4
5
Perfectly
11
Q

Qu’est-ce que la relevance théorique?

A

Le degré d’adéquation de chaque item de la mesure à la représentation théorique du construit.

(Chaque item représente la théorie)

How well did you know this?
1
Not at all
2
3
4
5
Perfectly
12
Q

Qu’est-ce que la pertinence pratique?

A

Le degré d’adéquation de chaque item de la mesure à une certaine représentation socio-culturelle du construit.

How well did you know this?
1
Not at all
2
3
4
5
Perfectly
13
Q

Qu’est-ce que la dimensionnalité?

A

Le degré d’adéquation de chaque item de la mesure à la dimension du construit pour laquelle l’item est représentatif, relevant et pertinent.

How well did you know this?
1
Not at all
2
3
4
5
Perfectly
14
Q

Associé chaque caractéristique du contenu à un domaine de définitio du contenu.

A

Représentativité théorique - définition conceptuelle

Relevance théorique - définition conceptuelle

Pertinence pratique - définition opérationnelle

Dimensionnalité - définition conceptuelle et opérationnelle

How well did you know this?
1
Not at all
2
3
4
5
Perfectly
15
Q

Qu’est-ce que la clarté du langage?

A

Le degré d’adéquation du langage de chaque item de la mesure à une représentation claire du construit.

How well did you know this?
1
Not at all
2
3
4
5
Perfectly
16
Q

Quelle domaine de définition est associé à la clarté du langage?

A

Définition opérationnelle

17
Q

Pour déterminer la validité du contenu, les études explorent la _______ __ _____ concernant l’adéquation du contenu de la mesure à l’estimation du construit cible.

En fonction des objectifs, les procédures se déroulent par ____ ou par ____.

A
  1. la concordance inter-juges
  2. groupe de discussion
  3. remplissage de questionnaires
18
Q

Qu’implique le remplissage de questionnaires?

A

des analyses quantitatives de données

19
Q

Décrivez le matériel pour les procédures de remplissage d’un questionnaire.

A
  1. Le questionnaire
    - tous les items à valider
    - les caractéristiques de la validité de contenue (les 5)
    - répondu sur une échelle de Likert à 5 points
  2. Feuille de consigne
    - explique le domaine de définition conceptuelle et opérationnelle
20
Q

Décrivez la méthode pour les procédures de groupe de discussion.

A
  • Le domaine de définition du contenu est partagé aux experts.
  • Les caractéristiques de la validité de contenu sont discutés pour la globalité et/ou chaque item.
21
Q

Qui sont les collaborateurs de la validité de contenu?

A

Subject matter experts (SME)

22
Q

Vrai ou Faux.

Les experts sont des collaborateurs au processus d’élaboration du test.

A

Vrai

23
Q

Qu’est-ce que la consanguinité intellectuelle?

A

Si les collaborateurs proviennent du même milieu professionnel et/ou de formation, leur collaboration à l’étude risque d’être davantage homogène, davantage en accord.

  • BIAIS!
24
Q

Combien de collaborateurs faut-il en fonction des procédures?

A

groupe de discussion: nombre impaire

remplissage de questionnaire:
- kappa de Cohen - au moins 2 évaluateurs
- CVC - entre 3 et 5 évaluateurs

25
Q

Comment contrer l’opinion des juges qui restent subjectif malgré les analyses statistiques?

A

Conduire des analyses factorielles pour explorer les réponses au test élaboré, non validé.

26
Q

Quels sont les analyses quantitatives à utiliser pour les réponses aux questionnaires des juges?

A

Calcul de coefficient de concordance:
- la concordance ou l’association entre les évaluations des juges, voire entre les données. (Kappa de Cohen)

Coefficient spécifique à la validité du contenu:
- création de formule (CVC, CVR, CVI)

27
Q

Si nos analyses nous démontre une validité de contenu insatisfaisante, quels sont les problèmes possibles?

A
  • Types d’analyses
  • L’élaboration des items
28
Q

Quels sont les deux problématiques de l’élaboration d’items?

A
  1. Plusieurs facteurs influencent la rédaction des items et il n’y a pas assez d’études à ce sujet, ni assez des standards/indications communes/guidelines.
  2. Les auteurs ne partagent pas suffisamment d’informations ou ils ne partagent pas les éléments problématiques
29
Q

Nommer une solution pour chaque problématique de l’élaboration d’items.

A

Problématique 1:
- Créer un mini-guideline-maison pour accompagner dans la traduction et adaptation de la mesure.
- Impliquer des experts en traductologie

Problématique 2:
- Standardiser la transmission des informations
- Tenir un journal d’élaboration du test
- Explication détaillée de la méthode de traduction des items à adapter