Module 3 : cours 8 Flashcards
Quelle est la procédure s’interrogeant sur la qualité des items et qui vise principalement à maximiser la validité de contenu de l’instrument en développement?
Analyse de contenu
Quelles sont 3 points de l’analyse de contenu?
Vérifier l’opérationnalisation du construit
Vérifier la formulation des items et le choix de l’échelle de mesure
S’intéresser à la possibilité qu’il y ait des biais
Qui est-ce que l’analyse de contenu implique-t-elle de consulter?
Un groupe d’experts dans le domaine afin d’évaluer les items du questionnaire
Que vise la mise à l’essai d’un questionnaire?
À administrer le test à un grand nombre d’individus pour faire un premier examen des qualités métriques du test en développement
Lors de la mise à l’essai d’un questionnaire, quels éléments de l’échantillon sont-ils à prendre en compte?
La taille de l’échantillon
Le niveau d’attribut
Les circonstances entourant la sollicitation des participants
Quelle est la procédure visant (à partir des données cumulées au cours de la mise à l’épreuve) à maximiser la fidélité et la validité d’un test en éliminant les items qui sont les moins (ou les plus) susceptibles de discriminer les individus qui possèdent le trait évalué de ceux qui le possèdent moins?
Analyse d’items
Quels sont les 2 stades de l’analyse d’items?
Stade informel
Stade formel
En quoi consiste les stades informel et formel dans l’analyse d’items?
Stade informel : analyse basée sur un petit échantillon en vue de préparer le stade formel
Stade formel : basé sur un plus grand échantillon et une variété d’indices statistiques
Lors de l’analyse de validité d’un questionnaire, quels sont les types de validité pouvant être démontré?
Validité d’apparence de l’instrument
Validité critériée
Validité de construit
Validité de conséquence
Dans l’analyse de contenu, quels sont les 3 aspects à évaluer?
Pertinence de l’item en fonction du construit
Clarté grammaticale et format de réponse
Analyse de la possibilité de biais
Quel est l’objectif de l’analyse de contenu et de l’analyse d’items?
Peaufiner l’instrument de mesure en récoltant des données d’experts et de participants potentiels
Qu’importe-t-il de construire pour résumer le point de vue des experts?
Une grille d’analyse de contenu
Pourquoi la décision finale quant aux items revient au chercheur qui élabore l’échelle?
Les experts du domaine :
N’ont pas nécessairement compris les motifs de l’élaboration du test
Ne comprennent pas nécessairement les principes sous-jacents à la construction d’une échelle
Ne sont pas toujours les meilleures personnes pour évaluer divers aspects
Dans l’analyse d’items, quels sont les aspects à évaluer dans le stade informel?
Clarté grammaticale des items
Clarté des consignes
Clarté de l’échelle de réponse
Présentation générale du questionnaire
Temps de passation
Dans l’analyse d’items, quels sont les aspects à évaluer dans le stade formel?
Indices de difficulté
Données descriptives (moyennes, fréquences)
Corrélations inter-items
Indices de discrimination
Cohérence interne
Quel est la définition d’un indice de difficulté?
Proportion (%) d’individus qui a réussi un item
L’indice de difficulté est calculé à partir de quel type de mesure?
Mesures dichotomiques seulement
Que donne la sommation des p (indices de difficulté) d’un test?
La moyenne de réussite au test
Pour les indices de difficulté, quel est le p habituellement visé pour différencier les gens?
p = 0.5
Dans les données descriptives, comment doit être la moyenne d’un test pour qu’elle discrimine adéquatement les sujets possédant plus fortement un construit?
La moyenne doit être centrale
Que vise la corrélation inter-items?
À s’assurer que les items mesurent le même trait tout en n’étant pas trop semblables
Quelle est la définition d’un indice de discrimination?
Degré auquel un item discrimine correctement les individus en ce qui a trait au construit évalué
Quelles sont 2 méthodes de calcul des indices de discrimination (et leurs composantes)?
Méthode externe : méthode à 2 groupes extrêmes
Méthode interne : méthode basée sur les corrélations item-total
La méthode à 2 groupes extrêmes (méthode externe) compare l’endossement des items pour 2 groupes d’individus reconnus pour se distinguer sur la variable d’intérêt selon un critère externe. Comment obtenir l’indice de discrimination (D)?
D = % d’endossement du groupe critère - % d’endossement du groupe contrôle
Que signifie le sens (positif et négatif) de l’indice de discrimination (D)?
D positif : réponse d’endossement plus populaire pour le groupe critère
D négatif : réponse fausse plus populaire dans le groupe critère
En fonction de quel élément l’analyse des corrélations item-total est-elle réalisée?
En fonction de la corrélation item-total corrigée
Quels sont les différents niveaux alpha requis selon les types de tests :
Instrument visant à faire de la recherche, établir des conclusions face à un groupe?
Instrument servant à évaluer les individus?
Instrument diagnostic ou à grande conséquence?
.65
.70
.90
Si on retire un item du test et que l’alpha remonte, qu’est-ce que cela signifie?
Que l’item est moins bon que les autres et qu’il nuit à l’homogénéité du test
Pour quelles raisons le concepteur peut-il décider de conserver un item, malgré des indices plus faibles?
Pour des raisons cliniques
