Cours 3 (validité and shit de l'intra) Flashcards
Qu’est-ce que la fidélité?
La précision de notre mesure/le niveau d’erreur de mesure qu’elle génère
Quels sont les différents types de fidélité?
Stabilité temporelle (test-retest) Formes parallèles (équivalence) Moitié-moitié (bissection) Cohérence interne Fidélité inter-juges (ou accord inter-juges)
Décrivez la stabilité temporelle (fidélité)
- On évalue les mêmes individus à deux reprises dans le temps
- L’intervalle de temps doit être assez court
- Il est difficile de déterminer les raisons des écarts entre les résultats
- Une corrélation élevée suggère bonne précision
Décrivez la forme parallèle (fidélité)
- On construit deux formes équivalentes du même instrument et on vérifie la correspondance entre les deux formes pour les mêmes individus
- Échelles tout à fait similaires conceptuellement, mais avec des items légèrement différents
- L’échantillonnage de contenu est crucial pour pouvoir interpréter avec confiance cette forme de fidélité
Décrivez la fidélité moitié-moitié
- On divise au hasard les items d’une échelle et on estime les corrélations entre ces deux moitiés
- Faut sélection quasi-aléatoire
- moins d’items=corrélations toujours moins fortes, nonobstant le niveau de fidélité
Décrivez la cohérence interne
- On vérifie l’homogénéité des items d’une échelle (un indice par échelle)
- Indice Alpha de Cronbach (pour items continus) et de Kuder-Richardson-21 (KR-21; pour items dichotomiques) les plus utilisés
- Coefficients varient entre 0 et 1. Proche de 0= les items ne sont pas homogènes, l’échelle n’est pas précise ou fiable … elle génère beaucoup d’erreurs de mesure. Proche de 1= que l’échelle est fiable, génère peu d’erreurs de mesure
Décrivez l’accord inter-juge
- Des informateurs différents évaluent les mêmes individus avec les mêmes mesures au même moment
- Différents informateurs provenant de différents contextes peuvent procurer de l’information indépendante et différente à propos d’un individu
Vrai ou faux? Avec l’accord inter-juge on obtient généralement des corrélations beaucoup plus faibles que pour les autres types de fidélité
Vrai
Quels sont types de validité?
- Vraisemblance
- Validité de contenu
- Validité de construit
- Validité de critère
Qu’est-ce que la validité?
- La validité nous permet savoir s’il mesure vraiment ce qu’il prétend ou devrait mesurer
- Le degré de validité détermine les inférences que l’on peut faire à partir des scores d’une échelle
À quoi doit-on évaluer la validité?
- Est-ce qu’il mesure bien le construit qu’il prétend mesure ?
- Est-ce qu’il mesure bien ce construit pour la population ciblée (e.g., âge, niveau académique, groupe clinique particulier, etc.) ?
- Est-ce qu’il mesure bien ce construit, pour cette population et pour une application particulière
Décrivez la vraisemblance
-Le degré auquel une mesure semble adéquate et reliée à un construit spécifique selon le jugement de ceux qui sont évalués
Qui suis-je? Il s’agit de porter un jugement sur la représentativité des items (questions) utilisés pour mesurer un construit
Validité de contenue
Que faut-il regarder dans la validité de contenu?
Est-ce que:
- Chaque item individuellement correspond au construit?
- Tous les items d’une échelle considérés dans l’ensemble constituent un échantillon représentatif de tous les domaines (ou sous-domaines) expliqués par le construit d’intérêt ?
Qui suis-je? Il s’agit d’abord de vérifier la validité de la structure théorique sous-jacente à l’instrument ainsi que les relations du construit d’intérêt avec d’autres construits
Validité de construit
Quelle sont les 2 façons de vérifier la validité de contenu?
Validité factorielle
Validité convergente-discriminante
Décrivez la validité factorielle (validité de contenu)
- On veut vérifier si la structure factorielle théorique est reproduite sur le plan empirique
- On veut vérifier si: 1.Les items sont significativement (statistiquement) reliés au trait (construit) auquel ils devraient être reliés
2. La structure hiérarchique est reproduite?
Quels sont les types de validité factorielle?(validité de contenu)
- Analyse factorielle exploratoire: On identifie des regroupements d’items pour lesquels les individus donnent des réponses similaires
- Analyse factorielle confirmatoire: Le chercheur impose une structure stricte a priori à la matrice de corrélations et teste si elle correspond aux données
Que sont les validités convergentes/discriminantes? (validité de contenu)
- Validité convergente: On met en relation notre échelle avec une autre (ou des) échelle existante qui se rapporte au même construit théorique
- Validité discriminante: On démontre que notre échelle ne corrèle pas avec une (ou des) échelle qui ne se rapporte pas au même construit
- Se teste avec une matrice multitraits-multiméthodes
Avec quoi compare-t-on la validité de critère et quels sont les 3 types?
- Les scores à l’échelle sont comparés à un critère externe
- Type: Concomitante, prédictive et postdictive
Comment mesure-t-on la validité de critère concomitante
-Corrélation avec un critère indépendant. Ex:Intelligence avec réussite académique. Empathie avec conduites délinquantes
-Méthode des groupes contrastés
Différences de scores entre des groupes
Que sont les validités de critère prédictive et postdictive?
- prédictive: L’échelle est capable de prédire un critère externe prospectivement, plus tard dans le temps
- postdictive: L’échelle est capable de prédire un critère externe qui s’est passé avant l’évaluation