Examen 2 Flashcards
Qu’est-ce que la mesure en psycho?
Notion (processus) complexe et relative à une personne.
Attribuer des nombres aux construits psycho-sociaux
Ensemble de méthodes utilisées pour donner une description caractéristique d’un phénomène
Qu’ont pour objet les règles de mesure en psycho?
Établir une correspondance entre certaines propriétés des nombres et certaines propriétés des construits
Qui propose en 1946 de classer les échelles de mesure en fonction des propriétés des nombres qui y sont conservées?
Stevens
Quel autre nom peut-on donner à un construit psycho-social?
Variable latente
Qu’a de particulier un construit psycho-social?
Il a été bâtit par quelqu’un
Quels sont les 4 types d’échelles proposées par Stevens en 1946?
Nominale
Ordinale
Intervalle
Ratio
Qu’est-ce que l’évaluation psychologique?
Processus technique réalisé avec des personnes ou des groupes de personnes qui nécessite des méthodologies spécifiques.
Opération qui consiste à porter un jugement de valeur ou à accorder une valeur à un objet ou à une personne en la comparant avec un critère donné (norme)
Pour porter un jugement de valeur, quelles informations doit-on connaître?
Unité de mesure
Limites du phénomène en question (Moyenne, écart-type, max et min)
Normes
L’évaluation psychologique est ______ et constitue une ________ d’_______ de nature _________ sur les _________ psychologiques.
Dynamique
source
D’information
explicative
phénomènes
Vrai ou faux
Les résultats des évaluations n’ont aucun impact sur les personnes, les groupes ou la société
Faux
Ont un grand impact
Vrai ou faux
La mesure est partout
Vrai
Quels sont les 4 rôles de la psychologie?
Définir certaines caractéristiques du cpt
Décrire/prédire des différences au niveau du cpt
Prédire des chgts au niveau du cpt
Expliquer les “pourquoi/comment” de ces chgts
De quoi dépend la qualité des définitions, descriptions, prédictions et explications du cpt?
La qualité de la mesure
En quoi consiste la mesure?
Associer, selon certaines règles, des symboles à:
-Des objets
-Des événements
-Des individus
de façon à évaluer le degré auquel ils présentent certains attributs
Vrai ou faux
L’unité de mesure n’est pas importante
Faux
Une personne qui mesure 2 ne fait pas de sens, contrairement à 2m
Qu’est-ce qui est plus complexe à mesurer que les attributs physiques et pourquoi?
Attributs psychologiques
Il y a plus de variables à définir et à contrôler pour obtenir un résultat réaliste, i.e. valide et fidèle
Pourquoi existe-t-il des règles précises sur la formulation d’une méthodologie?
Pour que les procédés d’obtention d’une mesure soient explicites et ainsi facilement reproductibles
En conclusion, la mesure, en plus de permettre une ________, donne une description beaucoup plus _________ et s’avère plus __________ en temps et en argent qu’une évaluation _____________, conçue pour fournir des informations ____________.
quantification
objective
économique
subjective
comparables
Quels autres noms peut-on donner à l’échelle nominale?
De classe ou catégorielle
Quelles sont les caractéristiques de l’échelle nominale
Forme la plus simple de classification
Regroupement des individus selon des caractéristiques communes
Pas d’ordre inhérent à la mesure
Échelle non ordonnée
Aucune opération arithmétique permise
Les catégories sont mutuellement exclusives (les sujets ne peuvent être que dans une seule catégorie)
Stats possibles : fréquences (absolues et en %), mode
Quelle est la limite de l’échelle nominale?
La rigueur de la discrimination dépend de la capacité d’observation de l’observateur (c’est donc subjectif)
Quelles sont les caractéristiques de l’échelle ordinale?
Ordre relatif des individus est important
Les symboles numériques attribués aux individus sont des rangs
Pas de garantie que la distance entre 1 et 2 soit la même que 4 et 5
Ne permet pas de savoir s’il y a l’absence totale de l’attribut, donc n’admet pas le 0 absolu
On ne peut pas dire combien de fois plus que…
La relation entre les observations est transitive
Vrai ou faux
On ne peut pas calculer une moyenne d’une échelle de Likert
Ça dépend
Par convention, on peut le faire si l’échelle a au moins 5 points. Plus les années passent, plus cette convention est la cible de critique
Quelles sont les caractéristiques de l’échelle à intervalles égaux?
Les intervalles entre les scores sont égaux (distance entre 1 et 2 est la même que 4 et 5)
Le 0 est déterminé de façon arbitraire
Ne permet pas d’indiquer l’amplitude absolue des degrés de présence des attributs
Quelles sont les caractéristiques de l’échelle de proportions (ratio)?
Le zéro est absolu (représente l’absence de la variable)
On peut dire combien de fois plus que…
Vrai ou faux
Les échelles de mesure plus complexes intègrent les éléments des échelles moins complexes
Vrai
La classification d’une échelle est une affaire de __________ et ________.
convention et utilité
Qu’est-ce que le problème d’échantillonnage?
En psychométrie, on utilise un échantillon d’individus et un échantillon de contenu (items). On ne peut gérer ces deux échantillons de natures différentes en même temps.
Quelle est la façon typique de régler le problème d’échantillonnage?
Tenir compte explicitement d’un seul échantillon en tenant compte que l’autre peut influencer les résultats.
Concrètement, on utilise un échantillon d’individu suffisamment grand pour que l’erreur d’échantillonnage d’individus soit peu importante. On peut ainsi se concentrer sur l’échantillon de contenu.
Comment sont établies les normes?
De façon empirique en observant dans quelle mesure les membres d’un groupe représentatif répondent effectivement le test en question.
À quoi servent les normes?
On peut situer le score brut d’un individu à l’intérieur de la distribution des scores des membres de l’échantillon de normalisation, pour préciser sa position relative au sein de ce groupe
Dans le but d’établir de façon plus précise la position exacte d’une personne à l’intérieur de l’échantillon normatif, le score brut doit être transformé en mesure _________.
relative
Quelles fonctions remplissent les mesures relatives?
Déterminer la position relative de l’individu à l’intérieur de l’échantillon normatif et permettre de comparer sa performance à celle d’autres personnes
Permettre de comparer directement la performance d’une même personne à différents tests
Quelle forme peut prendre un score relatif?
Score z
Que veulent dire leptocurtique et platycurtique?
Lepto : Courbe allongée
Platy : Courbe applatie
Dans une distribution normale, quelle relation existe-t-il?
L’ÉT et le pourcentage de sujets
+- 1ÉT = autour de 68%
+- 2ÉT = autour de 95%
+- 3ÉT = autour de 99%
Quelle est la norme intragroupe la plus utilisée?
Les centiles
Que permet une norme intragroupe?
Situer la performance d’un individu en fonction de celle du groupe normatif
Comment fonctionnent les centiles?
Que représentent les centiles hauts et bas?
% de personnes de l’échantillon de normalisation dont le score est inférieur à un score brut donné.
Les centiles hauts représentent les hautes performances alors que les centiles bas représentent les moins bonnes performances
Que représentent les centile 0 (C0) et centile 100 (C100)
C0 : Score brut inférieur à tout autre score obtenu dans l’échantillon de normalisation
C100 : Score brut supérieur à tout autre score obtenu dans l’échantillon de normalisation
Il est mieux d’écrire C<1 ou C>99
Quels sont les avantages des centiles?
Faciles à calculer
Facilement compris
Universellement applicable
Conviennent à tous les types de tests
Quel est l’inconvénient des centiles?
Inégalité des distances entre les unités
Qu’est-ce que l’analyse d’items en psychométrie?
Analyses statistiques utilisées pour sélectionner les meilleurs items d’un test psychométrique
Nommez les différentes méthodes d’analyse d’items
Modèle Alpha de Cronbach (Reliability statistics)
Moyennes et écart-types (Item statistics)
Analyse de corrélation inter-item (Inter-item correlation Matrix)
Statistiques sommaires des items (Summary item statistics)
Statistiques item-total (Item-Total statistics)
Stats descriptives de l’échelle (Scale statistics)
Quel est le dilemme quant au choix du nombre d’items dans un test psychométrique?
Plus il y a d’item, plus on explique de variance (Quantité réelle). Cependant, la charge mentale de la personne qui fait le test augmente aussi, donc risque d’épuisement.
Combien devrait on viser de variance expliquée (qté réelle) dans un test psychométrique?
Entre 40% et 60% est suffisant.
Vrai ou faux
Ça fait du sens de faire une moyenne de corrélations
Faux
Que mesure l’alpha de Cronbach?
L’homogénéité des items
Qu’est-ce qu’une analyse de corrélation inter-item?
Des items qui corrèlent ensemble ont rapport au même concept. Alors, si deux items sont corrélés négativement, ils ne représentent pas le même concept.
Vrai ou faux
Le processus d’analyse d’items est toujours le même
Faux
Ça dépend du modèle psychométrique utilisé
Quels sont les deux modèles psychométriques que nous avons vu en classe?
Théorie moderne (TM) ou Théorie de réponse aux items (TRI)
et
Théorie classique des tests (TCT)
Que privilégient respectivement la TRI et la TCT?
La TRI privilégie l’études spécifique des items composant le test
La TCT privilégie l’analyse globale du test
Qu’est-ce que la TRI permet que la TCT ne permet pas?
Vérifier si les résultats obtenus sont le fruit du hasard ou s’ils reflètent les connaissances du participant.
Quel est l’objectif de l’analyse d’items?
Produire une liste relativement courte d’items qui constitueront un test (unidimensionnel) ou une dimension à la fois.
Comment procède-t-on pour effectuer l’analyse d’items?
On recrute un large échantillon de participants de la population générale et on leur présente un grand nombre d’items
Quelle recommandation est faite quand au nombre d’items candidats vs quantité finale?
Il devrait avoir entre 5 et 10 fois plus de candidats que la quantité finale
Selon la TCT, quels peuvent être des motifs de retirer des items d’un test?
L’item présente une moyenne extrême (proche du maximum ou du minimum)
L’item montre très peu de variation
Les items sont fortement corrélés (r > 0,90)
Les items sont faiblement corrélés avec le reste des items
Vrai ou faux
Les motifs pour retirer des items d’un test vont toujours dans le même sens
Faux
Il arrive qu’ils se contredisent
Vrai ou faux
Les formules pour calculer une corrélation ne seront pas fournies à l’examen
Faux
Les formules seront fournies, mais il serait quand même bien que tu étudies les diapositives qui en parle!
Dans le contexte de __________ ou d’_________ d’un test psychométrique, l’analyse d’items est un processus __________ et, selon la théorie __________, (doit/ne doit pas?) être ____________.
Dans le contexte de construction ou d’adaptation d’un test psychométrique, l’analyse d’items est un processus itératif et, selon la théorie classique des tests (TCT), ne doit pas être automatisé.
Pourquoi le jugement du psychométriste est important lors de l’analyse d’items?
Les motifs pour retirer des items vont parfois se contredire. Il importe au psychométriste de faire un choix.
Le psychométriste peut aussi déterminer si le nombre d’items est satisfaisant.
Vrai ou faux
Dans SPSS, quand on veut faire l’analyse d’items, on n’a qu’à sélectionner tous les items du test.
Ça dépend
Il faut sélectionner seulement les items d’une dimension. Si le test n’évalue qu’une seule dimension, on choisit tous les items. Si le test évalue plusieurs dimensions, on fait les analyses une à la fois.
Vrai ou faux
SPSS peut nous dire combien de dimensions composent notre test
Vrai
Dans la sortie de données SPSS concernant le nombre de dimensions, comment fait-on pour déterminer combien de dimensions SPSS voit?
Le résultat de la colonne Real-data % variance est plus grand que les résultats des colonnes Mean of random % of variance et 95 percentile of random % of variance.
La ligne dans laquelle ça survient est le nombre de dimensions. Petit truc : SPSS met un * sur cette ligne!
Dans une sortie Item Statistics (M, ÉC, N), les moyennes sont pas mal toutes centrales. Doit-on retirer des items?
Non, les moyennes ne sont pas extrêmes
Dans une sortie Inter-item covariance Matrix, certaines covariances sortent négative. Doit-on retirer des items?
On ne veut pas voir de résultats négatifs dans cette sortie. Cela pourrait indiquer que les items concernés sont liés à des dimensions différentes. Alors, ces items pourraient être retirés ou séparés en deux sous-échelles.
Quand on normalise la Inter-item covariance Matrix, qu’obtient-on?
La inter-item correlation matrix
Pourquoi la inter-item correlation matrix est importante?
Plusieurs calculs qui suivent dépendent de cette matrice. Alors, si les conditions sont inadéquates, beaucoup de résultats qui viennent après sont affectés.
La moyenne des corrélations inter-item devrait être de combien environ?
Entre 0,3 et 0,7
Dans les scale statistics, comment fait-on pour savoir si ça fonctionne?
L’ÉC doit être < que la moitié de la moyenne (ÉC<0,5M) et la variance doit être plus grande que la moyenne (ÉC²>M)
L’alpha de cronbach devrait être de combien environ?
0,7 ou plus
Si l’alpha de cronbach est d’au moins 0,7, qu’est-ce que cela veut dire pour la variance expliquée (quantité réelle)?
Un alpha de cronbach d’au moins 0,7 représente au moins 50% de variance expliquée
Que permet la fidélité d’un test?
Elle permet de déterminer dans quelle mesure les différences individuelles peuvent être attribuées à de “réelles” différences sur le plan des caractéristiques mesurées (variance réelle) et dans quelle mesure elles doivent être attribuées à des erreurs dues au hasard (variance d’erreur).
Que permet le maintien de conditions de testage uniformes?
Réduction de l’erreur de mesure (moins de variance d’erreur) et rendent ainsi les scores plus fidèles.
Vrai ou faux
Aucun test n’est parfaitement fidèle.
Vrai
Qu’est-ce qu’un indice de fidélité?
Permet de renseigner sur la fidélité d’un test.
Que permet l’indice de fidélité?
Il caractérise bien le test sous réserve qu’il soit administré dans les mêmes conditions standardisées et à des personnes similaires à celles qui composent l’échantillon normatif.
Que mesurent tous les types de fidélité?
Degré d’association entre deux séries de scores
Quelle est la différence entre une intercorrélation et une auto-corrélation?
Une intercorrélation est faite entre plusieurs variables alors qu’une auto-corrélation est faite sur une seule variable, mais à deux temps de mesure différents.
Que veulent dire les différents coefficients de corrélation (r, rho, r(t), r(po), r(pa), R, r(t-r))
Pearson
Spearman
Tétrachorique (mode)
Polychorique (médiane)
Partielle
Régression
Test-Retest
Qu’indique une corrélation de 0?
Absence de relation, donc le hasard
Qu’est-ce qu’une régression?
Association entre un groupe de variables (indépendantes) et une autre variable (dépendante)
La combinaison linéaire des variables du groupe permettent d’expliquer la variance de la variable dépendante.
Vrai ou faux + expliquez votre réponse
On peut interpréter la covariance
Faux
Le coefficient n’a théoriquement pas de limite et peut varier entre - infini et + infini. Il est donc impossible de savoir si les coefficients sont grands ou petits. Cependant, la plupart du temps, le signe du coefficient de covariance sera le même que pour le coefficient d’intercorrélation
r(8)
Que représente le 8? Qu’est-ce que ça nous dit sur la taille de l’échantillon?
8 représente les degrés de liberté (ddl)
La taille de l’échantillon = ddl + 2
Donnez l’interprétation de la corrélation suivante
r(8) = 0,40
Corrélation entre scores de mathématique et de lecture chez les enfants
Les enfants qui réussissent en mathématiques tendent (r(8) = 0,40), dans une certaine mesure, à réussir également en lecture, et vice-versa, bien que cette relation ne soit pas très étroite.
r(8) = 0,40
Est-ce que cette corrélation est significativement différente de 0?
Difficile d’établir une relation statistique de façon relativement certaine avec N = 10
Expliquez la fidélité test-retest
On administre le même test aux mêmes personnes à deux temps de mesure différents. On obtient l’autocorrélation entre les deux temps de testage.
La variance d’erreur correspond aux fluctuations aléatoires des performances d’une séance de testage à l’autre.
Définition au long de l’autocorrélation
Degré de similitude entre une série chronologique donnée et une version décalée d’elle-même sur des intervalles de temps successifs. L’autocorrélation mesure la relation entre la valeur actuelle d’une variable et ses valeurs passées.
Que nous indique la fidélité test-retest?
Dans quelle mesure il est possible de généraliser, à des occasions diverses, les scores d’un test; plus l’autocorrélation est élevée, moins les scores obtenus sont influencés par des changements quotidiens imprévisibles.
Quels sont les désavantages de la fidélité test-retest?
L’effet de pratique peut augmenter les scores au retest
L’effet de mémoire si l’intervalle test-retest est court
Expliquez la fidélité par versions parallèles
À deux moments de testages différents, on fait passer deux versions d’un même test. On obtient une autocorrélation entre les deux séries de scores
Quelles précautions faut-il prendre lors de la création d’une version parallèle d’un test?
Même nombre d’items, même forme, même contenu couvert
Niveau de difficulté doit être statistiquement le même (p<0,05)
Équivalence des consignes, du minutage, des exemples, du format de présentation, bref tout
Quels sont les désavantages de la fidélité par versions parallèles?
Les sujets peuvent différer quant à leur degré d’amélioration due à l’effet de pratique, impliquant une autre forme de variance d’erreur
Il est difficile d’établir le parallélisme entre les deux versions du test
Expliquez la fidélité par bissection
On administre une seule version du test une seule fois et dans nos analyses, on divise le test en 2 moitiés semblables et on obtient une autocorrélation entre les deux moitiés. Le coefficient obtenu est l’indice de cohérence interne.
Nommez une faiblesse de la fidélité par bissection
Puisqu’une moitié sert à tester l’autre, on ne calcule que la fidélité de seulement la moitié du test.
Expliquez la fidélité Alpha de Cronbach
Une seule passation d’une seule version d’un seul test. Cette fidélité a pour fondement l’homogénéité entre les réponses de tous les items du test.
Quelle est a différence entre Kuder-Richardson et Alpha de Cronbach?
KR est pour les items dichotomique
Alpha pour les items de type Likert
Quel coefficient est en train de prendre la place d’alpha et pourquoi?
Oméga
Alpha a des difficultés liées à l’échantillon d’items et de personnes (+N = +a et +items = +a) et la saturation factorielle des items d’une dimension
Expliquez la fidélité inter-correcteurs
Pour les tests qui accordent une importance au jugement du correcteur. On fait corriger le test par au moins deux correcteurs (idéalement 3 ou 5). Les scores obtenus sont mis en corrélation de façon usuelle (corrélation intraclasse et/ou Kappa de Cohen).
Qu’est-ce qu’un test de vitesse?
Dans ce type de test, la rapidité de la performance explique les différences individuelles observées. Les items sont tous faciles et font parties dans habiletés maitrisées des participants. Le temps doit être si court que les participants ne peuvent pas compléter tous les items.
Qu’est-ce qu’un test de puissance?
Offre une limite de temps suffisamment longue pour compléter tous les items sans problème. Les items sont cependant ordonnés selon une échelle de difficulté qui augmente rapidement jusqu’à des items à peu près insoluble.
Quelle est la similitude entre un test de puissance et de vitesse?
Les deux sont conçus pour empêcher une réussite parfaite.
Pourquoi on ne veut pas de score parfait?
Un score parfait est indéterminé. Il est impossible de savoir quel score plus élevé le sujet aurait atteint si le test avait contenu plus d’items ou des items plus difficiles
Nommez une autre manière d’exprimer la fidélité d’un test
L’erreur-type de mesure (ETM)
Que représente l’ETM?
L’écart-type de la distribution des scores qu’aurait obtenu une personne si on lui avait fait faire le test 100 fois. La moyenne de cette distribution est le score réel de la personne et l’écart-type est l’ETM.
Combien de % de participants devraient généralement se trouver +- 1, 2, 3 écart-types?
+- 1 env. 68%
+- 2 env. 95%
+- 3 env. 99%
