Intra Flashcards
Objectifs de l’usage anticipé
- Buts de l’instrument
- Population visée
- Contexte d’utilisation
Objectifs de la conceptualisation
- Définir, catégoriser et organiser les composantes des phénomènes à mesurer
- Positionnement avec d’autres concepts
Objectifs de l’élaboration
- Prévoir les sources d’erreur de manière à les minimiser
- Choix du format de l’instrument
- Construire les items
- Choisir la méthode de correction
Objectifs de la stabilité
- Vérifier la nature et l’ampleur de l’erreur
- Établir la stabilité interne et temporelle
Objectifs de la congruence
- Vérifier les quantifications et/ou l’organisation des concepts
Objectifs de l’usage recommandé
- Préciser buts, population visée, circonstances d’utilisation/de passation
- Guider l’interprétation
Validité d’apparence
Validité critériée
« Quelles sont les manifestations concrètes qui seraient liées aux résultats que mon instrument génèrera ? »
Qu’est ce qu’un critère
Manifestation externe au phénomène qui informe sur la nature
ou l’intensité du phénomène de façon indépendante du nouvel instrument
Validité concomittante
Passation du nouvel instrument et du critère en même temps
Validité convergente
Les phénomènes mesurés par le nouvel instrument et le critère vont dans le même sens
Validité prédictive
Passation du nouvel instrument, puis du critère après un délai
Validité divergente
Les phénomènes mesurés par le nouvel instrument et le critère vont dans des directions opposées
Validité de contenu
La correspondance entre le contenu d’un test et le domaine défini de connaissances / comportements que l’on veut mesurer.
Le domaine doit être concret et fini
Validité de construit
Quand la variable est abstraite
Qu’est ce qu’un construit
Concept abstrait qui tente de représenter la réalité.
Validité d’apparence
Est-ce que le questionnaire semble mesurer ce qu’il doit mesurer? Quelles impressions l’instrument laisse-t-il sur les participants?
Validité critériée
Quelles sont les manifestations concrètes qui seraient liées aux résultats que mon instrument génèrera ?
Vrai/Faux : la validité de contenu s’applique aux tests de personnalité
Faux
Vrai/Faux : La validité de construit est adapté aux tests de personalité
Vrai
Erreur systématique
a) La même erreur de mesure affecte tous les scores d’un instrument de la même manière (ampleur d’erreur), dans la même direction (surestime ou sous-estime toujours)
b) La même erreur de mesure affecte tous les scores d’une personne de la même manière, dans la même direction
4 catégories de l’erreur aléatoire
Erreurs lors de la cotation
Variations dans les procédures d’administration
Variations dues aux répondants
Variations en raison du contenu (items)
Erreur lors de la cotation
Cotation trop vague, pas de grille de correction … variations de résultats si différents correcteurs
Variations dans les procédures d’administration
Quand on ne donne pas les meme consignes, le meme contexte, le meme évaluateur
Variations dues aux répondants
Altération des capacité de façon temporaire ; maladie, stress, fatigue
Variations en raison du contenu (items)
Deux versions parallèles
Instrument normatif
Instruments dont l’interprétation des résultats repose sur la comparaison aux résultats compilés auprès d’un échantillon de la population à qui s’adresse l’instrument
Instrument criterié
Instruments dont l’interprétation des résultats repose sur le fait qu’un seuil critique à été, ou non, dépassé
Vitesse
Tous les items sont faciles et ont un niveau de difficulté égal (sauf lorsque le test est aussi de puissance)
Puissance
Vérifier les limites des connaissances ou des habiletés du candidat
Performance typique
Vise à mesurer le niveau habituel
Performance maximal
Vise à mesurer la meilleure performance possible
Papier-crayon
Les personnes qui passent le test répondent à des items écrits
Performance
Les personnes soumises au test effectuent une tâche
Individuel
Instruments conçus pour être administrés à une personne à la fois
Groupe
Instruments conçus pour être administrés à plusieurs individus à la fois
Qu’est-ce qu’un item
Le stimulus auquel répond le participant
Avantage des items à choix de réponse
Fidélité de la cotation
Optimisation du temps de passation
Optimisation du temps pour la cotation
Désavantages des items à choix de réponse
On se limite à une seule information recceuillie
Avantage des items à choix de réponse
Facilite l’observation de comportements et de processus associés au test
Richesse de l’information recueillie
Désavantage des items à choix de réponse
Plus couteûx
Plus difficile à corriger
Choix d’items dans les test de rendements
Choix de répoinse favorise le par coeur, la mémorisation
À développement permet la nuance
Échelle nominale
Le nombre n’a pas de sens particulier à part représenter la catégorie
C’est une échelle catégorielle, où les nombres représentent une caractéristique particulière
On ne peut donc faire aucune opération mathématique avec ces nombres
Échelle ordinale
On ne peut faire aucune opération mathématique avec ces nombres à part les classer en ordre
Les nombres entretiennent une relation entre eux
On ne connaît pas la distance entre chaque position
Échelle a intervalle
Cette échelle permet
a) d’identifier les personnes
b) de les mettre en ordre de rang
c) d’effectuer des additions et des soustractions
Echelle de rapport
Cette échelle permet
a) d’identifier les personnes
b) de les mettre en ordre de rang
c) d’effectuer des additions et des soustractions
d) d’effectuer des multiplications et des divisions
usage des tests objectifs de personnalité
Évaluation normative de la personnalité
Documenter les changements suite à une thérapie
Choix de carrière
Recherche fondamentale: la nature et la structure de la personnalité
Facteur explicatif pour d’autres variables
Exemple: rendement scolaire, performance au travail, etc.
Contexte d’utilisation des tests objectifs de personnalité
Thérapie individuelle
Thérapie de couple
Thérapie familiale
Sélection du personnel
Coaching
Orientation
Recherche
Construit spécifique
Mesure 1 construit.
Génère un seul score.
Peu d’items.
Environ 10 minutes.
Cible souvent une population précise et limitée.
Les groupes normatifs sont souvent des échantillons de convenance.
Facile à compiler et à interpréter.
Construit a large spectre
Mesure plusieurs construits.
Génère plusieurs scores.
Beaucoup d’items.
Environ 45 minutes
Plusieurs applications
Grands groupes normatifs.
Émergence de rapports narratifs.
Orientation normale
« Performance typique »
Utilisation de l’orientation normale
Principalement utilisés en sélection, coaching, orientation de carrière et en recherche
Utilisation de l’orientation anormale
Principalement utilisés dans un contexte clinique et en recherche
Orientation anormale
Caractéristiques anormales
Pathologies
Problèmes
Réponse Acquiescement/
Désapprobation
Tendance consciente ou inconsciente à répondre principalement
« oui » ou « non ».
Réponse Réponses aléatoires
Par fatigue, désintérêt, manque de crédibilité du test…
Réponse gestion des impressions
Tendance consciente visant à répondre d’une certaine manière.
Réponse désirabilité sociale
Tendance à répondre ce qui est socialement acceptable.
Méthode par le contenu
Il s’agit d’une approche logique, rationnelle où la construction des items se fait en fonction de la compréhension de ce qu’on cherche à mesurer
Métrhode par critère empirique
Choix d’items qui distinguent les personnes « normales » de celles faisant partie d’un groupe spécifique.
Analyse factorielle
À partir d’une grande banque d’items, cette méthode statistique permet d’identifier les dimensions sous-jacentes aux items, selon les réponses fournies.
Approche théorique
Les items sont générés selon une ou des théories existantes.
Avantages critères empiriques
Directe et simple
Met l’accent sur ce qui compte sur le plan pratique
Désavantages critères empiriques
Approche essentiellement athéorique qui limite les instruments à la détection
Nécessite de très bien identifier les participants du groupe spécifique
Sensible au problème de chevauchement des distributions
Avantages analyse factorielle
Regroupe les items
Il est possible de trouver ou de confirmer les dimensions
Désavantages analyse factorielle
Les résultats dépendent de la qualité et de la quantité des items
Méthodologie complexe nécessitant beaucoup d’interprétation et de jugement ; souvent l’objet de débats d’experts
Donne l’impression que les résultats sont définitifs, mais ce n’est pas le cas
Avantages approche théorique
Permet une définition opérationnelle des items, des dimensions et des construits en général
Facilite l’avancement des connaissances
Désavantages approche théorique
L’instrument est bon et utile si la théorie est vraie
Il est fort complexe de faire un instrument qui couvre 100 % de la théorie
Avantages tests par ordinateur
Réponses + honnêtes dans certains cas
Une réaction + positive
Moins de papier!
Moins de risques de se tromper en comptabilisant les scores
Peut générer automatiquement un rapport narratif (descriptif ou « consultatif ») [par d’interprétation]
Inconvénients des test ordinateur
Doit aussi être validé?
La qualité du test est sujette au « biais du programme » (code du test)
Impression de précision scientifique
Rapport narratif automatique
Un programme informatisé interprète les résultats d’un test et rédige un rapport automatisé.
Méthodes de validation des rapports narratifs automatiques
Comparer les similitudes des rapports « automatisés » à des rapports faits par des cliniciens/experts
Les patients comparent leur rapport à un « faux » rapport et disent dans lequel ils se reconnaissent (problème effet Barnum)
Effet Barnum (effet de validation subjective/biais de validation personnelle)
Processus qui fait qu’un individu se reconnaît dans ce qu’il croit être la description galobale ou générale de lui-même.
Énoncé Barnum
Énoncé spécifique au sujet de la personnalité d’un individu, tellement général que la majorité des individus se reconnait dans celui-ci.
Quand apparaît l’effet Barnum ?
L’effet Barnum apparaît surtout lorsque les descriptions sont flatteuses ou positives
