Qualités psychométriques de la mesure Flashcards

(34 cards)

1
Q

Quelle est l’importance de la mesure en GRH?

A
  1. Appui pour la prise de décisions
    2 . Subjectivité de la mesure de l’humain
  2. Cout des activités de GRH
  3. Cout des erreurs
  4. Encadrement légal complexe
  5. Risques de poursuites
  6. Répuation de l’entreprise
How well did you know this?
1
Not at all
2
3
4
5
Perfectly
2
Q

Quels sont les critères pour juger la qualité d’une mesure ?

A
  1. Fidelité
  2. Validité
  3. Utilité
  4. Absence de biais transculturels
  5. Couts d’utilisation
  6. Respect du cadre légal et facilité à défendre légalement
  7. Validité apparente
How well did you know this?
1
Not at all
2
3
4
5
Perfectly
3
Q

Quels sont les deux erreurs de mesure?

A

**Erreur aléatoire **: erreur non prédictible provenant de facteurs subjectifs, de facteurs extérieurs ou de facteurs liés aux instruments de mesure
**Erreur systématique : **: erreur prédictible survenant de façon constante chaque fois qu’il y a prise de mesure et attribuable à des facteurs permanents

How well did you know this?
1
Not at all
2
3
4
5
Perfectly
4
Q

Quels sont les différents types d’échelles de mesure?

A

Nominale (la plus simple) : classer les objets dans des catégories exhaustives: née dans quel pays, adresse postal
Ordinale : catégorie par ordre de grandeur : avis sur quelque chose : content vers pas content 1 à 7
**Intervalle **: les degrés Celsius : le 0 veut dire quelque chose (ça gèle)
Proportionnelle : 0 absolu : intervalles égaux : le poids, examen

How well did you know this?
1
Not at all
2
3
4
5
Perfectly
5
Q

Référence normative VS critériée?

A

**Référence normative **: Résultat d’un examen, note de passage : interprétation d’un score basée sur sa valeur relative à un score normal ou standard. Comparaison à une norme ou un groupe
Référence critériée : Interprétation d’un score basée sur sa valeur actuelle : comparaison avec la personne elle-même à différents moments dans le temps : test de langue

How well did you know this?
1
Not at all
2
3
4
5
Perfectly
6
Q

Qu’est ce qu’une corrélation?

A
  • Procédure statistique représentant le niveau de relation entre deux variables
  • Relation peut être positive (changement dans le même sens), nulle (pas de relation) ou négative (changement dans le sens inverse)
  • Coefficient (r) varie entre -1 et 1
How well did you know this?
1
Not at all
2
3
4
5
Perfectly
7
Q

Qu’est ce qu’un coefficient de détermination ?

A
  • Pourcentage de la variation totale qui est expliquée par l’autre variable
How well did you know this?
1
Not at all
2
3
4
5
Perfectly
8
Q

Qu’est-ce que la discrimination ?

A
  • Action de séparer, de distinguer deux ou plusieurs êtres ou choses à partir de certains critères ou caractères distinctifs
  • Doit permettre de différencier les candidats
  • Liée au niveau de difficulté
  • Distribution étalée des résultats
How well did you know this?
1
Not at all
2
3
4
5
Perfectly
9
Q

Qu’est-ce que la fidelité?

A

Stabilité (constance) et homogénéité des résultats d’une mesure (peu importe où on prend la mesure, on va obtenir les mêmes résultats). C’est une mesure sans erreurs aléatoires

How well did you know this?
1
Not at all
2
3
4
5
Perfectly
10
Q

Qu’est-ce que la validité?

A

Capacité d’un instrument à mesurer ce qu’il est sensé mesurer

How well did you know this?
1
Not at all
2
3
4
5
Perfectly
11
Q

Quelles sont les sources d’erreurs aléatoires?

A
  • Candidat et évaluateurs : tendance à répondre au hasard; État général mais passager ; Réaction spécifique fortuite ou inhabituelle ; Interaction avec les caractéristiques de l’évaluation/du candidat
  • Situation : conditions d’administration non standardisées
    -Instrument : Composantes non standardisées ; Ambiguités et insuffisances
How well did you know this?
1
Not at all
2
3
4
5
Perfectly
12
Q

Quelles sont les mesures de la fidélité ?

A
  • Fidelité test-retest (temporelle)
  • Fidelité inter-jugs ou intercodeurs
  • Cohérence interne ou homogénéité
  • Formes parallèles
How well did you know this?
1
Not at all
2
3
4
5
Perfectly
13
Q

Quel est l’interprétation des coefficients de fidélité?

A
  • Interprétation selon le contexte : plus c’est important, plus ça doit être élevé
    ATTENTION :
  • Plus il y a d’énoncés, plus la fidelité augmente
  • Plus il y a de variance, plus la fidélité augmente
  • Le niveau de difficulté doit être appropié aux répondants
  • Dilemme étendue-précision
How well did you know this?
1
Not at all
2
3
4
5
Perfectly
14
Q

Quels sont les trois principes généraux pour accroitre la fidélité?

A
  • Augmentation du nombre de mesures (items/questions
  • Standardisation (des conditions de mesure, des directives et des outils d’évaluation
  • Composantes claires et complètes
    Autres façons
  • Motiver candidat
  • Prévoir période d’adaptation, ambiance détendue
  • Directive claires
  • Formation des évaluateurs
How well did you know this?
1
Not at all
2
3
4
5
Perfectly
15
Q

Inférence descriptive ?

A

Mesurer ce qu’il est censé mesurer

How well did you know this?
1
Not at all
2
3
4
5
Perfectly
16
Q

Inférence relationnelle?

A

Lien avec une autre variable (ex: réussite)

17
Q

Les précisions de la validité?

A
  • Unitaire
  • Question de degré
  • Contextuelle
  • Une mesure ne peut être valide si elle n’est pas d’abord fidèle
18
Q

La validité apparente ?

A
  • Aussi appelée validité de face ou validité nominale
  • Correspondance logique et évidente entre la méthode de sélection et le poste perçue par un profane
  • Importante pour les candidats dont l’attitude et la motivation peuvent être affectées
  • Aucun lien avec la validité réelle
19
Q

Validité de contenu?

A
  • Représentativité de l’instrument de mesure
  • L’outil reflète-t-il le contenu du poste? Y a-t-il adéquation entre les compétences mesurées et celles nécessaires au rendement?
  • La validité de contenu se fait à partie de jugements qualitatifs
  • Quatre composantes : stimuli ; conditions d’application; processus d’évaluation et le processus décisionnel
20
Q

Validité critérée?

A
  • Capacité à prévoir un phénomène futur à partir des résultats d’un test
  • Résultat d’une corrélation entre deux mesures (celle du prédicteur et celle du critère)
  • Trois stratégies de validation : prédictive ; concomitante et de généralisation
  • Trois erreurs possibles
21
Q

Validité prédictive?

A
  • Méthode longitudinale
  • Corrélation entre les résultats au test des candidats (temps 1) et leur rendement ou leur réussite au travail plus tard (temps 2)
  • Plus réalisable pour les grandes entreprises
22
Q

Validité concomitante?

A
  • Corrélation obtenue entre le prédicteur et le critère à partir de titulaires de poste
  • Calculée en même temps
23
Q

Validité de généralisation (méta-analyse)?

A
  • Constat statistique basé sur l’ensemble des études de validité faites par rapport à un outil d’évaluation
  • Prend en considération les erreurs méthodologiques de chacun de ces études
  • Permet d’évaluer la valeur prédictive générale de chacun des outils utilisés en dotation
24
Q

Interprétation du coefficient de validité?

A
  • Mesure statistique
  • Toujours à refaire pour tenir compte de la situation et de l’usage
  • Transformation de coefficient de corrélation en coefficient de détermination pour comprendre en pratique
  • Attention si on utilise plusieurs instruments pour mesurer la même chose
25
Validité conceptuelle ?
- Justesse avec laquelle un instrument de mesure permet d'obtenir des résultats conformes au construit défini dans son contexte théorique - Quatre techniques : Groupes connus ; Vérification d'hypothèses ; Analyse factorielle ; Convergence et divergence, méthode multitrait-multiméthode
26
Les façons d'accroitre la validité?
- Analyse d'emploi précise, complète - Recours à des experts de contenu (titulaires, superviseurs, pour définir les exigences - Choix d'instruments de mesure spécifiques et appropriés au poste - S'assurer que les compétences mesurées sont vraiment nécessaire à l'emploi - Utilisation de plus d'une mesure (au moins 2)
27
Qu'est-ce que l'utilité?
- Gain espéré à la suite de l'utilisation d'un prédicteur, d'une méthode - 2 types de gains : économique et bonne décisions de dotation ou accroissement du % d'employés satisfaisants - Gains économiques : comparaison des couts et des bénéfices
28
Augmentation du pourcentage d'employés satisfaisants s'appuyant sur 3 renseignements?
- La validité de l'instrument - Le taux de sélection : Ratio du nombre de candidats sélectionnés sur le nombre total de candidats - Le pourcentage de candidats susceptibles de convenir au poste parmi les candidats
29
La sensibilité des mesures?
- Capacité d'un instrument de mesure à déceler correctement la présence d'un état - EX: Vrai positif : si j'ai la COVID ou pas
30
La spécifité des mesures ?
- Capacité d'un instrument de mesure de reconnaitre correctement l'absence d'un état - Ex: vrai négatif (vérifier que je n'ai pas COVID
31
Qu'est-ce que l'étalonnage?
- Pour interpréter les résultats et diminuer les biais, on compare un résultat particulier à la norme du groupe et de références approprié -Exemples: test d'intelligence ou de personnalité - Regarder un groupe dans son ensemble
32
Validation transculturelle?
- Un même item n'a pas le même degré de difficulté (ex. test d'intelligence) ou la même signification pour toutes les cultures (ex. test de personnalité) donc bias culturel - Il faut viser l'équivalence - Qualité de la traduction est importante mais non suffisante - Processus de validation implique de nouvelles normes
33
Quels sont les 5 critères d'équivalence (à travers les pays) ?
- Contenu : Même énoncé - Sémantique : Signification des énoncés, le même dans chaque culture - Technique : la méthode de collecte de données est la même - Critère : similarité dans l'interprétation des résultats - Conceptuelle : même construit théorique
34
Comment s’assurer de la rigueur des instruments de mesure ?
- Choix des méthodes de sélection - Méthodes validées - Méthodes spécifiques au poste - Recours aux experts du poste - Appel à plus d’un évaluateur - Formation des évaluateurs