chapitre 5.2 Flashcards
Qu’est-ce que la théorie de la décision?
La théorie de la décision vise l’analyse des effets quantitatifs des décisions que l’on prend. Elle est habituellement utilisée pour optimiser les résultats de décisions que l’on a prises en fonction de certains critères
Concepts de base:
- Résultas appropriés (hit): vrai positif et vrai négatif: résultat dont les scores sont supérieurs au point de coupure du critère du test.
- faux positif/faux négatif
- L’effet du déplacement du point de coupure
- L’effet du taux de base
- La notion de sélectivité renvoie à tous les cas positifs
- La notion de spécificité renvoie seulement aux cas positifs
Dans la théorie de la décision, qu’est-ce qu’un faux positif et un faux négatif? Quels sont leurs impacts?
Faux positif: les scores sont supérieurs au point de coupure du test mais représentent un échec par rapport au critère. se retrouve dans le quadrant inférieur droit. Ex: On pense qu’une personne a besoin de consulter alors que ce n’set pas le cas. C’est l’évaluation positive erronée de candidats (ou de clients) dont la performance au critère sera insatisfaisante -> les cas de faux positifs
Faux négatif: les scores tombent sous le point de coupure du test mais représente une réussissent par rapport au critère. Ces cas se retrouvent ds le quadrant supérieur gauche. Ex: On pense que la personne n’a pas besoin de consulter mais en réalité, elle en aurait besoin. C’est l’évaluation négative de candidats (ou de clients) dont la performance au critère serait satisfaisante -> les cas de faux négatifs
***Inévitablement, on va se tromper. Quelle est la pire erreur qu’on peut faire? Faux positifs ou faux négatifs? Ca dépend des situations.
Quelles sont les conditions préliminaires à prendre en considération dans la théorie de la décision?
La validité n’est pas le seul facteur pour juger de l’utilité d’un test pour prendre une décision. Par exemple:
- L’utilité relative d’uneméthode pour prendre une décision :
est-ce qu’une entrevue ne serait pas plus pertinente qu’un questionnaire? Est-ce que la méthode que j’ai choisi est meilleure qu’une autre? - Le coût de la passation du test
Quelle stratégie peut-on utiliser pour minimiser l’impact des fausses décisions attribuables au manque de validité du test?
1) La quantification de l’utilité attendue du test:
Cette méthode requiert de pondérer l’utilité de chaque type de décision et de calculer une valeur d’utilité optimale pour un test.
2) L’utilisation d’une séquence de décisions
Ex. On administre un test de validité moyenne mais facile pour faire un premier filtrage et on utilise un second test, plus lourd mais plus précis, pour prendre une décision définitive
3) Lorsque le critère à prédire esthétérogène (multitrait ou multi-dimensionnel), recourir à des méthodes qui combinent les informations provenant de plusieurs tests différents ou des sous-tests relativement indépendants (orthogonaux).
- Cet ensemble de tests forme unebatterieoù ils sont corrélés avec le critère à prédire, mais ils ne doivent pas être trop corrélés entre eux afin d’éviter la redondance
4) Plusieurs méthodes permettent de combiner les résultats, entre autres:
Les équations de régression multiple (généralisation de la corrélation) et l’analyse factorielle.
Dans la théorie de la décision, à quoi réfère le taux de base?
c’est la proportion d’individus qui présentent une certaine caractéristique au sein d’une population.
Lorsque le taux de base est extrême (très faible ou très élevé, il est difficile de démontrer la validité d’un test qui vise à recenser les individus faisant partie du groupe ciblé.
Il est plus facile d’obtenir une bonne validité pour un test dont le taux de base est près de 50%.
Ce taux change en fonction de la population définie.
Dans la théorie de décision, comment fonctionne la prise de décision?
voir diapo 31, 32, 33***
On doit connaitre le lien qui existe entre le test et le critère. Si la corrélation est de 1, on a juste à déplacer la ligne verticale (point de coupure = croisement entre ligne verticale et horizontale) pour savoir si la personne doit participer ou non au programme. On doit trouver l’endroit où on le moins de faux positifs (fp) et de faux négatifs (fn). On veut trouver l’équilibre entre les 2.
Lorsqu’on déplace le point de coupure, on gagne et on perd en même temps. Ca donne une idée de jusqu’à quel point le test est sensible et spécifique
Dans la théorie de la décision, à quoi réfère la sélectivité et la spécificité?
Sélectivité (sensible):
Sélectionne correctement les membres d’un groupe critère. Par ex. Asperger, futur décrocheur.
- Aussi appellé sensibilité
- Est-ce que le test est capable d’aller chercher tous les vrais positifs?
Ex: les tests de dépistages
Spécificité:
- NE sélectionne pas les membres appartenant à l’autre groupe. Par ex. Non clinique ou DI (au lieu de TSA)
- En embarquant les vrais positifs, est-ce qu’on est sur qu’il n’ajoute pas les faux positifs.
- Le test ne détecte que ceux qu’on veut identifier et pas d’autres gens en plus.
**L’importance du point de coupure
Sur quels facteurs se base-t-on pour établir le rapport (ratio) de sélection, qui fixe la position du point de coupure du test?
1) De la gravité du problème causé par l’acceptation erronée des « mauvais » candidats, soit les cas defaux positifs
- Exemple: les enfants sont envoyés en classe spéciale, stigmatisation, etc.
- Plus le rapport de sélection estfaible, plus le pourcentage de faux positifs sera faible
2) De la gravité du problème causé par le rejet erroné des « bons » candidats, soit les cas defaux négatifs
- Exemple: Les enfants ne profitent pas des services disponibles
- Plus le rapport de sélection estélevé, plus le pourcentage de faux négatifs sera faible
**À noter qu’il est impossible de réduire simultanément les pourcentages de faux positifs et de faux négatifs (sinon qu’en augmentant la validité critériée -validité de critère- du test)
Des facteurs pratiques peuvent aussi intervenir dans le choix de ce rapport
- Exemple: le nombre de places disponibles dans un programme de prévention
Qu’est-ce que la validité de construit?
- Fait partie de l’Ancienne nomenclature.
- Répond aux questions suivantes: Est-ce qu’il est valide au plan théorique? Vient-il confirmer la théorie sous-jacente ou test?
- En psycho, il y a moins de théories alors c’est plus difficile de dire que c’est valide au niveau du construit. Par contre, ce qu’on fait, c’est qu’on amasse un tas de preuve et on check si ça converge.
- Validité de Construit :validité qui chapeaute toutes les autres sortes de validité.
Qu’est-ce que la structure interne (ds validité de construit)?
La structure interne comprend :
1) Cohérence interne (questionnable)
- homogénéité
- Preuve ambiguë et faible.
- Préalable à la validité, plutôt - qu’une preuve.
Les bons indices de cohérence interne ne sont pas suffisants pour dire qu’un test est valide. Ce sont des indices de fiabilité (ex: alpha de conbrach)
2) les preuves à la validité de construit: L’analyse factorielle
- analyse exploratoire
- analyse confirmatoire
Explique en quoi consiste l’analyse factorielle exploratoire et l’analyse factorielle confirmatoire
1) Exploratoire (tp3) on laisse l’ordi voir les liens entre les items et entre les sous-construits. Pas très convaincante comme info.
2) Confirmatoire: tout bon test devrait avoir eu recours à cela. Consiste à dire à l’ordi à l’avance quel sont les liens prévus entre les items ,entre les sous-construits, et entre les sous-construits et le construit total. La carte conceptuelle dans son ensemble est testée ici. L’ordi nous dit jusqu’à quel point notre carte conceptuelle colle à la réalité.
**voir exemple diapo 41
Qu’est-ce que le facteur G et les facteurs multiples?
Analyse factorielle et intelligence:
- Spearman: facteur g (intelligence = unidimensionnel selon la plupart des observateurs, mais bi-dimensionnelle selon Spearman)
- Thurstone: facteurs multiples (intelligence = multifactorielle
Vrai ou faux: Il n’existe pas de preuve qui à elle seule permet d’établir hors de tout doute la validité de construit. Explique
Vrai
- Cela est attribuable à la nature abstraite de plusieurs construits en psychologie
- Les preuves sont de différentes natures et de qualités variables
- C’est par l’addition de plusieurs «preuves» qu’il est possible d’estimer la validité de construit
