Cours 2 Flashcards
C’est quoi une étude de validation?
Aller chercher donnée pour faire vérifications stats (entre prep et vérif) ; donne rs pour faire vérification via échantillon de convenance
Quel est le but de l’usage anticipé du SAT?
Prédire succès scolaire des élèves au sec une fois à l’uni
Est-ce que le SAT s’intéresse à l’intelligence?
Non, strictement connaissances
Quels sont les bénéficiaires du SAT?
Élèves
Quels sont les concepteurs du SAT?
College Ward
Quel est le contexte du SAT?
papier/crayon , pour élèves des US
Quelle est la valeur ajoutée du SAT?
PAs autres instru qui évaluent ça
En quoi consiste la conceptualisation pour le SAT?
Diviser sujet : 2 types aptitudes (verbales et mathématiques)
En quoi consiste l’élaboration du SAT? Qu’est-ce qui est déterminé à cette étape?
QCM bâties par professionnels de 2 niveaux et psychométriciens
Créer itemps pour chq dimension (math et verbal)
Durée = 2h
Passation en grp (mais individuel à sa place)
score entre 200-800
20 versions parallèles
Que se passe-t-il pour l’étape de stabilité pour le SAT?
Calcul:
Erreur-type de mesure pour SAT-V et SAT_M
Consistance interne SAT-V et SAT-M (plus grand 0,5)
Stabilité temporelle (test-rest, r proche de 1 )
Que se passe-t-il à l’étape de congruence du SAT?
Validité de contenu : questions représentent études au secondaire?
Validité prédictiv : r = 0,55 (SAT-V et notes uni) ; r = 0,48 (SAT-M et notes uni) ; r = 0,67 (notes secondaire et notes uni)
En quoi consiste l’étape d’usage recommandé du SAT?
Répéter le but
Manuels basés sur SAT et bcp rechercheas aussi
Population L tous types d’élèves au sec représentés?
Mesure pas parfaite : a) existe meilleurs prédicteurs notes b) possible tricher c) possible ++ se préparer et que résultat pas représentatif de la performance typique
Que faut-il faire pendant la préparation et la vérification (processus décisionnel)?
DÉtecter les problèmes et apporter les correctifs
En quoi consiste le processus décisionnel?
Il y a probs et sln en cours de route, résolues au fil du temps quand ils apparaissent
Que se passe-t-il quand on rencontre un problème pendant la conception d’un test (processus décisionnel)?
Retourner à l’étape correspondante dans la préparation
En quoi consiste le principe général quand on rencontre un problème ? (processus décisionnel)
Si prob détecté à stabilité, retour à élaboration (FIABILITÉ)
Si prob détecté à congruence, retour conceptualisation (VALIDITÉ)
Si prob détecté à usage recommandé, retour à usage anticipé (UTILITÉ) — seul cas où retour au début
Quels sont les 6 problèmes auxquels le modèle répond?
1) Mauvaise connaissance autres instrus
2) Utilisation instru désuets
3) Concepts mal définis
4) Types mesure pas approprié à la sit
5) Techniques stats mal utilisées
6) Mauvaise interprétation des indices statistiques
Est-ce qu’il est certain qu’en utilisant le modèle de la cible on règle les problèmes qu’il adresse?
NOPE
Quels sont les 3 concepts de base de l’usage anticipé?
1) Construit (+ buts)
2) Population (+ acteurs)
3) Contexte
C’est quoi un construit?
concept mesuré avec instru (ex : dépression pour BDI)
C’est quoi une population?
Gens qui passent le test (plus spécifier = plus restreindre)
C’est quoi le contexte d’un instrument? Donne exemples
Conditions dans lesquelles le test est administré
Ex : t passation, connaissances préalables, modalités passation (en ligne?), surveillance?
Quels sont les buts associés au construit déterminé lors de l’usage anticipé?
FOndamental et Psychométrique
C’est quoi un but fondamental?
Qu’est-ce qu’on évalue et pourquoi? (comment test contribue, à quoi servent rs)
C’est quoi un but psychométrique?
Quelle est la valeur ajoutée p/r aux autres instruments?
Donne 6 exemples de buts psychométriques
Évaluation plus courte ; Changement modalité ; Traduire (aussi selon culture) ; Préciser construit ; Cibler plan + précis population ; Créer version parallèle
quels sont les 4 types d’acteurs? Que font-ils?
Concepteur (crée test)
Utilisateur (évalue bénéficiaires via résultats)
Bénéficiaire (se fait évaluer)
Administrateur (procède à la mesure)
Dans quel cas est-ce que 2 types d’acteurs peuvent être les mêmes personnes?
Mesures auto-rapportées : bénéficiaires et administrateurs
C,est quoi un échantillon de convenance?
Échantillon pris pour étude de validation
Que peut-on dire des acteurs de l’étude de validation et de l’instrument?
Ce ne sont pas les mêmes personnes ; doit exister similitudes entre les 2 groupes
