Cours 9 - Construction & adaptation d'un instrument Flashcards
Étapes
Étapes de construction d’instrument décrivent quoi?
Composantes & considérations techniques pour construction efficace instrument
Étapes
Application d’un cadre permet quoi?
Approche cohérente & favoriser arguments preuves validité
Construction
La construction test se termine après sa publication?
Non –> 5 ans recalculer validité/fidélité test
Construction
Étapes construction instrument:
- 1ère : Analyser besoins
- 2ème : Identifier comportements
- 3ème : Spécifier quelques principes
- 4ème : Rédiger (adapter) items
- 5ème : Expertiser la première version (construite ou adapté)
- 6ème : Pré tester
- 7ème : Analyser les items
- 8ème : Dimensionner/Calibrer
- 9ème : Rédiger un manuel
Construction
Étape 1: Analyser besoins
- Identifier motifs justifient besoin évaluation
- Création/adaptation mesure répondre besoins
- Objectifs mesure
Construction
Étape 2: Identifier cpt
- Cpt observables représentent construit mesuré
Construction
Étape 3: Spécifier principes
- Nb items
- Caractéristique matériel
- Échelle Likert pair/impair?
Construction
Étape 4: Rédiger items
Besoin plus items départ pour garder utiles
Construction
À observer lors rédaction items:
- Un contenu par questions
- Formulation
- Séquence
- Format réponses voulues
- Présentation matériel
Construction
Critères construction items:
- Communication simple & mots familiers
- Éviter mots ambigus/compréhension difficile
- Éviter items suggèrent réponse
- Éviter contenu sentiment approbation/désapprobation
- Éviter item long
Construction
À observer après rédaction items:
- Item trop détail?
- Plusieurs items nécessaire pour évaluer contenu?
- Participant ont information pour répondre?
- Jugement évaluation?
- Participants prêt à répondre?
- Item biaisé?
- Réactions possibles aux items?
Construction
Étape 5: Expertiser première version
Vérification groupe expert:
* clarté langage
* Pertinence théorique
* Dimensionnalité
Expert: année formation, pratique, localisation géo, lieu formation
Construction
Qu’est-ce qui peut ↓ consanguinuité intellectuelle experts?
- Années formation
- Années pratique
- Localisation géo
- Lieu formation
Construction
Étape 6: Prétester
- Prét-est avec échantillon population cible
- Échantillon assez grand pour diminuer erreur échantillonnage = qualité résultats prétest
- Échantillon item > population
pcq pas préoccupation échantillon population
Construction
Étape 7: Analyse items
- Vérifier résultats descriptifs & corrélationnels (variance/ET)
- Détecter biais acquiescence (positif/négatif)
- Tester normalité par K-S (correction Lilliefors) & test Mardia (normalité multi)
- Chercher problème colinéarité
Construction
Matrice Anti-Image:
- Corrélation faible/nulle –> effets linéaire autres variables éliminés
- Anti-image = variance unique
S’attend à corrélation faible = variance unique
Construction
Diagonale principale matrice anti-image:
Mesure adéquation solution factorielle
* une mesure KMO par variables
Construction
Qualité de la représentation (Communalities):
- Initial = mesure variance chaque variable par ensemble toutes autres variables (combinaison linéaire)
- Extraction = mesure variance chaque variable par ceux retenus
extraction > initial
Construction
Mesure qualité représentation:
- < 0,3 = plus inacceptable
- 0,3 = acceptable
- 0,4+ = satisfaisant
Variance totale expliquée:
- % variance
- % variance cummulative
F1 explique % phénomène
F2 explique % pas encore expliqué par F1
Matrice corrélation reproduite:
Divisée en deux:
Matrice reproduite
* corrélations classique
* matrice retirer degré liberté = devient instable
* plus proche corrélation originale
Matrice résidus
* résidus = différence corrélation originale et reproduite
* moins grand si matrice reproduite proche originale
Diagonale de la matrice reproduite représente quoi?
Qualité représentation
Matrice de forme:
Pattern Matrix –> indique charges factorielles (facteur)
Étape 7: Analyser items
Analyse fidélité
* Test-restest
* Formes //
* Split half
* Homogénéité
* Accord inter-juges
Étape 8: Dimensionner/calibrer
Création normes après validité & fidélité
Présente quoi dans manuel?
- Objectifs
- Bases théoriques test
- Qualification pour appliquer & interpréter
- Consignes & principes interprétation
- Données métriques
définition échantillon + passation
administration, directive, limites temps, correction
Constructeur doit assumer quoi?
Responsabilité éthique –> information manuel respect principes éthiques
Objectifs présentés dans manuel:
- A quoi serve-t-il ?
- Dans quel contexte sera-t-il utilisé ?
- Que doit-il mesurer ?
- Est-ce une variante d’un test existant?
- Quelle population est concernée ?
- Précision de la forme (individuel, collectif, papier-crayon, internet, etc