Séance 9-Mesurer l'efficacité d'une activité de formation Flashcards
En quoi consiste l’évaluation de l’investissement-formation aujourd’hui?
(avant, historiquement on se basait seulement sur la consommation de formation pour évaluer les retombées de cet investissement)
Aujourd’hui on évalue si la formation démontre bien sa pertinence et sa contribution à l’atteinte des objectifs stratégiques de l’entreprise.
C’est un ensemble d’activités qui ont pour but: d’attribuer une valeur au plan de formation et de mesurer les retombées (positives et négatives) sur le rendement des employés et de l’entreprise
Citer les 3 étapes les plus importantes du plan de formation
L’analyse de besoin
le transfert des apprentissages, et l’évaluation de la formation
Pourquoi évalue-t-on une activité de formation?
Pour
- Mesurer si les activités de formation ont été rentables pour l’organisation
- Évaluer si les participants ont aimé le lieu et la nourriture servie
- Mesurer les apprentissages réalisés pendant la formation
- Évaluer si les participants ont aimé le contenu de formation et le formateur
Quelles sont les dimensions évaluées lors de l’évaluation de l’investissement-formation?
Il s’agit du modèle de Kirkpatrick (1976)
qui nomme 4 niveaux (astuce=>SATI..”Sati fonctionné?”)
ENVIRONNEMENT DE FORMATION
La Satisfaction des participants (sont-ils satisfaits de la formation?) -en fin de formation
L’Acquisition des connaissances (qu’ont-ils appris)
-en cours/fin de formation
ENVIRONNEMENT DE TRAVAIL
Le Transfert des acquis (changement de leurs comportements?)-1 à 3 mois après la formation
L’Impact sur l’organisation (effets bénéfiques pour l’organisation?)- 3 à 6 mois après la formation
Quels sont les indicateurs reliés aux différentes dimensions évaluées lors de l’évaluation de l’investissement-formation?
Niveau 1 “Satifaction”
♦ Pertinence ♦Utilité ♦Attrait ♦Réalisme ♦Etc.
Niveau 2 “Acquisition”
♦Information ♦Connaissances ♦Compréhension ♦Confiance ♦Perceptions ♦Habiletés ♦Etc.
Niveau 3 “Transfert”
♦Type d’utilisation des apprentissages
Niveau 4 “Impact”
♦ Productivité ♦Qualité (erreurs, incidents) ♦Réduction de coûts♦ Mobilisation des employés, rétention ♦Temps de cycle♦ Satisfaction de la clientèle
Quels sont les outils d’analyse qui peuvent être utilisés au sein des différentes étapes de l’évaluation de l’investissement-formation?
Niveau 1 “Satifaction”
•Sondages/Questionnaires (6.2) •Groupes de discussion (6.3)•Observation (6.1)
Niveau 2 “Acquisition”
•Sondages/Questionnaires •Observation (6.2)•Entrevues (6.6) •Tests et examens •Simulations•Études de cas •Groupe témoins (non formés) et expérimental (formés)• Etc.
Niveau 3 “Transfert”
•Sondages (6.5) •Observation •Entrevues (6.6) •Groupe témoins•Registres de l’entreprise •Etc.
Niveau 4 “Impact”
•Questionnaires (6.7) •Groupe de discussions (6.7) •Bilan (6.8) •Comptes rendus •Groupe témoins •Enquête auprès des clients •Etc.
92% des entreprises (2014) évaluent le niveau de satisfaction et la réaction des apprenants, que cela apporte-t-il et n’apporte-t-il pas?
Cela permet
- de prendre quelques décisions (Emploi-Québec, 2002):
- Continuer l’activité ou non
- Modifier des éléments de l’organisation et de l’animation
- Modifier le plan prévu pour l’adapter à la réalité de l’entreprise et des valeurs organisationnelles
- Faire de nouveau appel au formateur.
Cela ne permet pas
de considérer ces résultats comme des prédicteurs valables de l’apprentissage, du transfert des apprentissages ou de l’efficacité de la formation (Simon et Werner, 1996).
Donner les 6 raisons qui expliquent cette situation
- Des études récentes concluent que l’évaluation systématique de l’apprentissage réalisé par les apprenants n’est le fait que de 48% des plans de formation au Québec (Benadou, 1997; Emploi-Québec, 2007), alors que celle du transfert de cet apprentissage en milieu de travail n’est que de 12% -
- La croyance que la formation est en soi une bonne chose et que l’évaluer serait superflu
- La croyance qu’il est impossible d’évaluer adéquatement les changements d’attitude
- La complexité de l’évaluation ou de l’expertise requise
- La crainte des acteurs d’être évalués
- L’image de l’évaluateur qui peut être perçu comme le représentant de l’autorité
- La difficulté de produire dans des délais satisfaisants les résultats d’une démarche d’évaluation perçue parfois comme longue.
Quelles sont les difficultés rencontrées lors d’une démarche évaluative?(les variables à contrôler)
- L’histoire
- L’évolution
- Les pré-tests
- La validité des instruments de mesure
- La sélection des apprenants
- La mortalité expérimentale
- L’interaction des variables
Lors d’une démarche évaluative, en quoi la variable de l’histoire peut-elle poser des difficultés?
Tout événement non contrôlé, étranger à la formation et qui survient entre deux mesures de performance peut contribuer à influencer celle-ci.
Ex.: un changement d’éclairage, de nouvelles politiques du service, une rémunération additionnelle.
Lors d’une démarche évaluative, en quoi la variable de l’évolution peut-elle poser des difficultés?
Tout processus influencé par le passage du temps peut contribuer à modifier la motivation et la performance.
Ex.: expérience, changements physiologique, etc.
Lors d’une démarche évaluative, en quoi la variable des pré-tests peut-elle poser des difficultés?
L’administration d’un pré-test peut influencer la performance au post-test.
En effet, dans le cas de mesures rapprochées dans le temps, l’apprenant peut, par exemple, discuter de ses réponses au pré-test avec ses collègues et tenir compte de cet échange lors du post-test.
Lors d’une démarche évaluative, en quoi la variable de la validité des instruments de mesure peut-elle poser des difficultés?
On s’assure que les instruments de mesure soient valides. Les pré-tests permettent d’éviter des erreurs de validité.
Lors d’une démarche évaluative, en quoi la variable de la sélection des apprenants peut-elle poser des difficultés?
Le fait de répartir dans le groupe expérimental et dans le groupe témoin des participants qui se distinguent inégalement par ou une plusieurs variables (motivation ou expérience) peut influencer la performance en dehors de la formation.
Lors d’une démarche évaluative, en quoi la variable de la mortalité expérimentale peut-elle poser des difficultés?
Lors d’un long processus de recherche en évaluation, il se peut que plusieurs sujets quittent les groupes à l’étude. Quand ces défections modifient l’un ou l’autre groupe, la performance peut s’en ressentir.
