Evaluation & Transfer Flashcards
Wie plant man Interventionen, und welche Qualitative & Quantitative Ansätze gibt es?
Wenn man Interventionen Planen möchte, muss man aus der Literatur Evidenz basierte Ergebnisse heranziehen, um zu überprüfen, was mögliche Wirkfaktoren sind
Dafür gibt u.a 2 Ansätze
- Überblicksarbeiten
Qualtitativer Ansatz
Zeigen allerdings einige Schwachpunkte
Bsp: Kriterien für die Literatur- bzw. Studienauswahl & -bewertung sind intransparent
Die art der Integration vsch. Untersuchungsergebnisse ist oft subjektiv
Besonderheiten einzelner Untersuchungen werden zu wenig beachtet
SP-Fehler werden vernachlässigt
Kleine Effekte werden unterschätzt o. Gar übersehen - Metaanalaysen
Quantitativer Ansatz
Integration bzw. Zsmfassung & Bewertung von Studien
Die wichtigsten Ziele einer Metaanalyse sind die Ermittlung von:
Typischen Stärken eines Effekts
Variabilität des Effekts
Statistischen Sig. des Effekts
Identifizierung von Moderatoren, mithilfe derer die realtive Stärke des Effeks vorhersagt werden kann
Was sind Teilfragestellungen bzgl der Evaluation von Interventionen?
- Wirksamkeit der Interventionen
Welchen Effekt hat die Intervention ?
„Verbessert sich die Beziehungsqualität aufgrund dieses Verfahrens ?“ - Wirkungsmodell der Intervention
Warum wirkt die Intervention ?
„Unter welchen Bedingungen ist dieses Verfahren wirksam ?“ - Programmausführung
Wie wird die Intervention umgesetzt ?
„Welche Merkmale sollte ein best. Verfahren aufweisen ?“ - Programmreichweite
Welche Personengruppe werden erreicht ?
„Wer nimmt an den Freiwilligen Verfahren Teil ?“
Was sind Ergebnisbezogene & Prozessbezogene Evaluation bzgl. in der Personalentwicklung ?
Ergebnissbezogene Evaluation
Es geht um die Wirksamkeit einer Maßnahme
Es steht eine Entscheidung über ein o. Mehrere z.B. alternativen Trainingsprogramme im Vordergrund
Fokus liegt hierbei auf die Wirksamkeit
Prozessbezogene Evaluation
Es geht darum, förderliche & hinderliche Faktoren zu identifizieren, die dazu führen, dass ein Trainingsprogramm wirkt o. Nicht wirkt
Es geht außerdem darum, ein Trainingsprogramm zu optimieren
Fokus liegt hierbei auf den Transfer
Wie kann die Evaluation der Organisationsentwicklung erfolgen ?
Sie kann sowohl qualitativ (z.B. in Form von Interviews o. Offene Fragen) o. quantitativ (z.B. in Form von Ratings o. Unternehmenskennzahlen erfolgen)
Welche Aspekte muss man berücksichtigen um den Erfolg von Maßnahmen der Organisationsentwicklung zu messen ?
Im Vorfeld müssen Indikatoren für den Maßnahmenerfolg festgelegt werden (z.B. Umsatz, Aktienkurs, Fluktuation, Unfälle, Fehlerquoten, Zufriedenheit, etc.)
Was sind mögliche Fehlerquellen die auftreten können ?
Quellen mangelnder Konstruktvalidität
1. Operationalisierung
Bezieht sich ein untersuchtes Konzept auf ein Merkmal einer Organisation, die Wahrnehmung dieses Merkmals o. Die Einstellung zu diesem Merkmal ? (z.B. „Organisationsklima“)
- Treatmentintensität
Sind die eingesetzten Datenerhebungsmethoden auf die zu erwartende Wirkung „abgestimmt“? (z.B. Übungsgelegenheiten) - Methodenquellen
Hat die Art der Datenerhebung einen Einfluss? (z.B. Selbst-versus Fremdwahrnehmung) - Versuchsleitereffekte
Könnten unbeabsichtigte Beeinflussungen durch die Versuchsleitenden vorliegen? (z.B. suggestive fragen) - Reaktivität
Bloße Tatsache einer Intervention hat einen Effekt (z.B. Hawthorne Studien)
Wie lauten die Evaluationskriterien nach Kirkpatrick ?
- Reaktionen
Wie erleben die Teilnehmer die Maßnahme, war sie angenehm, glauben sie etwas Wichtiges gelernt zu haben? - Lernen
Haben die Teilnehmer tatsächlich was gelernt, neues Wissen erowrben o. Neue Verhaltensweisen erlernt?
-> diese Kriterien beziehen sich hauptsächlich auf das Training, also die Intervention an sich
- Verhalten
Nutzen die Teilnehmer die Lerninhalte am AB-platz, wenden sie das neue Wissen an & zeigen die neu erlernte Verhaltensweisen ? - Resultate
Lassen sich die wirtschaftliche Kons. Belegen, sind die Kunden zufriedener, steigt die Produktivität?
-> Bezieht sich mehr auf das Anwednungsfeld, also bzgl des AB-alltag
Anspruch Steigt (Reaktionen = Gering / Resultate = Hoch)
Was sind Qurschnitt-, Längsschnittstudie & (Quasi-) Experimente ?
Qurschnittstudien
Beschreibungen -> Merkmale einer Population, zsmhänge zw. Variablen
Eine SP, ein Messzeitpunkt
Bsp. Survey, deskriptive/Korrelations-/Feldstudien
Längsschnittstudie
Veränderungen, Entw. -> wie entw./verändert sich y übder die Zeit, was beeinflusst/stärkt die Veränderung?
Eine SP, mehrere Messzeitpunkte, dieselben Variablen
Bsp. Panel, längstschnittliche Korrelationsstudien
(Quasi-) Experiment
Kuasale Effekte -> verursacht x -> y, ist Intervention x wirksamer als y?
(Randomisierte) Gruppen, unterschiedliches Treatment
Was ist ein Transfer ?
Transfer
Kenntnisse & Fertigkeiten die in einer best. Lernumgebung (Lernfeld) erworben wurden sind & auf andere Anwendungskontexte (Funktionsfelder übertragen werden können, deren Merkmal sich von denen der Lernumgebung mehr o. Weniger stark unterscheiden
Erläutere die 3 Transferbegriffe
- Positiver vs. Negativer Transfer
Positiver Transfer = Gelerntes Verhalten/Wissen wird erfolgreich angewendet & führt zu einer Verbesserung
Negativer Transfer = Die Anwendung des Gelernten führt zu unerwünschten Ergebnissen - Vertikaler vs. Horizontaler Transfer
Horizontaler Transfer = Man lernt etwas & es wird übertragen auf dem AB-Feld & wird nicht vergessen
Vertikaler Transfer = Man Lernt etwas in einem Kontext & es lässt sich in anderen Kontexten anwenden bzw. Übertragen - Proximaler vs. Distaler Transfer
Proximaler Transfer = Das Gelernte wird in einem ähnlichen Kontext angewendet
Distaler Transfer = Das Gelernte wird in einem andren o. Weiteren entfernten Kontext angewendet
Beschreibe das Transfer Modell der Trainingsmaßnahmen nach Baldwin & Ford
Pages: Seite 1 Abb. 1
= Transfermodell -> Schaffe ich es, das Gelernte zu generalisieren & Aufrechtzuerhalten?
Trainingsinput -> Faktoren/Bedingungen wobei ds Training bzw. die Intervention ihre Wirkung entfaltet
Welche Faktoren der Arbeitsumgebung sind für den Lerntransfer besonders wichtig ?
Transferklima -> Aspekte des AB-Umfeld bsp. Anregungen das Gelernte umzusetzen
(Höchste Wirksamkeit)
Unterstützung der Vorgesetzten
Unterstützung der Kollegen
Was sind Trainingsmerkmale ?
Sie beziehen sich darauf, wie Maßnahmen der personalentw. Didaktisch-methodisch gestaltet sind
Die Lernumgebung sollte möglichst ähnlich zur praktischen Anwendungssit. Gestaltet sein
Somit wird die Transfer-Wahrscheinlichkeit erhöht
