Examen 2 Flashcards
¿Qué aspectos se deben considerar al seleccionar un modelo de evaluación?
- Propósito
- En qué área se concentrará la Evaluación (me enfocó en los resultados, etc.)
- El tiempo que tenemos disponibles (propuestas de fondos federales ya hay un tiempo determinado para la fase de evaluación).
- Los recursos que se requieren
- A quién va dirigidos los resultados de la Evaluación (¿Quién la esta pidiendo? ¿es para determinar di me van a asignar mas dinero para el programa?).
- El uso que le vamos a dar a los resultados. (Si el programa esta saliendo mu caro o no para los beneficios que se obtienen, si el programa debe seguir o no.
¿Cómo se clasifican los modelos de evaluación?
Clasificación de los modelos de evaluación. Categorías en donde quiero incluir modelos.
- Los que se fijan en el alcance de las metas que un programa se trazó (Goal oriented)
- Generalmente buscan procesos (que fue todo aquello que utilice para llegar a la meta). Identificar si el programa alcanzó las metas que se había propuesto.
- Los que basan sus juicios en criterios que son inherentes o intrínsecos al programa
- La Evaluación que hace la MSA de una Universidad.
- La Evaluación que hace APA para la Acreditación.
- Las áreas a evaluar son aquellas que el mismo programa ha
establecido como criterios.
- Aquéllos que tienen la finalidad de ayudar en la toma de decisiones
con relación al programa que se está evaluando.- Dos modelos fundamentalmente se orientan hacia ese fin: CIPP** (Contexto, Insumo, Producto y Proceso) y el de **Discrepancia.
Si me quiero basar en juicios el modelo pudiera ser el de diseño de discrepancia.
El Modelo de Discrepancia
- Se usa para acercarme a los estándares ya establecidos (escuchar 6:41).
- Se usa más en escenarios académicos.
- Busca recoger información para satisfacer dos propósitos : el
mejoramiento del programa** y **el avalúo del programa. - Pretende mirar el programa de una manera global o sistémica. La mirada que da el evaluador es global y sistémica.
- Mira la Evaluación desde una perspectiva constructivista. El proceso se va construyendo y la evaluación me va dando información para la toma de decisión dinámica de mejoramiento del programa y para calibrar el avaluó que yo espero del programa.
- Promueve la participación activa del personal en todas las
actividades del programa. - La lógica fundamental consiste en hacer una comparación entre la
ejecución del programa contra algún estándar de ejecución
previamente establecido (Ver el artículo Discrepancy Evaluation Model
for Human Resources Health Placement Evaluation at the Puskemas 2019)
enviado el 25 de enero de 2022). - Se observa la discrepancia cuando puedes identificar el nivel en que
está el programa y donde debería estar.
El Modelo de Discrepancia: Conceptos del Modelo
- EL estándar: una descripción o representación de las características que debe poseer el programa. Podría ser el estándar de recuperación, de revisión, de finalización del programa, las competencia x, y que se tengan en los niveles z y k.
- La ejecución: proceso de identificar las características que posee el programa con relacion a los estandares establecidos.
- Discrepancias positivas: exceden el estándar
- Discrepancias Negativas: cuando la ejecución es menor al estándar
- Discrepancias Neutrales: cuando se alcanza el mínimo establecido
Ejemplos: Competencia z en un 70% a la 5ta sesión.
Sirve para ver si en aquellas áreas que el programa espera tantos resultados, evaluar si la discrepancia esta por debajo o por encima de lo esperado. (6:43).
El Modelo de Discrepancia
- El modelo nos provee información para poder trabajar con las
discrepancias negativas. Permite que nos hagamos preguntas con
relación a la formulación misma del programa, los procesos para
ejecutarlo y la pertinencia del programa.- Hay estándares que no son realistas: Reformularse. Replantearse lo que se hizo desde el principio.
- No hay un proceso de supervisión sistemático sobre la ejecución.
- Discrepancias con las que no se pueden trabajar es mejor dar por
terminado el programa.
Etapas de la evaluación: Modelo de Discrepancia
- Diseño- Revisar la relación de la teoría con las metas y objetivos. Documentar la naturaleza del programa.
- Insumo: Mirar si el programa se instaló según fue planificado (adiestramiento, las facilidades, asuntos presupuestarios y fiscales.
- Procesos: Se han logrado los objetivos específicos que permitan lograr las metas. Aquí debemos hacer ajustes (se comparan con los objetivos que se establecieron, se logran o no). Se pueden tener objetivos específicos. Actividades especificas que me permiten lograr el objetivo final.
- Producto: En qué grado los objetivos se lograron. (Hay productos que son de procesos, estos te van diciendo si voy por buen camino. Ej. 52 sesiones de terapia pero se dieron 51, eso es bueno. Habían 12 sesiones grupales, y el 90% participaron de las sesiones, eso también es bueno. ¿Cuáles son mis objetivos finales del programa? Para lograr 80% de tal cosas, cuántas cosas tuve que hacer (Procesos). Que el 80% de los egresados salgan con la competencia de realizar una conceptuación clínica.
- Análisis C/B: Comparar con otros programas similares si vale la pena el costo.
- EVALUACIÓN FORMATIVA va dirigida al MEJORAMIENTO DEL PROGRAMA: DISEÑO, INSUMO, PROCESO. Se utiliza para identificar áreas de necesidad se puedan mejorar.
- EVALUACIÓN SUMATIVA o de AVALÚO- PRODUCTO, ANÁLISIS COSTO/BENEFICIO. Se hace cada x o y años. Estas se usan para generar un cambio, y ese cambio tiene que evidenciarse por un producto. (Ej. Un catedrático que quiera subir de profesión se realiza un avaluó para ver si merece o no el puesto).
Modelo Contexto , Insumo , Proceso y Producto (CIPP)
- La información que provee se utiliza para la toma de decisiones.
- Énfasis: Producir informes de Evaluación de los diferentes elementos que componente un programa.
- EN EL CONTEXTO:
- Determinación de metas y objetivos Prioridades.
- Relación entre las metas y objetivos vs. los problemas identificados.
- Ej. Si por ejemplo, la literatura me dice que la autoestima no es un factor importante para los jóvenes que se intenta suicidar y yo hago como meta que voya trabajar la autoestima , eso no tiene relevancia.
- Población objeto de estudio
- Valorar sus necesidades
- Cómo se van a satisfacer sus necesidades (entrevistas, Censos, análisis estadísticos, etc.)
- Objetivos necesidades valoradas.
- Ej. Si por ejemplo, la literatura me dice que la autoestima no es un factor importante para los jóvenes que se intenta suicidar y yo hago como meta que voya trabajar la autoestima , eso no tiene relevancia.
- Pregunta Importante: Hasta qué punto las metas y objetivos del programan están a tono con las necesidades identificadas.
- EN EL INSUMO:
- Relación entre la estrategia y el diseño de los procedimientos del programa. (recursos humanos, normativa, recursos fiscales, facilidades físicas, el diseño del modelo).
- Inventariar los recursos humanos
- Materiales disponibles
- Presupuesto
- Facilidades
- Pregunta Importante: ¿Son el personal seleccionado, el presupuesto establecido , y otras condiciones materiales pueden satisfacer las necesidades valoradas?
- Relación entre la estrategia y el diseño de los procedimientos del programa. (recursos humanos, normativa, recursos fiscales, facilidades físicas, el diseño del modelo).
- EN EL PROCESO:
- Observaciones del proceso real de como corrió el programa, como entro, como se movió, paso por fases de tratamiento, que instrumentos utilizaron para medir las fases, como se hizo el cierre de caso.
- Juzgar las actividades realizadas
- Procedimientos establecidos para realizar las actividades
- Interacción recursos humanos actividades.
- Pregunta Importante: ¿Hasta qué punto lo planificado se ha realizado?
- Cómo se dieron las actividades y cómo se midieron.
- Observaciones del proceso real de como corrió el programa, como entro, como se movió, paso por fases de tratamiento, que instrumentos utilizaron para medir las fases, como se hizo el cierre de caso.
- EN EL PRODUCTO:
- Relación entre los logros alcanzados y las metas y objetivos.
- Juicios acerca de los resultados. Cómo relaciono los resultados con los objetivos.
- Relacionar los resultados con los objetivos y la información proporcionado
por el contexto.- Juicios de los clientes (Cómo yo correlaciono los juicios de los clientes con los resultados de los objetivos que me trace)
- Análisis cuantitativo y cualitativo
- Pregunta Importante: ¿Qué resultados intencionados se han producido?
- Relación entre los logros alcanzados y las metas y objetivos.
Evaluación Formativa
- Para mejorar
- Pretende tener cierta peridiocidad
- Enfasis en las actividades y los productos y resultados a corto plazo
- Monitoriar el Desarrollo del programa hacer cambios necesarios
Evaluación Sumativa
- Demostrar los resultados
- Resultados intermedios y a largo plazo Impacto
- Juzga los méritos del programa
- Calidad y efectividad