Avaliação do programa Flashcards
Em que consiste a avaliação do programa?
Recolha sistemática de informação acerca das atividades, características e resultados, através de monitorização continua e estudos pontuais
Para que serve a avaliação do programa?
Objetivo final: prestar um serviço de qualidade a quem tem essa necessidade
1. julgar o programa (resultados)
2. melhorar o programa
3. aumentar a eficiência
4. tomadr decisões acerca do futuro
5. ajudar a desenvolver programas
6. fornecer feedback que guia as politicas de intervenção social
Quais as etapas-chave antes da avaliaçaõ?
- envolver decisores politicos, responsáveis e equipa
- clarificar os objetivos do programa entre promotores e parceiros e a relação entre os diversos componentes (por documentação e entrevistas, produzindo o modelo lógico e lista de indicadores de realização)
- observar a realidade do programa vs. pretendido
- acordar sobre as mudanças no programa
- explorar alternativas de desenhos de avaliação (dados, analises, custos, calendarização, uilização da informação)
- acordar sobre as prioridades da avaliação e utilidade da informação obtida
Quais os tipos de avaliação que se podem realizar?
- formativa/de processo/de implementação
- sumativa
- descritiva
- monitorização da realização
- análise da implementação
- resultados e impacto
- custo-eficácia
Em que consiste a avaliação formativa/de processo/da implementação?
Monitorização e melhormaneto dos programas e intensificar a implementação destes.
Como se faz a avaliação formativa?
Qual o modelo cronológico e métodos práticos para avaliar cada parte?
- avaliação das necessidades e exequibilidade (revisão de literatura e entrevistas a experts)
- planeamento e desenho do programa (modelo lógico, resumo do programa e hierarquia dos resultadso da teoria) clarificando a relação entre teoria e prática.
- Implementação do programa (análise da cobertura, de componentes, registos e estudo de caso)
- melhorar o programa (modelo de serviço criado e feedback do cliente)
Quais as características da avaliação da implementação do programa segundo Durlack (2008)?
- fidelidade/integridade
- dosagem
- qualidade dos componentes
- adesão dos clientes
- resposta aos interesses e atenção dos clientes
- diferenciação do programa
- monitorização do grupo de controlo/comparação
- rácio da participação
- adaptação e mudanças realizadas ao plano original
Quais as medidas de realização utilizadas?
- recursos
- outputs
- produtividade
- eficiência (output/euros)
- qualidade do serviço
- resultados
- custo-eficácia
- satisfação do cliente
Em que consiste a avaliação sumativa?
Demonstração e prova da mais-valia do programa, avaliando os resultados e descrição do seu impacto através da definição de critérios e standards, mas também avalia se o programa foi implementado como foi desenhado, comparando o que contece depois da intervenção com o que aconteceria se esta não fosse implementadas.
Como se faz a avaliação sumativa?
Através de desenhos de estudo:
* Quasi-experimental:
1. pré-pós-teste: diferença de médias
2. séries temporais interrumpidas: avaliações múltiplas
3. comparação de grupos não equivalentes: diferença de médias entre grupos pós-teste
* Experimental: estabelece relação de causalidade
1. definição de comparações pretendidas
2. estabelecer unidades para aleatorização
3. seleção da amostra
4. lidar com a não participação e desistencia
Quais os métodos de recolha de dados?
- qualitativos: observação, entrevistas e grupos focais
- quantitativas: questionários e registos
Quais os critérios de seleção de medidas de recolha de dados?
- mais do que uma medida
- não usar medidas que induzam uma repsosta especifica
- medidas válidas e fiáveis
- medidas que permitam detetar mudança em tempo útil
- medidas de custo-eficácia
- mediar variáveis relevantes
Quais as fontes de informação a que se pode aceder?
- beneficiários do programa (participantes e membros da comunidade)
- recursos do programa (staff e registos e documentação)
- observadores (experts, observadores treinados, pessoas importantes para os participantes e membros da equipa da avaliação)