O que é avaliação ex post
Avaliação ex post é a análise feita depois que uma política, programa ou ação já está em funcionamento. *Ex post* significa “depois do fato”. Seu objetivo é entender como a política funciona na prática, se está alcançando seus objetivos, quais efeitos produz (inclusive os não previstos) e o que precisa ser mantido, ajustado, ampliado ou encerrado.
Faz parte da avaliação de políticas públicas, junto com a avaliação ex ante, e dialoga com o monitoramento.
Tipos de avaliação ex post
O guia federal de análise ex post descreve etapas e tipos, como:
- Avaliação executiva: uma análise rápida, que reúne informações disponíveis sobre a política e levanta pontos de atenção.
- Avaliação de desenho: examina se a lógica da política é adequada ao problema.
- Avaliação de implementação: examina se a política está sendo executada como planejado.
- Avaliação de resultados: examina se os objetivos estão sendo alcançados.
- Avaliação de impacto: examina se as mudanças observadas se devem à política, com métodos que comparam grupos.
Os métodos podem ser quantitativos e qualitativos, conforme a pergunta. Os achados alimentam o orçamento e a revisão da política.
Para que serve no município
O município pode começar com avaliações simples de implementação e de resultados. Elas respondem a perguntas práticas: o serviço chega a quem precisa? As metas foram cumpridas? Os usuários estão satisfeitos? Onde estão os gargalos? Com essas respostas, o gestor decide se mantém, ajusta, amplia ou encerra o programa.
Como fazer na prática
- Escolher o programa a avaliar, priorizando os de maior custo, alcance ou polêmica.
- Definir perguntas claras: o que queremos saber?
- Reunir dados: registros administrativos, indicadores, entrevistas, pesquisas, visitas.
- Comparar com a linha de base e com as metas.
- Analisar causas: por que os resultados são esses?
- Elaborar recomendações e plano de ação, com responsáveis e prazos.
- Divulgar e discutir com equipes, conselhos e população.
Planeje a avaliação desde o desenho do programa, registre dados desde o início e reserve recursos, para que seja possível comparar resultados ao final.
Imagine um município com um programa de capacitação profissional. A avaliação ex post mostra que 70% dos inscritos concluem o curso, mas poucos conseguem emprego no setor treinado, porque a oferta de cursos não acompanha a demanda das empresas. A recomendação é revisar os cursos, a partir de conversas com o setor produtivo, e acompanhar a empregabilidade.
Base legal
- Guias federais da Casa Civil, do Ipea e da CGU, de caráter orientador.
- Constituição Federal, que trata do controle interno e da avaliação do cumprimento das metas e dos resultados da gestão.
- Leis setoriais, que podem exigir relatórios e avaliações específicas.
Não há obrigação geral de formato para municípios; os guias servem de referência. Consulte a legislação local e as exigências do tribunal de contas.
Diferença entre avaliação ex post e prestação de contas
A prestação de contas demonstra como os recursos foram usados: o que foi gasto e feito. A avaliação ex post examina que resultados e efeitos o uso desses recursos produziu. Uma política pode ter prestação de contas impecável e resultados fracos, e é isso que a avaliação ajuda a descobrir.
Cuidados de gestão
Registre dados desde o início. Reserve tempo e recursos. Use apoio externo, como universidades, quando necessário. Publique os resultados, inclusive os desfavoráveis, e transforme as recomendações em ações com responsáveis e prazos. Evite avaliações encomendadas só para “comprovar” o sucesso da política: a credibilidade da avaliação depende da independência e do rigor.
Erros comuns
- Avaliar sem linha de base e sem dados de antes.
- Perguntas vagas, que não orientam a coleta.
- Tratar relatório de execução como se fosse avaliação de resultados.
- Não transformar recomendações em plano de ação.
- Esconder resultados desfavoráveis.
- Não usar as conclusões nas decisões de orçamento.
Checklist
- Há perguntas claras e critérios de avaliação?
- Existem dados, linha de base e metas para comparar?
- O tipo de avaliação é adequado à pergunta?
- As recomendações viraram plano de ação?
- Os resultados foram divulgados?
- As conclusões orientam decisões de orçamento e de desenho?
Aprendizado institucional
O maior valor de uma avaliação ex post é o aprendizado que ela gera para a organização. Compartilhar os resultados entre secretarias, discutir lições em reuniões e incorporá-las a manuais, normas e treinamentos faz com que a experiência não se perca nas trocas de equipe. Registrar também o que não funcionou evita que erros sejam repetidos, e ajuda a orientar novas políticas.
Ligação com o ciclo orçamentário
Planeje as avaliações de modo que os resultados cheguem antes da elaboração do PPA, da LDO e da LOA. Assim, as decisões de ampliar, manter ou reduzir programas se baseiam em evidências. Avaliações que chegam depois de aprovado o orçamento só poderão ser usadas no ciclo seguinte, o que reduz seu efeito.
