A avaliação ex post de políticas públicas é a que acontece durante ou depois da execução, com a pergunta que importa ao gestor: esta política funcionou e deve continuar, mudar ou acabar? Em 2018, a Casa Civil, em parceria com o Ipea, publicou o volume 2 do guia sobre o assunto. O material foi pensado para o governo federal, mas o roteiro é útil para qualquer prefeitura que queira avaliar seus programas sem depender de grandes estudos.
O que é e de onde vem
"Ex post" quer dizer "depois do fato". Enquanto a análise ex ante testa o desenho antes de começar, a avaliação ex post verifica o que aconteceu. O Guia prático de análise ex post parte da ideia de que verificar a efetividade de uma política exige monitoramento e avaliação, e de que avaliações bem feitas permitem aprimorar políticas e justificar tanto investimentos quanto economias de recursos.
Pelos materiais que apresentam o guia, há uma avaliação "executiva", ampla e de caráter gerencial, que serve de porta de entrada: ela indica se vale a pena um estudo mais aprofundado e com qual foco. As avaliações aprofundadas examinam dimensões como diagnóstico do problema, desenho, implementação, governança, resultados, impacto, retorno econômico e social e eficiência.
Uma apresentação de curso baseada no guia organiza o relatório em dez passos, que vão da descrição geral da política às recomendações, passando por diagnóstico, desenho, implementação, governança, resultados, impactos, execução orçamentária e eficiência do gasto. A lógica pode ser reduzida para o uso municipal em versão enxuta.
Por que funciona no setor público
Boa parte dos programas municipais, uma vez criados, passam a existir por inércia. Ninguém pergunta se ainda fazem sentido, porque há equipe, dotação e beneficiários. A avaliação ex post oferece um critério para decidir: manter, corrigir ou encerrar. Isso libera recursos para o que funciona e dá base para explicar decisões difíceis.
Também fortalece a prestação de contas. Ao mostrar o que foi feito, com que custo e que mudança trouxe, a prefeitura responde com dados às perguntas de vereadores, conselhos e tribunais de contas, e acumula conhecimento sobre o que dá certo no território.
Como aplicar na prefeitura, passo a passo
- Escolha a política a avaliar. Priorize programas com gasto relevante, muita demanda ou suspeita de baixo resultado.
- Descreva a política. Problema, objetivos, público, instrumentos, prazo e orçamento. Reúna a legislação, os documentos do programa e avaliações anteriores.
- Defina as perguntas de avaliação. Por exemplo: o público certo foi atendido? A entrega ocorreu como planejado? O problema diminuiu?
- Levante os dados. Use registros administrativos, bases existentes e entrevistas com quem executa e com quem recebe o serviço.
- Compare com a meta e com a situação inicial. Aponte o que mudou em relação à linha de base e o que não pode ser atribuído ao programa.
- Analise custo e eficiência. Verifique o gasto por resultado e se houve desperdício ou duplicidade com outras ações.
- Recomende e acompanhe. Escreva recomendações com responsável e prazo, apresente aos decisores e volte a conferir se foram adotadas.
Modelo para preencher
Use a ficha abaixo como ponto de partida. Adapte à legislação e à realidade do seu órgão.
| Pergunta de avaliação | Dado ou método | Achado | Recomendação | Responsável |
|---|---|---|---|---|
| O público certo foi atendido? | Cadastro de beneficiários versus perfil definido | |||
| A entrega ocorreu como planejado? | Relatórios, visitas, entrevistas | |||
| O problema diminuiu? | Indicadores de resultado versus linha de base | |||
| O custo é compatível com o resultado? | Gasto executado por beneficiário ou entrega | |||
| Continuar, mudar ou encerrar? | Síntese dos achados |
Exemplo prático
Exemplo hipotético. Uma prefeitura mantém há anos um programa de distribuição de kits escolares. Na avaliação executiva, a equipe descobre que os kits chegam atrasados na maior parte das escolas e que parte dos itens é duplicada com material entregue pelo governo estadual. Os dados de frequência não mostram diferença entre alunos que receberam e não receberam o kit a tempo.
A recomendação é manter o programa, mas mudar a forma de compra: calendário de entrega antes do início das aulas e coordenação com a rede estadual para evitar duplicidade. A prefeitura anuncia o ajuste e passa a acompanhar o prazo de entrega por escola. Sem a avaliação, o programa continuaria igual por mais anos.
Erros comuns
- Avaliar para punir. Se a equipe teme a avaliação, esconde problemas. Deixe claro que o objetivo é aprender e melhorar.
- Medir só entregas. Contar kits distribuídos não diz se o aluno aprendeu mais.
- Atribuir resultado ao programa sem comparação. Mudanças podem ter outras causas. Compare com a situação anterior e, se possível, com grupos semelhantes.
- Fazer relatório sem recomendação. Avaliação que não indica o que fazer não ajuda a decidir.
- Não acompanhar as recomendações. Sem responsável e prazo, o relatório vai para a gaveta.
Perguntas frequentes
Qual a diferença entre monitoramento e avaliação?
Monitoramento acompanha a execução de forma contínua. Avaliação julga, em momentos específicos, se a política alcança seus objetivos.
Toda avaliação precisa de estudo de impacto?
Não. A avaliação executiva e a de resultados já respondem a muitas perguntas. Estudos de impacto são mais caros e complexos e valem para casos específicos.
Quem deve avaliar?
Idealmente alguém que não execute a política, como o planejamento, o controle interno ou uma instituição externa, com participação da área gestora.
Com que frequência avaliar?
Programas grandes, ao menos a cada ciclo do plano plurianual. Programas menores, a cada um ou dois anos.
