Sistemas de Monitoramento e Avaliação de Resultados (“SMART”)

Como assegurar que o programa de desenvolvimento social gerido por minha organização produz impactos consistentes ao longo do tempo, e alinhados às expectativas dos financiadores? Como mitigar os riscos da estratégia de investimento social privado que coordeno? Como mostrar para investidores os resultados obtidos pela área de responsabilidade social da empresa?

A resposta para todas essas questões é a mesma: por meio de um bom Sistema de Monitoramento e Avaliação de Resultados, a que adotamos a sigla “SMART”, em alusão aos cinco princípios SMART de gestão de indicadores (conheça os aqui).

Se as atividades de monitoramento e avaliação são fundamentais para planejar e executar ações de modo a atingir os resultados esperados, um sistema de gestão de resultados facilita muito o seguimento de indicadores, atualizações e reportes e comunicação com os diversos públicos.

Entendemos que um bom sistema de avaliação começa com o elemento humano, pela leitura do contexto de atuação e pactuação de objetivos, e então é complementado e otimizado com a tecnologia, que ajuda muito na produção e difusão de conhecimento. A implementação do SMART deve ser precedida por três etapas:  

1. Análise de Contexto de atuação do programa: quais são suas características específicas, riscos e condicionantes de sucesso?
2. Teoria de Mudança ou Marco Lógico, amplamente discutida e validada pelos públicos de interesse
3. Protocolo de dados: quais informações precisam ser coletadas e com qual periodicidade? Quem efetua a coleta e processará os dados? Como a tecnologia pode apoiar? Como ser custo-eficiente?  

A partir destas três etapas – Analise de Contexto, Teoria de Mudança e Protocolo de dados, a tecnologia costuma ajudar significativamente com uma coleta e tratamento eficientes e dinâmicos de dados, provendo informações em tempo relevante para corrigir rumos e orientar os esforços de médio e longo prazo. 

Case de aplicação: Conheça o case de um sistema de gestão simples e eficiente construído em pouco tempo para programa global apoiado pelo DFID, o Departamento para o Desenvolvimento Internacional do Reino Unido, um dos maiores financiadores do desenvolvimento social globalmente.

Neste caso, o sistema de gestão (SMART) foi construído para um programa do DFID voltado a melhoria da saúde pública presente em seis países, implementado em parceria com o governo federal no Brasil. Como as linhas gerais de atuação do programa já haviam sido definidas internacionalmente, foi possível iniciar as atividades pela revisão da Teoria de Mudança para o programa no Brasil.

Foram realizadas oficinas de validação da Teoria de Mudança com a participação dos parceiros do programa, divididos em grupos por eixo temático. Na sequência, foram produzidos indicadores de atividades e produtos, indicadores intermediários, de resultado e de impacto, alinhando o planejamento local do programa à Teoria de Mudança global do projeto.

Por fim, foram pensados na periodicidade e nas fontes mais indicadas de dados para nutrir os indicadores. Desenvolvemos um sistema leve, baseado na arquitetura Microsoft Sharepoint (sistema já usado pelo cliente) com possibilidade de usuários externos que alimentam a base de dados com questionários coletados pelo celular. Desenvolvemos formatos de base de dados e formulários específicos para a atualização de indicadores qualitativos e quantitativos, que evidenciavam as contribuições do programa para melhores políticas públicas na área de saúde. Por fim, todos os resultados foram disponibilizados por meio de um site dinâmico, com atualização automática de indicadores, que foi compartilhado com os financiadores.