Metodologia

Na Impact Track, acreditamos que a medição de impacto social deve ser, ao mesmo tempo, robusta e útil para a ação. Uma metodologia complexa demais muitas vezes permanece teórica. Por outro lado, uma abordagem simplificada demais fragiliza a credibilidade dos resultados. Por isso, desenvolvemos uma metodologia que combina rigor científico e aplicabilidade operacional. Desde 2019, essa abordagem foi implementada em: • mais de 700 projetos, • mais de 40 portfólios de financiadores, • 15 áreas de atuação. Nossa metodologia evolui continuamente graças: • aos retornos de campo, • aos avanços da pesquisa, • às trocas com financiadores e gestores públicos. Ela é implementada por meio de uma combinação de: • consultoria metodológica, • formação-ação, • plataforma SaaS de gestão de impacto. Nosso objetivo é ajudar as organizações a gerenciar o seu impacto ao longo do tempo e a transformar a medição de impacto em uma ferramenta de aprendizado, de decisão e de transformação social.

Não existe um método único de medição de impacto social. A pertinência de uma abordagem depende sempre de vários fatores: • os objetivos da abordagem (gestão interna, prestação de contas, advocacy, apoio à decisão), • as capacidades da organização (tempo, competências, orçamento), • o nível de análise (projeto, organização, portfólio ou política pública). As necessidades também variam conforme o tipo de organização: • Uma organização que atua diretamente com beneficiários buscará, antes de tudo, compreender as mudanças vividas pelas pessoas atendidas. • Um financiador desejará comparar os projetos apoiados e orientar os seus financiamentos. • Um ator público buscará analisar efeitos globais para embasar as políticas públicas. Nosso papel consiste, portanto, em encontrar o nível certo de rigor e de viabilidade, para que a medição de impacto se torne uma ferramenta realmente utilizada para orientar a ação.

Na França, o impacto social foi definido em 2011 pelo Conselho Superior da Economia Social e Solidária (CSESS) como "o conjunto das consequências […] das atividades de uma organização tanto sobre as suas partes interessadas […] quanto sobre a sociedade em geral." Para a Impact Track, assim como para o CSESS, o impacto social das atividades da economia social e solidária (ESS) designa uma resposta a necessidades sociais e é, portanto, intencional, diferentemente da definição da OCDE, que descreve o impacto como « esperado ou inesperado »

O escopo da avaliação determina os limites da análise: • quais atividades são estudadas, • quais partes interessadas são consideradas, • em qual período ou território as mudanças são observadas. Essa etapa é essencial para garantir a pertinência da abordagem. De acordo com os princípios do SROI (Social Return on Investment), não se trata de ser exaustivo, mas de se concentrar nos efeitos realmente significativos para as partes interessadas. Um escopo de avaliação pertinente também deve ser: • coerente com os objetivos da abordagem, • proporcional aos recursos disponíveis, • realista para as equipes. Um escopo claro é a condição para produzir uma medição de impacto útil, confiável e duradoura.

Após analisar os principais guias internacionais de medição de impacto (EVPA, Impact Management Project, SROI, Harvard etc.), a Impact Track estruturou uma abordagem de avaliação em cinco grandes etapas. A isso, acrescentamos uma fase prévia de enquadramento, que permite definir o escopo da avaliação mencionado anteriormente. 1. Identificar as partes interessadas, os atores envolvidos na ação (beneficiários, parceiros, territórios…): diferentes ferramentas podem ser mobilizadas (mapeamento das partes interessadas, análise de necessidades ou entrevistas exploratórias). 2. Descrever as mudanças esperadas: essa etapa consiste em formalizar a teoria da mudança, que explicita como as atividades contribuem para produzir mudanças sociais. 3. Definir e quantificar o impacto: em seguida, trata-se de definir os indicadores de impacto e os métodos de avaliação adequados (indicadores setoriais, pesquisas pré/pós, métodos comparativos ou quase experimentais) 4. Coletar os dados: os dados podem vir de diferentes fontes (pesquisas com beneficiários, entrevistas qualitativas, dados administrativos, grupos focais). 5. Analisar e gerenciar o impacto para produzir: painéis de gestão, análises de impacto (custos evitados, SROI, avaliações multicritério), relatórios para financiadores e tomadores de decisão.

A matriz de avaliação é o coração de toda abordagem de medição de impacto e inclui: • a teoria da mudança, • os indicadores associados, • as modalidades de coleta de dados. Uma boa matriz deve respeitar três princípios-chave: • Utilidade: ela deve gerar aprendizados concretos para melhorar a ação e embasar as decisões. • Representatividade: ela deve refletir a realidade dos efeitos em campo, mantendo-se alinhada aos objetivos da abordagem. • Praticidade: ela deve ser aplicável pelas equipes, garantindo a qualidade dos dados. Na Impact Track, construímos matrizes setoriais de forma coletiva, junto com os atores do setor.

A teoria da mudança formaliza a maneira como uma organização acredita contribuir para a mudança social. Ela explicita as relações de causalidade entre: • as atividades (o que é feito), • os resultados (mudanças de curto prazo), • os impactos (mudanças duradouras e significativas). Na Impact Track, a teoria da mudança é utilizada como: • uma ferramenta de esclarecimento estratégico, • um suporte para o diálogo entre as partes interessadas, • uma base metodológica para definir o escopo da abordagem de medição de impacto e para a interpretação dos resultados.

A medição de impacto se baseia em diferentes tipos de indicadores, que é essencial distinguir. • Indicadores de realização: o que é produzido diretamente pela ação (ex.: número de pessoas atendidas, número de oficinas realizadas). • Indicadores de resultado: as mudanças observadas no curto ou médio prazo (ex.: proporção de beneficiários que conseguiram um emprego, melhoria das competências digitais). • Indicadores de impacto: a parte da mudança realmente atribuível à intervenção, mantidas as demais condições constantes (ex.: redução do não acesso a direitos atribuível ao acompanhamento oferecido). Nossa abordagem consiste em combinar indicadores objetivos e subjetivos, limitando o seu número para privilegiar medidas realmente úteis à gestão e à tomada de decisão.

Alguns desafios sociais não podem ser resolvidos por um ator isolado. Eles exigem transformações sistêmicas: evolução das práticas, das normas e das políticas públicas. Medir o impacto sistêmico implica: • ir além da lógica de projeto, • analisar as interações entre os atores, • documentar os efeitos de longo prazo sobre os ecossistemas. Quando necessário, nossos trabalhos se apoiam nas abordagens de mudança sistêmica, de impacto coletivo (collective impact) e de aprendizagem coletiva.

A medição de impacto setorial busca analisar a contribuição coletiva de um conjunto de atores para um mesmo desafio social (ex.: inclusão digital, envelhecimento ativo, proteção da infância). Ela permite: • reduzir os custos da medição de impacto para as organizações, • melhorar a robustez metodológica, • produzir dados úteis para a gestão das políticas públicas, • objetivar o valor social de um setor. A Impact Track apoia: • a construção coletiva das matrizes setoriais, • a implementação junto aos atores, • a análise dos dados agregados, • a animação de uma dinâmica de aprendizagem coletiva. Essa abordagem é utilizada hoje por fundações, redes, governos locais e administrações públicas.