Os números nos permitem acompanhar a evolução, comparar resultados e gerenciar um projeto. Os depoimentos, por sua vez, dão sentido aos dados e esclarecem os mecanismos de mudança. Na medição de impacto social, o desafio não é, portanto, escolher entre abordagens qualitativas e quantitativas, mas saber quando usar cada método e como combiná-los de forma eficaz.
Qual é a diferença entre dados qualitativos e quantitativos?
Antes de escolher os seus indicadores ou o seu método de coleta de dados, é essencial distinguir os dois principais tipos de dados usados na medição de impacto. O método quantitativo se baseia em perguntas fechadas. Apresentadas na forma de números-chave, as respostas servem para medir uma atividade ou um efeito. Elas são mais fáceis de analisar do que os dados qualitativos.
O método qualitativo, por sua vez, se baseia em perguntas abertas que ajudam a descrever uma situação, uma necessidade ou um problema enfrentado pelos seus beneficiários. As respostas assumem, então, a forma de textos ou de observações.
Os indicadores de impacto objetivos e subjetivos refletem dados quantitativos.
- Os indicadores objetivos assumem a forma de dados numéricos, valores ou percentuais e medem um efeito.
- Os indicadores subjetivos medem a percepção de uma parte interessada sobre uma situação e se baseiam em observações ou declarações. Para isso, usam-se indicadores com escala linear, perguntas de escolha única e de múltipla escolha etc.
Depois de identificar os dados a coletar, o próximo passo é escolher o método mais adequado ao seu público-alvo e aos seus recursos.
Quais métodos podem ser usados para coletar dados de impacto?
Nem todos os métodos de coleta de dados têm o mesmo custo nem o mesmo nível de precisão. A escolha depende principalmente do seu público e da relação que você tem com ele.
- Dados já disponíveis: baratos e rápidos de analisar, mas fornecem sobretudo informações factuais (perfil, participação). Eles não permitem avaliar a percepção das pessoas nem as mudanças que elas viveram.
- Pesquisa on-line: eficaz quando você tem os contatos e os beneficiários estão à vontade com as ferramentas digitais. Permite coletar dados quantitativos de muitas pessoas, mas a precisão qualitativa continua limitada.
- Entrevistas a distância (telefone/videochamada): mais envolventes do que um questionário on-line. Permitem respostas mais matizadas, mas exigem mais tempo e organização.
- Entrevistas presenciais: o método mais rico para compreender as mudanças vividas, mas também o que mais consome tempo. Muito útil quando a interação humana é essencial ou se as pessoas têm dificuldade com as ferramentas digitais.
- Grupo focal: um método qualitativo coletivo que ajuda a fazer surgir percepções compartilhadas. Exige uma condução experiente e um tempo dedicado.
Não existe um método ‘certo’ em si: deve-se escolher o método que é realista, adequado ao público-alvo e coerente com os recursos disponíveis.
Por que combinar dados qualitativos e quantitativos em uma avaliação de impacto?
Os dados qualitativos podem ser usados em várias etapas da avaliação de impacto ou do ciclo de vida do projeto. Primeiro, na definição da teoria da mudança ou do próprio projeto. Realizar entrevistas qualitativas com as suas partes interessadas – especialmente aquelas para as quais você quer medir os efeitos do projeto – ajuda a identificar melhor os problemas que elas enfrentam, as suas necessidades não atendidas e as suas expectativas em relação ao projeto. É o que fazem os centros comunitários no âmbito do seu ‘diagnóstico do território’, antes de redigir a proposta de projeto social.
⚠️Uma dica: limite o número de entrevistas para não ficar sobrecarregado pelo volume de dados para analisar (cinco entrevistas são suficientes).
No contexto da avaliação de impacto, um estudo qualitativo aprofundado costuma ser combinado com indicadores de impacto. A avaliação de impacto geralmente é um exercício pontual, realizado na maioria das vezes ao final de um programa por um terceiro.
Também é útil incluir perguntas abertas nas suas pesquisas on-line. Isso permite coletar respostas literais e abrir a conversa. Os beneficiários podem, assim, explicar de quais aspectos do projeto mais gostaram e fazer sugestões de melhoria.
⚠️ Um conselho: mais uma vez, reduza ao mínimo as perguntas abertas. Para maximizar as respostas, as pesquisas não devem levar muito tempo para os seus beneficiários preencherem (5 a 8 minutos no máximo). E deixe espaço suficiente para os indicadores de impacto.
Na gestão do impacto da sua organização, priorize os métodos quantitativos, que permitem acompanhar indicadores ao longo do tempo e monitorar a sua evolução, ajudando você a melhorar e a valorizar as suas atividades. A coleta de comentários literais, por sua vez, fornece depoimentos úteis para a sua comunicação. Combinados aos números, eles permitem contar uma história – a do seu projeto – e humanizar os dados e os percursos dos seus beneficiários.
Conclusão
No fim das contas, a questão não é saber se os dados qualitativos são mais relevantes do que os quantitativos, ou o contrário. Os dois servem a propósitos diferentes e são complementares.
Os dados quantitativos nos permitem medir, comparar e acompanhar a evolução dos resultados ao longo do tempo. Os dados qualitativos nos ajudam a entender por que esses resultados acontecem, a identificar necessidades emergentes e a dar profundidade aos resultados.
Para a maioria das organizações, uma abordagem eficaz de medição de impacto social se baseia em um equilíbrio simples: apoiar-se principalmente em indicadores quantitativos para gerenciar as atividades, incorporando alguma coleta de dados qualitativos nas etapas-chave do projeto. Essa combinação permite melhorar as iniciativas, demonstrar o seu valor e compartilhar resultados mais significativos com parceiros, financiadores e beneficiários.
No fim das contas, o melhor método não é o mais sofisticado, mas aquele que a sua organização será capaz de implementar de forma consistente e duradoura.
Para ir mais longe
👉 Primeiro passo: construa a sua teoria da mudança com o nosso guia ilustrado
👉 Você procura apoio e formação para construir a sua avaliação de impacto? Converse com um especialista da Impact Track!