Comment créer une mesure d'impact social commune et pertinente pour les fondations, les financeurs sociaux et leurs projets
Pourquoi les solutions d’harmonisation sont essentielles pour les fondations aujourd’hui ?
Mettre en place une mesure d’impact social a plusieurs avantages notamment l’amélioration des activités, orienter la prise de décision en fonction des résultats ou encore piloter l’impact d’un portefeuille de projets, … (1)
Cependant, dans le cadre de l’évaluation d’impact social d’un gestionnaire de portefeuille, c’est-à-dire un acteur multi-projets, la mise en place d’une démarche de mesure d’impact n’est pas toujours simple pour 2 principales raisons :
- La mesure de l’impact se fait auprès des bénéficiaires et rares sont les projets soutenus qui ont réalisé une démarche solide étant donné la complexité méthodologique et le coût d’une démarche (source : Panorama de la mesure d’impact en France 2022).
- Quand ils ont un rapport d’impact, il est souvent réalisé de façon isolée et non harmonisée avec d’autres projets soutenus, ce quiempêche d’avoir une vision globale de l’impact de l’ensemble des projets
Un gestionnaire de portefeuille peut désigner une fondation, un fonds de dotation, une collectivité, une tête de réseau de l’ESS (économie sociale et solidaire), une ONG, etc qui finance et/ou opère des projets autour d’une thématique sociale ou environnementale commune.
Prenons un exemple. La Fondation Sociale, est une fondation d’utilité publique qui est active dans plusieurs domaines comme l’emploi, la lutte contre la pauvreté et l’éducation. Elle a notamment un programme dédié à la réinsertion ou l’insertion dans le milieu professionnel de personnes éloignées de l’emploi. Pour cela elle finance sur tout le territoire français des structures associatives qui agissent sur le terrain. Mais les moyens d’action (formations, coaching, contrat de réinsertion professionnelle) et les publics cibles (jeunes décrocheurs, reconversion professionnelle, jeune seniors) sont très divers.
Mesurer l’impact d’un programme multi-projets suppose donc de trouver un équilibre entre l’harmonisation des indicateurs pour agréger des données parmi les projets financés et la personnalisation des indicateurs pour permettre un pilotage efficace aux porteurs de projets sur le terrain.
Depuis sa création en 2019, Impact Track s’évertue à développer une solution qui permette de répondre à cet enjeu. Quelles solutions pour cet enjeu ? Nous allons les détailler dans cet article à travers l’exemple fictif mais concret de la Fondation Sociale, décrite précédemment.
Retrouvez également notre cas d’étude sur la Fondation Entreprendre.
Comment définir un référentiel d’évaluation d’impact social commun entre le programme d’une fondation et ses projets ?
En effet, si nous reprenons l’exemple de la Fondation Sociale, celle-ci souhaite mesurer l’impact global de son programme lié à l’emploi. Elle finance et accompagne pour ce programme 10 projets menés par des associations partenaires sur l’ensemble du territoire français.
Elle est cependant face à plusieurs enjeux :
- Faire monter en compétences les porteurs de projets sur la mesure d'impact social
- Mesurer l'impact des projets soutenus sur les bénéficiaires
- Agréger les résultats des projets soutenus afin d’obtenir une vue d’ensemble de l’impact du portefeuille .
- Mesurer l’impact direct de son accompagnement sur les projets de terrain.
La construction d’un référentiel commun ou "macro" implique d’avoir une typologie d’indicateurs qui permette d’agréger les données communes tout en permettant un suivi spécifique à chaque projet. Impact Track propose 3 niveaux d’indicateurs :
Cette fonctionnalité est aujourd’hui utilisée et validée méthodologiquement par 15 financeurs sociaux et plus de 100 projets utilisateurs d’Impact Track.
Cependant, nous voyons que pour les indicateurs non-modifiables et communs à plusieurs projets, la nécessité d’agrégation oblige parfois à utiliser des termes génériques comme « le dispositif », « formation » ou « bénéficiaires ».
Il est alors parfois utile et nécessaire de personnaliser ces termes pour que l’indicateur soit le plus clair possible à la fois pour le porteur de projet et pour les bénéficiaires qui répondront aux enquêtes.
Personnaliser des indicateurs communs tout en permettant d’agréger les données.
C’est donc encore une fois pour répondre au mieux aux besoins du terrain qu’Impact Track a développé des « jetons », c’est-à-dire des parties personnalisables pour les indicateurs d’un référentiel partagé.
Les jetons permettent d’/de :
- Adapter les énoncés et les questions des indicateurs pour chaque projet tout en garantissant la pertinence de l’harmonisation entre les projets du programme.
- Garantir un référentiel d’évaluation homogène et pertinent (sans perdre de temps à retraiter et consolider des fichiers Excel).
Dans le cas de notre exemple de la Fondation Sociale l’indicateur « Perception par les [bénéficiaires] de leur acquisition de compétences (savoir-faire, savoir-être) utiles pour [domaine] » est utilisé par l’ensemble des projets du programme Emploi et les bénéficiaires de chaque projet seront donc interrogés lors de collectes de données distinctes.
Le projet « Jeunes Décrocheurs » soutenu par la Fondation Sociale doit donc inclure cet indicateur dans son référentiel. Il aura la possibilité de modifier le nom de l’indicateur par « Perception par les jeunes décrocheurs de leur acquisition de compétences (savoir-faire, savoir-être) utiles pour réussir un entretien d’embauche »
De même ici la question pourrait devenir. “Dans quelle mesure êtes-vous d’accord ou non avec l’affirmation suivante : “Suite à l’atelier de coaching, j’ai développé des compétences utiles pour créer un CV et une lettre de motivation” ?
Ainsi, les bénéficiaires de ce projet comprennent aisément la question et peuvent y répondre précisément. Pouvoir personnaliser les indicateurs est donc essentiel pour la cohérence et la qualité des données collectées auprès des bénéficiaires.
Grâce aux fonctionnalités d’Impact Track il est donc possible pour les porteurs de projet d’avoir des questions adaptées sans pour autant devoir recréer un indicateur.
Ce qu’il faut retenir
Une évaluation d’impact au niveau d’un programme ou d’un financeur doit être suffisamment homogène pour être agrégée, mais aussi spécifique et pertinente pour être utile à chaque projet accompagné.
De cette façon, il est possible à la fois de favoriser l’impact collectif (2) mais aussi permettre un pilotage au plus près des réalités du terrain.
C’est pour répondre à cet enjeu qu’Impact Track a développé tout d’abord une typologie d’indicateurs et tout récemment des « jetons » pour permettre de rendre la collecte de données du référentiel commun la plus utile et compréhensible possible.
Partager un référentiel entre projets devient donc possible sans faire de concession ni sur la pertinence de chaque indicateur, ni sur l’agrégation des données.
Depuis 2019, Impact Track a outillé plus de 280 projets et accompagné 16 gestionnaires de portefeuille.
Vous souhaitez en apprendre plus sur notre méthodologie et la façon dont nous aidons les acteurs multi-projets à mesurer leur impact ? N’hésitez pas à demander à prendre RDV avec un de nos experts.
Sources :
- Panorama de la mesure d’impact 2022 (Impact Tank et ESSEC)
- L'approche de l'impact collectif - Territoires impact collectif
Credit photo : Jeremy Thomas