Mesurer l’impact social consiste à déterminer les changements produits par une action sur les personnes, les groupes ou les territoires concernés. Il ne s’agit pas seulement de compter le nombre de bénéficiaires ou d’activités réalisées. L’évaluation cherche à savoir ce qui a réellement changé, pour qui, dans quelle mesure et avec quelle contribution du projet.
Cette démarche concerne les projets d’entrepreneuriat social, les activités d’insertion, les services destinés à des publics fragiles, les actions de formation, les projets artisanaux à utilité locale ou encore les initiatives liées à l’accès à l’emploi. Elle peut aussi aider une petite entreprise à vérifier que sa raison d’être se traduit concrètement dans ses pratiques.
L’évaluation répond généralement à quatre questions :
Une mesure sérieuse ne sert pas uniquement à communiquer. Elle permet de repérer les effets inattendus, d’améliorer les actions, de dialoguer avec des financeurs et de décider si un projet doit être poursuivi, ajusté ou réorienté.
La première difficulté vient de la confusion entre plusieurs niveaux de mesure. Un projet mobilise des ressources, réalise des activités, produit des résultats immédiats et peut ensuite entraîner des changements plus durables. Ces niveaux doivent être séparés pour éviter de présenter une activité comme une preuve d’impact.
| Niveau | Question posée | Exemple pour un parcours d’insertion |
|---|---|---|
| Ressources | Quels moyens sont mobilisés ? | Temps des intervenants, budget, locaux et outils. |
| Activités | Qu’est-ce qui est réalisé ? | Ateliers, entretiens individuels et mises en situation. |
| Productions immédiates | Quels résultats directs sont livrés ? | Nombre d’ateliers organisés et taux de présence. |
| Effets | Qu’est-ce qui change chez les participants ? | Progression des compétences ou clarification du projet professionnel. |
| Impact | Quels changements durables et significatifs sont associés au projet ? | Accès plus stable à l’emploi ou amélioration durable de l’autonomie. |
Le nombre de participants est donc un indicateur d’activité ou de portée, mais il ne démontre pas à lui seul une amélioration de la situation. De la même manière, le nombre d’heures de formation renseigne sur les moyens engagés, pas sur les compétences réellement acquises.
La théorie du changement décrit le chemin logique entre une action et les effets attendus. Elle oblige à expliciter les hypothèses du projet. Une formulation simple peut prendre la forme suivante : si une action est menée auprès d’un public défini, alors un changement intermédiaire devrait apparaître, ce qui peut contribuer à un résultat plus durable, à condition que certaines hypothèses soient vérifiées.
Pour la construire, il est utile de suivre cinq étapes :
Cette carte causale aide à sélectionner des indicateurs utiles. Elle évite de retenir des données faciles à collecter mais sans rapport direct avec l’objectif social. Elle permet aussi de rendre visibles les effets qui apparaissent après plusieurs mois, alors que les indicateurs de suivi courant restent souvent centrés sur les activités.
Un indicateur traduit une dimension du projet en information observable. Il peut être quantitatif, qualitatif ou mixte. Un indicateur pertinent doit être relié à un objectif précis, compréhensible par les personnes qui l’utilisent et suffisamment réaliste à collecter.
Pour chaque indicateur, il est recommandé de documenter plusieurs éléments :
Les indicateurs peuvent porter sur plusieurs dimensions :
Il vaut mieux retenir un nombre limité d’indicateurs bien définis qu’un tableau de bord très volumineux, rarement mis à jour et difficile à interpréter. Un indicateur n’est utile que si une décision peut être prise à partir de son évolution.
Les données quantitatives permettent de mesurer une fréquence, une évolution ou un écart. Elles sont utiles pour suivre une tendance et comparer une situation à une période antérieure. Toutefois, elles expliquent rarement pourquoi un résultat apparaît ou pourquoi certains bénéficiaires progressent davantage que d’autres.
Les méthodes qualitatives complètent cette mesure. Les entretiens semi-directifs, les groupes de discussion, les observations de terrain et l’analyse de situations individuelles peuvent faire ressortir des obstacles non prévus. Par exemple, un faible taux de participation peut être lié aux horaires, au coût du transport, à une appréhension du dispositif ou à une information mal comprise.
Pour rendre une enquête qualitative exploitable, il faut définir :
Les verbatims peuvent illustrer un résultat, mais ils ne doivent pas être présentés comme une preuve générale. Une appréciation positive recueillie auprès de quelques personnes ne remplace pas un indicateur de satisfaction construit sur un échantillon défini. À l’inverse, une moyenne peut masquer des expériences très différentes selon l’âge, le niveau de ressources, le lieu de résidence ou la durée d’accompagnement.
Il n’existe pas une seule méthode valable pour tous les projets. Le choix dépend de la maturité de l’action, du budget, du nombre de bénéficiaires, de la durée d’observation et de la précision recherchée.
La comparaison entre une situation initiale et une situation finale est accessible aux petites structures. Elle suppose de recueillir une mesure de référence au début du parcours, puis de la renouveler à une date définie. Cette méthode permet d’observer une évolution, mais elle ne prouve pas que le projet en est l’unique cause. D’autres événements peuvent avoir influencé la situation.
Lorsque cela est possible, les résultats des bénéficiaires peuvent être comparés à ceux d’un groupe présentant des caractéristiques proches mais n’ayant pas bénéficié de la même action. Cette approche réduit certaines erreurs d’interprétation, mais elle exige des données fiables et une grande vigilance sur la comparabilité des groupes.
Une évaluation expérimentale repose notamment sur l’attribution aléatoire de personnes à un groupe bénéficiaire et à un groupe de comparaison. Elle peut fournir une estimation plus robuste de l’effet causal, mais elle demande un protocole précis, un volume de données suffisant et un encadrement éthique. Elle convient rarement à un projet de très petite taille.
Dans une démarche participative, les bénéficiaires, les salariés, les partenaires et d’autres parties prenantes contribuent à définir les critères de réussite et à interpréter les résultats. Cette méthode est particulièrement utile lorsque la qualité de l’expérience, le pouvoir d’agir ou la confiance sont des dimensions centrales. Elle nécessite de prévenir les rapports de pouvoir et de rendre les conditions de participation explicites.
Pour une petite organisation, une combinaison réaliste peut associer un questionnaire court au démarrage et à la fin, quelques entretiens approfondis, un suivi à moyen terme et une réunion annuelle d’analyse. La rigueur tient davantage à la cohérence du protocole qu’à la sophistication de l’outil.
Une évaluation peut produire des chiffres exacts et conduire malgré tout à une conclusion fragile. Plusieurs biais doivent être anticipés.
La transparence renforce la crédibilité. Un rapport doit préciser les limites de la méthode, le taux de réponse, la période étudiée, les données manquantes et les éventuels changements de périmètre. Il est préférable d’indiquer clairement qu’un résultat est suggestif plutôt que de lui attribuer une certitude qu’il ne permet pas d’établir.
La mesure d’impact implique souvent des données personnelles ou des informations sensibles. Le Règlement général sur la protection des données, appliqué sous le contrôle de la Commission nationale de l’informatique et des libertés, impose notamment de définir une finalité, de limiter les données recueillies, d’informer les personnes et de sécuriser leur conservation. Les obligations exactes dépendent de la nature des données et du traitement réalisé.
Sur le plan pratique, il est utile de :
La qualité des données dépend aussi de la simplicité du dispositif. Un questionnaire trop long réduit le taux de réponse et augmente les réponses incomplètes. Les questions doivent être compréhensibles, non culpabilisantes et adaptées au niveau de maîtrise de la langue ou aux situations de handicap. Une phase de test auprès de quelques personnes permet de repérer les ambiguïtés avant le déploiement.
Une évaluation n’a d’intérêt que si elle alimente la gestion du projet. Avant la collecte, il faut donc préciser les décisions susceptibles d’être prises. Un résultat inférieur à la cible peut conduire à revoir le recrutement du public, les horaires, la durée de l’accompagnement, la formation des intervenants ou le contenu du service.
Une réunion d’analyse peut suivre ce déroulé :
Le tableau de bord peut rester simple. Pour chaque objectif, il peut présenter l’indicateur, la valeur de référence, la valeur actuelle, la cible, la source, la fréquence et la décision associée. Cette dernière colonne est importante : elle rappelle que la mesure doit servir au pilotage et non devenir une formalité administrative.
Enfin, les résultats doivent être restitués de manière accessible aux personnes concernées. Une synthèse destinée à des partenaires financiers ne répond pas aux mêmes besoins qu’un retour adressé aux bénéficiaires. Dans tous les cas, il faut distinguer les résultats observés, les limites de l’évaluation et les prochaines étapes.
L’utilité sociale désigne la contribution recherchée par une activité, par exemple l’accès à l’emploi, l’autonomie ou la réduction de l’isolement. L’impact social correspond aux changements effectivement observés et à l’analyse de la contribution du projet à ces changements. Une intention utile ne suffit donc pas à démontrer un impact.
Il n’existe pas de nombre universel. Un petit projet peut commencer avec quelques indicateurs couvrant la portée, la qualité de l’action, les effets à court terme et un résultat durable. Chaque indicateur doit être défini et relié à une décision. Si une donnée ne peut conduire à aucune action, sa collecte mérite d’être réexaminée.
Oui, à condition d’être précis sur les limites. Un suivi avant et après, quelques entretiens, des données administratives déjà disponibles et une mesure à moyen terme peuvent constituer une base utile. Il faut éviter de présenter cette démarche comme une preuve causale définitive.
Lorsque le groupe est restreint, une enquête exhaustive peut être pertinente. Lorsque le nombre de personnes est important, un échantillon peut être utilisé, à condition de documenter sa méthode et de vérifier qu’il représente correctement les profils étudiés. Les non-réponses doivent être prises en compte dans l’analyse.
Le plus tôt possible, idéalement avant le lancement ou au début du projet. Cette étape permet de recueillir une situation de référence, de clarifier les objectifs et d’éviter de rechercher après coup des données qui n’ont pas été collectées. L’évaluation peut ensuite être ajustée à mesure que le projet gagne en maturité.
