Mesurer l’impact social sans étouffer la créativité : des ICP légers qui fonctionnent

Field team collaborating with local community on social impact measurement using participatory evaluation methods in rural development project

Combien d’ateliers avez-vous organisés ? Combien de personnes avez-vous formées ? Ces questions ne mesurent pas l’impact social. Elles mesurent l’activité. Chaque année, des centaines de projets justifient leurs budgets à l’aide de chiffres de participation, de nombre d’événements ou de documents distribués, tandis que le changement réel (relations construites, comportements transformés…) n’est pas documenté. 

Le problème n’est pas un manque de volonté de mesurer. C’est que les systèmes traditionnels de suivi, d’évaluation et d’apprentissage (MEL en anglais) étouffent la créativité dont les projets sociaux ont besoin pour s’adapter aux contextes locaux. Cadres logiques avec 40 indicateurs prédéfinis, rapports hebdomadaires pendant l’exécution, matrices logiques rigides qui ne capturent pas l’émergence. Résultat : des équipes qui passent plus de temps à remplir des formulaires qu’à générer un impact. 

Cependant, un modèle existe qui combine rigueur et liberté. Le Programme des Nations Unies pour le Développement (PNUD) a développé Outcome Harvesting, une approche de mesure rétrospective qui capture les changements réels sans tout prédéfinir avant de commencer. Testé dans plus de 140 pays par le PNUD, la Banque mondiale, l’UNICEF et de nombreuses ONG, les résultats montrent qu’il est possible de mesurer la transformation sociale sans bureaucratiser le processus.​ 

Le vrai problème : nous mesurons ce qui est facile, pas ce qui est important 

La plupart des projets et des initiatives sociales rendent compte des outputs (ce qu’ils ont fait), et non des outcomes (ce qu’ils ont accompli). Cette confusion a des conséquences directes sur la coopération internationale : 

Les bailleurs de fonds exigent des « résultats concrets », mais obtiennent des données sur le nombre de participants ou d’activités effectuées. Les dirigeants de MEL élaborent des schémas logiques comprenant de nombreux indicateurs que personne ne complète car l’équipe est sur le terrain pour résoudre des problèmes concrets. L’évaluation est perçue par les équipes de projet comme une tâche administrative imposée de l’extérieur, plutôt que comme un moyen d’apprentissage et d’amélioration. 

Cette tension entre mesurer et agir est particulièrement critique dans les projets qui nécessitent une adaptation constante. Un projet de renforcement communautaire ne peut pas prédéfinir avec exactitude les changements qui se produiront dans 18 mois. La réalité sur le terrain génère des résultats émergents qu’aucune matrice logique ne peut anticiper. 

Le problème réside dans la logique de mesure. Les systèmes MEL traditionnels partent du principe que vous pouvez prédire et planifier tous les résultats dès le début. Mais le changement social ne fonctionne pas ainsi. 

Cas réel : Outcome Harvesting du PNUD dans plusieurs pays 

Le PNUD mène des projets de développement dans plus de 140 pays. Il ne peut pas se permettre de mal mesurer. Depuis plus d’une décennie, il met en œuvre l’Outcome Harvesting, une méthodologie qui inverse la logique traditionnelle d’évaluation. 

Diverse community participants engaged in outcome harvesting workshop with flipcharts, demonstrating participatory monitoring and evaluation methodology

Qu’est-ce que l’Outcome Harvesting ? 

Il ne s’agit pas d’une mesure abstraite. Il s’agit d’une approche de mesure rétrospective et participative qui identifie les changements (résultats) qui se sont déjà produits, documente la manière dont le projet a contribué à ces changements et valide les informations auprès de tiers indépendants. 

Au lieu de se demander au début : « Quels changements espérons-nous obtenir ? » (prédictif), ils évaluent pendant et après : « Quels changements réels se sont produits et comment y avons-nous contribué ? » (rétrospectif). Cette différence libère les équipes de la nécessité de prédire l’imprévisible. 

Cas concrets avec des données vérifiables 

Gestion des déchets solides en Bosnie-Herzégovine : le projet n’a pas prédéfini d’indicateurs rigides de « réussite ». Lors de la mise en œuvre, ils ont capturé des résultats émergents : des réformes institutionnelles qui ont amélioré la communication entre les parties prenantes municipales, des solutions techniques adaptées aux conditions locales spécifiques, un renforcement des capacités institutionnelles non prévu initialement. Le projet a généré des changements systémiques qu’aucune matrice logique n’avait anticipés. 

Évaluation de la Banque mondiale dans plusieurs pays : la Banque mondiale a mis en œuvre l’Outcome Harvesting dans des projets de réforme du secteur public. Résultats documentés : changements au sein du leadership et de l’environnement institutionnel, réformes par l’apprentissage adaptatif (sans planification rigide), résolution de problèmes axée sur les résultats plutôt que sur la réalisation d’activités prédéfinies. 

Projet de santé communautaire (cas non spécifié géographiquement dans le PNUD) : la récolte des résultats a révélé des changements imprévus : une plus grande sensibilisation à la santé dans la communauté au-delà des participants directs, une amélioration du comportement en matière de recherche de soins médicaux, un renforcement des liens communautaires (capital social non prévu comme résultat). 

Ces situations ont un point commun : les meilleurs résultats n’étaient pas inclus dans le plan initial. 

Comment cela fonctionne sans entraver l’exécution 

La récolte des résultats présente quatre caractéristiques qui équilibrent rigueur et liberté créative : 

Pas d’indicateurs prédéfinis rigides. Il n’est pas nécessaire de définir 40 indicateurs clés de performance (ICP) au début du projet. L’équipe identifie les changements observables au fur et à mesure qu’ils se produisent, sans être limitée par une liste fermée de « résultats attendus ». 

Collecte participative des données. Elle implique les bénéficiaires directs et les parties prenantes dans la formulation des résultats. Les participants ne sont pas des « sujets d’évaluation », mais des co-évaluateurs qui identifient ce qui a changé dans leur contexte. 

Validation par des tiers indépendants. Chaque résultat documenté est vérifié par des acteurs externes au projet (autorités locales, organisations voisines, experts indépendants). Cela garantit la rigueur sans alourdir la bureaucratie dans l’exécution quotidienne. 

Évaluation rétrospective concentrée. L’équipe travaille en toute liberté. La collecte systématique des résultats a lieu à des moments précis (à mi-parcours du projet, à la clôture, lors du suivi post-projet), et non chaque semaine. Aucun formulaire quotidien ni aucun rapport n’existe qui interrompe l’action. 

Trois principes applicables à tout projet social 

Vous n’avez pas besoin d’un budget important pour appliquer l’Outcome Harvesting. Vous devez changer la logique de mesure : de prédictive à rétrospective, d’extractive à participative. 

Principe 1 – Documentez les changements émergents, et ceux qui sont planifiés. 

La bonne question n’est pas « avons-nous atteint les indicateurs du plan initial ? », mais « quels changements réels se sont produits dans les comportements, les relations, les actions ou les politiques ? ». 

Exemples spécifiques de résultats émergents documentés : 

Un projet de micro-entrepreneuriat urbain a généré un leadership féminin local non planifié. Les femmes participantes ont non seulement augmenté leurs revenus (résultat attendu), mais elles ont également assumé des rôles de représentation communautaire auprès des autorités municipales (résultat émergent). 

Un projet de réforme institutionnelle dans le secteur public a révélé que son impact le plus important était le changement dans « l’environnement d’autorisation » : les supérieurs hiérarchiques ont commencé à autoriser l’expérimentation au sein des équipes techniques, ce qu’aucun indicateur n’avait prévu de mesurer. 

Le cas de la Bosnie-Herzégovine en matière de gestion des déchets a révélé que l’amélioration de la communication entre les parties prenantes municipales a eu un impact plus important que les solutions techniques mises en œuvre. 

Ces changements n’auraient pas été capturés avec des indicateurs prédéfinis rigides, c’est la mesure rétrospective qui permet de les rendre visibles. 

Principe 2 – Valider avec des tiers, aussi par auto-évaluation 

L’Outcome Harvesting n’est pas un récit anecdotique. Chaque résultat documenté est validé par des acteurs indépendants du projet : 

Validation par les autorités locales : confirment-elles le changement signalé ? 

Triangulation avec des organisations voisines : ont-elles observé la même transformation ? 

Vérification auprès d’experts sectoriels : le changement est-il significatif dans ce contexte spécifique ? 

Ce processus de validation externe garantit la rigueur sans nécessiter de systèmes de suivi lourds pendant l’exécution. La vérification a lieu après coup, en se concentrant sur des moments clés. 

Principe 3 – Impliquer les bénéficiaires comme co-évaluateurs 

Le modèle le plus avancé d’Outcome Harvesting intègre la participation réelle des bénéficiaires à la conception et à la mise en œuvre de l’évaluation. L’UNICEF a mis en œuvre ce modèle dans six pays africains (Mozambique, Namibie, Ouganda, Malawi, Tanzanie, Zimbabwe) avec des résultats documentés : 

Des panels d’évaluation ont été constitués par 112 adolescents qui ont collecté les opinions de leurs camarades à travers 73 entretiens et groupes de discussion. Les adolescents n’ont pas répondu à des enquêtes conçues par des adultes. Ils ont co-conçu les questions, mené les entretiens, analysé les données et formulé des recommandations. Parmi les 112 participants, 11 adolescents ont formé un groupe consultatif régional qui a validé les résultats et donné son avis sur les conclusions avant leur publication. 

Le résultat : des résultats inattendus ont émergé parce que les jeunes ont posé des questions auxquelles les évaluateurs externes n’auraient jamais pensé. Les participants se sont approprié le projet puisqu’ils ont vu que leur opinion comptait vraiment. La durabilité après le projet s’est renforcée car les bénéficiaires ont développé une compréhension approfondie des fonctionnalités et des problèmes. 

Cette méthode participative n’est pas seulement une « bonne façon de faire ». C’est une méthode précise qui permet de collecter des informations que d’autres évaluations ne peuvent pas fournir.

African adolescents leading participatory impact assessment as co-evaluators, analysing interview data in UNICEF social project evaluation

Liste de contrôle rapide : votre MEL étouffe-t-il ou stimule-t-il ? 

Utilisez ces quatre questions/diagnostics pour évaluer si votre système de mesure équilibre rigueur et créativité : 

  1. Prenez-vous seulement les résultats attendus ou aussi les résultats inattendus ?

Si votre rapport final indique « nous avons atteint 15 des 18 indicateurs prédéfinis », vous mesurez l’adhésion au plan. S’il indique : « Nous avons identifié huit changements significatifs, dont trois n’étaient pas prévus mais se sont avérés essentiels », vous mesurez l’impact réel. 

  1. Faites-vous participer les bénéficiaires comme participants ou comme évaluateurs ?

Est-ce que les participants répondent à des enquêtes élaborées par votre équipe (approche extractive) ou sont-ils impliqués dans la conception des questions, la collecte des données et l’interprétation des résultats (approche participative)? La différence détermine les informations que vous obtiendrez. 

  1. Validez-vous les résultats auprès de tiers indépendants ?

Documenter des changements sans vérification externe relève de l’anecdote. Votre système inclut-il une validation par les autorités locales, les organisations voisines et les experts du secteur ? Cette triangulation transforme les récits en preuves. 

  1. Évaluez-vous pendant l’exécution ou à des moments précis ?

Si votre équipe remplit des formulaires hebdomadaires sur les « progrès vers les indicateurs », vous interrompez l’action par de la bureaucratie. Si vous évaluez rétrospectivement à des moments clés (mi-parcours, clôture, suivi), vous libérez la créativité opérationnelle. 

Conclusion : il est possible de mesurer sans tuer l’action 

Le dilemme entre la rigueur évaluative et la liberté opérationnelle disparaît lorsque vous modifiez la logique de mesure. Des ICP légers ne signifient pas de ICP vagues. Ils désignent des indicateurs qui capturent le changement réel (comportements, relations, actions, politiques) plutôt que la réalisation d’activités prédéfinies. 

Outcome Harvesting démontre qu’un tel modèle fonctionne à l’échelle mondiale : mis en œuvre dans 143 pays par le PNUD, utilisé par la Banque mondiale, l’UNICEF et de nombreuses ONG. Mais vous n’avez pas besoin d’opérer dans 143 pays pour appliquer ces principes. Vous devez avoir une vision claire de ce qui constitue un changement réel dans votre contexte, être prêt à saisir les émergences, disposer d’une validation externe rigoureuse et avoir des bénéficiaires comme co-évaluateurs. 

Votre organisation mesure-t-elle la transformation sociale ou se contente-t-elle de recenser les activités ? 

Si vous travaillez sur des projets de coopération où l’évaluation traditionnelle étouffe la créativité, je suis intéressé par votre expérience. Connectons-nous sur LinkedIn et poursuivons cette conversation. 

Articles Associés:

Institutional communication in closed messaging platforms
Expert

Communication institutionnelle sur les plateformes de messagerie fermées

Les institutions continuent de concevoir des messages pour des fils publics pendant que leurs audiences prennent des décisions dans des groupes WhatsApp qu’aucun algorithme institutionnel n’atteint. Le problème n’est pas technique. C’est une question sur le fonctionnement de la confiance quand la visibilité publique disparaît et qu’il ne reste que les relations.

Lire la suite »
Communications team responding to a suspected deepfake incident in an institutional office, showing pressure, coordination and the need to protect public trust.
Expert

Plan de réponse aux deepfakes pour les équipes de communication : protéger la confiance envers l’institution, et pas seulement gérer la crise

Lorsqu’un deepfake impliquant votre organisation fait surface, le premier réflexe est de le traiter comme une urgence technique. Mais ce qui détermine le vrai dommage n’est pas le contenu faux : c’est ce que fait votre organisation — ou ce qu’elle ne fait pas — dans les heures qui suivent. C’est une décision de communication.

Lire la suite »