Aller au contenu principal

Bilan, évaluation, évaluation d’impact, EMIS: nommer exactement ce que l’on peut prouver

L'évaluation ne juge pas pour condamner, elle éclaire pour décider. 

Le mot « impact » est devenu une monnaie de financement, et il s’est déprécié à mesure qu’il s’est banalisé. En 2025, 94 % des financeurs interrogés demandaient des indicateurs de réalisation aux structures qu’ils soutiennent, mais 58 % seulement des indicateurs d’impact (Impact Tank & ESSEC Business School, 2025) : l’écart entre les deux chiffres est exactement l’espace où prospère l’approximation. La contribution d’Axone Consultant n’est pas de promettre de l’impact, c’est de nommer précisément ce que l’on peut prouver, avec quels moyens, et de le tenir. Parce que « l’évaluation ne juge pas pour condamner, elle éclaire pour décider ».

Un mot devenu monnaie, une compétence restée rare

La France dispose pourtant d’une définition stable. Le Conseil supérieur de l’ESS a posé dès 2011 que « l’impact social consiste en l’ensemble des conséquences […] des activités d’une organisation tant sur ses parties prenantes externes […] et internes […], que sur la société en général », formulation reprise mot pour mot, quinze ans plus tard, dans la Stratégie nationale de l’ESS adoptée le 9 juillet 2026 (Ministère de l’Économie, des Finances et de la Souveraineté industrielle et énergétique, 2026).

Le problème français n’est donc pas définitionnel : il est méthodologique et budgétaire.

Les chiffres le confirment. 78 % des structures de l’ESS répondantes déclarent avoir mis en place des actions concrètes d’évaluation, contre 67 % en 2021 (Impact Tank & ESSEC Business School, 2025), données déclaratives, sur 194 réponses exploitables que les auteurs ne présentent pas comme statistiquement représentatives : le signal d’un secteur en phase d’équipement, non un état de maturité.

Les freins désignés sont cohérents : complexité des méthodes pour 51 %, moyens limités pour 47 %, et 83 % recourent à des prestataires externes (Avise, s. d.). S’y ajoute la fragilité économique : 70 % des associations employeuses déclarent des fonds propres fragiles ou nuls (Le Mouvement associatif, RNMA, FCSF & Hexopée, 2025).

Une structure sous tension à qui l’on demande de prouver son impact sans lui en donner les moyens ne produit pas de la preuve : elle produit du récit. C’est ce que la Cour des comptes a nommé en constatant « l’échec du changement d’échelle de l’ESS et de la mesure de ses impacts sociaux » (Cour des comptes, 2025).

Quatre registres, quatre coûts, quatre promesses

La confusion la plus coûteuse n’est pas technique, elle est lexicale.

Quatre mots circulent comme s’ils étaient interchangeables : bilan, évaluation, évaluation d’impact, mesure d’impact social. Ils désignent quatre exigences probatoires distinctes et quatre charges de travail sans commune mesure.

Axone Consultant a formalisé cette distinction dans une formation destinée à des dirigeants associatifs, deux jours, cinq modules, en 2026, et la porte dans toutes ses réponses à commande.

Registre Ce qu’il produit Exigence probatoire Charge de travail indicative
Bilan / reporting d’activités Un compte rendu descriptif des actions, des moyens et des résultats Aucune démonstration causale ; traçabilité ≈ 2 jours
Évaluation Un jugement argumenté au regard de critères explicites Triangulation, critères posés ex ante, argumentation en clair ≈ 7 jours
Évaluation d’impact Les effets nets attribuables à l’intervention Contrefactuel, neutralisation du poids mort, de l’attribution et des effets de substitution ; groupes témoins, quasi-expérimentation ≈ 11 jours
Évaluation et mesure d’impact social (EMIS) « Ce qui change, à quel niveau et pour qui, comment et pourquoi » Théorie du changement explicite, chaîne de valeur intégrale, indicateurs co-construits, démarche itérative ≈ 35 jours

Rendre ces ordres de grandeur publics est un acte de loyauté. Poser qu’un bilan représente deux jours de travail et une EMIS trente-cinq permet à une association d’arrêter d’inscrire dans ses dossiers une promesse qu’elle n’a pas les moyens de produire, et permet au cabinet de proposer le niveau juste de prestation plutôt que le plus étendu. Ces volumes ne sont pas des tarifs : ce sont des charges de travail, et c’est en tant que telles qu’elles se discutent avec un financeur.

L’outillage du registre EMIS est nommé et enseigné : la chaîne de valeur de l’impact en cinq maillons, ressources, activités, réalisations, résultats, impacts ; la démarche en cinq étapes du Petit précis de l’évaluation de l’impact social (Avise, ESSEC Business School & Mouvement Impact France, 2021) ; la théorie du changement en quatre étapes, dont la question la plus dérangeante : « en quoi vous attaquez-vous à la racine du problème ? ».

Le fil rouge tient en une phrase : pourquoi mesurer si l’on ne sait pas ce que l’on cherche à mesurer, ni pour qui ? Ce vocabulaire n’est pas une convention interne : il recoupe les cadres de référence internationaux (OCDE, 2023 ; Commission européenne & OCDE, 2024).

Requalifier à la baisse : ce que le cabinet a refusé de vendre

En 2026, pour une association de l’ESS de La Réunion porteuse d’un programme territorial pluriannuel dont le projet à financer ne constituait qu’une phase, le cabinet a fait l’inverse de ce que suggérait la logique commerciale. Il a requalifié à la baisse le registre annoncé de sa propre prestation, d’« évaluation d’impact » vers « évaluation externe », pour cinq motifs techniques documentés dans une note annexée au dossier de financement : absence de contrefactuel ; dose d’intervention trop faible, quatre journées-équivalent ; effectifs sous le seuil statistique, avec environ 112 paires pré/post appariées et 30 à 50 réponses attendues au suivi à trois mois ; indicateurs mesurant des intentions déclarées et non des comportements observés ; horizon de quatre mois incompatible avec des effets durables. Motif complémentaire : promettre une mesure d’impact aurait créé une obligation conventionnelle intenable.

Mais le cabinet a symétriquement refusé le repli sur le bilan : « un bilan est descriptif, coûte deux à trois jours et ne justifie pas un cabinet externe ». Ce double refus a reconstruit une position juste, sous la forme de trois niveaux emboîtés : bilan d’exécution (l’exigence formelle du financeur), évaluation externe de la phase (le cœur de la prestation, huit jours en cinq séquences), contribution à l’évaluation d’impact du programme pluriannuel.

Le mot « impact » demeure exact, au bon niveau.

Le référentiel à six axes a permis de calculer un taux de mobilisabilité des indicateurs axe par axe, 2/4 en pertinence, 2/2 en cohérence, 7/8 en efficacité, 3/4 en efficience, 6/7 en impact, 1/3 en pérennité, soit 21 des 28 indicateurs déclarés mobilisables, chiffre annoncé au financeur.

L’honnêteté sur les sept restants est devenue l’argument de crédibilité du dossier.

« Le bon mot au bon endroit. Distinguer bilan, évaluation et évaluation d’impact est un signal de fiabilité, pas une réserve. »

La frontière d’externalité : le porteur collecte, donc le porteur ne peut pas analyser

La même mission a produit le concept le plus transférable du corpus. Un financeur qui paie une évaluation externe achète de l’indépendance ; or celle-ci ne se déduit pas de la seule qualité de tiers du prestataire. Le porteur collecte les données auprès de ses propres bénéficiaires, dans ses propres actions, avec ses propres outils. S’il transmet ensuite ces données consolidées à un cabinet qui les traite, il reste juge et partie : ce qui est produit n’est pas une évaluation externe, c’est « une analyse externe de données internes ».

Ce qui fonde réellement l’externalité tient en trois éléments, tous inscrits au séquencement de la mission : la supervision de la collecte in itinere, l’audit qualité de cette collecte, et une collecte qualitative propre, ici quatre entretiens semi-directifs et un focus group. Le cabinet a d’ailleurs relevé dans le dossier du client une formulation décrivant une simple transmission de données consolidées, « ce qui affaiblit l’argument d’indépendance », et proposé une reformulation. La frontière ne passe pas entre l’analyste et son rapport : elle passe entre le porteur et la donnée.

« Le volume ne baisse pas malgré le changement de registre : sans attribution statistique, le matériau qualitatif devient la base probante principale, pas un complément. »

L’exigence n’est pas une coquetterie : le règlement portant dispositions communes des fonds européens impose aux autorités de gestion d’évaluer leurs programmes « en faisant appel à des experts fonctionnellement indépendants », une évaluation de l’impact de chaque programme devant être réalisée avant le 30 juin 2029 (Parlement européen & Conseil de l’Union européenne, 2021, art. 44).

Aucun constat sans deux sources indépendantes

La règle est opposable et figure dans les protocoles validés en comité de pilotage : aucun constat n’est retenu sans au moins deux sources indépendantes, croisées entre analyse documentaire, entretiens semi-directifs et données quantitatives.

Sur l’évaluation d’une stratégie triennale conduite en 2026 pour une association loi 1901 de 44 ETP du champ de la santé, cela a signifié : 21 documents primaires analysés comme socle, 27 personnes interrogées en 8 vagues et 7 typologies d’acteurs, quatre guides d’entretien distincts annexés au rapport, sept jours sur six mois.

Le jugement, lui, est critérisé.

La grille des cinq critères du Comité d’aide au développement de l’OCDE, pertinence, cohérence, efficacité, efficience, impact et durabilité, est déclinée en questions évaluatives explicites, puis croisée avec les axes stratégiques du client : une matrice de 25 cellules, chacune notée par triangulation et argumentée en clair dans une grille annexée.

Deux échelles cohabitent : ordinale qualitative (Excellent, Satisfaisant, En progression, Insuffisant) pour la synthèse exécutive, étoilée de ★ à ★★★★ par axe.

Les parties prenantes se positionnent en parallèle sur une échelle à cinq niveaux, non engagé, amorcé, en cours, avancé, abouti, assortie d’une zone de justification obligatoire : un chiffre sans motif n’est pas une donnée.

Le résultat n’est ni un satisfecit ni un réquisitoire.

Sur les 25 critères notés, 14 ont obtenu ★★★ ou ★★★★ et aucun n’a atteint le seuil ★ : l’absence de rupture stratégique étant établie, deux angles morts structurels ont pu être énoncés sans dramatisation. La méthode a aussi mis au jour des résultats que le client ne documentait pas, durée moyenne d’accompagnement ramenée de 245 à 215 jours malgré une complexification des situations, taux d’échec du maintien à domicile ramené de 13 % à 5 %. Et un signal d’alerte qu’il ne voyait pas : une notation partenariale de 2,5/10, issue d’un seul entretien, traitée non comme un cas isolé mais comme le révélateur d’un écart de perception entre deux mondes professionnels.

La logique floue, ou comment accepter l’ambiguïté comme information

C’est la signature méthodologique la plus originale du cabinet, théorisée puis publiée dans un rapport client. Lorsque les sources triangulées produisent des signaux contradictoires, un document contractuel atteste d’un dispositif conforme, les entretiens décrivent une mise en œuvre inégale, les données montrent une progression partielle, l’évaluateur classique tranche. Il assigne l’axe à une catégorie binaire, atteint ou non atteint, et perd l’information la plus précieuse : la contradiction elle-même.

Axone Consultant a fait le choix d’un recours heuristique à la théorie des ensembles flous (Zadeh, 1965) : « les frontières entre niveaux de performance sont rarement nettes […]. Plutôt que d’assigner chaque axe à une catégorie binaire, la logique floue permet d’exprimer des degrés d’appartenance […]. L’évaluation n’impose pas une catégorisation tranchée mais documente la nuance, en acceptant l’ambiguïté comme information et non comme défaut méthodologique ». Concrètement, la notation étoilée reste lisible pour le décideur, mais la grille d’argumentation annexée expose l’appartenance partielle de l’axe à deux niveaux voisins et explicite ce qui, dans le matériau, tire vers l’un et vers l’autre.

L’usage est heuristique, non calculatoire : le cabinet ne produit pas d’agrégation formelle par fonctions d’appartenance, il emprunte à Zadeh un cadre de pensée qui autorise à publier une note nuancée sans la faire passer pour une hésitation. Position exigeante, car elle interdit le confort du verdict, et la seule cohérente avec ce que le cabinet affiche en clôture de ses restitutions : une évaluation produit « des signaux à affiner collectivement, et non des vérités définitives ».

L’évaluateur qui écrit ses propres limites

Les rapports du cabinet comportent une section intitulée « limites du protocole ». On y lit que « toute évaluation porte en elle la subjectivité de celui qui évalue, même neutralisée par la méthode ». Dans une réponse à un marché public d’évaluation d’un dispositif de politique éducative territoriale, préparée en août 2026 pour une collectivité de La Réunion et mise en concurrence sur une note méthodologique de cinq pages maximum, le périmètre d’évaluabilité a été énoncé d’emblée, dans la pièce notée : absence d’association du cabinet à la construction du dispositif évaluatif initial, d’où un raisonnement en contribution et non en attribution, et onze semaines effectives sur un exercice non clos. Écrire dans une offre en concurrence ce que l’on ne pourra pas démontrer est contre-intuitif ; c’est exactement ce qui distingue un évaluateur d’un producteur de rapports.

Cette auto-limitation s’appuie sur une position épistémologique que le cabinet enseigne : « Il existe un biais dans la notion même de mesure d’impact social qui consiste à considérer qu’il y a un état zéro avant le début de l’action et un état un après l’action. Or les acteurs sociaux interagissent et réagissent dans le processus même de la mesure. » L’évaluation modifie ce qu’elle observe. Le reconnaître ne dispense pas de mesurer : cela oblige à croiser quantitatif et qualitatif, « les chiffres montrant l’ampleur du changement tandis que les récits en révèlent la signification ».

Une évaluation n’a de valeur que si elle est appropriable

Le dernier écueil est celui du rapport lu une fois puis archivé. Le cabinet y répond par une exigence d’appropriabilité traitée comme une composante à part entière de la prestation. Sur le marché public précité, le dispositif proposé, 24 entretiens semi-directifs, deux ateliers participatifs, deux focus groups distincts jeunes et parents, deux questionnaires en ligne, l’observation de deux actions, au moins 30 documents, aboutissait à un tableau de bord de 22 indicateurs en quatre domaines (gouvernance, programmation et moyens, publics et couverture, effets et continuité éducative), chacun documenté par sa définition, son type, sa source, sa fréquence, le partenaire qui l’alimente et la lecture attendue. Le tout livré en format modifiable, avec une notice rédigée pour un agent non évaluateur. Un indicateur que son destinataire ne sait pas lire n’est pas un indicateur.

Trois partis pris complètent ce dispositif. La restitution en trois cercles, équipe porteuse, atelier de co-analyse avec les partenaires, présentation aux financeurs, traite l’évaluation comme un objet social à faire circuler, pas comme un livrable à remettre. Les recommandations sont mises en débat avant remise, ce qui en fait un objet de négociation collective plutôt qu’une prescription descendante. Enfin, elles sont structurées par responsable, horizon et indicateur de suivi, sur trois temporalités : 0-6 mois, 6-18 mois, 24-36 mois.

C’est la traduction opérationnelle du quatrième pilier d’intervention du cabinet, rendre autonomes les acteurs accompagnés, et de sa conviction fondatrice : « l’intelligence collective n’est pas une finalité en soi, mais un outil au service d’une démarche méthodologique de fond ».

Reste la position qui autorise tout le reste : « montrer l’absence d’impact d’une action est aussi une contribution stratégique précieuse pour les organisations qui veulent progresser avec honnêteté ». Un évaluateur qui ne peut pas conclure à l’absence d’effet n’évalue pas.

Vous préparez une évaluation ou un dossier de financement et vous hésitez sur le registre à annoncer ? Nommons-le ensemble avant de vous engager. Prendre rendez-vous

FAQ, questions fréquentes

Quelle différence concrète entre une évaluation et une évaluation d’impact ?

L’évaluation formule un jugement argumenté sur la valeur d’une action au regard de critères explicites, posés avant la collecte et rendus publics : elle établit ce qui a fonctionné, pour qui, à quelles conditions. L’évaluation d’impact est une démarche probatoire : elle cherche les effets nets, c’est-à-dire ceux qui n’auraient pas eu lieu sans l’intervention. Elle suppose un contrefactuel, la neutralisation du poids mort, de l’attribution et des effets de substitution, des effectifs suffisants et un horizon temporel compatible. Sans ces conditions, employer le mot « impact » expose à une promesse que rien ne pourra soutenir.

Peut-on faire une évaluation externe à partir des données collectées par le porteur de projet ?

Pas au sens strict. Si le porteur collecte seul et transmet des données consolidées, le prestataire produit une analyse externe de données internes, ce qui n’est pas la même chose : le porteur reste juge et partie. L’externalité repose sur trois éléments, la supervision de la collecte en cours d’action, l’audit qualité de cette collecte, et une collecte qualitative conduite en propre par l’évaluateur. Ce sont eux qu’il faut inscrire au budget et au calendrier, faute de quoi l’argument d’indépendance est fragile devant un financeur attentif.

Comment dimensionner une démarche d’évaluation quand les moyens sont limités ?

En choisissant le registre juste plutôt que le registre le plus ambitieux. Un bilan d’exécution représente environ deux jours de travail, une évaluation critérisée environ sept, une évaluation d’impact environ onze, une démarche complète d’évaluation et de mesure d’impact social environ trente-cinq. Annoncer le registre exact dans un dossier de financement est un signal de fiabilité, pas une réserve. Il est également possible d’emboîter les niveaux : un bilan d’exécution inclus dans une évaluation externe, elle-même contributive à l’évaluation d’impact d’un programme pluriannuel. Le mot « impact » reste alors exact, au bon niveau.

©Axone Consultant 2026, Abélard Mickaël

Sources et références

Avise. (s. d.). État des lieux des pratiques de l’évaluation de l’impact. https://www.avise.org/comprendre-ess/etat-des-lieux-pratiques-evaluation-impact

Avise. (s. d.). Impact social, utilité sociale : définition. https://www.avise.org/comprendre-ess/impact-social

Avise, ESSEC Business School & Mouvement Impact France. (2021). Petit précis de l’évaluation de l’impact social #2. Avise. https://www.avise.org/sites/default/files/…/petit_precis_de_levaluation_de_limpact_social_2_web_1.pdf

Commission européenne & OCDE. (2024, 15 avril). Measure, manage and maximise your impact: A guide for the social economy.

Cour des comptes. (2025, 18 septembre). Les soutiens publics à l’économie sociale et solidaire. https://www.ccomptes.fr/fr/publications/les-soutiens-publics-leconomie-sociale-et-solidaire

Haute Autorité de Santé. (2026, 11 juin). Bilan annuel 2025 du dispositif d’évaluation de la qualité des ESSMS. https://www.has-sante.fr/jcms/p_3634529

Impact Tank & ESSEC Business School. (2025, 31 octobre). Panorama de l’évaluation d’impact social en France, édition 2025. https://impact-tank.org/ressources/publications/…2025.pdf

Le Mouvement associatif, RNMA, FCSF & Hexopée. (2025, 22 octobre). Santé financière des associations : plus qu’une alerte, une urgence. https://lemouvementassociatif.org/sante-financiere-des-associations-plus-quune-alerte-une-urgence/

Ministère de l’Économie, des Finances et de la Souveraineté industrielle et énergétique. (2026). Stratégie nationale de l’économie sociale et solidaire. https://www.tresor.economie.gouv.fr/Articles/2026/07/16/adoption-de-la-nouvelle-strategie-ess

OCDE. (2023). Guide de politique publique sur la mesure de l’impact social pour l’économie sociale et solidaire. Éditions OCDE. https://doi.org/10.1787/9bafbf27-fr

Parlement européen & Conseil de l’Union européenne. (2021, 24 juin). Règlement (UE) 2021/1060 portant dispositions communes relatives au FEDER, au FSE+, au Fonds de cohésion, au FTJ et au FEAMPA. Journal officiel de l’Union européenne. https://eur-lex.europa.eu/legal-content/FR/TXT/HTML/?uri=LEGISSUM:4536652

Zadeh, L. A. (1965). Fuzzy sets. Information and Control, 8(3), 338-353. https://doi.org/10.1016/S0019-9958(65)90241-X

Axone Consultant s’inscrit dans l’innovation sociale, durable et inclusive. Nous vous accompagnons pour devenir un acteur engagé de votre territoire.

Notre Équipe et Partenaires

  • Tous
  • Équipe
  • Partenaires
  • Labels et agréments
mickael-abelard

Mickaël ABÉLARD

Gérant du Cabinet Conseil Consultant sénior Innovation Sociale
jimmy-begue

Jimmy Bègue

Consultant Vie Associative et Catalyse Territoriale
samuel-ablancourt

Samuel ABLANCOURT

Directeur Scientifique
Innovance ESS

Innovance ESS

carte du monde

Axone Consultant,
dans les Régions
Ultra-Périphériques

Retrouvez-nous sur
les réseaux sociaux

Partenaire de La Marque « La Réunion »

Une organisation du groupe

GARFALEK-logo

Contact

9 Rue Pierre Marinier,
ZA la Mare
97438 Sainte-Marie.

Logo de la réunion Réunion

Ce site a été financé par l’Union européenne dans le cadre du programme FEDER-FSE + Réunion dont l’Autorité de gestion est la Région Réunion.

SARL au capital de 4 000 euros – RCS Saint-Denis de La Réunion
SIREN: 899 088 702 – NAF: 7022Z
Mentions légalesPolitique de confidentialité – Cookies

© 2026  Axone Consultant

Une réalisation de Kannel.io