Les actualités, articles et outils à saisir de l’Observatoire de l’Evaluation d’Impact Social de l’ESSEC

Mai – Juin 2022

Événements et actualités du secteur

En France

• La dernière session des Petits Déjeuners de la Mesure d’Impact Social (PDMI), organisés par Convergences, l’Avise et Improve, s’est tenue le 12 mai dernier et a porté sur la notion d’évaluation intégrée. Le livrable issue de ces réflexions sera publié lors du Forum Mondial des 5 et 6 septembre prochains.
• Le comité d’organisation des Jeux Olympiques et Paralympiques de Paris 2024 a organisé le mardi 5 juillet 2022 un colloque « Évaluation de la stratégie Impact & Héritage de Paris 2024 ». Il avait pour objectif de présenter la stratégie Impact & Héritage ainsi que ses objectifs et ses premières réalisations, et de détailler la démarche évaluative qui l’accompagne.
• Dans le cadre de l’Université du #FaireEnsemble organisée par La Fonda, à la Halle Pajol à Paris, l’Avise a animé un atelier aux côtés des Collectifs Emploi sur l’évaluation collective de l’Impact Social et F3E un atelier intitulé “L’évaluation par les approche orientées changement”le 10 juin.
• Le 21 juin, l’Impact Tank et la Fabrique du Nous ont organisé un webinaire intitulé “Chiffrer le lien social : heureuse idée ou hérésie ?”. Le constat : en France, de nombreuses initiatives existent pour recréer du lien social. Leur impact est cependant limité tant qu’elles ne changent pas d’échelle. L’enjeu est donc de convaincre des investisseurs d’investir massivement sur ce sujet du lien social. Pour cela, les intervenants ont identifié la nécessité de travailler sur la preuve de l’impact et ont échangé sur les moyens de mesurer cet impact et notamment sur la nécessité ou non de le chiffrer et à quelles conditions.
• Impact Track a réalisé une formation à la mesure d’ impact social pour les équipes de l’action sociale du Groupe APICIL.
• Le GREUS est intervenu lors des RIUESS 2022 organisés par l’Institut Français du Monde Associatif sur le thème “L’évaluation de l’utilité sociale des organisations d’économie sociale et solidaire : une approche relationnelle de la valeur”.
• Le GREUS a organisé mardi 14 juin un événement sur le même thème “Evaluer l’utilité sociale : une approche “relationnelle” de la valeur créée” à l’Institut Catholique de Paris.
• Le Social Value France s’est réuni mardi 14 juin de de 9H à 11H en présentiel à la Maison des Metallos à Paris afin de faire un tour des actualités, de présenter le livrable “Entre évaluation de politiques Publiques et évaluation de L’impact social : regards croisés” et d’avoir un temps d’échanges et de rencontres entre membres du Social Value France et membres de la Société Française  d’Évaluation.
• Le Labo E&MISE de l’ESSEC a animé le 15 juin une matinée sur l’évaluation d’impact social auprès d’une cinquantaine de participants dans le cadre du programme Inclusion & Ruralité porté par la MSA, avec AG2R La Mondiale, la DGEFP, Agrica et makesense.
• L’Etoile de progression France a organisé le 16 juin un webinaire pour présenter des étoiles dédiées aux personnes accompagnées dans leur parcours d’insertion, notamment sur le plan du logement et de l’emploi, avec un focus particulier sur les personnes réfugiées.
• L’Institut IDEAS organise une table ronde autour de la publication du rapport « Évaluation des actions associatives » le 27 juin à 18h à la Mairie du 14ème arrondissement.
• Le 30 juin et 1er juillet prochain, Kimso organise en partenariat avec L’ADMICAL – Entrepreneurs de mécénat une formation de 2 jours sur le pilotage d’une démarche d’évaluation d’impact social.
• La Fondation ContentSquare, Konexio et Impact Tank sont intervenus dans une table ronde organisée par H7 à Lyon pour discuter du thème “Comment intégrer l’impact au cœur de sa stratégie”. Le replay est en ligne.
• Carenews a organisé un webinaire le 23 juin avec l’Avise, Impact Track et SOS Consulting sur le thème “Attentes VS réalités : la mesure d’impact, baguette magique ?”
• L’accélérateur d’innovation sociale de la Croix-Rouge et de Nexem a dévoilé sa nouvelle promotion de lauréats. Ceux-ci bénéficieront d’une mesure d’impact à l’issue de la période d’expérimentation afin de “déterminer les pistes de collaboration et de déploiement à plus grande échelle de ces produits et services innovants”.

A l’international 

• Dans le cadre de la série de webinaires Evidence for Impact, Social Impact (Etats-Unis) a proposé un webinaire intitulé “Developmental Evaluation : what is fundamental and what is flexible” le mardi 31 mai à 14h15. Ce webinaire a exploré les principes essentiels de l’évaluation de projets de développement et la façon dont les bailleurs de fonds utilisent ces données d’impact.
• SoPact (Etats-Unis) et le Miller Center for Social Entrepreneurship organisent le 28 juin à 17h un webinaire intitulé “Accelerating entrepreneurship with impact data”, au cours duquel quatre entreprises sociales partageront leurs thèses d’impact ainsi que les données collectées.
• L’agence de communication canadienne Phil a développé un service d’accompagnement autour des ODD de l’ONU, dont la finalité est d’aider des organismes à but non lucratif à mesurer leurs impacts et à les communiquer aux bailleurs de fonds.
• La gLOCAL Evaluation Week organisée par la Global Evaluation Initiative (partenariat mondial cherchant à développer des cadres de suivi et d’évaluation durables et appropriés afin de promouvoir l’utilisation de données probantes dans la prise de décision publique) s’est déroulée du 31 mai au 3 juin. Le thème de cette édition était “EvalEvolve : L’évolution du S&E au XXIe siècle”, et a abordé les innovations en matière de collecte, d’analyse et d’utilisation des données.
• Social Value UK propose sa formation “Value & SROI practitioner” en ligne, avec un format de cinq rencontres sur deux semaines. Les prochaines sessions démarreront le 22 juin, 18 juillet et 6 septembre prochains.

Rapports d’impact

En France

• Des chercheurs d’Harvard Business School (Etats-Unis), du MIT (Etats-Unis), du CREST Ensae (France) et de l’Aix-Marseille School of Economics (France) publient l’évaluation d’impact de la plateforme Bob Emploi. Lancée en 2016 par Bayes Impact en collaboration avec Pôle Emploi, cette plateforme en ligne donne aux demandeurs d’emploi des conseils pour améliorer leur recherche et des recommandations de nouvelles professions et de nouveaux lieux à cibler, sur la base de leurs données personnelles et des données du marché du travail. L’évaluation a porté sur 212 277 individus et a mis en avant des effets modestes sur les méthodes de recherche : les utilisateurs de la plateforme adoptent certains conseils et ils sont plus susceptibles d’utiliser les ressources fournies par les services publics de l’emploi. Cependant, en suivant les trajectoires individuelles pendant 18 mois après l’intervention, aucun impact n’a été observé sur le temps passé à chercher un emploi, le champ de recherche (professionnel ou géographique) ou le bien-être autodéclaré. De plus, aucun résultat n’a été observé en matière d’emploi, que ce soit à court ou à moyen terme.
• Le réseau Vrac, accompagné par Improve, publie une étude sur les bénéfices du vrac, au-delà de la réduction des déchets et du gaspillage alimentaire : dynamisation de l’économie locale, création d’emploi, écoconception des emballages.
• Improve partage la synthèse de l’évaluation de Dilemme Entrepreneurs qui propose à ses bénéficiaires de mieux appréhender l’entrepreneuriat au travers de serious games. L’étude met ainsi en avant que 85% des participants ont une vision plus claire de ce qu’un entrepreneur doit anticiper suite au jeu.
• La Fondation Entreprendre publie l’évaluation d’impact social 2019 – 2021 de la campagne de mobilisation “Tous entrepreneurs”. L’étude, menée par un consultant indépendant, Bryan Hocq, montre que la Fondation Entreprendre a permis à 85% des entrepreneurs accompagnés de gagner un temps précieux dans la construction de leur projet et à 77% d’entre eux de développer des savoir-faire et de se professionnaliser.

A l’international

• L’Impact Weighted Accounts Initiative (IWAI) de la Harvard Business School partage  dans un article de recherche trois corrélations relatives à l’employment impact (défini comme les impacts positifs et négatifs des pratiques des entreprises pour les employés directs et la communauté des travailleurs au sens large). L’impact sur l’emploi est ainsi modérément associé à une rotation plus faible du personnel et à une valorisation plus élevée de l’entreprise. D’autre part,  les entreprises qui ont un chiffre d’affaires plus élevé et qui investissent davantage dans l’innovation présentent un impact sur l’emploi plus important. Ces résultats démontrent selon les auteurs l’intérêt de produire des états comptables pondérés en fonction de l’impact sur l’emploi
• Damon Jones et Ioana Marinescu publie un article dans la revue American Economic Journal intitulé “The Labor Market Impacts of Universal and Permanent Cash Transfers: Evidence from the Alaska Permanent Fund”, dans lequel ils examinent ce qui s’est passé en Alaska, où, depuis 1982, chaque résident à temps plein reçoit un dividende annuel en espèces – s’élevant en moyenne à 3 900 dollars par famille. Comme il ne s’agissait pas d’une expérience, ils n’ont pas de groupe de contrôle mais utilisent des comparaisons statistiques avec d’autres États pour estimer les effets sur l’emploi. Ils n’ont constaté aucune réduction du travail à temps plein des Alaskiens du fait du programme, et une augmentation (de 1,8 point de pourcentage, soit 17 %) du travail à temps partiel, qu’ils attribuent au fait que le revenu supplémentaire stimule l’économie.
• Christopher Doss, Hans Fricke, Susanna Loeb, et Justin B.Doromal publient dans La revue Economics of Education les résultats d’une étude portant sur deux campagnes d’envoi de messages téléphoniques aux parents et visant à soutenir le développement des compétences en mathématiques chez les élèves de maternelle en Californie. Le programme passant par l’alphabétisation, les mathématiques et les compétences socio-émotionnelles augmente les résultats en mathématiques chez les filles, tandis que le programme axé uniquement sur les mathématiques n’a aucun effet.
• Meghan Costello, Alison Nagel, Gabrielle Hunt et Joseph Allen partagent dans le Student Affair Journal les résultats d’une évaluation randomisée de l’intervention “Connexion Project” visant à renforcer le sentiment d’appartenance chez les nouveaux étudiants universitaires dans une université publique de taille moyenne dans l’est des États-Unis. Un essai contrôlé randomisé a été utilisé pour évaluer l’impact de cette intervention de 9 sessions sur un échantillon de 128 étudiants de première année (77 pour le traitement, 48 pour la liste d’attente). Le groupe d’intervention a rapporté un sentiment d’appartenance à l’école significativement plus élevé. Les analyses post-hoc de la modération par les variables démographiques indiquent que l’intervention a fonctionné de manière similaire pour les étudiants de cet échantillon provenant de divers milieux.
• Dans le Journal of Child Psychology and Psychiatry, Susan P. Walker, Susan M. Chang, Amika S. Wright, Rodrigo Pinto, et James J. Heckman publient l’évaluation randomisée d’un dispositif de nutrition et de stimulation psychosociale pour des enfants entre 9 et 24 mois présentant un retard de croissance en Jamaïque. Les résultats mesurés sur les bénéficiaires âgés de 31 ans indiquent que les participants du groupe de traitement  (n = 48) avaient un QI et une flexibilité cognitive significativement plus élevés que ceux du groupe sans traitement. Ils présentaient également moins de symptômes dépressifs, plus de courage et de conscience, une moindre consommation de substances et de prise de risques liés à la santé et au travail.

Publications

En France

• L’Avise publie son nouveau guide méthodologique afin de permettre à chacun d’initier et mener une démarche “premiers pas” d’évaluation de son impact social, en mobilisant des outils pratiques et des méthodes adaptés à ses enjeux.
• FAIR et le quotidien La Croix publient la 20ème édition du Baromètre de la finance solidaire FAIR / La Croix. Cette publication met en lumière la croissance continue de la finance solidaire dont l’encours a ainsi été multiplié par 47, passant de 0,51 milliard d’euros en 2002 à 24,5 milliards d’euros en 2021.
• Un collectif de 8 organisations de l’économie sociale et solidaire : la Croix-Rouge française, AG2R LA MONDIALE, Avise, Bleu Blanc Zèbre, Croix-Rouge insertion, Fédération Nationale Familles Rurales, kawaa et YesWeCamp publient “Territoires solidaires : guide pratique d’innovation collective” un ouvrage collectif qui vise à accompagner porteurs de projet et collectivités à concevoir et mettre en oeuvre des solutions locales adaptées aux défis sociaux rencontrées par leurs habitants.
• Consultor a publié un article intitulé “Le conseil en stratégie à la recherche de son impact” qui fait suite à l’évaluation des activités du Cabinet Co Conseil par Koreis.
• Agnès Audier et Yann Algan publient dans l’Opinion une tribune intitulée «Revitalisation des territoires ruraux : créer une “Team France de l’innovation sociale”» afin d’identifier les solutions innovantes existantes, d’en mesurer l’impact et de les répliquer ailleurs en les faisant changer d’échelle.
• Ellyx publie son rapport d’activité 2021 et partage un article sur l’évaluation de la maturité sociale des projets innovants qui propose une nouvelle grille de lecture “SRL” (Societal Readiness Level) qui vise à évaluer la maturité d’une évaluation à l’aune de la finalité – sociétale et non plus technologique.
• Julie de Brux, associée et fondatrice de Citizing, publie un article dans la Tribune qui fait le constat de la mode de l’impact et du risque afférent d’impact washing.

A l’international 

• L’EVPA (European Venture Philanthropy Association) publie une nouvelle cartographie des outils de mesure de l’impact social intitulée “Navigating Impact measurement and management : a mapping of IMM initiatives”. Celle-ci restitue notamment les différents principes recensés au long des étapes de l’investissement.
• Alexandra Yaghil, Dr. Gorgi Krlev, Dr. Hayley Trowbridge et  Stephen Barnett ont rédigé un guide pratique sur l’apprentissage continu dans la dynamique du changement d’échelle intitulé “Learning As You Scale – A practical guide for using data and insights to navigate scaling and complex system change.” Ce guide démontre comment une posture d’apprentissage tout au long du processus peut accélérer le changement, sans attendre une évaluation postérieure.
• 3ie (International Initiative for Impact Evaluation) publie sur son blog une série de deux articles portant sur les méthodes de recherches mixtes et l’incorporation de techniques qualitatives et quantitatives. Après avoir expliqué comment une approche intégrée de méthodes mixtes va au-delà de l’incorporation de quelques outils issus des traditions quantitatives et qualitatives, et pourquoi cette approche est plus efficace pour résoudre les problèmes du monde réel, Michael Bamberger détaille la manière de concevoir, de mettre en œuvre et d’utiliser des évaluations à méthodes mixtes.
• Dans un un autre article de blog, 3ie expose les intérêts de travailler sur la théorie du changement d’un projet avant d’en démarrer l’évaluation, en prenant l’exemple de l’initiative Saamuhika Shakti sur laquelle une évaluation est en cours.
• Des chercheurs de l’université de Virgili en Espagne ont établi un cadre d’évaluation de l’impact de projets touristiques. Les temporalités ex-ante, in-itinere et ex-post y sont intégrées. L’analyse a été structurée selon six domaines principaux – communication et promotion, politiques et réglementation, avantages économiques, nouvelles ressources technologiques, environnement et améliorations sociales. Ce référentiel est en accès payant.
• Paul Glewwe et Petra Todd publient un livre intitulé Impact Evaluation in International Development: Theory, Methods, and Practice. Cet ouvrage présente de manière exhaustive la façon de mener des évaluations d’impact. Après une première partie donnant une vue d’ensemble des évaluations d’impact, de nombreuses méthodes d’évaluation sont détaillées.
• Le centre WISE (Well-being, inclusion, sustainability and equal opportunity) de l’OCDE publie un cadre d’évaluation de la performance sociale des organisations à travers le bien-être. Trois périmètres ou “scopes” d’évaluation sont définis :  les employés, les consommateurs ou bénéficiaires, et les employés le long de la chaîne de valeur du produit ou service.
• Marie J. Bouchard et Damien Rousselière publient dans Les annales de l’économie publique, sociale et coopérative un article intitulé “Les avancées récentes en matière de mesure d’impact pour l’économie sociale et solidaire : Défis empiriques et méthodologiques.” Partant du constat que les exigences en matière d’évaluation ont fortement évolué dans le secteur de l’économie sociale et solidaire, cet article vise à contribuer à la compréhension des approches développées pour l’ESS et à examiner les incidences qu’elles ont sur les pratiques organisationnelles et la représentation globale du secteur.

Newsletters

• La newsletter de l’Avise sur l’évaluation d’impact social en France
• La newsletter de Stanford Social Innovation Review (SSIR)

Retrouvez tous les mois notre veille internationale sur l’évaluation d’impact social sur la page LinkedIn du Labo. Des questions ? Des propositions de contributions ou des solutions pour l’évaluation d’impact social ? Contactez-nous via louis.raynauddelage@essec.edu ou leclerc@essec.edu

Note de Veille rédigée par Clara Cohade et Louis Raynaud de Lage, sous la direction de Thierry Sibieude et d’Elise Leclerc

​