Par Luís Costa, Holger Schmid, Marie-Madeleine Gomez, Veronica Troya

Alors que nos financements touchent à leur fin, la MAVA a réuni ses partenaires pour évaluer les progrès et l’impact des ses plans d’action (OAP). Ce blog dévoile les coulisses de la méthode utilisée par la MAVA pour mesurer l’impact de ses Plans d’action, recueillir les points de vue des partenaires sur les résultats de leur travail et l’avenir des plans d’action.

____

Dans le cadre de notre activité normale, nous avons l’habitude d’évaluer les financements que nous accordons et l’impact de notre activité. La fermeture de MAVA pose un nouveau défi : comment évaluer les résultats et l’impact de la Fondation après 28 ans d’activité ?

Nous avons décidé de le faire à trois niveaux. Tout d’abord, en évaluant les stratégies de notre phase finale, lorsque nous avons développé 24 Plans d’Action (OAP) au sein des quatre programmes (Méditerranée, Economie durable, Suisse et Afrique de l’Ouest) entre 2016 et 2022.

En plus des évaluations des 24 OAP, nous avons également entrepris une évaluation finale de chaque programme depuis les débuts de la MAVA en 1994, en ajoutant l’Unité Impact et Durabilité aux 4 programmes ci-dessus. Enfin, nous avons également effectué une évaluation finale globale de l’impact de la fondation.

Développer une méthodologie simple et inclusive

Pour définir la méthodologie de cette évaluation, nous voulions faire quelque chose qui ne créerait pas de travail inutile mais qui serait plutôt une valeur ajoutée pour tous – dans le même état d’esprit que les collaborations de chaque OAP, en faisant confiance aux partenariats et en leur faisant auto-évaluer leur impact.

La méthodologie visait à prendre du recul par rapport aux projets individuels et à avoir une vue d’ensemble, afin de montrer les résultats et les impacts dans un rapport succinct et objectif. Nous avons choisi de procéder ainsi plutôt que de rédiger des rapports individuels sur les projets, afin de montrer de manière rapide et efficace le travail collectif réalisé au cours des sept dernières années.

Un atelier a été organisé pour chaque OAP, rassemblant tous les partenaires directs qui ont collectivement mené les projets vers un objectif de conservation commun en utilisant les Normes Ouvertes pour la Conservation (Open Standards for Conservation). Comme chacun utilisait des fiches de suivi pour évaluer régulièrement les progrès et l’efficacité de son travail, nous avons analysé tous les indicateurs dans ces fiches pour avoir une base de discussion sur les résultats et l’impact.

Un exercice collectif de rédaction a permis de compléter les rapports à la fin de chaque atelier, d’une manière inclusive et équitable, donnant à tous les partenaires le pouvoir de la plume. Au final, chaque rapport comprend :

♦ Une introduction générale au OAP et à sa théorie du changement.

♦ Un chapitre sur les progrès qui décrit la manière dont les activités ont été menées et le caractère innovant de l’approche, et qui répond à la question « Avons-nous fait ce que nous devions faire ? ».

♦ Un chapitre sur l’efficacité et l’impact, répondant à la question  » Avons-nous obtenu l’impact que nous étions censés obtenir ?  » pour montrer clairement les résultats et les impacts de chaque OAP.

♦ Et enfin, des notes sur la durabilité et les prochaines étapes, montrant les nouveaux défis pour l’avenir et ce qu’il adviendra des partenariats et de leurs nouveaux projets.

En outre, certaines études de cas ont été incluses pour illustrer des résultats positifs des projets qui représentent l’impact collectif du OAP.

Les résultats finaux

Tous les ateliers ont eu lieu entre septembre et décembre 2022. Au fur et à mesure que les rapports étaient finalisés (après la révision finale, la traduction et la mise en page), ils ont été publiés sur notre site web. Les versions finales peuvent être consultées ici.

De manière générale, nous sommes très satisfaits de l’excellent travail et de l’impact considérable que cet exercice d’évaluation finale a pu démontrer. Plus que l’analyse des projets individuels au sein de chaque OAP, cet exercice de compilation de tous les projets en un seul rapport a permis à tous les partenaires et à nous-mêmes d’évaluer et de comprendre la valeur de la façon dont les partenaires ont mis en place la stratégie définie en commun.

Évaluation de l’évaluation

L’exercice collectif de rédaction des rapports a été ludique et apparemment bien accueilli par tous les participants. Au début, nous nous sommes demandés s’il était possible de rédiger un rapport complet approuvé par tous les partenaires en deux ou trois jours, mais finalement, tous les ateliers ont rempli leur mission. La méthode principale consistait à former des groupes de personnes pour rédiger chaque chapitre du rapport ; après une première série de rédaction, les groupes se sont relayés pour revoir et compléter le travail du groupe précédent ; et une autre rotation a permis au groupe de se mettre d’accord sur une version finale de chaque chapitre avant de revoir et de se mettre d’accord sur le texte global à la fin.

Cet exercice était le cœur de l’atelier, mais plus encore, les ateliers ont fourni une formidable occasion aux partenaires de se retrouver après quelques années de travail à distance, et de célébrer leurs succès lors d’événements et d’activités sympathiques. Une photo de groupe identifie les partenaires dans chaque rapport et montre qui est derrière tout ce travail.

Au final, les réactions des participants et des animateurs ont été positives :

♦ Tout le monde s’est senti impliqué dans ce processus d’évaluation finale et a joué différents rôles, y compris une aide précieuse de certains d’entre eux pour faciliter le travail de préparation et animer les ateliers. En général, les participants ont été surpris de la productivité du processus, de la qualité des discussions au produit final.

♦ L’exercice d’écriture collective a incité tout le monde à écrire et a éliminé le biais qui survient généralement lorsqu’une personne gère la rédaction et peut avoir tendance à mettre davantage l’accent sur ses propres idées. L’exercice a donné un produit ayant accueilli un haut degré d’adhésion et d’appropriation, et cette méthodologie est recommandée non seulement à des fins d’évaluation, mais aussi pour le développement de stratégies et de programmes, car elle crée une appropriation commune et apporte de la clarté.

♦ Ce processus a permis aux partenaires d’en savoir plus sur le travail de chacun et sur la manière dont les projets pouvaient contribuer ensemble à un but et à des objectifs communs. Le résultat final montre une production collective claire de chaque partenariat.

♦ Normalement, chaque projet doit rédiger et soumettre un rapport technique final complet. Le remplacement de ceux-ci par un seul rapport court et collectif était plus utile ; cela a permis aux partenaires de gagner du temps pour rédiger leurs rapports, mais aussi à l’équipe MAVA d’analyser les rapports sur la base des résultats et de l’impact collectifs, plutôt qu’un élément à la fois. Accessoirement, cela a également permis d’utiliser efficacement le temps de l’équipe de la MAVA, ce que nous avons également apprécié. Chaque projet devait encore soumettre des rapports financiers finaux qui étaient examinés séparément.

♦ En se réunissant ensemble, les partenaires ont eu l’occasion de célébrer un excellent travail. En plus de quelques adieux émouvants, ce fut surtout une occasion formidable et cruciale de discuter de la manière de continuer à collaborer et à atteindre les objectifs de l’OAP à l’avenir, et une occasion de renforcer les liens entre les partenaires.

♦ Le rapport montre le travail et l’impact collectifs, il peut donc être une ressource importante pour la collecte de fonds afin qu’ils puissent continuer leur travail ensemble.

La liste complète des rapports finaux est désormais disponible ici, et y restera pendant les 10 prochaines années.