« Evaluation », « Monitoring&Evaluation », « Monitoring Evaluation Accountability and Learning » : quelles différences ?
Dans le secteur de la coopération et du développement, la responsabilité d’apprécier la mise en œuvre ou les résultats d’un projet/programme, initialement confiée au responsable de programme (pilote d’éventuelles évaluations externes) a progressivement été déléguée à des postes ad-hoc de responsables/chargé-e-s de suivi-évaluation puis plus récemment responsables « MEAL » (en français Suivi Evaluation Redevabilité Apprentissage) ou encore MEL (suivi, évaluation, apprentissage).
Au début des années 2010, les travaux d’évaluation les plus passionnants portés par les participants à nos formations étaient parfois confiés à des stagiaires de « Masters en développement » lors de leur dernière année d’étude ou en recherche de poste : les responsables de programmes, sur lesquels des tâches liées à la redevabilité s’accumulaient, n’avaient ni le temps de s’en occuper, ni le budget correspondant.
En 2015, le GRAAL : pour la première fois des participants s’inscrivent avec la casquette officielle de responsable de l’évaluation à l’échelle de leur institution dans un cadre régional, national ou international. Cependant les postes sont parfois subis (réorganisation interne) ou réduits à une fonction de chargé de collecte de données.
Parallèlement, une difficulté récurrente pour les évaluateurs externes (principalement chargés d’évaluations – souvent contractuelles – à mi-parcours ou finale de projets ou programmes) est alors la disponibilité des données, collecter une masse d’information suffisante pour pouvoir l’analyser sur des temps de déploiement sur le terrain très courts.
Suivi-évaluation (SE)
La fonction « suivi-évaluation » (ou Monitoring & Evaluation) apparait donc comme un ré-équilibrage afin de pouvoir collecter des données de manière systématique et en continu.
Suivi : Processus continu de collecte systématique d’informations, selon des indicateurs choisis, pour fournir aux gestionnaires et aux parties prenantes d’une action de développement en cours, des éléments sur les progrès réalisés, les objectifs atteints et l’utilisation des fonds alloués.
Définition glossaire du CAD/OCDE
MEAL (Monitoring Evaluation Accountability and Learning)
Plus récemment, l’appellation MEAL se diffuse progressivement dans les offres de postes, manuels, cadres de références d’ONG ou organisations de développement.
Cette fois encore, il s’agit d’opérer un équilibrage. L’effort de collecte de données, de reporting, l’obligation de rendre-compte, non seulement de la bonne utilisation de fonds publics mais aussi des performances, se réalise au détriment de la fonction d’apprentissage.
Redevabilité : obligation de rendre compte du fait que le travail a été conduit selon les règles et les normes convenues, ou obligation de rendre compte de façon claire et impartiale sur les résultats et la performance, au regard du mandat et/ou des objectifs fixés
Définition CAD-OCDE
Il faut alors repositionner l’apprentissage en tant que fonction centrale de l’évaluation. En tant que norme au cœur des politiques ou des chartes d’évaluation des organisations de développement et institutions publiques. En instaurant des temps systématiques de partage d’expérience, d’analyses critiques en continu, strictement intégrés au cycle de projet . L’évaluation contribuera alors à alimenter ou créer des ponts avec la recherche, la gestion des connaissances, la veille stratégique ou encore l’apprentissage institutionnel.
Mais pourquoi un ré-équilibrage vers la redevabilité ?
En effet, dans l’illustration ci-dessus, l’effort ou le poids de redevabilité est présenté comme déséquilibré entravant les capacités d’apprentissage. Il faut alors distinguer les « tâches » liées à la fonction de redevabilité (la lourdeur du rapportage, etc. – voir par exemple les formats de reporting) et l’atteinte des ambitions de cette même fonction.
Si la redevabilité est « la responsabilité de fournir des rapports d’avancement précis, honnêtes et crédibles » alors la fonction MEAL doit permettre de favoriser ou d’attester dans un cadre opérationnel mais également éthique ce degré de précision, de crédibilité, d’honnêteté. Dans un cadre circonstancié et sans complaisance.
C’est à dire inscrire la redevabilité au sein de processus et mécanismes fonctionnels permettant de distinguer « auto-satisfaction/auto-promotion » et recherche d’impartialité, exactitude, probité et sincérité.
Cette responsabilité ne peut s’exercer que s’il existe un lien entre les chargés de MEAL au niveau des équipes opérationnelles et une cellule institutionnelle faisant fonction d’évaluation indépendante, rattachée au conseil d’administration ou toute instance de gouvernance de l’institution (voir le positionnement de l’évaluation dans l’organigramme).
« Une façon subtile de contrôler les évaluateurs a été d’assimiler l’évaluation au suivi, à l’inspection, à l’audit, aux politiques basées sur la preuve, etc. et de minimiser le critère d’indépendance qui est essentiel à l’intégrité de l’évaluation sommative et à sa dimension de redevabilité. » The logic of evaluation professionalism, Robert Picciotto, Sage, 2011
Mieux apprécier et dimensionner chaque fonction
L’EVALUATION dans sa compréhension la plus large et la plus noble intègre déjà des fonctions de Suivi, de Redevabilité et d’Apprentissage. Décomposer, apprécier, consolider puis ré-équilibrer chaque dimension (S.E.R.A., S.E.A.,…) permettra en effet d’orienter le projecteur sur chacune d’entre elles, une par une, méthodiquement. N’oublier aucune lettre de l’acronyme, éclairer chaque fonctionnalité et faciliter ainsi « l’évaluation de l’évaluation ».
En visualisant et approfondissant chaque facette, le système de Suivi Evaluation est ajusté dans son rôle de boite noire de l’action publique. L’exposition des valeurs intervient en amont de la mesure des résultats et nécessite ses propres outils. Le système de suivi et évaluation ne sert pas uniquement à savoir si une action, un projet, une politique publique marche ou ne marche pas mais initialement à exposer comment on sait si cette intervention fonctionne ou non. Ce qui renforce également le pilier redevabilité.
Le partage d’une terminologie et d’un vocabulaire commun, est néanmoins une condition préalable voir un facteur entravant au démarrage de chaque programme, notamment multi-acteurs, multi-partenarial, multi-institutionnels. Chaque institution possédant un champ lexical plus ou moins homogène en ce qui concerne l’évaluation, une maturité plus ou moins grande des systèmes développés, au gré des cultures internes, des habitudes acquises et mille-feuilles archéologiques des réformes passées. Un lexique et des pratiques à uniformiser, au gré également des rotations de personnel et des parcours professionnels divers des chargés de programmes ou chargés d’évaluation.
Ces glissements terminologiques, d’évaluation à suivi-évaluation, de suivi-évaluation à MEAL, participent à la confusion et contraignent alors l’ancrage de l’évaluation en tant que discipline.
En résumé
La redevabilité et l’apprentissage sont des fonctions intrinsèques à l’évaluation.
Le suivi également. Souvent perçu comme activité de routine, dissociée, toute démarche de suivi mérite pourtant d’être accompagnée d’une pensée analytique. Inversement l’évaluation, sans données collectées régulièrement au fil de l’action est démunie.
L’appellation M.E.A.L en lieu et place d’évaluation pourrait ainsi apparaitre comme un superfétatoire, comme évoquer un « arbre en bois » ou de « l’eau mouillée ».
Cependant, un écueil récurrent de la Gestion Axée sur les Résultats est d’apparenter le rôle de l’évaluation à celui d’un contrôle : se contenter de mesurer un écart entre résultats attendus et résultats réels.
Les appellations MEAL ou MEL contribuent alors à redonner ses lettres de noblesse à l’évaluation en permettant une approche équilibrée sur ses différentes fonctions. De manière pragmatique, dès la lecture d’un profil de poste SERA, une multitude de tâches détectées sur la fonction suivi versus un vide abyssal sur la fonction apprentissage forcera la réflexion. Laissera percevoir en filigrane la fragilité ou la moindre sophistication du système de suivi évaluation en place au sein de l’institution. Son rapport à l’apprentissage en tant que valeur. A l’inverse, la diversité des intitulés de poste favorise la confusion et dessert l’émergence d’une profession ou d’une discipline commune, qui nécessite un socle de connaissances, de normes et de valeurs un minimum uniforme.
Pour aller plus loin
Date de première diffusion : décembre 2021
Actualisation : 2024
Sébastien Galéa