Facteurs de fragilité d’une modélisation

En fonction du projet, programme, du secteur d’activité ou du type de mesure envisagée, un chaine causale sera plus ou moins fiable et solide.

L’analyse des critères ci-dessous vous permettra en amont de détecter la solidité potentielle de votre chaine de résultats et de prendre conscience des maillons faibles, des articulations fragiles.

La stabilité des ressources

Evident mais tellement courant. Comment se projeter sur des changements attendus à moyen terme si la visibilité financière est annuelle ou ne dépasse pas les 3 ans ?

Mise en oeuvre éprouvée

L’organisation qui porte le projet est-elle familière avec cette activité ? S’agit-il de son coeur de métier ou d’une nouvelle aventure ? Il ne s’agit pas de limiter l’innovation bien sûr, mais d’accorder une attention toute particulière dans cette chaine aux maillons liées à cette nouvelle activité et à l’apprentissage inhérent à chaque nouvelle activité. Le dispositif d’orientation des bacheliers Parcoursup est l’exemple type d’une mise en oeuvre non éprouvée.

Comportements stables

Une campagne de vaccination était l’exemple type de comportement stable, l’immunité et les réactions potentielles sont connues en amont. Pourtant, en fonction de l’acceptation ou de la méfiance de la population cible, la part d’inconnu s’accroit. Rappelons nous cette commande de 869 millions d’euros de vaccins contre la grippe h1n1

Les bénéficiaires d’un programme de microcrédit (ou programmes d’activités génératrice de revenus) ont également par définition un comportement instable ou même si certaines caractéristiques sont similaires (motivation, compétences techniques, etc.) ils s’insèrent dans des contextes économiques et des parcours de vie divers, de fait les résultats individuels seront fluctuants.

Degré d’adhésion

Quel accueil recevra votre action ? A quel point le programme sera-t-il plébiscité par les populations visées ? A un autre échelon, s’agit-il pour le porteur de projet de répondre à une offre de financement ou à une aspiration réelle de la structure ? Comment évolue cette adhésion ? Est-t-on dans la capacité de suivre cette adhésion, par exemple le nombre de personnes qui sortent de l’action ou la représentativité de nos bénéficiaires par rapport à la population cible ?

Complexité des dynamiques

L’incertitude de l’environnement, la caractère rationnel ou non  de certaines prises de décision, des variables psychologiques impénétrables sous un format excel, des résistances insondables au changement et autres enjeux cachés et intérêts particuliers, ne se laisse pas facilement modéliser. Par exemple un programme de lutte contre la corruption ou de prévention de la radicalisation. 

Complexité technique

Un programme à haute composante technologique sera bien sûr dépendant du rythme des avancées techniques. Par exemple un programme lié au foncier et à l’extension du plan cadastral utilisant des données satellites. La modélisation permettra cependant d’anticiper les retards de calendrier, le niveau de compétence requis pour l’utilisation des outils, le degré de technicité de la maintenance, et finalement la pertinence de l’outil.

Effets rapides

Dans le cadre d’une politique publique de sécurité routière, suite à la mise en place d’un nouveau radar, l’effet premier attendu (la réduction de la vitesse) sera immédiat, … ou presque au détriments des plus inattentifs.

Au contraire, des programmes liés à l’émancipation ou à la réduction de discriminations envers certaines minorités auront des effets dilués et sur le long terme.

Il ne s’agit pas d’écarter la modélisation sur ce type de programme mais d’acter et d’agir sur cette difficulté. Sur quelle période peut-on raisonnablement penser collecter des données ? Quel serait l’effet le plus lointain que nous pourrions recenser  ?

Le degré d’étanchéité

Finalement, jusqu’à quel point cette modélisation est perméable aux soubresauts  du monde extérieur, de modifications politiques, sociales, économiques, environnementale ? Un changement de contexte sécuritaire invaliderait-il instantanément notre modélisation ?

L’évaluabilité du modèle logique

L’ensemble des facteurs présentés ci-dessus interrogent de manière transversale l’évaluabilité d’un projet, programme et politique publique bien sûr en fonction du délai et budget imparti au département d’évaluation.

Pour résumé :

Quelles sont les articulations fragiles de votre modélisation ?