Portail d'apprentissage

Approches qualitatives : cartographie des résultats

La cartographie des résultats est un outil qualitatif qui met l'accent sur les changements de comportement, les relations et les activités au sein d'un programme, nécessaires à la réalisation d'un changement social. Elle utilise un cadre global pour le suivi des résultats et prend en compte les changements inattendus pour évaluer les contributions d'un programme.

 multiethnic group of friends on a walk

Principes de base

En bref

L'approche de la cartographie des résultats (CR) est un outil de planification, de suivi et d'évaluation des projets ou des programmes visant le changement social et le développement des capacités. Elle met l'accent sur les changements de comportement, des relations, des actions et des activités des individus, des groupes ou des organisations directement impliqués dans un programme. Cette approche est centrée sur les personnes et l'apprentissage au cours du processus de développement et considère les changements inattendus comme des innovations potentielles. La CR est alignée sur l'approche de la théorie du changement, offrant un cadre pour recueillir des données sur les résultats (changements critiques actuels qui conduisent à un changement plus long et plus transformateur) initiés par le développement des capacités pour l'innovation agricole. Elle permet une évaluation crédible de la contribution d'une intervention aux résultats. La CR aide un projet ou un programme à comprendre son impact sur la progression du changement parmi les partenaires impliqués. Les progrès réalisés en matière de développement des capacités fonctionnelles sont mesurés par des marqueurs de progrès (indicateurs de changement).

Objectif de la cartographie des résultats :

  • Vise à identifier et à influencer les changements de comportement des partenaires limitrophes (acteurs/participants clés) qui contribuent à la réalisation de la vision d'un programme (les changements de développement globaux à long terme qu'un programme cherche à soutenir).
  • Favorise la réflexion et l'apprentissage parmi les parties prenantes, ce qui leur permet d'adapter les stratégies et d'améliorer l'efficacité d'un programme.
  • Est bien adaptée aux environnements complexes et dynamiques où les changements ne sont pas linéaires et sont influencés par divers facteurs.

Les principaux éléments de la cartographie des résultats sont les suivants :

  • Conception intentionnelle : Il s'agit de définir la vision, d'identifier les partenaires limitrophes (les individus, les groupes ou les organisations avec lesquels le programme interagit directement), de fixer des objectifs de résultats (les changements souhaités dans les comportements et les relations) et de mettre au point des marqueurs de progrès.
  • Suivi des résultats et des performances : Il s'agit du suivi continu des marqueurs de progrès, des cartes stratégiques et des pratiques organisationnelles afin de suivre et d'adapter les stratégies qui favorisent les changements escomptés. Les outils de collecte de données suivants sont utilisés à cette fin : (1) Journal de stratégie : Outil de suivi des stratégies mises en œuvre pour favoriser les changements chez les partenaires limitrophes. Il enregistre les ressources allouées, les activités entreprises et leurs rendements, tout en suggérant des améliorations ; (2) Journal des performances : Outil de suivi des pratiques internes de l'organisation. Il documente l'efficacité des opérations de l'organisation et fournit des indications permettant de procéder à des ajustements ; et (3) le journal des résultats : Outil de collecte de données sur les marqueurs de progrès. Il permet d'évaluer le niveau de changement atteint et d'identifier les facteurs contribuant à ces changements.
  • Planification de l'évaluation : Il s'agit d'élaborer un plan pour évaluer l'efficacité et l'impact du programme, en fournissant un retour d'information en vue d'une amélioration continue.

La cartographie des résultats a été appliquée dans divers projets, tels que le projet CDAIS (Capacity Development for Agricultural Innovation Systems), financé par l'UE et mis en œuvre par Agrinatura et la FAO en collaboration avec des partenaires nationaux. Cette approche permet de suivre et d'évaluer les progrès des interventions de développement des capacités visant à favoriser l'innovation dans l'agriculture.

Avantages et inconvénients

Avantages Inconvénients
  • Met l'accent sur les changements de comportement nécessaires pour atteindre les objectifs de développement à long terme, ce qui le rend particulièrement efficace dans les projets de développement des capacités et de changement social.
  • Accepte les changements imprévus et s'y adapte, ce qui favorise l'innovation et l'apprentissage continu.
  • La nature participative de la CR implique les parties prenantes dans le processus de planification, de suivi et d'évaluation, ce qui renforce l'appropriation et la responsabilité.
  • Fournit un cadre global pour le suivi non seulement des résultats, mais aussi des processus et des stratégies qui y conduisent.
  • L'utilisation de marqueurs de progrès permet de suivre les changements progressifs, ce qui facilite le suivi et l'ajustement des stratégies en fonction des besoins.
  • La méthodologie peut être complexe à mettre en œuvre, en particulier dans le cadre de projets de grande envergure avec de multiples partenaires limitrophes (acteurs/participants) et des défis à relever en matière de résultats.
  • Les parties prenantes peuvent initialement résister à la nature participative et itérative de la CR, en particulier si elles sont habituées à des approches d'évaluation plus traditionnelles et linéaires.
  • La gestion et l'analyse des données collectées par le biais de divers journaux peuvent s'avérer difficiles et nécessiter de solides systèmes de gestion des données.
  • La mise en œuvre de la CR peut prendre beaucoup de temps et nécessiter d'importantes ressources humaines et financières pour assurer un suivi et une animation en continu.

Quand l'utiliser ?

Dans le contexte de l'évaluation du plan stratégique relevant de la PAC, la CR est utile pour évaluer les programmes qui ont été élaborés sur la base de la théorie du changement, en mettant l'accent sur les changements de comportement et le développement des capacités. Cette approche est efficace pour le suivi et l'évaluation de programmes complexes impliquant de multiples parties prenantes et des environnements dynamiques, tels que les systèmes de connaissances et d'innovation agricoles (SCIA) et les stratégies de développement local (SDL/LEADER).

La cartographie des résultats peut être utilisée pour évaluer l'impact des interventions de la PAC sur des thèmes transversaux tels que la durabilité, l'innovation et l'inclusion sociale. Elle permet de suivre les changements de comportement et le développement des capacités des parties prenantes, ce qui la rend efficace pour évaluer les interventions visant à améliorer les compétences et les connaissances des agriculteurs, des coopératives, des conseillers agricoles et d'autres parties prenantes. Par exemple, la CR peut évaluer comment une augmentation du nombre d'agriculteurs participant à des programmes de formation conduit à des changements transformateurs dans les pratiques agricoles.

Cette approche est adaptée aux programmes de promotion de l'innovation et de la durabilité agricoles, car elle permet de suivre la manière dont les changements de comportement des parties prenantes contribuent à l'adoption de pratiques durables et de solutions innovantes. La cartographie des résultats favorise une culture de l'amélioration continue et de l'innovation en acceptant les changements imprévus et en encourageant les parties prenantes à réfléchir à leurs stratégies et à les réadapter.

La cartographie des résultats convient également au suivi des initiatives multipartites, telles que les projets de développement rural impliquant le secteur privé, les ONG, les groupes communautaires et le secteur public (LEADER). Elle permet de s'assurer que toutes les parties prenantes travaillent à la réalisation d'objectifs communs et adaptent leurs stratégies sur la base d'un retour d'information continu. La CR facilite la planification et le suivi collaboratifs, en orientant les parties prenantes vers des objectifs communs.

Dans des environnements où les changements ne sont pas linéaires et sont influencés par divers facteurs internes et externes, la cartographie des résultats favorise la gestion adaptative et l'amélioration continue des stratégies. Son approche participative implique les parties prenantes dans le processus de suivi et d'évaluation, ce qui renforce leur engagement et leur appropriation des résultats d'un programme.

Conditions préalables

Les conditions préalables à l'application de la cartographie des résultats sont les suivantes :

  • Avoir une vision bien définie des changements de développement à long terme qu'un programme vise à réaliser. Un environnement de collaboration dans lequel les parties prenantes sont prêtes à travailler ensemble pour atteindre des objectifs communs est nécessaire.
  • Une participation active et un engagement fort de toutes les parties prenantes dans le processus de cartographie des résultats sont essentiels. Le suivi continu des marqueurs de progrès, des stratégies et des pratiques organisationnelles, soutenu par des mécanismes de retour d'information établis pour la gestion adaptative et l'amélioration, est vital.
  • La volonté de tirer des enseignements du processus et d'adapter les stratégies en fonction des résultats.
  • Des évaluateurs compétents et expérimentés dans l'utilisation de la cartographie des résultats doivent être disponibles pour guider le processus et garantir une participation efficace. La formation et le soutien apportés aux parties prenantes sont essentiels pour comprendre et appliquer les concepts et les outils de la cartographie des résultats.

Le temps et les ressources financières doivent être suffisants pour soutenir la nature itérative et participative de la cartographie des résultats. Des ressources doivent être prévues pour la gestion et l'analyse des données recueillies à l'aide des différents outils de cartographie des résultats.

Étape par étape

La méthodologie de la cartographie des résultats comprend trois étapes principales, qui sont détaillées par des actions plus spécifiques :

Étape 1 - Conception intentionnelle

Définir la vision, identifier les partenaires limitrophes, fixer les objectifs à atteindre et mettre au point des marqueurs de progrès.

Définir la vision (POURQUOI) : Exprimer clairement les changements de développement à long terme que le programme vise à réaliser.

Identifier les partenaires limitrophes (QUI) : Définir les individus, les groupes ou les organisations avec lesquels le programme interagit directement et qu'il espère influencer. L'identification des partenaires limitrophes est cruciale car elle permet de concentrer les efforts du programme sur des groupes spécifiques dont le programme entend modifier le comportement.

Définir les objectifs de résultats (QUOI) : Décrire les changements souhaités dans les comportements, les relations, les activités ou les actions des partenaires limitrophes. Il s'agit des changements de comportement, de relations, d'activités ou d'actions que le programme vise à obtenir chez ses partenaires limitrophes. Ils décrivent l'état idéal que les partenaires limitrophes devraient atteindre pour contribuer efficacement à la vision du programme.

Élaborer des marqueurs de progrès (COMMENT) : Créer des indicateurs spécifiques qui décrivent la progression des changements chez les partenaires limitrophes. Ils sont classés en trois catégories : « attendu » (réponses immédiates), « aimerait » (changements intermédiaires) et « adorerait » (résultats à long terme). Les marqueurs de progrès sont dynamiques et peuvent être ajustés en fonction de l'évolution du programme.

Compléter une carte stratégique pour chaque objectif de résultat (COMMENT) : Après avoir clarifié les changements que le programme entend influencer, sélectionner les activités qui maximisent les chances de succès.

Articuler les pratiques organisationnelles (COMMENT) : Les pratiques organisationnelles révèlent le potentiel d'une organisation à être performante. En se concentrant sur les données relatives aux pratiques organisationnelles, il est possible de réfléchir aux processus internes et aux résultats inattendus potentiels.

Étape 2 - Suivi des résultats et des performances

Le suivi des priorités permet d'établir les domaines du projet qui doivent être suivis. Les outils de collecte de données suivants sont utilisés à cette fin :

  • Journal des stratégies : Suit les stratégies mises en œuvre pour favoriser les changements chez les partenaires limitrophes. Enregistre les ressources allouées, les activités entreprises et leurs rendements.
  • Journal des performances : Suit les pratiques internes de l'organisation, documente l'efficacité des opérations et fournit des indications permettant de procéder à des ajustements.
  • Journal des résultats : Recueille des données sur les marqueurs de progrès, évalue le niveau de changement atteint et identifie les facteurs contributifs.

Étape 3 - Planification de l'évaluation

Élaborer un plan d'évaluation afin d'évaluer systématiquement l'impact du programme et de fournir un retour d'information en vue d'une amélioration continue. Décrir les éléments clés du processus d'évaluation, notamment qui utilisera l'évaluation, comment et quand elle sera menée, les sources d'information, les méthodes, les coûts et le calendrier.

Les étapes supplémentaires pour clore le cycle de planification, de suivi et d'évaluation peuvent inclure les actions suivantes :

Affiner la stratégie

  • Engager les parties prenantes dans des processus de réflexion et d'apprentissage afin d'adapter les stratégies en fonction du retour d'information.
  • Utiliser les enseignements tirés du suivi et de l'évaluation pour apporter les ajustements nécessaires aux stratégies et aux activités du programme.

Rapports et communication

  • Partager les résultats de l'évaluation avec les parties prenantes, en soulignant les changements de comportement et les progrès réalisés.
  • Établir une boucle de retour d'information pour assurer une amélioration et une adaptation continues sur la base des résultats de l'évaluation.

Principaux points à retenir

  • La cartographie des résultats met l'accent sur les changements de comportement nécessaires pour atteindre les objectifs de développement à long terme.
  • La cartographie des résultats s'adapte aux changements imprévus, ce qui favorise l'innovation et l'apprentissage continu.
  • La nature participative de la cartographie des résultats renforce l'appropriation par et la responsabilisation des parties prenantes.
  • La cartographie des incidences fournit un cadre complet pour le suivi des résultats et des processus qui y conduisent.
  • L'utilisation de marqueurs de progrès permet de suivre les changements progressifs et d'ajuster les stratégies en fonction des besoins.
  • La mise en œuvre de la cartographie des résultats nécessite beaucoup de temps et de ressources pour le suivi continu et la facilitation.
  • La méthodologie peut être complexe et subjective, ce qui nécessite de solides compétences en matière de gestion des données et de facilitation.

Tirer les leçons de l'expérience

Pour en savoir plus

  • Doutwaite, B., Paz-Ybarnegaray R., IFSA, (2016) Outcome Evidencing : A Rapid and Complexity-Aware Evaluation Method, IFSA 2016 proceedings, WS 1.2 Suivi et évaluation pour l'apprentissage et l'innovation
  • CRDI (2001) Outcome Mapping: Building Learning and Reflection into Development Programs (Cartographie des incidences : Intégrer l'apprentissage et la réflexion dans les programmes de développement). Centre de recherches pour le développement international
  • Smutylo, T., (2005) Outcome Mapping: A Method for Tracking Behavioural Changes in Development Programs (Outcome Mapping : Une méthode pour suivre les changements de comportement dans les programmes de développement). ILAC Brief 7
  • Earl, S., Carden, F., & Smutylo, T., (2001) Outcome Mapping: The Challenges of Assessing Development Impacts (Cartographie des incidences : Les défis de l'évaluation des impacts du développement). Centre de recherches pour le développement international.