Méthode d'évaluation de l'impact des programmes et des projets (MAPP)

• La triangulation - collecte de données distinctes à l'aide de différents outils afin de prouver ou d'accroître la validité des données.
• L'gnorance optimale - la capacité de sélectionner les données pertinentes et d'éviter la surabondance d'informations.
• L'pprentissage commun - les conclusions d'une évaluation sont le résultat d'un processus de discussion entre les parties prenantes concernées.

Comment fonctionne la MAPP ?

La MAPP est basée sur des discussions de Focus Groups. Les membres des groupes sont généralement des agriculteurs bénéficiaires et non bénéficiaires. Toutefois, d'autres parties prenantes peuvent également y participer, en particulier celles qui se trouvent à d'autres niveaux (par exemple, les gestionnaires de programmes et les Groupes d'Action Locale (GAL)). Elle comprend un ensemble d'outils qui peuvent aider à identifier les interventions qui ont un impact sur les indicateurs et à attribuer une échelle d'impact, tout en expliquant également d'autres facteurs qui influencent les indicateurs. Le concept de MAPP prévoit six étapes interdépendantes et logiquement connectées. Ces étapes sont les suivantes :

• La courbe de vie : Elle montre les tendances générales du développement dans la zone/région le long d'une certaine période commençant avant le début d'un plan stratégique relevant de la PAC (CSP) et se terminant à la date actuelle.
• Analyse des tendances : Cette matrice permet d'évaluer les tendances de développement détaillées sur la même période en fonction d'un certain nombre d'indicateurs prédéfinis.
• Vérification croisée : Les outils pratiques de vérification croisée, tels que les transects de marche le long des interventions de développement au sein de la communauté, peuvent s'avérer très utiles à ce stade. Les transects peuvent fournir des informations très utiles sur l'ampleur, la pertinence et la maintenance des interventions.
• Liste des interventions et des activités : Toutes les interventions pertinentes sont énumérées et classées en fonction de leur pertinence. En outre, les contributions de la PAC sont évaluées sur une échelle à points. En estimant le rapport coût-bénéfice relatif, certaines conclusions peuvent être tirées concernant la durabilité des interventions.
• Matrice d'influence : Cette matrice permet d'évaluer l'influence de toutes les interventions sur chaque indicateur. Ensuite, les sommes passives et actives sont calculées. La somme active montre quelle intervention a eu un impact sur le plus grand nombre d'indicateurs, tandis que la somme passive montre quels indicateurs ont eu ou n'ont pas eu de performance.
• Profil de développement et d'impact : Ce tableau sert d'outil d'interprétation et résume certains résultats de la MAPP.

Des exemples de certains de ces outils sont fournis dans la section sur l'apprentissage par la pratique ci-dessous.

Comment utiliser la MAPP pour évaluer les impacts nets

La MAPP peut être utilisée pour identifier les effets nets des interventions. Cela peut se faire par la création de « groupes de contrôle », qui sont comparés à un groupe similaire de bénéficiaires (par exemple, en termes de certaines caractéristiques des agriculteurs et/ou des exploitations). Les deux groupes sont comparés pour observer les changements et évaluer si, toutes choses égales par ailleurs, la situation des bénéficiaires s'est améliorée à la suite des interventions.

• Préparation en temps utile d'un Focus Group pour la MAPP.
• Familiarité avec les outils spécifiques de la méthode.
• Choix judicieux des participants sur la base des principes de la MAPP.

• Pour les indicateurs liés à l'environnement, inviter les autorités chargées de l'eau d'irrigation, les autorités chargées de la consommation d'électricité, les distributeurs d'engrais, les agronomes et d'autres experts.
• Pour les indicateurs liés à l'innovation, inviter les partenaires chefs de file des groupes opérationnels et d'autres partenaires, ainsi que des conseillers, des organismes de formation, des services de soutien à l'innovation et d'autres acteurs des SCIA.

Étape 5 - Sélectionner les outils de la MAPP

Choisissez parmi la gamme d'outils MAPP énumérés ci-dessus.

Étape 6 - Rapport sur les résultats de la MAPP

Les résultats de la MAPP seront de trois ordres : a) une fourchette estimative du chiffre ou de la tendance de l'impact net pour chaque indicateur au cours de la période d'évaluation du CSP (par exemple, augmentation nette estimée de x%) ; b) une analyse des principaux facteurs qui influencent ces chiffres ou tendances ; et c) des estimations de tout effet indirect sur les bénéficiaires bénéficiant ou non d'un soutien.

• La méthode MAPP est la plus pertinente en l'absence de données quantitatives pour évaluer les effets et les impacts.
• La MAPP peut compléter l'analyse quantitative en fournissant un jugement éclairé sur les effets et les impacts nets.
• La MAPP offre des perspectives uniques sur les impacts des interventions par rapport à d'autres initiatives sur le terrain.
• Le succès de la MAPP repose sur le choix judicieux des participants et sur une bonne compréhension des outils de la MAPP.
• Les outils MAPP ne sont pas rigides et peuvent être adaptés à différents types d'activités d'évaluation.

• Commission européenne, Direction générale de l'agriculture et du développement rural, (2014). Soutien à l'investissement dans le cadre de la politique de développement rural : rapport final, Office des publications.
• PRÉSENTATION - Évaluation des résultats du PDR dans le cadre du domaine d'intervention 6B - L'application de la méthode MAPP en Estonie.
  

• Réseau européen d'évaluation du développement rural pour la PAC (2014) : Capturer le succès de votre PDR : Lignes directrices pour l'évaluation ex post des PDR 2007-2013.
• Organisation des Nations unies pour l'alimentation et l'agriculture (FAO), (1997). Utilisation de l'évaluation rurale rapide ou participative. Dans Improving agricultural extension: A reference manualOpen link in new window