Faire l’évaluation de l’évaluabilité pour s’assurer qu’un projet ou un programme pourra être évalué efficacement

L’évaluation intervient à plusieurs étapes de la programmation d’un projet (planification, mise en œuvre, clôture etc.). Elle fournit des informations qui facilitent la prise de décision aux différentes parties prenantes impliquées dans la conception et/ou la mise en œuvre d’un projet. Une des questions que se posent régulièrement les parties prenantes impliquées dans une démarche évaluative est : « les conclusions et recommandations de l’évaluation sont-elles pertinentes pour faciliter la prise de décision? » Il est difficile d’apporter une réponse claire, précise et certaine à cette interrogation. C’est pour apporter des éléments de réponse à cette question qu’une évaluation de l’évaluabilité est indispensable. Cet article décrit l’Évaluation de l’évaluabilité (encore appelée Étude de l’Évaluation (EE) ou Analyse de l’Évaluation d’un projet). Il présente succinctement la définition et l’utilité de l’EE, les critères, la démarche et les résultats d’une évaluation de l’évaluabilité.

Définition et utilité de l’évaluation de l’évaluabilité

Développée dans les années 1970 aux Etats Unis pour répondre aux difficultés et défis dans l’évaluation de programmes gouvernementaux, l’évaluation de l’évaluabilité est un processus rigoureux de collecte et d’analyse de données permettant de s’assurer que les évaluations futures d’une intervention seront réalisables et que celles-ci pourront produire des résultats satisfaisants et utiles aux parties prenantes. L’évaluation de l’évaluabilité est une approche systématique destinée à faciliter l’évaluation future d’une intervention (projet/programme) (Craig et Campbell (2015).

Oxford University Press définit l’évaluation de l’évaluation comme un processus systématique permettant de décrire la structure d’un programme et d’analyser la plausibilité et la faisabilité de la réalisation des objectifs ; leur aptitude à une évaluation approfondie ; et leur acceptabilité pour les gestionnaires de programme, les décideurs et les opérateurs de programme.

Entreprendre une évaluation de l’évaluabilité est bénéfique à la phase de planification d’un projet à la fois pour les équipes de conception, de mise en œuvre et les parties prenantes, car elle contribue à une organisation plus optimale des activités du projet et fournit des recommandations en vue de l’amélioration des résultats, des indicateurs et des activités formulés dans le cadre logique du projet et de faciliter les évaluations ultérieures qui devront s’ensuivre. Cette activité est indiquée lorsque le projet est complexe, lorsque la théorie du changement et le cadre logique sont peu clairs ou peu documentés. L’EE permet de démêler cette complexité en favorisant la description détaillée des résultats escomptés, des indicateurs de mesure et des activités à mettre en œuvre pour l’atteinte des résultats, ce qui aboutit à la mise en place d’un système de suivi evaluation nécessaire aux évaluations ultérieures.

critères de l’évaluation de l’évaluabilité

Selon Wholey (1987), l’évaluation de l’évaluabilité vise à répondre aux questions suivantes :

1. Les intentions des initiateurs et initiatrices et les objectifs de l’intervention sont-ils clairement présentés?
2. Les objectifs de l’intervention sont-ils plausibles à la lumière des connaissances disponibles et des moyens mobilisés ?
3. Les conditions sont-elles réunies pour la collecte des données d’évaluation ?
4. Quelle sera l’utilité des résultats d’évaluation pour les parties prenantes ?

L’EE examine la stratégie de suivi et d’évaluation du projet suivant de nombreux critères dont:

D’autres critères peuvent être définis en fonction de la nature du projet, de l’organisme en charge de son execution ou des exigences du donateur.

DEMARCHE DE L’EVALUATION DE L’EVALUABILITE

Dans la littérature, M. F. Smith (1989) décrit le déroulement d’une évaluation de l’évaluabilité en dix (10) étapes. Ces mêmes étapes ont été décrites de façon simplifiée par Trevisan et Yi (2003). Toutefois, il faut noter qu’il ne s’agit pas d’un processus linéaire et il n’est pas exclu de revenir en arrière pour affiner les objectifs de l’évaluation de l’évaluabilité. Les dix étapes décrites par M. F. Smith (1989) sontsynthetisées ci-dessous :

RÉSULTATS DE L’ÉVALUATION DE L’ÉVALUABILITÉ :

Les principaux resultats attendus au terme de l’évaluation de l’évaluabilité d’un projet/ programme sont:

Bienque l’évaluation de l’évaluabilité soit une approche parfois lourde et laborieuse, elle peut être influencée par les caractéristiques du projet, les parties prenantes impliquées ou le contexte d’implantation. C’est pourquoi il peut être nécessaire d’adapter l’approche en fonction de ces réalités. L’évaluation de l’évaluabilité ne pourra peut-être pas répondre à toutes les questions, mais elle peut être une alternative utile pour éviter le statu quo ou la conduite d’une évaluation dont les résultats ne peuvent être utilisés par aucune des parties. Elle facilite la gestion des projets/programmes axées sur les résultats.