RE: How to define and identify lessons learned? | Eval Forward

Chers tous,

Merci pour toutes les réponses et les contributions intéressantes et pertinentes.

Ce qui m'a poussé à écrire ce message, c'est l'impression que la plupart des leçons apprises (ou einsegnements tirés) identifiées dans les rapports d'évaluation ne sont pas des leçons ou sont mal formulées et rarement utilisées ; en d'autres termes, les évaluateurs génèrent (mais le faisons-nous ?) des connaissances qui ne servent pas vraiment à grand-chose.  J'ai également eu l'impression que derrière ce problème se cache l'absence d'une compréhension commune du concept et des processus permettant d'identifier et de saisir ces types de preuves spécifiques.

Alors, comment faire pour identifier les leçons apprises réelles et utiles ?

Je vais essayer de résumer les points clés soulevés :

1. La diversité des réponses montre clairement qu'en tant qu'évaluateurs, nous n'avons toujours pas une compréhension commune de ce que sont les leçons apprises. Souvent, les leçons semblent être là uniquement pour cocher une case dans les exigences des rapports.

2. Quels sont les éléments clés des enseignements ? Les enseignements doivent :

  • être formulées sur la base de l'expérience et des preuves, et sur le changement qui affecte la vie des gens ;
  • être observables (ou avoir été observées) ;
  • refléter le point de vue de différentes parties prenantes (donc être observées sous différents angles) ;
  • refléter les défis auxquels sont confrontées les parties prenantes dans différentes positions (c'est-à-dire que les donateurs peuvent également avoir quelque chose à apprendre !)
  • être quelque chose de nouveau [qui représente] une connaissance précieuse et/ou une façon de faire les choses ;
  • refléter ce qui s'est bien passé et aussi ce qui ne s'est pas bien passé ;
  • être capable d'améliorer l'intervention ;
  • être spécifiques et exploitables (tout en étant adaptables au contexte) afin de pouvoir être mis en pratique.

J'aime beaucoup l'approche d'ALNAP qui synthétise les leçons à tirer. De mon point de vue, une leçon n'est vraiment apprise que si vous la faites différemment la prochaine fois. Sinon, elle n'est pas encore apprise ! C'est pourquoi j'ai tendance à appeler simplement "leçons" celles que nous identifions lors des évaluations.

3. Comment collecter les leçons apprises ?  Le processus de collecte doit

  • être systématique et résulter de consultations avec différentes parties prenantes ;
  • inclure quoi (contenu), pour qui (parties prenantes) et comment (contexte !!);
  • être clair sur le public cible (par exemple, le personnel opérationnel, le personnel impliqué dans les opérations stratégiques, les décideurs politiques, etc.); 
  • prendre en compte la dynamique du pouvoir (donateurs, responsables de la mise en œuvre, bénéficiaires, etc ;)
  • envisager les conséquences pratiques (par exemple, est-il possible de s'adapter ?);
  • inclure des systèmes opérationnels/mécanismes de retour d'information pour garantir que les conclusions seront discutées et mises en œuvre lorsque cela sera convenu ;
  • équilibrer la rigueur et l'aspect pratique.

4. Ma dernière question était la suivante : comment pouvons-nous (essayer de) garantir que les leçons seront réellement "apprises" - c'est-à-dire utilisées, mises en pratique ? (J'utilise ici le concept intéressant d'ALNAP, selon lequel les leçons sont formulées pour être apprises). Voici quelques conseils partagés :

  • Associer des stratégies de mise en pratique, y compris des incitations ;
  • les leçons devraient informer ou être alignées sur les recommandations ;
  • les recommandations doivent être reflétées dans la réponse de la direction ; et
  • la direction doit être responsable de la mise en œuvre.

Il est bon de voir que d'autres organisations et collègues sont intéressés et que des ressources sont disponibles. J'espère que cela pourra nous aider à améliorer nos pratiques.  J'ai compilé ci-dessous les approches et outils recommandés, ainsi que les exemples et ressources partagés.

Merci !

Bien à vous,

Emilia

***

Approches ou outils recommandés comme efficaces pour saisir et traiter les leçons apprises (la plupart en anglais) :

  • La récolte des effets ("Outcome Harvesting" - OH), 
  • les examens après action ("After-Action Reviews" - AAR) et/ou 
  • Analyse des perspectives ("Perspective Analysis" - PA) 
  • L'approche d'ALNAP (qui comprend une revue de la littérature, un examen par un comité d'experts, des évaluations de la fréquence, de la qualité et de la pertinence) - plus d'informations sur la méthodologie peuvent être trouvées ici (document axé sur les défis des catastrophes liées au climat : https://www.alnap.org/help-library/annex-alnap-lessons-paper-adapting-humanitarian-action-to-climate-change  )

Ressources et exemples partagés :

 

 

 

Retourner à la discussion