Ibtissem [user:field_middlename] Jouini

Ibtissem Jouini

Senior Evaluation Manager
CGIAR
Italia

Before joining CGIAR, Ibtissem Jouini served as a Regional Evaluations Specialist at the  Food and Agriculture Organization (FAO) of the United Nations, where she managed decentralized evaluations and designed capacity development activities within the FAO Office of Evaluation (OED). Prior to this role, she led multiple independent evaluations and studies. Her professional journey also includes substantial contributions to International Development Organizations and Foundations. In these positions, she operated either as M&E or Program Manager for various national, regional, and global projects. She actively participates in several evaluation associations. She leads the working group on the professionalization of evaluation at the Asociación Ibérica de Profesionales Evaluadores (APROEVAL), and she is a member of the European Evaluation Society (EES), and the MENA Evaluators Network (EvalMena). 

My contributions

    • Estimados colegas,

      Muchas gracias por compartir vuestras reflexiones: han puesto de relieve los puntos fundamentales sobre este tema. Nuestro departamento de evaluación se compromete a continuar esta discusión. Actualmente estamos realizando un estudio para identificar las condiciones bajo las cuales los diferentes enfoques de gestión de una evaluación tienen posibilidades de obtener buenos resultados, así como para explorar estrategias de colaboración entre oficinas independientes destinadas a superar las dificultades en materia de gestión. Pronto lanzaremos una encuesta en línea para identificar las prácticas de evaluación de las diferentes oficinas de evaluación independiente. Y tenemos previsto plantear este tema de discusión en la próxima Conferencia de la Sociedad Europea de Evaluación.

      He disfrutado leyendo vuestras contribuciones. A continuación, resumo los puntos fundamentales:

      Lal Manavado. Destacaste la importancia de una gestión eficaz de las evaluaciones para facilitar la labor de los evaluadores, garantizar la recopilación de datos pertinentes y fomentar la colaboración. También pusiste de relieve cómo puede proporcionar el responsable de una evaluación orientación integral para mejorar el proceso, en especial cuando los evaluadores necesitan abundante información de referencia.

      Gebril Mahjoub Osman. Subrayaste la necesidad de preservar la independencia de los equipos de evaluación. Tus argumentos en contra de la participación activa del responsable de una evaluación —debido a posibles sesgos y conflictos de interés— sugieren un papel de facilitación y apoyo, más que de implicación directa.

      Vicente Plata. Pusiste de relieve el valor de la comunicación eficaz —como las reuniones iniciales y finales entre el responsable de una evaluación y el equipo encargado de llevarla a cabo— para proporcionar información contextual y mejorar las conclusiones. Sostienes —con acierto— que las evaluaciones deben buscar un equilibrio entre presentar la información y mostrar el impacto más amplio del proyecto en los actores implicados.

      Cristian Maneiro. Recomendaste que el responsable de una evaluación cuente con el apoyo de analistas para gestionar la carga de trabajo de manera eficaz. Además, hiciste hincapié en que algunos enfoques de evaluación (p. ej. evaluación del desarrollo) se centran más en la capacitación. En estos casos, la participación del responsable como parte fundamental del programa evaluado es esencial. Este enfoque fomenta un mayor sentido de apropiación y promueve el aprendizaje interno en la organización.

      Hadera Gebru. Abogaste por definir y comunicar con claridad las funciones y responsabilidades del responsable de una evaluación. Desde mi punto de vista, promover la participación estratégica del responsable de una evaluación para garantizar resultados creíbles y de alta calidad —preservando al mismo tiempo la independencia de los evaluadores— es una buena opción.

      Adéléké Oguniyi. Coincido contigo en la importancia de la fase inicial como base para el éxito de una evaluación. Tal y como pusiste de relieve, para el proceso de una evaluación es fundamental que su responsable y los evaluadores externos se comuniquen de forma clara, establezcan las expectativas y planifiquen la evaluación de manera conjunta.

      Anne Clémence Owen. Analizaste la doble finalidad del responsable de una evaluación: proporcionar apoyo al proceso de evaluación y promover el aprendizaje. Creo que tu observación sobre la conveniencia de definir la participación del responsable de forma clara desde la fase de diseño —para garantizar la cohorencia con los objetivos de la evaluación y los requisitos de la organización— es importante.

      Musa K. Sanoe. Señalaste la importancia de tener una orientación adecuada y establecer roles y responsabilidades claros. Tu reflexión sobre la necesidad de que el responsable participe de forma estratégica en cada paso fundamental para mantener la credibilidad y la independencia de la evaluación es muy perspicaz.

      En conclusión, estas reflexiones colectivas ponen de relieve la importancia de lograr un equilibrio entre la participación y la independencia del responsable de una evaluación. 

      Muchas gracias a todos por vuestras valiosas contribuciones en esta importante discusión. 

      Si deseáis seguir participando en este proyecto, no dudéis en poneros en contacto conmigo por correo electrónico: i.jouini@cgiar.org.

      Un cordial saludo, 

      Ibtissem

  • What type of evaluator are you?

    Discussion
  • Lograr un equilibrio entre expertos técnicos y profesionales con experiencia en metodologías y procesos de evaluación suele plantear una disyuntiva. La mayoría de las evaluaciones no disponen de recursos suficientes para contratar a numerosos profesionales con experiencia y conocimientos en todos los ámbitos. Y encontrar expertos en una o varias disciplinas, con los conocimientos de idiomas requeridos y experiencia en la práctica de la evaluación es complicado.

    A continuación, se incluyen algunas recomendaciones para crear una buena relación profesional entre expertos y evaluadores en evaluaciones del desarrollo. Estos principios están basados en mi propia experiencia como evaluadora y en conversaciones

    • Reunir las pruebas de las evaluaciones que abarcaron -en parte o exclusivamente- la calidad de la ciencia (QoS) puede ser una forma sólida de configurar los cambios hacia la agenda de desarrollo. La síntesis de pruebas es un método fiable, pero ciertamente no es sencillo de poner en práctica, dada la variedad de pruebas que podemos encontrar, los criterios de evaluación, los enfoques, la orientación, los contextos, etc.

      El tema de la calidad de la ciencia fue uno de los principales temas cubiertos por el análisis en el marco de la Síntesis del Aprendizaje de una Década de Programas de Investigación del CGIAR (2021). Un reto al que se enfrentó el equipo de síntesis fue encontrar el marco analítico específico que mejor reflejara la variedad de evidencias de las dos fases de implementación de los Programas de Investigación del CGIAR (CRP): 2011-2016 y 2017-2019 y alcanzar los objetivos de la síntesis.

      Para explicarlo mejor, tuvimos que averiguar cómo había que categorizar la información y servir de referencia para indicar el enfoque, las escalas, los conceptos y los términos y definiciones relacionados, basándonos en los objetivos originales de la síntesis y el mapeo de los análisis que forman la base fundamental del corpus de 43 documentos de la síntesis. Los niveles de investigación relacionados con la calidad de vida se convirtieron en dos preguntas principales y cuatro subtemas.

      Las dos preguntas principales del tema Calidad de la Ciencia (QoS) y Calidad de la Investigación para el Desarrollo (QoR4D) son

      1. ¿Cómo ha evolucionado la calidad de la ciencia entre las dos fases de los programas de investigación del CGIAR (CRP) a lo largo de tres dimensiones: insumos, productos y procesos?
      2. ¿En qué medida ha evolucionado la calidad de servicio en relación con dos de los cuatro elementos de la QoR4D: la legitimidad y la credibilidad?

      Los resultados se estructuraron en torno a cuatro subtemas: (1) QoS: Entradas de investigación (2) QoS: Calidad de los resultados de la investigación (3) QoS: Gestión/proceso de la investigación y, (4) Elementos de la QoR4D: legitimidad y credibilidad. Junto a estos temas, se trataron una serie de temas transversales: género, cambio climático/medio ambiente, desarrollo de capacidades, asociaciones externas y juventud.

      En el análisis de los resultados se abordaron cuatro cuestiones clave: (1) patrones y tendencias entre las dos fases de los Programas de Investigación del CGIAR (CRPs) relacionados con la calidad de la ciencia (QoS) y la investigación para el desarrollo, el logro de resultados de desarrollo sostenible, y la gestión y la gobernanza; (2) cuestiones a nivel de todo el sistema que afectan a los logros de los Programas de Investigación del CGIAR (CRPs); (3) recomendaciones para la orientación futura de la investigación y la innovación del CGIAR; y (4) brechas de evidencia clave y necesidades para futuras evaluaciones.

      Se utilizó un enfoque de síntesis narrativa para resumir y analizar el documento Learning from a Decade of CGIAR Research Programs (Aprendizaje de una década de programas de investigación del CGIAR), empleando datos de fuentes secundarias de 47 evaluaciones y revisiones existentes. Las evaluaciones externas se codificaron y analizaron sistemáticamente utilizando un marco analítico estandarizado. Se llevó a cabo un análisis de tendencias bibliométricas para el tema de la calidad de vida, y los resultados se triangularon con síntesis anteriores y fueron validados por los miembros del Consejo Independiente de Ciencia para el Desarrollo (ISDC), los líderes de los Programas de Investigación del CGIAR (CRPs) y los revisores expertos.