1.1. Justificación y razones de la evaluación
El proyecto objeto de evaluación contó con una subvención de la AECID en la convocatoria del año 2024 de 465.237 €.
Las razones para la realización de una evaluación final son, en primer lugar, dar cumplimiento a los requisitos de la subvención de cooperación internacional financiada por la AECID en donde se prevé una evaluación por razones de transparencia y rendición de cuentas.
Y, en segundo lugar, el valor que Solidaridad Internacional Andalucía (SIA) y la ONG CAEB dan a la realización de evaluaciones de las intervenciones al considerar que los resultados de estas representan una herramienta de trabajo de gran valor, con vistas a:
Aumentar la calidad de la ayuda para el cumplimiento de la misión de la organización.
Incrementar la transparencia con relación a las poblaciones con las que se trabaja, las autoridades locales, las autoridades nacionales y las socias y socios de Solidaridad Internacional Andalucía.
Ampliar el aprendizaje de la organización y compartirlo entre los proyectos y las socias locales identificando aquellas prácticas con un valor añadido.
1.2. Objetivos específicos de la evaluación
La evaluación final externa de este proyecto es un compromiso adquirido con la AECID en la propia solicitud de la subvención otorgada para la ejecución del proyecto mencionado, en el marco de la normativa de seguimiento y justificación recogida en las bases reguladoras de la Convocatoria de AECID. Así, esta evaluación representa el último hito que marca el final de la ejecución del proyecto, teniendo como propósito principal evaluar de manera global la consecución de los resultados y objetivos específicos del proyecto y los principales componentes de la intervención con el fin de mejorar los procesos de desarrollo.
Esto, a su vez, permitirá conocer el nivel de implicación de los diversos actores involucrados en la intervención, la integración de los enfoques de derechos humanos, género, medioambiental y antropológico, así como el proceso de rendición de cuentas empleado y ayudará a una mejor toma de decisiones en próximas intervenciones.
La evaluación generará recomendaciones que identifiquen acciones concretas que Solidaridad Internacional Andalucía debe implementar para fortalecer sus operaciones, a fin de garantizar la respuesta más oportuna, eficaz y eficiente posible en futuras respuestas de emergencia. Se recopilarán todas las lecciones aprendidas para guiar en el futuro las próximas intervenciones de Solidaridad Internacional Andalucía.
1.3. Tipo de evaluación
Se trata de una Evaluación externa final del proyecto anteriormente mencionado.
1.4. Uso y expectativas de la evaluación
La evaluación tendrá un doble uso:
Por una parte, rendir cuentas a los donantes a través de una opinión externa sobre el impacto del proyecto.
Por otra parte, se espera una relación de conclusiones y recomendaciones para mejorar la calidad de la ejecución y la pertinencia de las próximas intervenciones de Solidaridad Internacional Andalucía.
El Informe de evaluación será de uso para:
El personal de las entidades financiadoras del proyecto: AECID.
El personal técnico y voluntario de Solidaridad Internacional Andalucía, en sede y terreno.
El personal técnico y voluntario de CAEB.
El público en general interesado en las acciones de cooperación internacional para el desarrollo, a través de su publicación en las páginas web de SIA y CAEB.
2. OBJETO Y ANTECEDENTES DE LA INTERVENCIÓN
2.1. Lógica de la intervención
El Proyecto AECID 2024/PRYC/000184, “Mejora de la seguridad alimentaria y nutricional infantil y acceso a la salud reproductiva de mujeres y adolescentes en Diéma, Kayes (Malí)” que se ejecuta entre Solidaridad Internacional Andalucía y CAEB.
El monto total del mismo asciende a 465.237 €, cuya totalidad corresponde a la subvención de la Agencia Española de Cooperación Internacional para el Desarrollo (AECID). El proyecto inició su ejecución el 1 de noviembre de 2024 y tiene prevista su finalización el 31 de octubre de 2026.
El presente proyecto tenía como objetivo general “Garantizar el acceso a alimentos nutritivos y a los servicios de SSR en Diéma” y como objetivo específico se plantea “Reducir la mortalidad infantil, de adolescentes y mujeres en edad reproductiva, Distrito de Diéma”. El proyecto se ha desarrollado en Malí.
Con estos objetivos, se diseñó una intervención de 24 meses, que centró sus esfuerzos en cuatro resultados que venían a reforzarse entre sí:
- R1. Diagnóstico y tratamiento de la desnutrición aguda en menores y mujeres embarazadas y
lactantes.
- R2. Mejorar la alimentación y nutrición de menores de 6 a 59 meses, embarazadas y lactantes.
- R3. La atención de la salud sexual y reproductiva es accesible y utilizada por adolescentes y mujeres
- R4. Educación en salud sexual y reproductiva para adolescentes, jóvenes y mujeres
Transversalmente, el proyecto ha promovido el enfoque de género, los derechos humanos, la gobernanza, la sostenibilidad ambiental y el respeto a la diversidad.
2.2. Colectivo meta de la intervención
El colectivo meta de la intervención está constituido por:
Titulares de derechos: 32.928 personas (11.079 mujeres (33,65%), 3.602 hombres (10,94%) y 18.247 niñas/niños (55,41%)
Titulares de derechos por resultado:
R1. 8.512 personas: 38 enlaces y 5 puntos focales de nutrición de los CSCOM serán capacitados en el PCIMA, 4.072 personas se beneficiarán de una atención de salud de calidad con el refuerzo técnico de los 4 CSCOM y la URENI/Maternidad del CSRef, 2.825 niños/s con MAS/MAM y embarazadas y lactantes recibirán tratamiento, 1.254 menores desnutridos y 159 embarazadas o lactantes protegidos contra el paludismo.
R2. 8.917 personas: 760 miembros de 38 Grupos de Apoyo a la Nutrición (GSAN) serán dinamizados, se sensibilizará a 3.800 personas sobre la preparación y consumo de productos locales de alto valor nutricional, 1.454 personas recibirán alimentos para tratar la MAM. La situación nutricional de 1.819 personas de 2 comunidades con alta prevalencia de desnutrición mejorará con el acondicionamiento de huertos. Se incrementará la producción agrícola de 584 productores a través de la distribución de semillas agrícolas adaptadas. Se sensibilizará a 500 personas en género y nutrición a través de radios.
R3. 14.219 personas: Se capacitará a 44 agentes sobre la prestación de servicios de SDSR para adolescentes, 8 agentes de CSCom garantizarán la aplicación de la Estrategia Avanzada en zonas con baja cobertura de vacunación y NPC, se capacitará a 190 educadores entre pares para garantizar la sensibilización, 456 mujeres y niñas en edad reproductiva adoptarán métodos anticonceptivos modernos, 393 mujeres que han dado a luz se beneficiarán de kits de higiene gratuitos. 13.126 personas se beneficiarán de una mejor atención en el CSCOM rehabilitado de Diangouté-Camara.
R4. 1.280 personas: Se capacitará a 20 líderes comunitarios sobre SDSR, se sensibilizará a 760 mujeres y niñas en edad reproductiva sobre el uso de servicios de la Red de Protección de la Infancia (1 a 4) y se sensibilizará a 500 personas sobre ETS/HIV/SIDA y los DSR a través de la radio.
2.3. Otros actores
Además de Solidaridad Internacional Andalucía y la ONG CAEB, para la ejecución, se contó con la participación activa de:
Titulares de obligaciones:
Sector Agrícola de Diéma: apoya la capacitación de los productores en prácticas agroecológicas y de cambio climático y supervisa los 2 perímetros hortícolas. Vela por la aplicación de normas técnicas y en la ejecución de las actividades.
Centro de Salud de Referencia de Diéma: capacita a los agentes de salud sobre el PCIMA. Supervisa las actividades de prevención y tratamiento de la desnutrición aguda y vigila los indicadores de nutrición. Facilita la formación de educadores entre pares. Lleva a cabo la supervisión integrada de las actividades de atención de la SSR de los CSCOM cubiertos por el proyecto.
Titulares de Responsabilidades:
Asociaciones de Salud Comunitaria (ASACO): participarán en la elección equitativa de los enlaces de salud comunitaria que serán capacitados en acciones esenciales en nutrición y SSR.
Autoridades de aldeas (jefes de aldea, notables, líderes religiosos y de opinión): servirán de canales sociales para difundir información sobre el acceso equitativo a las actividades del proyecto.
Los Ayuntamientos de los 3 municipios de intervención garantizarán el acceso a la tierra a las mujeres.
3. ACTORES IMPLICADOS
3.1. Actores participantes en la intervención y a implicar en la evaluación:
Los ya presentados en los apartados 2.2 y 2.3, garantizando la participación del colectivo meta, y con especial énfasis a lo aportado por las mujeres.
Además, participarán los siguientes actores:
- Comité de gestión del proyecto, compuesto por la coordinación del proyecto de CAEB, el equipo de terreno de CAEB, el delegado de SIA en Mali, que han coordinado el seguimiento del proyecto a través de reuniones trimestrales, en las que se han ido revisando los avances en la realización de actividades, cumplimiento de indicadores y logro de resultados y objetivos.
3.2. Unidad Gestora de la Evaluación y Comité de Seguimiento de Evaluación:
Unidad Gestora de la evaluación:
Solidaridad Internacional Andalucía y CAEB formarán la Unidad Gestora de la Evaluación, teniendo en todo momento un papel activo durante el proceso de la evaluación y manteniendo una estrecha coordinación con el equipo encargado de la evaluación externa.
La Unidad Gestora se encargará de elaborar los TdR, contratar al equipo evaluador, publicar y difundirlos resultados.
A su vez, pondrá a disposición del equipo evaluador la estructura con la que cuentan, así como facilitarán cuanta información, documentación y cuantos contactos y reuniones se consideren necesarias para el buen desarrollo de la evaluación.
Comité de Seguimiento de la evaluación
La unidad Gestora de Evaluación, junto con el equipo evaluador crearán un Comité de Seguimiento donde tendrá se invitará a la presencia y participación de la OCE, con el objetivo de supervisar la calidad del proceso seguido y validar el informe final de evaluación.
4. ALCANCE DE LA EVALUACIÓN
El ámbito geográfico, coincidirá con el alcance geográfico de las actividades desarrolladas en el marco del proyecto en Malí, que se ubica en la Provincia de Diéma, en la región de Kayes.
A nivel sectorial, la intervención incide en el sector Educación, prevención, y atención de estado nutricional, Planificación familiar, Lucha contra ETS (enfermedades de transmisión sexual), incluye sida, Acceso a tratamiento ETS, Seguridad Alimentaria y Calidad
A nivel programático, el objeto de la evaluación global será la ejecución del proyecto 2024/PRYC/000184, “Mejora de la seguridad alimentaria y nutricional infantil y acceso a la salud reproductiva de mujeres y adolescentes en Diéma, Kayes (Malí)”.
A nivel temporal, la evaluación corresponde al período que abarca desde el inicio del proyecto hasta la finalización del periodo de ejecución, concretamente desde el 01/11/2024 hasta el 31/10/2026.
Se muestra a continuación una tabla resumen del alcance de esta evaluación final en relación con preguntas de la evaluación y criterios de análisis y objetivos específicos:
Realizar una valoración general de los principales resultados del proyecto.
Valoración global del cumplimiento de los objetivos específicos y de los componentes principales del proyecto.
Analizar el cumplimiento de los siguientes criterios
Pertinencia
Valoración de la adecuación de los resultados y los objetivos de la intervención al contexto en el que se realiza.
- ¿El proyecto ha respondido a los problemas y necesidades de la población beneficiaria identificados originalmente?
- ¿Se consideraron los intereses y expectativas de las/os beneficiarias/os y autoridades locales?
- ¿Qué factores internos y externos han ejercido influencia en la habilidad de los grupos beneficiarios, CAEB y SIA para lograr los objetivos proyectados?
- ¿Se identifican cambios significativos en el contexto a lo largo de las actuaciones? ¿Se adecuaron los objetivos a la realidad previa y actual?
- ¿Fueron relevantes los objetivos y el diseño del proyecto dado el contexto social, político y económico?
Eficiencia
Estudio y valoración de los resultados alcanzados en comparación con los recursos empleados.
- ¿Ha sido eficiente la transformación de los recursos en resultados? ¿Existe otra alternativa para la consecución de los resultados empleando menos recursos?
- ¿Los recursos materiales y humanos han sido los necesarios/suficientes para la consecución de los resultados y objetivos planteados?
- ¿Las capacidades SIA y CAEB han sido suficientes para alcanzar los resultados y objetivos previstos?
- ¿Se dedicaron suficientes recursos humanos y materiales para fortalecer dichas capacidades?
- ¿En qué medida las organizaciones e instituciones participantes en el proyecto se han fortalecido mutuamente y se han complementado entre sí?
Eficacia
Medición del grado de consecución de los objetivos inicialmente previstos, valorar la intervención en función de su orientación a resultados.
- ¿El diseño de la intervención está correctamente orientado y fue eficaz en la consecución de los resultados previstos?
- ¿En qué medida los procesos de implementación de la intervención han contribuido a la consecución de los objetivos/resultados del Proyecto?
- ¿Se han mejorado las capacidades de los titulares de derechos en Diéma?
- ¿Se han mejorado las capacidades de los gobiernos locales?
-¿Qué procesos han aportado más a la consecución de los objetivos del proyecto?
Impacto
Identificación de los efectos generados por la intervención, positivos o negativos, esperados o no, en la vida de las personas con las que se ha trabajado, así como con las instituciones participantes.
- ¿Ha contribuido la intervención a alcanzar el objetivo global propuesto?
- ¿Se observa que se haya logrado un impacto positivo sobre la población beneficiaria?
- ¿Se ha producido una mejora en la coordinación interinstitucional en el territorio para la prevención y atención de la violencia contra mujeres?
- ¿Se han generado impactos positivos no previstos sobre la población de las comunidades de intervención? ¿E impactos negativos no previstos?
Viabilidad / Sostenibilidad
Continuidad en el tiempo de los efectos positivos generados con la intervención una vez retirada la ayuda.
- ¿Los procesos puestos en marcha con las organizaciones e instituciones en los municipios a través del proyecto se prevén sostenibles en el tiempo?
- ¿Se ha conseguido generar capacidades e instrumentos que permitan que las acciones del proyecto sean sostenibles en el tiempo?
- ¿Los procesos de ejecución, seguimiento y gestión desarrollados entre SIA y CAEB son sostenibles?
- ¿Se han fortalecido o creado organizaciones, redes o instituciones que continúen los procesos iniciados por el proyecto? ¿Cuáles son? ¿Están identificadas las que requieren fortalecimiento?
Coherencia
Interna: Articulación de los objetivos de la intervención con los instrumentos propuestos para lograrlos y su adecuación a los problemas.
Externa: compatibilidad de la intervención con otras estrategias y programas con los que pueda tener sinergias o complementariedad.
- Las estrategias formativas; incluyendo materiales, metodología, capacidades del personal etc., ¿han facilitado la adquisición y aplicación de conocimientos por parte de las personas participantes?
- ¿Los diferentes componentes y estrategias de la intervención se complementan y se fortalecen entre sí?
- ¿Estableció el proyecto mecanismos adecuados de coordinación y articulación con otros actores clave, tomadores de decisiones e intervenciones a nivel local?
- ¿Complementa la intervención a otras estrategias aplicadas en el mismo territorio, sector o población objetivo de la Cooperación Española, de otros agentes de cooperación y de Malí?
Apropiación y participación
Grado de participación, asimilación y utilización de los productos o resultados generados por la intervención por parte de las personas e instituciones implicadas en la misma (titulares de derechos, titulares de obligaciones).
- ¿En qué medida han participado las/os titulares de derechos en el diseño, gestión, seguimiento y evaluación de la intervención?
- ¿Existieron propuestas y actividades concretas realizadas a demanda de esta población?
- ¿Se ha conseguido fortalecer las capacidades y coordinaciones a nivel local para la atención y acompañamiento de la gobernanza ambiental por parte de todos los actores implicados?
- ¿Ha afectado la carga de trabajo de las mujeres al desarrollo y su participación en las actividades del proyecto? En su caso, ¿se han previsto alternativas?
Cobertura
Análisis de los colectivos beneficiarios y valoración de su adecuación a los destinatarios, indagando en los factores causales de posibles sesgos hacia determinados colectivos o en las barreras de acceso.
- ¿Existieron barreras para llegar a los y las titulares de derechos más vulnerables?
- ¿Se han diseñado mecanismos para mejorar el acceso de los/as titulares de derechos a las acciones del proyecto?
- ¿Cómo se contempló la cobertura de colectivos más vulnerables en el proyecto?
Alineamiento y armonización
Actuación de los donantes teniendo en cuenta y participando en las estrategias de desarrollo, los sistemas de gestión y los procedimientos establecidos en Malí.
Incluye la coordinación entre los donantes para evitar la dispersión de sus actuaciones, aprovechar las ventajas comparativas de cada uno y construir un programa de ayuda más estable y predecible para el país socio, armonizando y simplificando los procedimientos allá donde fuera posible.
- ¿Existieron otras actuaciones sinérgicas o complementarias de otros donantes en la zona?
- ¿Fueron las líneas del proyecto pertinentes con las directrices establecidas en los documentos de estrategia sectorial que les atañen y con los documentos de estrategia de Malí que correspondan?
- ¿La intervención resulta pertinente frente a los mecanismos e instituciones existentes a nivel municipal, departamental y nacional?
Se busca, asimismo, la valoración de la incorporación de la perspectiva de género de manera transversal en los criterios anteriores.
6. METODOLOGÍA Y PLAN DE TRABAJO
6.1 Metodología y técnicas requeridas
Se espera que la(s) persona(s) que realice(n) la evaluación:
- Realice(n) una revisión de las preguntas planteadas, así como de los criterios elegidos.
- Desarrolle(n) herramientas para la recopilación y el procesamiento de los datos.
- Realice(n) la devolución de resultados preliminares a los organismos vinculados con la intervención.
A través de:
- Revisión y análisis de la documentación relacionada con el proyecto.
- La propuesta de trabajo de campo podrá considerar el levantamiento de información a través de herramientas tecnológicas que permitan la comunicación a distancia
La metodología presentada deberá:
- Ser participativa y permitir que SIA, CAEB y la población beneficiaria se involucren en el proceso de estudio.
- Detallar las técnicas empleadas, así como dimensionar de manera preliminar el trabajo de campo a realizar (número y composición de entrevistas, grupos focales, encuestas, etc.)
- Reflejar cómo se hará efectiva la participación de las mujeres y cómo se les procurará los espacios para que sus opiniones sean tomadas en cuenta.
En todo caso la metodología debe constar de una fase de gabinete y una de campo.
- En la fase de gabinete: se espera la revisión de los documentos de formulación, estrategias empleadas, planes y legislación utilizada durante la ejecución del proyecto, además de la revisión de los informes elaborados, procesos formativos diseñados, cartas metodológicas, fuentes de verificación y otros documentos que sean relevantes para la comprensión de los procesos seguidos y los resultados obtenidos.
- En la fase de campo: se deberán programar reuniones, entrevistas, encuestas o las técnicas más apropiadas para obtener la información acorde a los actores anteriormente señalados. Además, debe incluirse una reunión de devolución de resultados preliminares con los distintos organismos vinculados en el proyecto y con las instituciones que son parte de la Unidad Gestora y el Comité de Seguimiento de la Evaluación.
6.2. Plan de trabajo
El plan de trabajo deberá contemplar:
- Revisión de la documentación relacionada con la formulación y seguimiento: Planificaciones, informes trimestrales, informe intermedio anual, e informe final, cambios sustanciales.
- Elaboración de un plan metodológico y de trabajo, el cual será conocido, discutido y aprobado por SIA y CAEB antes de iniciar la evaluación.
- Entrevistas y grupos de discusión con representantes y personal técnico de CAEB, SIA, colectivos meta del proyecto y otros actores participantes en terreno.
- Visitas de terreno para constatar y valorar el desarrollo de las actividades del proyecto en el territorio.
- Informe a la Unidad Gestora del proyecto de cualquier incidencia acontecida durante el trabajo de campo que impida o altere el plan de ejecución y, en tal caso, anticipar los mecanismos correctores: reunión de revisión, reajuste del plan de trabajo inicial o el cronograma y aprobación por la entidad gestora de las modificaciones, etc.
Reuniones de devolución de resultados preliminares con los distintos organismos vinculados a la intervención.
- Redacción del borrador final de la evaluación, que validará el Comité de Seguimiento de la Evaluación y en el que serán incorporados los aportes sugeridos por éste, para finalmente elaborar el documento final de evaluación.
- Taller de socialización de resultados en Diéma con todos los actores implicados en el proyecto.
- Traducción del informe final al español.
Con esta guía orientativa, la persona o empresa consultora establecerá en su propuesta la metodología detallada (incluyendo actividades y cronograma), para el desarrollo del servicio solicitado.
