Consultoría - Evaluación Final Proyecto Acceso a agua a 21 comunidades en Carchi, Cotopaxi, Azuay y Morona Santiago - Quito

1. ANTECEDENTES

La Fundación Ayuda en Acción (AeA) es una organización no gubernamental española, sin fines de lucro, presente en Ecuador desde 1986. Su modelo de intervención se basa en procesos de acompañamiento a largo plazo (12 a 15 años), orientados a promover el desarrollo sostenible en comunidades en situación de vulnerabilidad. Este enfoque permite incidir en las dinámicas sociales y económicas locales, facilitando la construcción participativa de soluciones que promuevan el bienestar y la inclusión.

La población destinataria y protagonista de la acción de AeA está conformada principalmente por niñas, niños, adolescentes, jóvenes y mujeres, especialmente en contextos donde enfrentan mayores obstáculos para el ejercicio pleno de sus derechos en condiciones de equidad.

AeA cuenta con delegaciones en diversos países de América Latina y África, incluyendo Bolivia, Colombia, Ecuador, El Salvador, Etiopía, Guatemala, Honduras, Mozambique, Nicaragua, Paraguay, Perú y Uganda. En España, la Fundación también impulsa proyectos de acción social desde sus oficinas regionales.

En el marco de su intervención en Ecuador, desde 2023, AeA implementa el proyecto “Acceso a agua segura para 21 comunidades (19 sistemas de agua potable) de las provincias Carchi, Cotopaxi, Azuay y Morona Santiago”. Este proyecto se enfoca en la Gestión Social y Ambiental del Agua, a través de los siguientes componentes:

• Fortalecimiento de las Juntas Administradoras de Agua Potable (JAAPS), mediante procesos de formación en gestión, operación y mantenimiento de sistemas, así como en protección de fuentes hídricas, en el marco de la Escuela Nacional del Agua y el uso del aplicativo SAPRA.
• Construcción y mejoramiento de sistemas de agua potable.
• Implementación de acciones para la conservación de fuentes de agua y zonas de recarga hídrica.
• Sensibilización comunitaria sobre el uso adecuado del agua y prácticas de higiene.

El proyecto ha sido desarrollado con el patrocinio y acompañamiento técnico del programa Sumar Juntos de Banco Pichincha C.A., y la cooperación interinstitucional con Gobiernos Autónomos Descentralizados (GADs) locales y comunidades beneficiarias.

Debido a la optimización de costes y uso de recursos, esta intervención ha permitido mejorar o construir un total de 23 sistemas de agua potable, que alcanzará a cerca de 10.000 personas.

La evaluación final externa de este proyecto es fundamental para valorar de manera objetiva e imparcial el impacto y los resultados alcanzados. Este análisis es esencial para medir en qué medida se han cumplido los objetivos iniciales y para entender el impacto a largo plazo del Proyecto en las comunidades beneficiarias.

La perspectiva externa garantiza una evaluación libre de sesgos internos, aumentando la credibilidad de los hallazgos ante los financiadores, actores institucionales del territorio y las personas beneficiarias del proyecto. Esta evaluación no solo proporciona una visión integral del rendimiento del proyecto, sino que también valida la transparencia y la responsabilidad en la gestión de recursos.

Además, los resultados de esta evaluación son clave para el aprendizaje organizacional y la mejora continua del modelo de intervención. Permiten identificar lecciones aprendidas, así como oportunidades para afinar y adaptar estrategias en futuras iniciativas similares. Estos hallazgos pueden contribuir significativamente al desarrollo del conocimiento y a la formulación de mejores prácticas en la gestión social y ambiental del agua.

2. OBJETIVOS

Objetivo general

Valorar de manera integral la pertinencia, eficiencia, eficacia, sostenibilidad, impacto y replicabilidad del proyecto “Acceso a agua segura para 21 comunidades (19 sistemas de agua potable) en las provincias de Carchi, Cotopaxi, Azuay y Morona Santiago”, analizando en qué medida las acciones desarrolladas responden a las necesidades actuales y futuras de las comunidades, fortalecen la gestión comunitaria del agua y se articulan con las políticas públicas y normativa, asegurando sostenibilidad técnica, financiera, social y ambiental de las juntas de administración y los sistemas de agua, así como la incorporación de enfoques de derechos, inclusión e interculturalidad que permitan extraer aprendizajes para su adaptación y escalabilidad en otros territorios. 

Objetivos específicos

1. Analizar en qué medida el diseño, los enfoques y las intervenciones del proyecto respondieron a las necesidades, prioridades y dinámicas de las comunidades beneficiarias, así como si se alinearon a los marcos de políticas públicas, normativas nacionales y locales, políticas del patrocinador (Banco Pichincha), valorando su capacidad de adaptación frente a contextos cambiantes.
2. Evaluar la gestión y utilización de los recursos financieros, técnicos, humanos y administrativos, identificando fortalezas y limitaciones en la ejecución y monitoreo del proyecto, así como la articulación y contraparte con actores locales e institucionales.
3. Medir el grado de cumplimiento de los objetivos, resultados e indicadores previstos en el proyecto, determinando los factores que favorecieron o limitaron su consecución.
4. Valorar el potencial de sostenibilidad de los sistemas de agua potable a partir de la capacidad de las juntas de agua para administrar, operar y mantener los sistemas, asegurar su financiamiento mediante mecanismos de recaudación y reinversión comunitaria, y responder de manera autónoma y organizada a necesidades de mejora, ampliación, o repotenciación sin depender de la inversión externa.
5. Identificar y analizar los cambios positivos y negativos, esperados y no esperados, así como los efectos permanentes en términos en calidad de vida, que fueron generados por el proyecto en las comunidades participantes, en relación con el acceso a agua segura, la salud, la protección de fuentes de agua y la gestión comunitaria del recurso.
6. Examinar la coherencia del modelo de intervención (metodologías, estrategias y prácticas), así como su potencial de adaptación, replicabilidad y escalabilidad en otros territorios, identificando las condiciones habilitantes y los factores críticos de éxito.
7. Valorar el grado de incorporación de los enfoques transversales de derechos humanos, género, inclusión social e interculturalidad en las actividades y resultados del proyecto, identificando buenas prácticas, brechas y desafíos para su sostenibilidad.
8. Sistematizar las lecciones aprendidas y formular recomendaciones prácticas y estratégicas que orienten a las organizaciones ejecutoras, comunidades e instituciones aliadas, que contribuyan a mejorar el diseño, implementación y sostenibilidad de futuras iniciativas similares.

3. PRODUCTOS ENTREGABLES

Los productos esperados del equipo evaluador son los siguientes:

1. Informe de diseño de la evaluación: El informe contendrá el diseño definitivo de la evaluación, que deberá incluir al menos:
   1. Una breve descripción del objeto de evaluación
   2. La lógica de intervención del Proyecto
   3. El marco conceptual de análisis
   4. Una propuesta metodológica, que incluirá las técnicas y herramientas para la recogida de información, un plan de análisis detallado
   5. El plan de trabajo de campo
   6. Una matriz de evaluación definitiva.

2. Presentaciones al inicio, de avances y al final del contrato: Al inicio del trabajo de campo, el equipo evaluador realizará una presentación al Comité de Gestión, a la que podrá invitarse a otros actores interesados. Una vez concluida la fase de campo, el equipo evaluador realizará una presentación de las actividades realizadas e impresiones preliminares, que serán objeto de debate con el equipo técnico de Ayuda en Acción y con el Comité de Gestión y finalmente, a concluir con la ejecución de la consultoría, el equipo evaluador hará una presentación general de los resultados obtenidos al Comité de Gestión y a los demás actores involucrados como GADs, JAAPs y comunidades beneficiarias.

3. Primera versión del informe: Será entregado por el equipo evaluador 1 semana después de haber concluido el trabajo en las comunidades de intervención. Este informe será objeto de observaciones por parte de Ayuda en Acción. Las observaciones se enviarán al consultor/a por intermedio de la coordinación del Proyecto, a más tardar 8 días después de su recepción. Se desarrollará la validación de hallazgos y datos del informe con el Comité de Gestión, siempre que sea necesario.

4. Informe final: A ser aprobado por la coordinación del Proyecto e incluirá un resumen ejecutivo de 5 páginas (máximo). Se requiere el desarrollo de una reunión para la presentación del informe final de resultados al Comité de Gestión del Proyecto. Se sugiere que el informe final no exceda de 60 páginas. Con la entrega de este producto se realizará la segunda socialización a los actores involucrados.

Esquema del informe final para entregar:

• Portada: mencionando el título, la versión, la fecha de entrega, la referencia del Proyecto, el nombre del consultor/as.
• Índice incluyendo los anexos.
• Lista de abreviaciones y acrónimos utilizados

1. Resumen ejecutivo (máximo 5 páginas), para ser empleado como documento separado, centrándose en los puntos analíticos más importantes e indicando las mayores conclusiones, lecciones adquiridas y recomendaciones
2. Descripción resumida de la intervención evaluada
3. Objetivos de la evaluación
4. Metodología empleada incluyendo ficha de evaluación
5. Análisis e interpretación de la información siguiendo los criterios de evaluación (respuesta a las preguntas de evaluación)
6. Conclusiones y recomendaciones en función del análisis de los criterios de evaluación.
7. Lecciones aprendidas.
8. Gestión del conocimiento: 2 o 3 fichas de buenas prácticas, condiciones de replicabilidad y recomendaciones de política pública local.
9. Anexos, en los que se incluirán:
   1. Términos de Referencia.
   2. CV del equipo evaluador
   3. Plan de trabajo realizado
   4. Metodología propuesta, técnicas y fuentes utilizadas.
   5. Listado de personas e instituciones consultadas
   6. Marco lógico del Proyecto
   7. Ficha de evaluación CAD

4. METODOLOGÍA

La metodología se basará en los cinco criterios (pertinencia, eficacia, eficiencia, impacto y sostenibilidad) del Comité de Ayuda al Desarrollo (CAD) de la OCDE, integrando aspectos cualitativos y cuantitativos para una comprensión holística del proyecto. Se dará especial atención a los enfoques de derechos humanos y sostenibilidad ambiental para asegurar la equidad en la evaluación.

El equipo evaluador utilizará los parámetros y criterios propios del Ciclo de Gestión de Proyecto (CGP), el Marco Lógico (ML), los criterios CAD-OCDE, diferenciando claramente entre funciones de monitoreo y evaluación, y priorizando el análisis evaluativo y explicativo de los resultados.

Enfoques

La metodología integrará enfoques cualitativos y cuantitativos para proporcionar una comprensión holística del proyecto. Los métodos cualitativos pueden proporcionar información valiosa sobre los impactos no monetarios de un proyecto, como los cambios en las actitudes y las percepciones. Los métodos cuantitativos pueden ayudar a medir el impacto económico y social del proyecto.

• Derechos humanos: La metodología incorporará el enfoque de derechos humanos asegurando que todas las acciones del proyecto reconozcan a las personas como titulares de derechos y no como beneficiarias pasivas. Las herramientas de evaluación incluirán indicadores sobre equidad y trato digno, asegurando que la gestión comunitaria del agua respete los principios de transparencia, rendición de cuentas y participación informada.
• Territorio e interculturalidad: Se aplicará un enfoque intercultural que reconozca y valore la diversidad cultural de las comunidades, incorporando saberes ancestrales en la gestión del agua y prácticas de conservación. La evaluación considerará cómo el proyecto integró costumbres y normas comunitarias en la toma de decisiones, evitando imposiciones externas y promoviendo el diálogo entre conocimientos técnicos y tradicionales.
• Resiliencia climática: La metodología integrará criterios de resiliencia climática, evaluando la capacidad de los sistemas de agua para adaptarse a variabilidad y eventos extremos asociados al cambio climático. Se analizarán prácticas implementadas para la protección de fuentes hídricas, zonas de recarga y uso eficiente del recurso, así como la incorporación de planes de manejo que reduzcan vulnerabilidades.
• Participación: Se garantizará la participación activa y significativa de las comunidades en todas las fases de la evaluación, desde el diseño hasta la validación de resultados. Se aplicarán metodologías participativas (grupos focales, entrevistas comunitarias, talleres de devolución) que aseguren representatividad de mujeres, jóvenes y grupos vulnerables. La evaluación medirá el grado de apropiación del proyecto y la percepción sobre la transparencia y efectividad de los mecanismos de participación, fomentando aprendizajes colectivos y corresponsabilidad en la gestión del agua.
• Flexibilidad y adaptabilidad: La metodología será flexible y adaptable, permitiendo la incorporación de criterios adicionales durante la fase de inicio, en acuerdo con la coordinación del proyecto. Los informes anuales al financiador servirán como referencia clave. El trabajo del equipo evaluador se realizará en coordinación con los responsables del proyecto, manteniendo la independencia y el juicio crítico del evaluador.

Todos los enfoques transversales serán aplicados de manera integrada, asegurando que el análisis no se limite a su presencia formal, sino que evalúe su contribución real a los resultados, la sostenibilidad del proyecto y la apropiación comunitaria.

**Las preguntas de evaluación se encuentran en el descargable de Anexos, al final de este documento.**

Para desarrollar el presente estudio el/la consultor/a deberá incluir en su propuesta un plan de visitas, entrevistas y encuestas que aseguren la representatividad territorial y diversidad de actores; la evaluación incluirá la revisión de documentos del proyecto, análisis de datos y preparación de informes detallados. Este trabajo se realizará en estrecha coordinación con el equipo de Ayuda en Acción y sus socios, asegurando la objetividad e independencia en los hallazgos y recomendaciones.

Medición de indicadores y tamaño de muestra

La evaluación final deberá garantizar la medición y verificación de la totalidad de los indicadores definidos en el Marco Lógico y la Cadena de Resultados del proyecto, con el fin de determinar de manera objetiva el grado de cumplimiento de las metas comprometidas. Esta medición constituye una línea de análisis obligatoria de la evaluación y no podrá ser sustituida por análisis secundarios o exclusivamente cualitativos.

De manera complementaria, la evaluación incorporará un análisis orientado a los criterios CAD-OCDE, mediante preguntas de evaluación e indicadores específicos que podrán coincidir o no con los indicadores del Marco Lógico, y que permitirán analizar la pertinencia, eficacia, eficiencia, impacto, sostenibilidad y replicabilidad del proyecto desde una perspectiva evaluativa integral.

Ambas líneas de análisis deberán desarrollarse de forma articulada, asegurando coherencia analítica, trazabilidad entre resultados, metas e impactos, y una interpretación integral de los logros, limitaciones y aprendizajes del proyecto.

Para los indicadores que requieran levantamiento de información primaria a nivel de personas usuarias o comunidades, el equipo evaluador deberá aplicar diseños muestrales técnicamente adecuados, priorizando muestras probabilísticas siempre que la naturaleza del indicador, el universo y las condiciones territoriales lo permitan.

En estos casos, se deberá procurar un nivel de confianza mínimo del 90% y un error muestral máximo del 5%. Cuando no sea metodológicamente viable o pertinente aplicar un muestreo probabilístico, el equipo evaluador deberá justificar técnicamente el uso de métodos alternativos (muestreo intencional, censos comunitarios, estudios de caso), asegurando criterios de representatividad, triangulación y rigor analítico.

El diseño muestral definitivo será presentado y validado durante la fase de inicio de la evaluación, como parte del informe de diseño.