Área Independiente de Evaluación

El Área Independiente de Evaluación es una plataforma especializada que se ejecuta a través de CLAN SUR, encargada de valorar, con independencia técnica, el cumplimiento, la calidad, los procesos y los cambios generados por programas territoriales.

Inició formalmente en 2015 y desarrolló la metodología de Evaluación Social para la Sustentabilidad (EVASS), que combina el análisis documental, la construcción de indicadores, la consulta a actores territoriales y la Teoría del Cambio.

La evaluación no se limita a comprobar productos y metas. También analiza cambios menos visibles, como el fortalecimiento de capacidades, la apropiación comunitaria, la participación de las mujeres, la consolidación de comités, la articulación institucional y la sostenibilidad de los procesos.

Propósito

Generar evidencia útil para mejorar la toma de decisiones, la planeación, el aprendizaje y la rendición de cuentas de IDESMAC, de las organizaciones aliadas y otras que han solicitado que sus programas sean evaluados.

¿Y si los programas construyen desde su inicio una Teoría del Cambio clara; definen indicadores pertinentes; documentan sus actividades, productos y resultados; incorporan las voces de las personas y organizaciones participantes; y cuentan con evaluaciones independientes que analicen tanto el cumplimiento de las metas como los procesos territoriales e institucionales?

Entonces… podrán reconocer con mayor precisión los cambios que producen, identificar oportunamente sus áreas de mejora, tomar decisiones basadas en evidencia, fortalecer sus capacidades institucionales, rendir cuentas y sostener procesos territoriales más pertinentes, participativos y duraderos.

Modelo de Evaluación Social para la Sustentabilidad (EVASS)

EVASS sigue una lógica semejante a la investigación social aplicada y se organiza mediante un sistema de hasta 24 indicadores por programa.

Revisa los documentos y evidencias comprometidos por cada programa para determinar:

Cumplimiento.
Calidad.
Coherencia.
Correspondencia con los objetivos.
Integración y trazabilidad de las evidencias.

Evaluación de procesos

Analiza la manera en que los programas producen cambios en las personas, organizaciones, comunidades e instituciones. Para ello utiliza:

Entrevistas semiestructuradas.
Revisión documental.
Sistemas de indicadores.
Análisis cuantitativo y cualitativo.
Reconstrucción de la Teoría del Cambio.
Consulta con actores comunitarios e institucionales.

Validación de resultados y recomendaciones.

Campos y niveles de análisis

El modelo distingue dos campos:

Campo de Interacción Social: personas, comunidades, organizaciones y espacios territoriales con los que interactúa el programa.
Campo de Gestión Institucional: capacidades, decisiones, coordinación y prácticas de la organización responsable.

En cada campo se consideran tres niveles:

Campo actual: cambios directamente relacionados con la intervención.
Campo próximo: cambios en organizaciones, redes y estructuras territoriales.

Campo potencial: transformaciones esperadas en escalas municipales, regionales o interinstitucionales.

Tipos de evaluación

Evaluación ex ante: establece la situación inicial, valida la lógica del programa y define indicadores.
Evaluación intermedia o de medio término: identifica avances, retrasos y ajustes necesarios.
Evaluación final: valora el cumplimiento, los resultados y los cambios alcanzados.

Evaluación ex post o de impacto: analiza la permanencia, apropiación y sostenibilidad de los cambios después de concluida la intervención.

Ruta pedagógica

Líneas de acción

Diseño de sistemas de evaluación. Construcción de marcos conceptuales, variables e indicadores adecuados para cada programa y territorio.
Teoría Fundamentada. Entrevistas y espacios participativos con comunidades, organizaciones, equipos técnicos, autoridades e instituciones.
Evaluación de metas. Revisión de productos y documentos probatorios para valorar su cumplimiento, calidad y coherencia.
Evaluación de procesos. Análisis de los cambios producidos en personas, relaciones, capacidades, organizaciones e instituciones.
Teoría del Cambio. Reconstrucción o validación de las relaciones entre actividades, resultados, cambios esperados e impactos territoriales.
Planes de Mejora. Formulación de recomendaciones, responsabilidades y acciones para fortalecer el siguiente periodo de los programas.
Acompañamiento institucional. Apoyo a los equipos para mejorar el monitoreo, la documentación, la coordinación y la toma de decisiones.
Gestión del conocimiento. Sistematización de resultados, aprendizajes, metodologías y evidencias para su comunicación y utilización institucional.

Territorios de interacción

Alcance

Evaluaciones Finalizadas

31

Municipios evaluados en los altos

10

Microrregiones Evaluadas de Calakmul

8

Composición de las Personas Consultadas

Mujeres

44.7%

Hombres

55.3%

Documentos Revisados para Evaluar Metas

2,858

Evidencias documentales analizadas

Indicadores Analizados

152

Indicadores Máximos por Programa

24

Duración Promedio de una Evaluación

8 semanas

Logros

Diseño y sistematización de la metodología EVASS.
Integración de la evaluación de metas y la evaluación de procesos.
Incorporación de indicadores tangibles e intangibles.
Aplicación de evaluaciones ex ante, intermedias, finales y ex post.
Incorporación de la Teoría del Cambio al análisis de los programas.
Construcción de Planes de Mejora vinculados con los resultados.
Generación de evidencia para fortalecer programas en Los Altos, Sierra y Costa y Calakmul.
Aplicación de la metodología en programas desarrollados por IDESMAC y otras organizaciones.

Desafíos

Fortalecer la coordinación entre el Área y los círculos responsables.
Ampliar las evaluaciones ex post para conocer la sostenibilidad de los cambios.
Dar seguimiento verificable a los Planes de Mejora.
Mejorar las herramientas digitales para el análisis, resguardo y visualización de la información.
Vincular más claramente los resultados de las evaluaciones con la planeación institucional.

- Comunidad Líder de Aprendizaje para la Sociedad Civil del Sur A.C. (CLAN SUR)
- Colectivo Feminista Mercedes Olivera y Bustamante, A.C. (COFEMO).
- Organizaciones y grupos participantes en los programas evaluados.

Fundaciones y agencias que apoyaron los proyectos objeto de evaluación.
Personas evaluadoras, facilitadoras y consultoras independientes.

IDESMAC

Donataria autorizada.

Transparencia e informes.