1

TÉRMINOS DE REFERENCIA

PARA CONTRATACIÓN DE SERVICOS PORFESIONALES

Evaluación Intermedia Externa (EII) Plan de Acción DIPECHO Guatemala (2014 –15) (DIPECHO IX)

1.1 Objetivo general: Contribuir al incremento de la resiliencia a desastres y capacidad de respuesta de

comunidades vulnerables en Guatemala. 1.2 Socios: ECHO, Cruz Roja Española, Cruz Roja Noruega. 1.3 Comité técnico: El comité técnico para la evaluación final es integrado por la Cruz Roja

Guatemalteca, la Cruz Roja Española y Cruz Roja Noruega. 1.4 Duración: La evaluación tiene una duración 30 días en el campo y después, finalizando el reporte

antes 15 Noviembre 2015. 1.5 Tiempo: 15 Octubre-15 Noviembre 2015. Finalización del borrador de la evaluación antes del 10 de

noviembre 2015. Finalización del informe definitivo el 15 de noviembre 2015. 1.6 Lugar: La evaluación se realizará en el departamento de Santa Rosa (áreas de intervenciones del

DIPECHO IX) y parte en Ciudad de Guatemala/sede Central Cruz Roja Guatemalteca.

1. Antecedentes

En el marco del Proyecto “Contribución a la resiliencia ante desastres de poblaciones vulnerables del departamento de Santa Rosa, introduciendo enfoques de inclusión social y protección, y un marco de acceso más seguro y equitativo” / Noveno Plan de Acción DIPECHO IX, se ha previsto la realización de una Evaluación Externa Final del proyecto.

Este proyecto ha sido implementado últimos 17 meses por la Cruz Roja Guatemalteca y los socios Cruz Roja Española y Cruz Roja Noruega - en el departamento de Santa Rosa en coordinación con las autoridades nacionales, municipales y locales, y actores de la sociedad civil socios del DIPECHO. La Comisión Europea, por medio de la Dirección General de Ayuda Humanitaria de la Comisión Europea (DG ECHO) contribuye a fortalecer capacidades de respuesta en caso de desastres naturales y mitigar sus consecuencias en las regiones más vulnerables a través de su Programa de Preparación ante Desastres (DIPECHO). El programa está orientado a la creación o consolidación de medidas de preparación que permiten a las comunidades locales e instituciones prepararse, atenuar y responder a los desastres naturales.

NOVENO PLAN DE ACCIÓN DIPECHO IX:

Contribución a la resiliencia ante desastres de poblaciones vulnerables del departamento de Santa Rosa, introduciendo

enfoques de inclusión social y protección, y un marco de acceso más seguro y equitativo.

2

El proyecto ha sido diseñado de tal manera que sus acciones y metodologías faciliten la integración de los enfoques de gestión para la reducción del riesgo de desastres combinada con la protección, prevención de violencia basada en el fomento de una cultura de paz y la inclusión de los grupos vulnerables, además de promover el desarrollo local con enfoque en la gestión para la reducción del riesgo de desastres como una estrategia de transferencia y sostenibilidad. Enfoque ambiental, cambio climático: el proyecto facilitará acciones para guiar la responsabilidad de la comunidad en la preservación del medio ambiente, a través de la educación en las escuelas y la comunidad, haciendo énfasis en la importancia de la preservación de su medio ambiente y la manera en la que el cambio climático agrava los escenarios de riesgo actuales. La Cruz Roja cuenta con suficiente material, metodologías y herramientas con pertinencia cultural que facilitarán el cumplimiento de este objetivo sin tener gastos adicionales. Género: las mujeres y los hombres, los niños y las niñas tienen necesidades, vulnerabilidades y capacidades diferentes relacionadas con la preparación y respuesta ante desastres. Estas diferencias se han considerado en cada etapa del proyecto. Durante la evaluación de la propuesta, creamos grupos separados por género, cuyos resultados contribuyeron al diseño del proyecto, incluyendo las opciones de respuesta para estas necesidades diferentes. El proyecto promoverá acciones para mejorar el nivel de participación de las mujeres y los hombres con igualdad de oportunidades en las estructuras de la toma de decisiones, en todos los niveles de coordinación y organización. Los planes de respuesta y comisiones incluyen un componente de prevención de la violencia de género, que se ha identificado como una necesidad. Niños y jóvenes: su participación se fomentará a través de actividades lúdicas y educativas en las escuelas, así como las relaciones de igualdad y equidad entre niños y niñas y su participación en las actividades del proyecto. Se considerarán e integrarán las necesidades especiales de los niños y niñas en la elaboración del PLR, PMR y PFE Cultura de paz: acciones que promueven el enfoque de cultura de paz y la prevención de violencia, promovidas desde las propias actividades de sensibilización para GRRD en las comunidades prioritarias, a través de actividades lúdicas y educativas que forman parte de la campaña informativa y de sensibilización, enfocándose en la conducta y las actitudes antes y después de los desastres. Proporcionaremos a las comunidades las herramientas esenciales y viables. Personas con necesidades especiales y personas mayores: el proyecto continuará, al igual que en acciones DIPECHO anteriores, con la inclusión de las necesidades específicas y las funciones que pueden asumir las personas con necesidades especiales y las personas mayores en situaciones de emergencia, dentro de los Planes de Respuesta (Locales, Municipales o Institucionales) y Planes de evacuación familiar, así como en las capacitaciones llevadas a cabo con las COLRED, COMRED, y las instituciones de gestión para la RRD. Todos los temas de capacitación buscarán proporcionar orientación sobre el cuidado de personas con necesidades especiales, de las personas mayores y de otros grupos vulnerables; así como las necesidades

3

particulares de estas personas que deben tenerse en cuenta durante el manejo de albergues y la adaptación de la infraestructura física.

2. Finalidad de la Evaluación Externa Esta evaluación final, se basa en el compromiso de la Cruz Roja Guatemalteca en conjunto con sus socios de DIPECHO (la Cruz Roja Española y la Cruz Roja Noruega) para valorar el alcance de los objetivos y resultados previstos dentro del proyecto DIPECHO IX en Guatemala, vinculados con el impacto esperado. Asimismo, determinar la pertinencia del Proyecto, lecciones aprendidas y recomendaciones que faciliten el cumplimiento de los resultados y productos que aún no se han alcanzado e incidir sobre el impacto que se ha generado con esta intervención, así como en visto de la sostenibilidad de las actividades que se ha hecho. La evaluación final se enfoca en impacto del proyecto con el logro de los objetivos, resultados, lecciones aprendidas, y recomendaciones para futuro como la estrategia de salida. Objetivo General

El objetivo principal de esta evaluación externa es cualificar y cuantificar los alcances de los indicadores y resultados del proyecto, identificando logros, retos y lecciones aprendidas para garantizar la sostenibilidad de los procesos que el proyecto ha realizado.

Objetivos Específicos

Identificar logros, retos y aspectos por mejorar en la implementación del proyecto, que puedan ser aplicados en el tiempo que resta del proyecto.

Valorar el desarrollo y el potencial de sostenibilidad de la cooperación (Alianza Estratégica) entre Cruz Roja Guatemalteca, CONRED y socios DIPECHO, dentro del plan de acción en el país.

Definiendo relevancia del proceso DIPECHO en Guatemala considerando prioridades y políticas por parte de las autoridades (nacionales, departamental, municipales y locales), socios implementadores y donantes.

Nivel de Análisis

En primer lugar se analizará el diseño de la intervención; partiendo del diseño original y su adaptación durante la ejecución.

En segundo lugar se analizarán los procesos o mecanismos de gestión de la

intervención; así como las elecciones metodológicas y sus alternativas.

En tercer lugar, los productos o resultados (orientados al impacto) de la intervención.

4

Un cuarto nivel es el análisis de los hallazgos para obtener conclusiones y

recomendaciones. Además, se analizará de manera muy general el contexto del país dando especial relevancia a la situación concreta de la zona de ejecución del país principalmente los municipios y comunidades donde se ejecuta el Proyecto.

Ámbito de Estudio de DIPECHO: Las capacidades formadas de GRRD a través de la organización, planificación,

capacitación, equipamiento y acreditación a nivel comunitario en vinculación con la COMRED.

Organización, funcionamiento y capacidades de respuesta ante emergencias y desastres a través de la conformación de comités escolares y de Salud.

Mejoramiento de capacidades a nivel familiar a través de planes de emergencia

incluyentes y vinculados a las COLRED.

Fortalecimiento comunitario a través de la elaboración de planes de desarrollo local incluyendo el enfoque de GRRD, la protección e inclusión social.

La planificación técnica y/o impacto de las acciones de mitigación-desarrollo

ejecutadas a través de los micro-proyectos identificados y ejecutados.

Estructuras municipales COMRED y departamentales CODRED fortalecidas y vinculadas a las estructuras locales.

Fortalecimiento de actores de respuesta sobre orientaciones de acceso más

seguro durante la respuesta a emergencias.

Vinculación entre instituciones de GRRD, SE-CONRED y socios DIPECHO en la institucionalización de herramientas

sensibilización y concientización sobre GRRD en la población en general en la

zona de intervención del proyecto (55% esperado).

La operatividad y funcionalidad de los COLRED y COMRED en el municipio y comunidades.

NOTA: Para la evaluación de los aspectos estratégicos, basados en los indicadores, es necesario considerar los tiempos de ejecución definidos en Marco Lógico del Proyecto.

Criterios de Evaluación Externa

5

Relevancia: del proceso DIPECHO en Guatemala considerando prioridades y políticas por parte de las autoridades (nacionales, departamentales, y municipales), socios implementadores y donantes.

Eficacia: la medida en que una actividad ayuda a alcanzar los objetivos del documento del proyecto DIPECHO IX.

Eficiencia: medida en que los recursos/insumos han logrado los resultados deseados en documento del proyecto DIPECHO IX.

Impacto: Impacto actual logrado a través de los proyectos implementados dentro del Plan de Acción DIPECHO IX en los primeros meses, e impacto potencial del proyecto DIPECHO IX.

Sostenibilidad / Replicabilidad / Aprendizaje.

Cooperación.

3. Resultados esperados

El proceso de la evaluación del proyecto, deberá estar basado en los resultados e indicadores del marco lógico del proyecto, investigará la eficacia, eficiencia, sostenibilidad e impacto del proyecto y la pertinencia de los procesos realizados en el marco del proyecto basados en los resultados del mismo, en sus diferentes niveles de trabajo (comunitario, municipal e institucional).

De la evaluación se esperan un análisis del alcance cualitativo y cuantitativo de los indicadores y resultados propuestos por el proyecto, como un análisis de la participación comunitaria y la integración de la comunidad en las actividades promovidas por el proyecto.

Se espera la identificación de efectos directos e indirectos del proyecto y de los cambios generados en el grupo meta. La identificación de debilidades, potencialidades y recomendaciones para definir estrategias en futuras intervenciones.

Un documento resumen ejecutivo de máximo 15 páginas así como un documento final en formato digital (Word, PDF) el cual cuente con la siguiente estructura sugerida:

1. Introducción: a. Antecedentes y Breve Caracterización de los Proyectos (y áreas de los

intervenciones) b. Objetivos de la Evaluación c. Limitaciones de la Evaluación d. Metodología e. Equipo Evaluador y sus roles f. Descripción del proceso de Evaluación

6

2. Hallazgos y Conclusiones por resultados a. Relevancia b. Efectividad y Eficiencia c. Impacto d. Sostenibilidad / Replicabilidad / Aprendizaje e. Cooperación

3. Lecciones Aprendidas

4. Impacto del proyecto

5. Anexos (incluyendo Matriz de Evaluación)

Asimismo, deberá visibilizar dentro del documento los siguientes elementos:

Buenas Prácticas

Desafíos

Lecciones aprendidas

Nuevos conocimientos específicos

Metodologías, herramientas, instrumentos innovadores

Metodologías, herramientas, instrumentos replicables

Enlaces institucionales

Información y educación

Sostenibilidad

Análisis sobre la alianza estratégica CRG, socios del consorcio DIPECHO (la Cruz Roja Española y la Cruz Roja Noruega) y CONRED.

4. Grupo Objetivo de la Evaluación

El documento final estará particularmente dirigido, de manera interna al Comité técnico del proyecto, junto con los socios del consorcio DIPECHO (la Cruz Roja Española y la Cruz Roja Noruega) en nivel del país y sedes de consorcios DIPECHO en Europa. Sera decisión del consorcio compartir el documento final de evaluación intermedia a la CONRED.

5. Método de Evaluación

El/la Evaluador/a deberá realizar la evaluación aplicando métodos cualitativos y cuantitativos, participativos, tratando de obtener la información necesaria de los actores involucrados en cada tema, ya sea mediante el uso de boletas, entrevistas, grupos focales, talleres entre otros y la valoración cuantitativa según el cumplimiento de los indicadores.

7

Dentro de la metodología, se deberá considerar tomar en cuenta los resultados del Estudio de Conocimientos, Actitudes y Prácticas (CAP) inicial y final, que se han realizado para valorar los conocimientos, percepciones y actitudes del grupo meta al inicio como al final del proyecto. La metodología en detalle deberá ser propuesta por el consultor/a en el marco de su propuesta.

6. Metodología de Evaluación La Evaluación Final del Proyecto DIPECHO IX ejecutado por CRG, es una evaluación externa, que será conducida por un equipo consultor. Esta evaluación utilizara, entre otros, los siguientes recursos de información y documentos de referencia:

Documentos Proyecto (Single Form) aprobados por ECHO.

Informe Final del DIPECHO XIII con las recomendaciones.

Acuerdos de Cooperación.

Documentación del Proyecto (planes, presupuestos, reportes narrativos y financieros, etc.).

Productos de los Proyectos (Planes de Emergencia/Contingencia, Guías Metodológicas, Documentos País, Estudios y/o Investigaciones, Material de Comunicación, etc.).

Información de líneas de base.

Entrevistas con staff del proyecto, socios, autoridades y beneficiarios.

Visita a Áreas de Intervención. Todas las conclusiones deben ser basadas en evidencia y la metodología explicada en el Informe de Evaluación. Metodología Operativa de la Evaluación Se propone el siguiente Diagrama del Ciclo de la Evaluación.

8

Momentos de la Evaluación: Hemos determinado tres momentos del proceso de evaluación y son: Diseño Metodológico a.- Revisión Documental y Gráfica: En primera instancia se hará una revisión de los documentos propios del Proyecto, a saber: Propuesta del Proyecto, estudios de diagnóstico, viabilidad relacionados con la intervención, MOU, informes de visitas de misiones del donante, informe de los desembolsos, informes de avance y anuales, POA, marco lógico, línea de base, reglamentos, auditoría financiera, tabla de rastreo de indicadores, convenios de alianzas estratégicas, etc. b.- Captura de información primaria (visitas de campo, entrevistas, grupos focales y/o conversatorios) Visitas a campo para realizar la encuesta de familias y líderes/as beneficiarios/as, consultas a líderes/as comunitarios/a e informantes claves: *

Conformación

del Equipo de

Evaluación

Definir roles de miembros del

equipo de Evaluación

Discutir propuesta de

evaluación y el proceso

metodológico

Asuntos administrativos y

logísticos

Elaborar Plan de Trabajo y

Protocolo de la investigación

Revisión documental y

gráfica

Diseño de instrumentos

cuantitativos y cualitativos

Socialización del proceso ,

selección de familias a

entrevistar

Recolección de información de

campo

Procesamiento y analisis de datos

Limpieza y depuración

Análisis de impacto

Presentación del borrador del

informe

Retroalimentación

Incorporación de observaciones

Entrega del informe final

9

Autoridades locales, *personal de otras ONGs humanitarias, * personal de Gobierno, *personal de Cooperantes Internacionales en la zona y otros. La información se complementará con consultas en vivo o vía video conferencias/skype, con ejecutivos de las organizaciones del Consorcio/socias estratégicas, personal ejecutivo de CRG y CONRED; así como otros proveedores de asistencia técnica que hayan trabajado para el Proyecto. c.- Características del Momento: Socialización del proceso de Evaluación Previo al inicio de las jornadas en campo, se propone una jornada de socialización de la estrategia metodológica de la evaluación con el personal del Proyecto, lideres comunitarios, ONG humanitarias socias del Consorcio y autoridades locales y de CONRED en sus diferentes niveles. La idea es que conozcan el proceso de la evaluación, cuál es su rol, negociación de fechas de participación y propuestas de mejoras. Determinación de la muestra Para seleccionar el número de familias/organizaciones sobre las que se aplicará la encuesta, se propone utilizar un muestreo probabilístico estratificado y multietápico con un nivel de confianza del 95% y un error máximo permitido del 5% sobre el total de familias beneficiarias a la fecha. La Línea Basal y Línea Final, sería el factor de comparación del estado inicial a la fecha de la evaluación final. Selección de las áreas para la realización de visitas a familias Considerando la información disponible, la línea de base y los criterios, observaciones o sugerencias del equipo de evaluación del proyecto, se diseñará un proceso metodológico para la selección de las comunidades a visitar, con el fin de garantizar el criterio de representatividad y número de experiencias a reconocer a manera de muestra, así como las limitaciones y dificultades encontradas para el desarrollo de actividades por parte del Proyecto. . De ser posible se recomienda considerar los criterios utilizados en la línea basal. De no ser así, se recomiendan los siguientes: Concentración de Población (de mayor a menor concentración de familias

participantes) Nivel de Organización (de mayor nivel a menor nivel de organización) Tiempo de intervención (de mayor tiempo a menor tiempo de intervención) Grado de inversión (de mayor a menor inversión) Seguridad (de menor a mayor grado de inseguridad)

10

La evaluación se desarrollará como proceso participativo brindando los espacios correspondientes y respetando los conocimientos y experiencias de los socios clave de acuerdo al tiempo previsto y los recursos humanos y económicos disponibles por el Proyecto (Términos de Referencia/Contratación de la consultoría externa). Los socios se sumaran al proceso aportando: Personal del Proyecto: Participación activa y liderazgo en la realización de todas

las actividades efectuadas durante el estudio: a) Participación en el proceso de evaluación. b) Apoyar en la coordinación entre la consultoría externa y beneficiarios para la

realización de la evaluación y participar en los diferentes talleres de socialización: Líderes comunitarios, entidades participantes (centros educativos, centros de

salud, COLRED, COMRED; etc); participarán en las etapas clave del proceso de evaluación:

a) Taller de socialización, discusión y selección de los aspectos relevantes de la

evaluación. b) Acompañamiento y participación en el levantamiento de información cualitativa

(grupos focales) c) Contribuir con actividades de convocatoria y apoyo comunitario. Familias: Las familias atendidas y no atendidas participarán aportando información

clave y opiniones. Personal Ejecutivo y Administrativo de CRG, Consorcio y CONRED, participan

para integrar información del proyecto.

Instrumentos de levantamiento de información Una vez aceptada esta propuesta metodológica, se complementará el Plan de Trabajo y se elaborará el Protocolo de Investigación. En donde se diseñarán instrumentos para cada audiencia meta por Resultado del Proyecto, para recolectar la información que permita valorar el resultado a la fecha de los indicadores y productos esperados. Cabe mencionar, que la intención será encontrar la mayor sinergia posible entre los instrumentos de esta evaluación y los utilizados en la Línea de Base de manera que existiese consistencia y continuidad entre ambas consultas y se puedan hacer las comparaciones del caso.

11

Validación e Implementación a. Base de datos y su análisis

Recopilación de datos. Los encuestadores firman y entregan cada encuesta levantada al supervisor. Este revisa que cada encuesta sea llenada completamente conforme a las instrucciones. Luego las codifica, firma, ordena y empaca agrupadas según cada grupo entrevistado. b. Método Cualitativo Las herramientas de recopilación de información aplicadas a beneficiarios, lideres/as, personal técnico y ejecutivo del proyecto, voluntariado, autoridades y organizaciones socias expresan el alcance del Proyecto. Este estudio cualitativo busca crear espacios para entender o reconstruir una situación existente. Son las personas quienes tienen la vivencia los que participan expresando con palabras, sentimientos, ideas y acciones sobre lo que es y lo que debe de ser en el proceso de desarrollo generado por el Proyecto. Que puede ser exaltado por lo que se hizo o demandado a no volver a utilizar metodologías no aceptadas o impopulares. El procedimiento empleado para la medición de los indicadores de tipo cualitativo requiere de técnicas de investigación que se adapten a la naturaleza de estas personas. Es por ello que proponemos el uso de la técnica de grupos focales para el levantamiento de la información cualitativa, como un proceso de entrevistas semi-estructuradas y desarrolladas por grupos pequeños de trabajo y plenarias La composición de los grupos focales (GF) será intencionalmente homogénea y representativa con hombres, mujeres, niños, niñas y líderes de las organizaciones de base comunitaria (OBC), con la participación de 10 a 12 personas por GF. Las discusiones dentro de los GF durarán por lo general, entre 1.5 y 3 horas, lo cual permitirá obtener información valiosa que nos ayude a entender mejor los aciertos y las necesidades insatisfechas de las familias y sus comunidades. 7. Idioma

Idioma del reporte final debe ser: en versión Inglés y Español. 8. Perfil de los profesionales para la Evaluación Final es lo siguiente: El / la Consultor/a o Empresa Consultora deberá tener: Un (a) experto (a) en la evaluación de proyectos en una manera participativa, con experiencias en el tema por lo menos de 3 años y en la identificación de lecciones aprendidas y buenas practicas. Un (a) experto (a) en el tema de preparación para desastres con conocimiento de prevención, mitigación y sistemas de respuesta en Guatemala, con experiencias en el tema de al menos de 3 años.

12

Cualquiera de los dos miembros del equipo que cumple con los dos requisitos o hay dos miembros que están especializado en cada tema. Experiencia en haber realizado evaluaciones a proyectos con financiamiento por la Dirección General de Ayuda Humanitaria y Protección Civil de la Comisión Europea -ECHO- (Deseable).

9. Plazo de entrega de Productos Requeridos Borrador preliminar 10 de Noviembre de 2015

El borrador preliminar del evaluador/consultor será revisado y comentado por la Cruz Roja Guatemalteca, ECHO, y los socios del consorcio DIPECHO (la Cruz Roja Española y la Cruz Roja Noruega) dentro de los 2 días siguientes a su entrega.

Documento Final: 15 de Noviembre de 2015. 10. Disposiciones logísticas Para la Evaluación será necesario viajar a las comunidades atendidas, sin embargo el proyecto no cuenta con vehículos para facilitar los viajes al campo. Únicamente, se ofrece apoyo de ubicación. La presentación del detalle de los costos, para la elaboración de la Consultoría también será valorado positivamente 11. Modalidad de la Contratación La contratación se realizará mediante un contrato por servicios profesionales por la suma acordada entre el consultor (a) o Empresa Consultora y la Cruz Roja Guatemalteca. 12. Forma de Pago

40%

Firma de contrato.

Presentación y aprobación del cronograma de actividades y metodología trabajo.

Presentación y aprobación de las herramientas para el levantamiento de información.

30%

Presentación de Informe de Evaluación Preliminar.

Presentación de Resultados a actores institucionales y beneficiarios locales.

Presentación de Resultados a representantes de la Cruz Roja Guatemalteca y el Consorcio de Cruz Roja.

30% Presentación de Informe Final de Evaluación.

13

Nota: Los interesados deberán presentar su propuesta el viernes 9 de octubre de

2015, a más tardar a las 16:00 horas en las Instalaciones de Cruz Roja Guatemalteca (3ra calle 8-40 zona 1, Edificio Cruz Roja Guatemalteca, 4to. Nivel, Oficina de Recursos Humanos con atención a la Licda. Herlyn Ruiz), en un ejemplar impreso dentro de un sobre sellado, el cual deberá ir rotulado con el nombre de la convocatoria y los datos generales del contacto y otra por medio de correo electrónico a la dirección herlyn.ruiz@cruzroja.gt .

14

_____________________________

Eva Cameros

Coordinadora Proyecto

Noveno Plan de Acción 2014-2015

___________________________________

Teresa Marroquín

Directora

Dirección de Gestión de Riesgo a Desastres

Cruz Roja Guatemalteca

_____________________________

Edwin Cueto

Jefe de Delegación

Cruz Roja Española

_____________________________

Lars Svanberg

Delegado de País

Cruz Roja Noruega

_____________________________

Daniel Javiel

Director General

Cruz Roja Guatemalteca