Monitoreo y evaluación: definición, funciones y · PDF fileDiplomado...

36
Diplomado Centroamericano en Monitoreo y Evaluación para la gestión de Políticas y Programas de VIH-sida. Nicaragua Monitoreo y evaluación: definición, funciones y usosDr. Rafael Arana Picado [email protected] 83911601

Transcript of Monitoreo y evaluación: definición, funciones y · PDF fileDiplomado...

Page 1: Monitoreo y evaluación: definición, funciones y · PDF fileDiplomado Centroamericano en Monitoreo y Evaluación para la gestión de Políticas y Programas de VIH-sida. Nicaragua

Diplomado Centroamericano en Monitoreo y Evaluación para la gestión de Políticas y Programas de VIH-sida. Nicaragua

Monitoreo y evaluación:

definición, funciones y usos…

Dr. Rafael Arana Picado [email protected]

83911601

Page 2: Monitoreo y evaluación: definición, funciones y · PDF fileDiplomado Centroamericano en Monitoreo y Evaluación para la gestión de Políticas y Programas de VIH-sida. Nicaragua

Diplomado Centroamericano en Monitoreo y Evaluación para la gestión de Políticas y Programas de VIH-sida. Nicaragua

Introducción

• No dejes apagar el entusiasmo, virtud tan

valiosa como necesaria; trabaja, aspira, tiende

siempre hacia la altura.

• Pues si te empeñas en soñar te empeñas en

aventar la llama de tu vida.

• . Félix Rubén García Sarmiento

Page 3: Monitoreo y evaluación: definición, funciones y · PDF fileDiplomado Centroamericano en Monitoreo y Evaluación para la gestión de Políticas y Programas de VIH-sida. Nicaragua

Diplomado Centroamericano en Monitoreo y Evaluación para la gestión de Políticas y Programas de VIH-sida. Nicaragua

Tres grandes área que cuidar…

Evaluación Supervisión Monitoreo

Page 4: Monitoreo y evaluación: definición, funciones y · PDF fileDiplomado Centroamericano en Monitoreo y Evaluación para la gestión de Políticas y Programas de VIH-sida. Nicaragua

Diplomado Centroamericano en Monitoreo y Evaluación para la gestión de Políticas y Programas de VIH-sida. Nicaragua

Por qué debemos monitorear?

• Nos brinda pistas de las entradas y salidas

y los compara con el plan

• Identifica y aborda los problemas

• Garantiza el uso eficaz de los recursos

• Garantiza la calidad y el aprendizaje para

mejorar las actividades y servicios

• Fortalece la rendición de cuentas

Page 5: Monitoreo y evaluación: definición, funciones y · PDF fileDiplomado Centroamericano en Monitoreo y Evaluación para la gestión de Políticas y Programas de VIH-sida. Nicaragua

Diplomado Centroamericano en Monitoreo y Evaluación para la gestión de Políticas y Programas de VIH-sida. Nicaragua

Qué es Monitoreo?

• Es un proceso continuo y sistemático en el cual

verificamos la eficiencia y la eficacia de un

proyecto, programa etc

• Permite identificar logros y debilidades y en

consecuencia, recomendamos medidas

correctivas para optimizar los resultados

esperados

Page 6: Monitoreo y evaluación: definición, funciones y · PDF fileDiplomado Centroamericano en Monitoreo y Evaluación para la gestión de Políticas y Programas de VIH-sida. Nicaragua

Diplomado Centroamericano en Monitoreo y Evaluación para la gestión de Políticas y Programas de VIH-sida. Nicaragua

Antes de elaborar el plan de M&E

responda… • A quién remitiremos la información?

– Mapas de procesos, actividades críticas

• Cuáles son las necesidades de información

cuantitativa y cualitativa? – Revisar contratos o convenios, compromisos de país

• Lista de indicadores

• Elaborar instrumentos para recolección y

reporte a utilizar

• Tiempo, espacio y persona

• Cómo se deben procesar los datos?

Page 7: Monitoreo y evaluación: definición, funciones y · PDF fileDiplomado Centroamericano en Monitoreo y Evaluación para la gestión de Políticas y Programas de VIH-sida. Nicaragua

Diplomado Centroamericano en Monitoreo y Evaluación para la gestión de Políticas y Programas de VIH-sida. Nicaragua

En qué se centra el monitoreo?

• A lo interno:

– Eficacia

– Eficiencia

– La focalización

• A lo externo:

– Los efectos

– El impacto

Page 8: Monitoreo y evaluación: definición, funciones y · PDF fileDiplomado Centroamericano en Monitoreo y Evaluación para la gestión de Políticas y Programas de VIH-sida. Nicaragua

Diplomado Centroamericano en Monitoreo y Evaluación para la gestión de Políticas y Programas de VIH-sida. Nicaragua

Qué es evaluación?

• Es un proceso integral y continuo de

investigación y análisis de cambios más o

menos permanentes en el mediano y largo

plazo, ocasionado de forma directa o

indirecta por un proyecto, la población y las

organizaciones participantes

Page 9: Monitoreo y evaluación: definición, funciones y · PDF fileDiplomado Centroamericano en Monitoreo y Evaluación para la gestión de Políticas y Programas de VIH-sida. Nicaragua

Diplomado Centroamericano en Monitoreo y Evaluación para la gestión de Políticas y Programas de VIH-sida. Nicaragua

Qué es evaluación?

• Evaluación ocasional del rendimiento

global y los impactos

• Diseñada específicamente con la intención

de atribuir los cambios a la intervención en

• Responde a la pregunta, "¿qué hemos

logrado y qué impacto tiene lo que hicimos

Page 10: Monitoreo y evaluación: definición, funciones y · PDF fileDiplomado Centroamericano en Monitoreo y Evaluación para la gestión de Políticas y Programas de VIH-sida. Nicaragua

Diplomado Centroamericano en Monitoreo y Evaluación para la gestión de Políticas y Programas de VIH-sida. Nicaragua

Tipos de evaluación

Tipo Propósito

Formativa Evaluación de las poblaciones objetivo y el medio

ambiente contextual. Determina el concepto y diseño

De proceso Busca identificar el grado en que las actividades

planificadas se han logrado y se evalúa la calidad de

las actividades / servicios

De resultado Examina los resultados específicos del programa y

sus logros. ¿Qué cambios se han observado, ¿qué

significa, y si los cambios son el resultado de las

intervenciones?

Impacto Medidores generales del programa de impacto y

eficacia. Tiene como objetivo fortalecer el diseño y la

replicación de los programas y estrategias eficaces

Page 11: Monitoreo y evaluación: definición, funciones y · PDF fileDiplomado Centroamericano en Monitoreo y Evaluación para la gestión de Políticas y Programas de VIH-sida. Nicaragua

Diplomado Centroamericano en Monitoreo y Evaluación para la gestión de Políticas y Programas de VIH-sida. Nicaragua

Diferencias..

Monitoreo Evaluación

Continuo: día a dia Periodico: hitos

imporantantes

Documenta los progresos Análisis en profundidad de

los logros

Se focaliza en las entradas y

salidas

Se focaliza en los resultados

y el impacto

Alerta a los administradores

de los problemas

Proporciona opciones de

estrategia y política

Auto evaluación Análisis externo

Page 12: Monitoreo y evaluación: definición, funciones y · PDF fileDiplomado Centroamericano en Monitoreo y Evaluación para la gestión de Políticas y Programas de VIH-sida. Nicaragua

Diplomado Centroamericano en Monitoreo y Evaluación para la gestión de Políticas y Programas de VIH-sida. Nicaragua

Nivel Description Frecuencia

Entrada Recursos que se ponen en el proyecto.

Conducir a la consecución de los productos

Continua

Salida Actividades o servicios que ofrece el proyecto.

Salidas conducen a resultados

Trimestral

Resultados Cambios en los comportamientos o habilidades

como resultado de los proyectos

implementados. Los resultados se espera que

generan impactos

2-3 years

(a corto y mediano

plazo)

Impactos Cambios mensurables en el estado de salud,

particularmente redujo la transmisión de

ITS/VIH y reducir el impacto del SIDA.

Resultados de impacto son efectos de la

intervención

3-5 años

(a largo plazo)

Page 13: Monitoreo y evaluación: definición, funciones y · PDF fileDiplomado Centroamericano en Monitoreo y Evaluación para la gestión de Políticas y Programas de VIH-sida. Nicaragua

Diplomado Centroamericano en Monitoreo y Evaluación para la gestión de Políticas y Programas de VIH-sida. Nicaragua

MARCO DE TRABAJO EN M y E

FINALIDAD CONTEXTO PROCESO

DISEMINACION

Y USO DE

INFORMACIÓN

ESTRATÉGICA

PERSONAS

ALIANZAS

PLANIFICACION

RECOLECCION

VALIDACION

ANÁLISIS

Comunicación

oportuna

Perfil de audiencias

Capacidad de

• Síntesis

• Traducción lenguaje

técnico a lenguaje

político

Estructura y funciones

Recursos humanos

Alianzas para

coordinar y gerenciar

Plan Multi-sectorial

Plan Operativo

Cultura

Monitoreo

Vigilancia

Epidemiológica

Base de datos

Supervisión y

Auditoría

Evaluación

Investigación

Page 14: Monitoreo y evaluación: definición, funciones y · PDF fileDiplomado Centroamericano en Monitoreo y Evaluación para la gestión de Políticas y Programas de VIH-sida. Nicaragua

Marco de Trabajo para un Sistema Nacional Funcional de MyE en VIH – 12 Componentes

Page 15: Monitoreo y evaluación: definición, funciones y · PDF fileDiplomado Centroamericano en Monitoreo y Evaluación para la gestión de Políticas y Programas de VIH-sida. Nicaragua

Diplomado Centroamericano en Monitoreo y Evaluación para la gestión de Políticas y Programas de VIH-sida. Nicaragua

Supervisión..

• “Mirar desde lo alto“

• Proceso que una persona con conocimentos y

experiencias, asume la responsabilidad de dirigir

a otras para obtener con ellos resultados que les

sean comunes.

• Proceso en el cual una o más personas con

conocimientos y experiencias, asumen la

responsabilidad de acompañar a otras para

obtener los que les sean comunes..

Page 16: Monitoreo y evaluación: definición, funciones y · PDF fileDiplomado Centroamericano en Monitoreo y Evaluación para la gestión de Políticas y Programas de VIH-sida. Nicaragua

Diplomado Centroamericano en Monitoreo y Evaluación para la gestión de Políticas y Programas de VIH-sida. Nicaragua

Carácterísticas de un(a) supervisor

• Conocimiento del trabajo

y responsabilidades

• Habilidad para innovar y

mejorar día a día

• Liderazgo

• Actitud positiva

• Conocimiento del trabajo

y competencia técnica

• Capacidad de aprender y

re-aprender Habilidad

para resolver problemas.

• Ética

• Capacidad para

desarrollar buenas

relaciones personales,

profesionales y resilencia

Page 17: Monitoreo y evaluación: definición, funciones y · PDF fileDiplomado Centroamericano en Monitoreo y Evaluación para la gestión de Políticas y Programas de VIH-sida. Nicaragua

Diplomado Centroamericano en Monitoreo y Evaluación para la gestión de Políticas y Programas de VIH-sida. Nicaragua

Tipos de supervisión

Liberal Autocrático Democrático

Deja que

otros

tomen

control del

problema

Señala qué

debe hacerse,

cómo y

cuándo,

personalismo

exagerado

Permite que

los

trabajadores

analicen los

problemas y

las soluciones

Page 18: Monitoreo y evaluación: definición, funciones y · PDF fileDiplomado Centroamericano en Monitoreo y Evaluación para la gestión de Políticas y Programas de VIH-sida. Nicaragua

Diplomado Centroamericano en Monitoreo y Evaluación para la gestión de Políticas y Programas de VIH-sida. Nicaragua

Qué elementos debe tener un plan de

supervisión?

• Objetivos e indicadores

• Guía de supervisión estandarizada

• Cronograma

• Presupuesto

• Informes anteriores de supervisiones efectuadas

• Información de apoyo (normas, descripción de

funciones, informes previos, estadísticas, otros).

Page 19: Monitoreo y evaluación: definición, funciones y · PDF fileDiplomado Centroamericano en Monitoreo y Evaluación para la gestión de Políticas y Programas de VIH-sida. Nicaragua

Diplomado Centroamericano en Monitoreo y Evaluación para la gestión de Políticas y Programas de VIH-sida. Nicaragua

Otras definiciones en M&E

Page 20: Monitoreo y evaluación: definición, funciones y · PDF fileDiplomado Centroamericano en Monitoreo y Evaluación para la gestión de Políticas y Programas de VIH-sida. Nicaragua

¿Qué es una meta?

Establece lo que se busca lograr a través del proyecto.

Provee dirección general.

Sienta la base para desarrollar los objetivos.

Establece la población a alcanzar

Page 21: Monitoreo y evaluación: definición, funciones y · PDF fileDiplomado Centroamericano en Monitoreo y Evaluación para la gestión de Políticas y Programas de VIH-sida. Nicaragua

Diplomado Centroamericano en Monitoreo y Evaluación para la gestión de Políticas y Programas de VIH-sida. Nicaragua

¿Qué es un objetivo?

Sirve como base para monitorear el progreso para el

logro de las metas.

Describe los resultados esperados, la forma en que

estos se van a lograr, y establece una fecha límite

Describe los resultados de manera medible

Indica el logro parcial de la meta

21

Page 22: Monitoreo y evaluación: definición, funciones y · PDF fileDiplomado Centroamericano en Monitoreo y Evaluación para la gestión de Políticas y Programas de VIH-sida. Nicaragua

Diplomado Centroamericano en Monitoreo y Evaluación para la gestión de Políticas y Programas de VIH-sida. Nicaragua

La Diferencia entre Metas y Objetivos

22

Una escalera de objetivos nos conduce a la meta

META

Objetivo2

Objetivo1

Objetivo3

Page 23: Monitoreo y evaluación: definición, funciones y · PDF fileDiplomado Centroamericano en Monitoreo y Evaluación para la gestión de Políticas y Programas de VIH-sida. Nicaragua

Característica de un objetivo

Específico (S)

Medible (M)

Alcanzable (A)

Relevante (R)

Temporal (T)

Page 24: Monitoreo y evaluación: definición, funciones y · PDF fileDiplomado Centroamericano en Monitoreo y Evaluación para la gestión de Políticas y Programas de VIH-sida. Nicaragua

Objetivos SMART

S especifico

Identifica eventos concretos o acciones que van a

ocurrir, Población meta, Área geográfica.

Medible Cuánto se va a hacer

Cuánto cambio se espera

Alcanzable Factible tomando en cuenta el tiempo y los recursos

disponibles

Relevante

El objetivo se relaciona con la metas

¿Hace sentido el objetivo en términos de lo que estamos

tratando de lograr?

Temporal ¿Para cuándo? Define un tiempo especifico para

alcanzar el objetivo

24

Page 25: Monitoreo y evaluación: definición, funciones y · PDF fileDiplomado Centroamericano en Monitoreo y Evaluación para la gestión de Políticas y Programas de VIH-sida. Nicaragua

Diplomado Centroamericano en Monitoreo y Evaluación para la gestión de Políticas y Programas de VIH-sida. Nicaragua

Ejemplos

• Para enero de 2012, garantizar la disponibilidad de la

prueba de VIH a 90% de personas que la soliciten de

acuerdo con la normativa nacional, a través de

capacitación y equipamiento de centros de salud

25

Page 26: Monitoreo y evaluación: definición, funciones y · PDF fileDiplomado Centroamericano en Monitoreo y Evaluación para la gestión de Políticas y Programas de VIH-sida. Nicaragua

¿Este enunciado cumple con las características de un buen objetivo?

Objetivo

• Al finalizar el 2007, existirá un sistema de información

automatizado en línea para el manejo de la información

del sistema de vigilancia de VIH/SIDA.

Page 27: Monitoreo y evaluación: definición, funciones y · PDF fileDiplomado Centroamericano en Monitoreo y Evaluación para la gestión de Políticas y Programas de VIH-sida. Nicaragua

Diplomado Centroamericano en Monitoreo y Evaluación para la gestión de Políticas y Programas de VIH-sida. Nicaragua

¿Qué son actividades?

Acciones que se llevan a cabo para lograr los objetivos.

Es necesario diferenciarlas de las TAREAS, dimensión,

alcance, inversión

¿Qué son resultados?

Efectos que se esperan causar con el programa de

vigilancia y sus componentes.

Deben ser:

Relevantes

Importantes

Discretos

Page 28: Monitoreo y evaluación: definición, funciones y · PDF fileDiplomado Centroamericano en Monitoreo y Evaluación para la gestión de Políticas y Programas de VIH-sida. Nicaragua

Diplomado Centroamericano en Monitoreo y Evaluación para la gestión de Políticas y Programas de VIH-sida. Nicaragua

¿Qué es un indicador?

Nos permite medir el grado de progreso hacia un objetivo

28

0% 100% 50%

Lograr que el 100% de las empresas que tienen planes de salud

ocupacional incluyen el tema de VIH y sida para el 2010

Porcentaje de INSTITUCIONES y ONG que

cuentan e implementan una política de VIH y

sida en el ámbito laboral

Page 29: Monitoreo y evaluación: definición, funciones y · PDF fileDiplomado Centroamericano en Monitoreo y Evaluación para la gestión de Políticas y Programas de VIH-sida. Nicaragua

Diplomado Centroamericano en Monitoreo y Evaluación para la gestión de Políticas y Programas de VIH-sida. Nicaragua

Ejemplos de indicadores

Recursos Porcentaje del presupuesto nacional dedicado a

actividades de prevención de contagio de VIH

Productos # trabajadoras sexuales capacitadas en uso

correcto del condón masculino

Resultados

corto plazo

Porcentaje de trabajadoras sexuales que reportan

usar condón con su último cliente

Resultados

largo plazo

Prevalencia de VIH en trabajadoras sexuales en

Nicaragua

29

Page 30: Monitoreo y evaluación: definición, funciones y · PDF fileDiplomado Centroamericano en Monitoreo y Evaluación para la gestión de Políticas y Programas de VIH-sida. Nicaragua

Diplomado Centroamericano en Monitoreo y Evaluación para la gestión de Políticas y Programas de VIH-sida. Nicaragua

Atributos de un indicador

• Fácil de entender para todos

• Consistente

• Oportuno

• Pertinencia

• Relacionado en lo posible con la sostenibilidad

económica, social y ambiental

• Confiabilidad

Page 31: Monitoreo y evaluación: definición, funciones y · PDF fileDiplomado Centroamericano en Monitoreo y Evaluación para la gestión de Políticas y Programas de VIH-sida. Nicaragua

Diplomado Centroamericano en Monitoreo y Evaluación para la gestión de Políticas y Programas de VIH-sida. Nicaragua

Estructura de una matriz de indicadores

Indicador

Objetivo

Resultado esperado

Fuente y mecanismo

de recolección

Responsable

Tiempo de reporte

Numerador Denominador

Page 32: Monitoreo y evaluación: definición, funciones y · PDF fileDiplomado Centroamericano en Monitoreo y Evaluación para la gestión de Políticas y Programas de VIH-sida. Nicaragua

Diplomado Centroamericano en Monitoreo y Evaluación para la gestión de Políticas y Programas de VIH-sida. Nicaragua

Que es un dato?

• Son hechos aislados y en bruto, los cuales

situados en un contexto significativo mediante

una o varias operaciones de procesamiento,

permiten obtener deducciones relacionadas con la

evaluación e identificación de personas, eventos

y objetos

Page 33: Monitoreo y evaluación: definición, funciones y · PDF fileDiplomado Centroamericano en Monitoreo y Evaluación para la gestión de Políticas y Programas de VIH-sida. Nicaragua

Diplomado Centroamericano en Monitoreo y Evaluación para la gestión de Políticas y Programas de VIH-sida. Nicaragua

Que es información?

• Es un acontecimiento a una serie de

acontecimientos, que llevan un mensaje y

que la ser percibida por el receptor

mediante alguno de sus sentidos , amplia

sus conocimientos

Page 34: Monitoreo y evaluación: definición, funciones y · PDF fileDiplomado Centroamericano en Monitoreo y Evaluación para la gestión de Políticas y Programas de VIH-sida. Nicaragua

Diplomado Centroamericano en Monitoreo y Evaluación para la gestión de Políticas y Programas de VIH-sida. Nicaragua

Un abordaje de preguntas de salud pública para

M&E en VIH

34

INSUMOS

7. Están funcionando las intervenciones/haciendo

una diferencia?

Estudios de evaluación de resultados

6. Estamos implementando el programa tal y como se

planificó?

Monitoreo de productos

5. Que estamos haciendo? Lo estamos haciendo bien?

Monitoreo de procesos y evaluación, evaluación de calidad

4. Qué internviones y recursos se necesitan?

Análisis de necesidades, recursos y respuestas; Monitoreo de insumos

3. Cuáles intervenciones pueden funcionar (eficacia y efectividad)? Estamos haciendo

lo correcto?

Estudios especiales, investigación operativa, foramtiva y de síntesis

2. Cuáles son los factores contribuyentes?

Investigación sobre determinantes

Comprendiendo

las respuetas

potenciales

8. Se están implementando esfuerzos

coletivos a una escala lo suficientemente

grande para tener un impacto en la

epidemia (cobertura-impacto)?

Estudios y vigilancia epidemiológica

Determinar efectividad

colectiva

MONITOREO DE

RESULTADOS E

IMPACTO

RESULTADOS

ACTIVIDADES

PRODUCTOS

M y E de

Programas

Nacionales

Estamos haciendo

las cosas bien?

Estamos desarrollando las

intervenciones correctas a una

escala lo suficientemente

grande?

1. Cuál es el problema?

Análisis de situación y vigilancia epidemilógica

Identificación del

problema

Estamos haciendo lo

correcto?

Page 35: Monitoreo y evaluación: definición, funciones y · PDF fileDiplomado Centroamericano en Monitoreo y Evaluación para la gestión de Políticas y Programas de VIH-sida. Nicaragua

Diplomado Centroamericano en Monitoreo y Evaluación para la gestión de Políticas y Programas de VIH-sida. Nicaragua

Page 36: Monitoreo y evaluación: definición, funciones y · PDF fileDiplomado Centroamericano en Monitoreo y Evaluación para la gestión de Políticas y Programas de VIH-sida. Nicaragua

Diplomado Centroamericano en Monitoreo y Evaluación para la gestión de Políticas y Programas de VIH-sida. Nicaragua

Muchísimas gracias