Enap - Monitoreo y Evaluacion - 15 Jun 15

138
7/18/2019 Enap - Monitoreo y Evaluacion - 15 Jun 15 http://slidepdf.com/reader/full/enap-monitoreo-y-evaluacion-15-jun-15 1/138

description

monitorem cosas escasas go economía estatal no sé profesor interesante

Transcript of Enap - Monitoreo y Evaluacion - 15 Jun 15

Page 1: Enap - Monitoreo y Evaluacion - 15 Jun 15

7/18/2019 Enap - Monitoreo y Evaluacion - 15 Jun 15

http://slidepdf.com/reader/full/enap-monitoreo-y-evaluacion-15-jun-15 1/138

Page 2: Enap - Monitoreo y Evaluacion - 15 Jun 15

7/18/2019 Enap - Monitoreo y Evaluacion - 15 Jun 15

http://slidepdf.com/reader/full/enap-monitoreo-y-evaluacion-15-jun-15 2/138

1. Evaluación y gestión por resultados

Page 3: Enap - Monitoreo y Evaluacion - 15 Jun 15

7/18/2019 Enap - Monitoreo y Evaluacion - 15 Jun 15

http://slidepdf.com/reader/full/enap-monitoreo-y-evaluacion-15-jun-15 3/138

Concepto de evaluación

Comparación de …

Lo planifcado Lo realizado

Resultados

Costos

 Tiempo

Resultados

Costos

 Tiempo

Evaluar es medir el desempeño, el desempeño se refere al logrode los resultados. or lo tanto, evaluar es medir el logro de los

resultados.

Page 4: Enap - Monitoreo y Evaluacion - 15 Jun 15

7/18/2019 Enap - Monitoreo y Evaluacion - 15 Jun 15

http://slidepdf.com/reader/full/enap-monitoreo-y-evaluacion-15-jun-15 4/138

!"u# se entiende por resultados$

• Los resultados son los cam%ios, previstos o imprevistos,

positivos o negativos, deseados o indeseados, de unaintervención p&%lica.

• ueden re'erirse a los productos , o resultados inmediatos, o

fnales.

• Los resultados de%en ser mensura%les, a trav#s de

indicadores cuantitativos o cualitativos, o%tenidos mediante

el uso de 'uentes primarias o secundarias.

La gestión por resultados es un sistema en el que los procesos –

 por defnición, de carácter interno- generan determinados

 productos. Estos, a su vez, contribuyen al logro de

determinados cambios en el bienestar de la población o

resultados propiamente dichos.

Page 5: Enap - Monitoreo y Evaluacion - 15 Jun 15

7/18/2019 Enap - Monitoreo y Evaluacion - 15 Jun 15

http://slidepdf.com/reader/full/enap-monitoreo-y-evaluacion-15-jun-15 5/138

Cadena de resultados y evaluación

Resultado fnal

Resultados intermedios

Resultado inmediato

roductos

(ctividades

Evaluaciónde

resultados

Evaluaciónde

procesosrocesos

Resultados

Recursos

Page 6: Enap - Monitoreo y Evaluacion - 15 Jun 15

7/18/2019 Enap - Monitoreo y Evaluacion - 15 Jun 15

http://slidepdf.com/reader/full/enap-monitoreo-y-evaluacion-15-jun-15 6/138

R  e c  ur  s  o s 

 pr  e s  u p u e

 s t  al   e s 

Actividades

Productos

Resultados

inmediatos

Resultados

intermedios Resultad

o

fnal

Cadena de resultados y presupuesto p&%lico

Page 7: Enap - Monitoreo y Evaluacion - 15 Jun 15

7/18/2019 Enap - Monitoreo y Evaluacion - 15 Jun 15

http://slidepdf.com/reader/full/enap-monitoreo-y-evaluacion-15-jun-15 7/138

rocesos, productos y resultados

(

 rocesos

 roductos

 Resultados

 

(ctividades

 

Recursos

 )nmediatos o

Espec*fcos

 

+inal

(m%ito interno (m%ito eterno

Page 8: Enap - Monitoreo y Evaluacion - 15 Jun 15

7/18/2019 Enap - Monitoreo y Evaluacion - 15 Jun 15

http://slidepdf.com/reader/full/enap-monitoreo-y-evaluacion-15-jun-15 8/138

(gua

caliente -a%ón

Recursos

roceso (ctividadesLavar los

platos

/acar la%asura

roductosCocinalimpia

Estropa0o

Esco%a

olsacu%o

arrer el suelo

)nsumos, procesos y productos

Page 9: Enap - Monitoreo y Evaluacion - 15 Jun 15

7/18/2019 Enap - Monitoreo y Evaluacion - 15 Jun 15

http://slidepdf.com/reader/full/enap-monitoreo-y-evaluacion-15-jun-15 9/138

Cadena de

resultados

Indicadores

de desempeño

Medios de

verifcación

Factores

externos

2%0etivo de3esarrollo45oal6

ropósito delroyecto42utcome6

roductos Resultados

42utputs6

(ctividades4(ctivities6

)nsumos4)nputs6

7atriz del marco lógico

Page 10: Enap - Monitoreo y Evaluacion - 15 Jun 15

7/18/2019 Enap - Monitoreo y Evaluacion - 15 Jun 15

http://slidepdf.com/reader/full/enap-monitoreo-y-evaluacion-15-jun-15 10/138

 Terminolog*a de la cadena de resultados

Insumos. Recursos fnancieros, 8umanos y materiales necesarios para

realizar las actividades y conseguir los productos previstos de un proyecto.

uede ser epresado &nicamente como metas fnancieras o costos.

Procesos (actividades). 7edidas adoptadas o tareas realizadas respecto

de un proyecto para conseguir un producto espec*fco empleando los

recursos asignados.

Productos. ienes p&%licos tangi%les o intangi%les 9ue se producen graciasa la e0ecución de las actividades.

Resultados inmediatos o específcos. E'ectos directos o cam%ios

generados por los productos entregados por el proyecto a la po%lación

%enefciaria.

Resultados intermedios. E'ectos de mayor nivel generados por los

productos, por lo general vinculados a las prioridades sectoriales

correspondientes.

Resultados fnales. )m actos en t#rminos de e'ectos ositivos ne ativos

Page 11: Enap - Monitoreo y Evaluacion - 15 Jun 15

7/18/2019 Enap - Monitoreo y Evaluacion - 15 Jun 15

http://slidepdf.com/reader/full/enap-monitoreo-y-evaluacion-15-jun-15 11/138

3iseño, e0ecución y evaluación

7isión:isión

Recursos

)ndicadoresde insumo )ndicadoresde producto

(cciones

2%0etivosestrat#gicos

)ndicadoresde resultados

2%0etivos

(cciones

)ndicadoresde impacto

7isión:isión

Recursos7isión:isión

Recursos

)nd. de insumo )ndicadoresde proceso

(cciones

2%0etivos

)ndicadoresde e'ecto

2%0etivos

Estrategias

)ndicadoresde impacto

7isiónvisión

(cciones

!A"#ACI$%

&C#CI$%

'I*

Page 12: Enap - Monitoreo y Evaluacion - 15 Jun 15

7/18/2019 Enap - Monitoreo y Evaluacion - 15 Jun 15

http://slidepdf.com/reader/full/enap-monitoreo-y-evaluacion-15-jun-15 12/138

lan estrat#gico, programas y proyectos

2%0etivo general 1

2%0etivoespecifco

1.1

7isión

2%0etivo general ;

2%0etivoespecifco

1.;

2%0etivoespecifco

;.1

2%0etivoespecifco

;.;

(cción 1.1.1 (cción 1.1.;

(ct. 2perat.(

(ct. 2perat

(cción ;.1.1 (cción ;.1.;

(ct. 2perat.(

(ct. 2perat.

Fin(Impacto)

Propósito

Componentes

Resultadofnal

Resultadoespecifco

Productos

Actividades

Accion deinversion uo+ra

Page 13: Enap - Monitoreo y Evaluacion - 15 Jun 15

7/18/2019 Enap - Monitoreo y Evaluacion - 15 Jun 15

http://slidepdf.com/reader/full/enap-monitoreo-y-evaluacion-15-jun-15 13/138

lanes, programas y proyectos

Visión / Mision

Objetivos

Estrategias

Acciones

Resultado final

Resultado

especifico

Productos

Actividades

Fin

Propósito

Componentes

Accion de

inversion/obra

lanrogram

aroyecto

Page 14: Enap - Monitoreo y Evaluacion - 15 Jun 15

7/18/2019 Enap - Monitoreo y Evaluacion - 15 Jun 15

http://slidepdf.com/reader/full/enap-monitoreo-y-evaluacion-15-jun-15 14/138

rogramas y proyectos< marco lógico en cascada

Programa

Proecto

Propósito o resultado especifico

Fin o resultado final

Proecto Proecto

Page 15: Enap - Monitoreo y Evaluacion - 15 Jun 15

7/18/2019 Enap - Monitoreo y Evaluacion - 15 Jun 15

http://slidepdf.com/reader/full/enap-monitoreo-y-evaluacion-15-jun-15 15/138

3espu#s4situación almomento de

medir6

(ntes4situación inicial6

)ntervención

3espu#s4situación almomento de

medir6

(ntes4situación inicial6

o%lación o%0etivo4enefciarios directos6

5rupo testigo

Lógica de la evaluación social

sión convergente impl*cita en el sistema de gestión por resultados.

Page 16: Enap - Monitoreo y Evaluacion - 15 Jun 15

7/18/2019 Enap - Monitoreo y Evaluacion - 15 Jun 15

http://slidepdf.com/reader/full/enap-monitoreo-y-evaluacion-15-jun-15 16/138

C d d lt d d l t

Page 17: Enap - Monitoreo y Evaluacion - 15 Jun 15

7/18/2019 Enap - Monitoreo y Evaluacion - 15 Jun 15

http://slidepdf.com/reader/full/enap-monitoreo-y-evaluacion-15-jun-15 17/138

Actividades1.1 )nterconeión de puestos de control.1.; 7ecanismos de continuidad del servicio en puestos de control.1.= )mplementación de redes >if>ima.;.1 )mplementación de e9uipos móviles en puestos de control.=.1 3esarrollo de sistema de control integrado.?.1 )mplementación de solución de c@maras ).A.1 Bormas y procedimientos de operación de la solución..1 Entrenamiento.

Productos (Resultados de primer nivel)1. (cceso a redes de comunicación.

;. (cceso a e9uipos móviles.=. (cceso a sistemas de control integrado.?. )mplementación de sistema de control mediante video.A. 3esarrollo de normas y procedimientos.. )mplementación de programa de entrenamiento.

Propósito (Resultados de se1undo nivel)

+acilitar la validación, en tiempo real, de documentos su0etos a control

y fscalización en los puestos de control a nivel nacional.

Fin (Resultados de tercer nivel)

Contri%uir a la reducción del incumplimiento tri%utario

y el 'ortalecimiento de la institucionalidad de la /unat.

Procesos

Resultados

Cadena de resultados del proyecto

C d d lt d tió lt d

Page 18: Enap - Monitoreo y Evaluacion - 15 Jun 15

7/18/2019 Enap - Monitoreo y Evaluacion - 15 Jun 15

http://slidepdf.com/reader/full/enap-monitoreo-y-evaluacion-15-jun-15 18/138

Cadena de resultados y gestión por resultados

rocesos roductos Resultados

Actividades1.1 )nterconeión de puestos de

control.1.; 7ecanismos de continuidad

del servicio en puestos decontrol.

1.= )mplementación de…..

1. (cceso a redes decomunicación.

;. (cceso a e9uipos móviles.

=. (cceso a sistemas de control

integrado.

?. )mplementación de sist. de

control mediante video

A. 3esarrollo de normas yprocedimientos.

. )mplementación de programa

de entrenamiento.

Recursos

/. A,DAD?=1.D?

Inmediatos o specífcos

+acilitar la validación, en tiemporeal, de documentos su0etos a

control y fscalización en lospuestos de control a nivelnacional.

Final

Contri%uir a la reducción del

incumplimiento tri%utario y el

'ortalecimiento de la

institucionalidad de la /unat.

La 5R es un sistema en el 9ue los procesos generan determinados productos.Estos, a su vez, contri%uyen al logro de determinados cam%ios en el %ienestar dela po%lación o resultados propiamente dic8os, 9ue pueden ocurrir inmediatamente

despu#s de culminada la intervención 4resultados inmediatos6 o alg&n tiempodespu#s 4resultados intermedios6 8asta alcanzar los impactos deseados en eldesarrollo 4resultados fnales6.

ó

Page 19: Enap - Monitoreo y Evaluacion - 15 Jun 15

7/18/2019 Enap - Monitoreo y Evaluacion - 15 Jun 15

http://slidepdf.com/reader/full/enap-monitoreo-y-evaluacion-15-jun-15 19/138

<IP* FRC#%CIA I%'ICA'*R PR*P*I<*

valuaciónde procesos

(lta 4mensual,trimestral6

(ctividades

realizadas, gastoe0ecutado4indicadores deproceso6

Estimar avance

4monitoreo6

valuación

de resultados

(nual o al fnaldel proyecto

roductos oresultadospropuestos

Evaluarcumplimiento deo%0etivosespec*fcos oproductoso'recidos

valuaciónde impacto

a0a, luego deun tiempo demaduración

Cam%iossustenta%les en elnivel de la po%lacióno%0etivo

Estimarimpacto en lapo%lación

 Tipos de evaluación

Page 20: Enap - Monitoreo y Evaluacion - 15 Jun 15

7/18/2019 Enap - Monitoreo y Evaluacion - 15 Jun 15

http://slidepdf.com/reader/full/enap-monitoreo-y-evaluacion-15-jun-15 20/138

)ndicadores y evaluación presupuestal

ropuesta de las metas de los indicadores de desempeño de resultados yproductos

)nsumos(ctividad

esroducto

Resultado)nmediato

Resultado+inal

liegos y FnidadesE0ecutorasGRegistros

administrativosH

Bacional y RegionalGEncuestasH

7edir periódicamente la magnitud de los cam%ios en )ndicadores 9ue seu%ican so%re la l*nea 9ue conecta el Insumo con el Resultado delrograma resupuestal

Lógica de clasifcación presupuestal

Page 21: Enap - Monitoreo y Evaluacion - 15 Jun 15

7/18/2019 Enap - Monitoreo y Evaluacion - 15 Jun 15

http://slidepdf.com/reader/full/enap-monitoreo-y-evaluacion-15-jun-15 21/138

:isión 7isión

2%0etivosestrat#gicosgenerales

2%0etivosestrat#gicosespec*fcos

(ccionesestrat#gicas

Actividadesoperativas

4Costo /.6

Espec*fca

/u% gen#rica

5en#rica

5rupo'uncional

3ivisión'uncional

+unciónResultado

fnal

Resultadoespec*fc

oroductos

lan Estrat#gico)nstitucional

Estructura 'uncionalEstructuraprogram@tica

Estructura por

o%0eto del gasto

Lógica de clasifcación presupuestal

roceso deproduccion

:ision mision

Page 22: Enap - Monitoreo y Evaluacion - 15 Jun 15

7/18/2019 Enap - Monitoreo y Evaluacion - 15 Jun 15

http://slidepdf.com/reader/full/enap-monitoreo-y-evaluacion-15-jun-15 22/138

;. 3iseño de sistemas de monitoreo y evaluación

Page 23: Enap - Monitoreo y Evaluacion - 15 Jun 15

7/18/2019 Enap - Monitoreo y Evaluacion - 15 Jun 15

http://slidepdf.com/reader/full/enap-monitoreo-y-evaluacion-15-jun-15 23/138

1. 3eterminar el tipo de evaluación a realizar y la metodolog*a

correspondiente.

;. )dentifcar los indicadores, seg&n los o%0etivos y tipo de

evaluación elegido.=. Recopilar la in'ormación, so%re la %ase de los medios de

verifcación esta%lecidos.

?. (nalizar la in'ormación o%tenida.

A. Ela%orar el in'orme de evaluación.

 !Cómo diseñar una evaluación$

Diseñar una evaluación implica los siguientes pasos:

Page 24: Enap - Monitoreo y Evaluacion - 15 Jun 15

7/18/2019 Enap - Monitoreo y Evaluacion - 15 Jun 15

http://slidepdf.com/reader/full/enap-monitoreo-y-evaluacion-15-jun-15 24/138

Componentes del sistema de monitoreo y evaluación

A. EL(2R(C)2B 3E

)B+2R7E/

?. (BIL)/)/ 3E

)B+2R7(C)2B

/)/TE7( 3E

72B)T2RE2 J

E:(LF(C)2B

=. REC2)L(C)2B 3E

)B+2R7(C)2B

1. 2-ET):2/ J T)2 3E

E:(LF(C)2B

;. /ELECC)KB 3E

)B3)C(32RE/

Page 25: Enap - Monitoreo y Evaluacion - 15 Jun 15

7/18/2019 Enap - Monitoreo y Evaluacion - 15 Jun 15

http://slidepdf.com/reader/full/enap-monitoreo-y-evaluacion-15-jun-15 25/138

Evaluación< preguntas 'undamentales

PRIMRA: !Cómo est@ 'uncionando la

instituciónproyecto$

>#%'A: !/e logró o no el cam%io deseado$

<RCR*: !/i se logro el cam%io, en 9ue medida puede

ser atri%uido a la instituciónproyecto$

Las preguntas 'undamentales para la evaluación son las

siguientes<

Page 26: Enap - Monitoreo y Evaluacion - 15 Jun 15

7/18/2019 Enap - Monitoreo y Evaluacion - 15 Jun 15

http://slidepdf.com/reader/full/enap-monitoreo-y-evaluacion-15-jun-15 26/138

aso 1< 3eterminar el tipo de evaluación a realizar

• /e realiza so%re la %ase del marco lógico.

• or lo general, eisten ? tipos de o%0etivos< fn,

propósito, productos y actividades.

• 3ependiendo del tipo de evaluación 9ue se

9uiera realizar, se elegir@ uno u otro tipo deo%0etivos.

• /e realiza so%re la %ase del marco lógico.

• or lo general, eisten ? tipos de o%0etivos< fn,

propósito, productos y actividades.

• 3ependiendo del tipo de evaluación 9ue se

9uiera realizar, se elegir@ uno u otro tipo de

o%0etivos.

Para determinar el tipo de evaluación se toman en consideración las

pautas siguientes:

Page 27: Enap - Monitoreo y Evaluacion - 15 Jun 15

7/18/2019 Enap - Monitoreo y Evaluacion - 15 Jun 15

http://slidepdf.com/reader/full/enap-monitoreo-y-evaluacion-15-jun-15 27/138

7arco lógico y evaluación de resultados

Resultados

Procesos

)ndicadoresde desempeño 7edios deverifcación +actoreseternos

+in)ndicadores

de)mpacto

+uentessecundarias

ropósito )ndicadoresde e'ecto

/upuestospara logro delfn

Componentes

(ctividades

)ndicadoresde

producto

)ndicadoresde proceso

+uentessecundarias yprimarias

+uentesprimarias

/upuestospara logro delpropósito

/upuestospara logro decomponentes

Cadena deresultados

/upuestosparasosteni%ilidad

+uentes secundarias

1 3 i %0 i i d l ió

Page 28: Enap - Monitoreo y Evaluacion - 15 Jun 15

7/18/2019 Enap - Monitoreo y Evaluacion - 15 Jun 15

http://slidepdf.com/reader/full/enap-monitoreo-y-evaluacion-15-jun-15 28/138

aso 1< 3eterminar o%0etivos y tipo de evaluación

• /e realiza so%re la %ase del marco lógico.

• or lo general, eisten ? tipos de o%0etivos< fn,

propósito, productos y actividades.• 3ependiendo del tipo de evaluación 9ue se 9uiera

realizar, se elegir@ uno u otro tipo de o%0etivos.

• /e realiza so%re la %ase del marco lógico.

• or lo general, eisten ? tipos de o%0etivos< fn,

propósito, productos y actividades.

• 3ependiendo del tipo de evaluación 9ue se 9uiera

realizar, se elegir@ uno u otro tipo de o%0etivos.

El primer paso de%e tener en cuenta lo

siguiente

Page 29: Enap - Monitoreo y Evaluacion - 15 Jun 15

7/18/2019 Enap - Monitoreo y Evaluacion - 15 Jun 15

http://slidepdf.com/reader/full/enap-monitoreo-y-evaluacion-15-jun-15 29/138

aso ;< )dentifcar los indicadores, seg&n el tipo de evaluación

ara )dentifcar y seleccionar los indicadores se tomaen consideración<

•   El tipo de evaluación elegido.

•   Criterios gen#ricos de selección de indicadores<

•   La data eistente y la 9ue podr*a o%tenerse a

costos razona%le.

ara )dentifcar y seleccionar los indicadores se tomaen consideración<

•   El tipo de evaluación elegido.

•   Criterios gen#ricos de selección de indicadores<

•   La data eistente y la 9ue podr*a o%tenerse a

costos razona%le.

aso =< Recopilar in'ormación, so%re %ase de los medios de

Page 30: Enap - Monitoreo y Evaluacion - 15 Jun 15

7/18/2019 Enap - Monitoreo y Evaluacion - 15 Jun 15

http://slidepdf.com/reader/full/enap-monitoreo-y-evaluacion-15-jun-15 30/138

aso =< Recopilar in'ormación, so%re %ase de los medios deverifcación esta%lecidos

• ara cada indicador es necesario recolectar datos de alguna'uente.

• +uentes de datos cuantitativos.

  Entrevistas estructuradas.  Estad*sticas de servicios 4datos administrativos6

•  T#cnicas cualitativas mas importantes<

  Entrevista en pro'undidad.

  5rupos 'ocales  2%servación directa.

• ara cada indicador es necesario recolectar datos de alguna'uente.

• +uentes de datos cuantitativos.

  Entrevistas estructuradas.  Estad*sticas de servicios 4datos administrativos6

•  T#cnicas cualitativas mas importantes<

  Entrevista en pro'undidad.

  5rupos 'ocales  2%servación directa.

ara recopilar in'ormación de%emos tener en cuenta lo

siguiente<

aso ?< (n@lisis de la in'ormación

Page 31: Enap - Monitoreo y Evaluacion - 15 Jun 15

7/18/2019 Enap - Monitoreo y Evaluacion - 15 Jun 15

http://slidepdf.com/reader/full/enap-monitoreo-y-evaluacion-15-jun-15 31/138

aso ?< (n@lisis de la in'ormación

(. T#cnicas de an@lisis cuantitativo, %asadas en m#todos

estad*sticos.

. T#cnicas de an@lisis cualitativo<

16 (n@lisis de casos.

;6 (n@lisis de contenido

C. El in'orme de evaluación de%e ser parte de una estrategia de

di'usión.

(. T#cnicas de an@lisis cuantitativo, %asadas en m#todos

estad*sticos.

. T#cnicas de an@lisis cualitativo<

16 (n@lisis de casos.

;6 (n@lisis de contenido

C. El in'orme de evaluación de%e ser parte de una estrategia dedi'usión.

El an@lisis de in'ormación comprende de = cosas

importantes <

aso A< Redacción del in'orme

Page 32: Enap - Monitoreo y Evaluacion - 15 Jun 15

7/18/2019 Enap - Monitoreo y Evaluacion - 15 Jun 15

http://slidepdf.com/reader/full/enap-monitoreo-y-evaluacion-15-jun-15 32/138

(. T#cnicas de an@lisis cuantitativo, %asadas en

m#todos estad*sticos.

. T#cnicas de an@lisis cualitativo<

16 (n@lisis de casos.

;6 (n@lisis de contenido

C. El in'orme de evaluación de%e ser parte de unaestrategia de di'usión.

(. T#cnicas de an@lisis cuantitativo, %asadas en

m#todos estad*sticos.

. T#cnicas de an@lisis cualitativo<

16 (n@lisis de casos.

;6 (n@lisis de contenido

C. El in'orme de evaluación de%e ser parte de una

estrategia de di'usión.

La redacción del in'orme re9uiere de = aspectos importantes<

7arco lógico y evaluación de resultados

Page 33: Enap - Monitoreo y Evaluacion - 15 Jun 15

7/18/2019 Enap - Monitoreo y Evaluacion - 15 Jun 15

http://slidepdf.com/reader/full/enap-monitoreo-y-evaluacion-15-jun-15 33/138

7arco lógico y evaluación de resultados

Resultados

Procesos

)ndicadoresde desempeño

7edios deverifcación

+actoreseternos

+in)ndicadores

de)mpacto

+uentessecundarias

ropósito

)ndicadores

de e'ecto

/upuestos

para logro delfn

Componentes

(ctividades

)ndicadoresde

producto

)ndicadoresde proceso

+uentessecundarias yprimarias

+uentesprimarias

/upuestospara logro delpropósito

/upuestospara logro decomponentes

Cadena deresultados

/upuestosparasosteni%ilidad

+uentes 

secundarias

Page 34: Enap - Monitoreo y Evaluacion - 15 Jun 15

7/18/2019 Enap - Monitoreo y Evaluacion - 15 Jun 15

http://slidepdf.com/reader/full/enap-monitoreo-y-evaluacion-15-jun-15 34/138

=. Construcción de indicadores

3efnición de indicador3efnición de indicador

Page 35: Enap - Monitoreo y Evaluacion - 15 Jun 15

7/18/2019 Enap - Monitoreo y Evaluacion - 15 Jun 15

http://slidepdf.com/reader/full/enap-monitoreo-y-evaluacion-15-jun-15 35/138

Es toda magnitud estad*stica, epresada en ci'ras a%solutas o

relativas, o%tenida mediante la agregación de datos primarios o

mediante operaciones matem@ticas so%re las o%servaciones primarias,

9ue permite conocer, descri%ir o evaluar las caracter*sticas de una

situación dada.

• 2L(C)KB T2T(L< indicador del n&mero de 8a%itantes.

)< indicador del volumen de producción de un pa*s.• MB3)CE 3E REC)2/ (L C2B/F7)32R 4)C6< indicador del proceso

inNacionario.

•  T(/( 3E CREC)7)EBT2 3EL )< indicador del crecimientoeconómico de un pa*s.

• EL(/T)C)3(3 REC)2 3E L( 3E7(B3(< indicador 9ue epresa lademanda de un %ien respecto al movimiento de sus precios.

)mportancia de los indicadores)mportancia de los indicadores

Page 36: Enap - Monitoreo y Evaluacion - 15 Jun 15

7/18/2019 Enap - Monitoreo y Evaluacion - 15 Jun 15

http://slidepdf.com/reader/full/enap-monitoreo-y-evaluacion-15-jun-15 36/138

p

ara evaluar es necesario medir y la medición consiste en asignar

n&meros a los o%0etos y eventos, de modo 9ue las proposiciones

cualitativas puedan ser epresadas en valores.

5rado de eactitud de la medición<

• 7edición del desarrollo económico.

• 7edición de la credi%ilidad pol*tica.

• 7edición del desarrollo integral in'antil.

• 7edición de la e9uidad de genero.

 

rincipios 9ue gu*an el proceso de selección de indicadores

Page 37: Enap - Monitoreo y Evaluacion - 15 Jun 15

7/18/2019 Enap - Monitoreo y Evaluacion - 15 Jun 15

http://slidepdf.com/reader/full/enap-monitoreo-y-evaluacion-15-jun-15 37/138

1.

• validez y confa%ilidad.

2.

• 'acti%ilidad t#cnica.

p 9 g p

:aria%les e indicadores:aria%les e indicadores

Page 38: Enap - Monitoreo y Evaluacion - 15 Jun 15

7/18/2019 Enap - Monitoreo y Evaluacion - 15 Jun 15

http://slidepdf.com/reader/full/enap-monitoreo-y-evaluacion-15-jun-15 38/138

• Presentes, pasados o intenciones.Comportamientos

• Características demográficas (edad, sexo, etc.!ocioeconómicas (ingresos, ocupación, etc. "psicográficas ( personalidad " estilos de vida.

 #tri$utos

• Creencias, valoraciones, preferencias, etc. %as opiniones

son una expresión ver$al de las actitudes.

 #ctitudes& 'piniones

• Por eemplo, nuevas modalidades de previsión " a)orro,servicio telefónico por radio, residencias para la terceraedad, etc.

*otivaciones, deseos onecesidades

Fna varia%le es una magnitud cuyos valores son o%0eto de estudio en unainvestigación. Es una caracter*stica de una po%lación o una muestra.uede re'erirse a un individuo, grupo de personas u organización.

Fn varia%le mide…

 Tipos de varia%les Tipos de varia%les

Page 39: Enap - Monitoreo y Evaluacion - 15 Jun 15

7/18/2019 Enap - Monitoreo y Evaluacion - 15 Jun 15

http://slidepdf.com/reader/full/enap-monitoreo-y-evaluacion-15-jun-15 39/138

!aria+les

cualitativas

!aria+les

Cuantitativas

Cualidad, caracter*stica

o categor*a.

Bo son num#ricas7emplos:

•ro'esión.

•Color de piel.

•Ciudad de residencia.

roporcionan valores

num#ricos .

7emplos:

:entas anuales.

)ngreso 'amiliar.

Eportaciones anuales.

'ICR<A

4n&merosenteros6

C*%<I%#A

4n&meros

'raccionarios6

:aria%les clave< e0emplos:aria%les clave< e0emplos

Page 40: Enap - Monitoreo y Evaluacion - 15 Jun 15

7/18/2019 Enap - Monitoreo y Evaluacion - 15 Jun 15

http://slidepdf.com/reader/full/enap-monitoreo-y-evaluacion-15-jun-15 40/138

E0emplos<•

2cupación.• 5enero.• o%reza.• Competitividad.• 3esarrollo Oumano.

!aria+les

Cualitativas

!aria+les

Cuantitativas

E0emplos<• )ngreso.• :entas.• roducción.• Eportaciones.• Irea.

:aria%les e indicadores< e0emplo:aria%les e indicadores< e0emplo

Page 41: Enap - Monitoreo y Evaluacion - 15 Jun 15

7/18/2019 Enap - Monitoreo y Evaluacion - 15 Jun 15

http://slidepdf.com/reader/full/enap-monitoreo-y-evaluacion-15-jun-15 41/138

:aria%les e indicadores< e0emplo:aria%les e indicadores< e0emplo

%om+re atis2acción del usuario interno

'efniciónoperativa unidad de medida

)ndica la percepción del grado de satis'acción de los tra%a0adores de la/FB(T en relación a las acciones de verifcación de documentos su0etos acontrol.

Cate1orías escala de medida

/e esta%lecen cinco categor*as.

  4D16 7uy satis'actorio. 4D?6 )nsatis'actorio.

4D;6 /atis'actorio. 4DA6 7uy insatis'actorio.

  4D=6 )ndi'erente.

*+tención dedatos

!Considera 9ue la verifcación se realiza en 'orma adecuada$

Indicadores • orcenta0e de apro%ación.

:aria%les e indicadores< e0emplo:aria%les e indicadores< e0emplo

Page 42: Enap - Monitoreo y Evaluacion - 15 Jun 15

7/18/2019 Enap - Monitoreo y Evaluacion - 15 Jun 15

http://slidepdf.com/reader/full/enap-monitoreo-y-evaluacion-15-jun-15 42/138

:aria%les e indicadores< e0emplo:aria%les e indicadores< e0emplo

%om+re In1reso.

'efnición /on los recursos monetarios netos, incluyendo todas las%onifcaciones 9ue perci%e una persona por su ocupación principal ysecundaria durante el per*odo de re'erencia de la encuesta.

Cate1orías uede proponerse en 'orma de niveles o simplemente intervalos.

or niveles deingreso

(lto, 7edio, a0o.

  or intervalos or e0emplo 11 intervalos 4dólares6

  4D16 7enos de ;DDQ 4D;6 ;D1 ?DDQ  4D=6 ?D1DDQ 4D?6 D1DDQ

  4DA6 D11DDDQ 4D6 1DD11?DDQ

  4DS6 1?pl1DDQ 4D6 1D1;;DDQ

  4D6 ;;D1;DDQ 41D6 ;D1=DDDQ

  4116 7@s de =DDD dólares.

*+tención de

datos

!Cu@l 'ue su ingreso total en el &ltimo mes$

Indicadores   • )ngreso promedio.• Coefciente de 5ini.

:aria%les dependientes e independientes:aria%les dependientes e independientes

Page 43: Enap - Monitoreo y Evaluacion - 15 Jun 15

7/18/2019 Enap - Monitoreo y Evaluacion - 15 Jun 15

http://slidepdf.com/reader/full/enap-monitoreo-y-evaluacion-15-jun-15 43/138

:aria%le dependiente

• Es a9uella cuyo comportamiento es eplicado porotra u otras independientes. /e las denominatam%i#n varia%le a eplicar o varia%le criterio.

:aria%le independiente

• Es una varia%le 9ue se utiliza para eplicar elcomportamiento de otra dependiente. /e ladenomina varia%le eplicativa.

2%0etivos, indicadores y metas2%0etivos, indicadores y metas

Page 44: Enap - Monitoreo y Evaluacion - 15 Jun 15

7/18/2019 Enap - Monitoreo y Evaluacion - 15 Jun 15

http://slidepdf.com/reader/full/enap-monitoreo-y-evaluacion-15-jun-15 44/138

*+7etivos/on los %enefcios 9ue genera un proyecto. /on los cam%ios deseados en las personaso un entorno.

Erradicar el anal!abetismo" #educir la pobreza" 

 $umentar la productividad agr%cola" 

Indicadores/on las magnitudes estad*sticas 9ue se emplean para medir los o%0etivos, tanto su

situación actual como el progreso 8acia su logro.&atricular a todos los ni'os del mundo en ense'anza primaria a mas

tardar el ()*+" 

#educir a dos tercios la mortalidad in!antil y ) en la ni'ez entre *) y

()*+"

Metas

/on los niveles cuantifca%les de los indicadores 9ue el proyecto desea lograr en unperiodo dado.

!"ue es un UproyV$!"ue es un UproyV$

Page 45: Enap - Monitoreo y Evaluacion - 15 Jun 15

7/18/2019 Enap - Monitoreo y Evaluacion - 15 Jun 15

http://slidepdf.com/reader/full/enap-monitoreo-y-evaluacion-15-jun-15 45/138

• Prox: indicador UaproimadoV respecto de un determinado

o%0etivo o %enefcio de un proyecto.

• Los proys son indicadores sustitutos, 9ue se consideran

apropiados para medir los e'ectos directos o indirectos

relacionados a un o%0etivo determinado.

E723ER(7)EBT2 3E

L( 7F-ER

Bivel de gasto de consumo

'amiliar.2REW(

roporción de parlamentarios 9ue

son mu0eres.

7#todos constructivos7#todos constructivos

Page 46: Enap - Monitoreo y Evaluacion - 15 Jun 15

7/18/2019 Enap - Monitoreo y Evaluacion - 15 Jun 15

http://slidepdf.com/reader/full/enap-monitoreo-y-evaluacion-15-jun-15 46/138

7#todos constructivos7#todos constructivos

Oard

+acts

/o't

+acts

Estad*sticasnacionales

Encuestas deopiniónindicadores

UcuantitativosV

indicadoresUcualitativosV

asos en la construcción de indicadoresasos en la construcción de indicadores

Page 47: Enap - Monitoreo y Evaluacion - 15 Jun 15

7/18/2019 Enap - Monitoreo y Evaluacion - 15 Jun 15

http://slidepdf.com/reader/full/enap-monitoreo-y-evaluacion-15-jun-15 47/138

1. )dentifcar las varia%les generales relacionadas a los o%0etivos del

proyecto.  or e0emplo<

• 2%0etivo< #educir el desempleo. Este o%0etivo 8ace alusión al desempleo.• 2%0etivo< Eliminación del anal!abetismo. Este o%0etivo 8ace alusión al

nivel educativo.

;. /eleccionar los indicadores 9ue operativizan la medición de las varia%les.

  ara el caso<•  Tasa de desempleo.•  Tasa de anal'a%etismo.

=. 3efnir conceptualmente los indicadores seleccionados.?. 3efnir operativamente los indicadores seleccionados.

A. )dentifcar las varia%les espec*fcas involucradas en los indicadores

seleccionados.

asos en la construcción de indicadoresasos en la construcción de indicadores

(natom*a de un indicador

Page 48: Enap - Monitoreo y Evaluacion - 15 Jun 15

7/18/2019 Enap - Monitoreo y Evaluacion - 15 Jun 15

http://slidepdf.com/reader/full/enap-monitoreo-y-evaluacion-15-jun-15 48/138

:aria%les Bom%re

3efniciónconceptual

3efniciónoperativa

:alor

+orma+orma decalculo

L*nea de%ase

7etas

:aria%lesespec*fcos

5lo%al

roceso de verifcación

Oitos

isión convergente impl*cita en el sistema de gestión por resultados.

Estructura de la po%lación seg&n condición de tra%a0oEstructura de la po%lación seg&n condición de tra%a0o

Page 49: Enap - Monitoreo y Evaluacion - 15 Jun 15

7/18/2019 Enap - Monitoreo y Evaluacion - 15 Jun 15

http://slidepdf.com/reader/full/enap-monitoreo-y-evaluacion-15-jun-15 49/138

A'C#A'AM%< MP"A'*

P*,"ACI*% <*<A"

P*,"ACI*% % 'A'' <RA,A&AR (P<) P*,"ACI*% @# %*<A % 'A' '<RA,A&AR

P*,"ACI*%C*%*MICAM%<

AC<I!A (PA)

P*,"ACI*%C*%*MICAM%<

I%AC<I!A (PI)

*C#PA'* 'MP"* (<')

CA%< APIRA%<

#,MP"A'*

#,MP"* !II,"

#,MP"* I%!II,"

I%AC<I!*P"%*

'MP"**C#"<*

Mndice de 3esarrollo Oumano )3OMndice de 3esarrollo Oumano )3O

Page 50: Enap - Monitoreo y Evaluacion - 15 Jun 15

7/18/2019 Enap - Monitoreo y Evaluacion - 15 Jun 15

http://slidepdf.com/reader/full/enap-monitoreo-y-evaluacion-15-jun-15 50/138

!aria+le

Indicador

ndice de lavaria+le

!ida lar1a saluda+le

ducación%ivel de vida

di1no

Esperanza de vidaal nacer

 Tasa %ruta dematriculación

) per c@pita Tasa de

al'a%etización deadultos

Mndice de la T7Mndice de

al'a%etización deadultos

Mndice de educaciónMndice de

esperanza de vidaMndice de )

ndice de 'esarrollo Bumano I'B

7etodolog*a del Mndice de 3esempeño 5lo%al7etodolog*a del Mndice de 3esempeño 5lo%al

Page 51: Enap - Monitoreo y Evaluacion - 15 Jun 15

7/18/2019 Enap - Monitoreo y Evaluacion - 15 Jun 15

http://slidepdf.com/reader/full/enap-monitoreo-y-evaluacion-15-jun-15 51/138

7#todos constructivos7#todos constructivos

Page 52: Enap - Monitoreo y Evaluacion - 15 Jun 15

7/18/2019 Enap - Monitoreo y Evaluacion - 15 Jun 15

http://slidepdf.com/reader/full/enap-monitoreo-y-evaluacion-15-jun-15 52/138

'A<* FI%A"

)n'ormesadministrativ

os

Recopilacióndirecta

<oma directade datos

7#todos constructivos7#todos constructivos

Page 53: Enap - Monitoreo y Evaluacion - 15 Jun 15

7/18/2019 Enap - Monitoreo y Evaluacion - 15 Jun 15

http://slidepdf.com/reader/full/enap-monitoreo-y-evaluacion-15-jun-15 53/138

Oard

+acts

/o't

+acts

Estad*sticasnacionales

Encuestasde opinión

indicadoresUcuantitativos

V

indicadoresUcualitativosV

Cuestionario y %ase de datos para monitoreo y evaluación

Page 54: Enap - Monitoreo y Evaluacion - 15 Jun 15

7/18/2019 Enap - Monitoreo y Evaluacion - 15 Jun 15

http://slidepdf.com/reader/full/enap-monitoreo-y-evaluacion-15-jun-15 54/138

Pregunta Pregunta Pregunta

+egistro

+egistro -

+egistro

!aria+les de estudio

   #  n   i   d  a   d  e

  s

   d  e

  a  n   5   l   i  s   i  s

'atos

Page 55: Enap - Monitoreo y Evaluacion - 15 Jun 15

7/18/2019 Enap - Monitoreo y Evaluacion - 15 Jun 15

http://slidepdf.com/reader/full/enap-monitoreo-y-evaluacion-15-jun-15 55/138

?. Tipologia de indicadores

 Tipos de indicadores 4criterio< grado de comple0idad6 Tipos de indicadores 4criterio< grado de comple0idad6

Page 56: Enap - Monitoreo y Evaluacion - 15 Jun 15

7/18/2019 Enap - Monitoreo y Evaluacion - 15 Jun 15

http://slidepdf.com/reader/full/enap-monitoreo-y-evaluacion-15-jun-15 56/138

IMP"

I%'ICA'*R IMP" "M%<A"• I%'ICA'*R A>R>A<I!* IMP"

• Relaciones en ci'ras a%solutas• Relaciones en ci'ras relativas• (gregaciones ponderadas

- Ci'ras a%solutas o relativas, con car@cter de estad*stica primaria o

cuasiderivada, en cuyo proceso de construcción se 8an realizado'undamentalmente operaciones de adición yo sustracción.

- /irven como %ase para ela%orar indicadores compuestos.

- +uente principal< anuarios o compendios estad*sticos

C*MP#<*

Ci'ras a%solutas o relativas, en cuya construcción se 8an realizado'undamentalmente operaciones de multiplicación o división, esta%leci#ndose

relaciones entre varia%les.

 Tipos de indicadores simples Tipos de indicadores simples

I%'ICA'*R IMP" "M%<A":

Page 57: Enap - Monitoreo y Evaluacion - 15 Jun 15

7/18/2019 Enap - Monitoreo y Evaluacion - 15 Jun 15

http://slidepdf.com/reader/full/enap-monitoreo-y-evaluacion-15-jun-15 57/138

I%'ICA'*R IMP" "M%<A":

/e referen a una sola varia%le o a un con0unto de varia%les muy similares.

I%'ICA'*R A>R>A<I!* IMP": /on agregados de varia%les, aun

de car@cter 8eterog#neo, pero 9ue usan un elemento agregativo de

aceptación universal.

• roducción de arroz• B&mero de m#dicos

• Consumo de trigo

• B&mero de alumnos matriculados

• :, por sectores económicos

• ), por tipo de gasto

• E(, por actividad económica

 Tipos de indicadores compuestos Tipos de indicadores compuestos

R"ACI*% % CIFRA A,*"#<A R l i i %l % l t

Page 58: Enap - Monitoreo y Evaluacion - 15 Jun 15

7/18/2019 Enap - Monitoreo y Evaluacion - 15 Jun 15

http://slidepdf.com/reader/full/enap-monitoreo-y-evaluacion-15-jun-15 58/138

R"ACI*% % CIFRA A,*"#<A: Relacionan una varia%le a%solutacon otra tam%i#n a%soluta.

R"ACI*% % CIFRA R"A<I!A:

A>R>ACI*% P*%'RA'A: /intetizan la evolución de un con0untode varia%les.

• ) percapita

• roductividad del tra%a0o.• Relación capitalproducto• Rendimiento de la tierra.

•  Tasa de empleo• articipación del ) agrario en el ) total•  Tasa de anal'a%etismo•  Tasa de deserción escolar.

• Mndice de recios al consumidor• Mndice de po%reza• Mndice de productividad total

 Tipos de indicadores 4Criterio< Baturaleza del 'enómeno6 Tipos de indicadores 4Criterio< Baturaleza del 'enómeno6

Page 59: Enap - Monitoreo y Evaluacion - 15 Jun 15

7/18/2019 Enap - Monitoreo y Evaluacion - 15 Jun 15

http://slidepdf.com/reader/full/enap-monitoreo-y-evaluacion-15-jun-15 59/138

8. I%'ICA'*R C*%*MIC*

-. I%'ICA'*R 'M*>RAFIC*

3. I%'ICA'*R >*>RAFIC*  AM,I%<A"

roducto ruto )nterno 4)6• +ormación ruta de Capital 4+X6• Mndice de recios al Consumidor 4)C6

• o%lación total•  Tasa glo%al de 'ecundidad• Esperanza de vida al nacer

• Irea total• Irea cultiva%le•  Tasa de de'orestación

0. I%'ICA'*R *CIA"

•  Tasa de mortalidad general•  Tasa de inmatriculación escolar• B&mero de docentes en el sistema

educativo

D. I%'ICA'*R P*"I<IC* ">A"

• o%lación electoral.

•  Tasa de participación ciudadana.

• articipación 'emenina en lospoderes del Estado.

)ndicadores estructuradossión convergente impl*cita en el sistema de gestión por resultados.

Page 60: Enap - Monitoreo y Evaluacion - 15 Jun 15

7/18/2019 Enap - Monitoreo y Evaluacion - 15 Jun 15

http://slidepdf.com/reader/full/enap-monitoreo-y-evaluacion-15-jun-15 60/138

)mpacto

E'ecto

roducto

roceso

! Como est@ncam%iando las

condiciones 9ueestamosinterviniendo! Cuantas unidadesde productos yservicios estamos

generando$

! Con 9ue rapidez loestamos 8aciendo$

! Cuantos recursos

nos invertimos,cuanto personaltra%a0o en elproceso$

)ndicadores o%0etivamente verifca%les

Page 61: Enap - Monitoreo y Evaluacion - 15 Jun 15

7/18/2019 Enap - Monitoreo y Evaluacion - 15 Jun 15

http://slidepdf.com/reader/full/enap-monitoreo-y-evaluacion-15-jun-15 61/138

)ndicadoresde desempeño

7edios deverifcación

+actoreseternos

+in)ndicadoresde )mpacto

ropósito)ndicadores

de e'ecto

Componentes

(ctividades

)ndicadoresde producto

)ndicadoresde proceso

Cadena deresultados

 Tipolog*a de indicadores 4seg&n cadena de resultados6 Tipolog*a de indicadores 4seg&n cadena de resultados6

Page 62: Enap - Monitoreo y Evaluacion - 15 Jun 15

7/18/2019 Enap - Monitoreo y Evaluacion - 15 Jun 15

http://slidepdf.com/reader/full/enap-monitoreo-y-evaluacion-15-jun-15 62/138

OBJETIVOS INDICADORES

+esultado final (/in 0ndicadores de impacto

+esultados intermedios 0ndicadores de impacto

+esultados inmediatos

(Propósito0ndicadores de efecto

Productos

(Componentes0ndicadores de producto

 #ctividades0ndicadores de proceso

+i0ación de o%0etivos, indicadores ymetas+i0ación de o%0etivos, indicadores ymetas

 e'ectos de contar con un diseño apropiado del proyecto, se de%en considerar,

Page 63: Enap - Monitoreo y Evaluacion - 15 Jun 15

7/18/2019 Enap - Monitoreo y Evaluacion - 15 Jun 15

http://slidepdf.com/reader/full/enap-monitoreo-y-evaluacion-15-jun-15 63/138

Criterio 8<

Criterio -<

Criterio 0<

Criterio 3<

Criterio D<

Los o%0etivos se determinan me0or a trav#s de procesos

participatorios en el @m%ito correspondiente.

Es importante incluir los 'actores cualitativos y su%0etivos

cuando se f0an los o%0etivos.

Las metas son seleccionadas so%re la %ase de la situaciónactual y de lo 9ue se pueda lograr durante la e0ecución delproyecto..

Las metas pueden estar colocadas en di'erentes niveles de

desglose dependiendo de 'actores como el @m%ito geogr@fco.

Las me0oras se vuelven m@s di'*ciles a medida 9ue losindicadores me0oran.

otros, los criterios siguientes<

)ndicadores de impacto nacional)ndicadores de impacto nacional

os indicadores de impacto miden el resultado fnal y resultados intermedios

Page 64: Enap - Monitoreo y Evaluacion - 15 Jun 15

7/18/2019 Enap - Monitoreo y Evaluacion - 15 Jun 15

http://slidepdf.com/reader/full/enap-monitoreo-y-evaluacion-15-jun-15 64/138

1. E'ectos de largo plazo.

;. Cam%ios duraderos 9ue implican me0oramiento

signifcativo y perdura%le en los %enefciarios.

=. E0emplos<

•   Cam%io en la tasa de 'ecundidad en un programa deplanifcación 'amiliar.

• )ncremento de ingresos en programas de capacitación

la%oral.

•   Reducción de la tasa de reincidencia de 0óvenes conpro%lemas delictuales.

os indicadores de impacto miden el resultado fnal y resultados intermedios

)ndicadores de impacto sectorial)ndicadores de impacto sectorial

L i di d d ' t id l lt d i t di d

Page 65: Enap - Monitoreo y Evaluacion - 15 Jun 15

7/18/2019 Enap - Monitoreo y Evaluacion - 15 Jun 15

http://slidepdf.com/reader/full/enap-monitoreo-y-evaluacion-15-jun-15 65/138

1. /on los resultados intermedios o de mediano plazo.;. ReNe0an los cam%ios relativamente directos e inmediatos

generados por la intervención en el comportamiento o

situación de los %enefciarios.

=. E0emplos<

revalencia anticonceptiva luego de un programa de

planifcación 'amiliarQ

B&mero de innovaciones organizacionales despu#s de

un programa de capacitación empresarial.

Los indicadores de e'ecto miden los resultados intermedios deuna intervención

)ndicadores de e'ecto)ndicadores de e'ecto

Los indicadores de e'ecto miden el logro de los resultados inmediatos

Page 66: Enap - Monitoreo y Evaluacion - 15 Jun 15

7/18/2019 Enap - Monitoreo y Evaluacion - 15 Jun 15

http://slidepdf.com/reader/full/enap-monitoreo-y-evaluacion-15-jun-15 66/138

1. /on los resultados inmediatos de las acciones.

;. /e reNe0an en el logro del propósito de un proyecto.

=. E0emplos<

Bumero de agricultores capacitados.

Bumero de parcelas demostrativas instaladas.

Bumero de 0untas de usuarios 'ortalecidas.

g

o espec*fcos. En un proyecto, miden el propósito.

)ndicadores de producto)ndicadores de producto

Los indicadores de producto miden el logro de las acciones

Page 67: Enap - Monitoreo y Evaluacion - 15 Jun 15

7/18/2019 Enap - Monitoreo y Evaluacion - 15 Jun 15

http://slidepdf.com/reader/full/enap-monitoreo-y-evaluacion-15-jun-15 67/138

1. /on los %ienes yo servicios entregados a la

po%lación %enefciaria.

;. ReNe0an el avance en el logro de los o%0etivos de

una intervención.=. E0emplos<

  Bumero de talleres de capacitación.

Ooras de asistencia t#cnica.

7ódulos de e9uipamiento otorgado.

p g

estrat#gicas. En un proyecto, miden el logro de los componentes.

)ndicadores de proceso)ndicadores de proceso

Page 68: Enap - Monitoreo y Evaluacion - 15 Jun 15

7/18/2019 Enap - Monitoreo y Evaluacion - 15 Jun 15

http://slidepdf.com/reader/full/enap-monitoreo-y-evaluacion-15-jun-15 68/138

1. Constituyen las meta '*sicas del proyecto.

;. or lo general, 'orman la %ase del plan operativo.

=. /on la %ase para el monitoreo de la intervención.

E0emplos<

  Bumero de agricultores capacitados.

Bumero de parcelas demostrativas instaladas.

Bumero de 0untas de usuarios 'ortalecidas.

Los indicadores de proceso miden la e0ecución de las actividades.

I%'ICA'*R A>RIC#"<#RA

)ndicadores< e0emplos)ndicadores< e0emplos

Page 69: Enap - Monitoreo y Evaluacion - 15 Jun 15

7/18/2019 Enap - Monitoreo y Evaluacion - 15 Jun 15

http://slidepdf.com/reader/full/enap-monitoreo-y-evaluacion-15-jun-15 69/138

I%'ICA'*R<R#C<#RA'* <RA%P*R< A>RIC#"<#RA A"#' '#CACI*%

I%'ICA'*R

' IMPAC<*%ACI*%A"

I%'ICA'*R' IMPAC<*C<*RIA"

I%'ICA'*R' FC<*

I%'ICA'*R' PR*'#C<*

)ngreso per

capita rural.

)ngreso per

capita rural.

Esperanza

de vida enmu0eres.

)ncidencia

de po%rezaetrema.

:olumen deproduccióncomunalcomercializad

a.

Rendimientopor8ect@rea.

 Tasa demortalidad

materna.

 Tasa deanal'a%etismo

B&mero decomunidadesruralesintegradas a lared vialnacional.

B&mero de8ect@reasde tierras decultivo'ertilizadas.

Co%erturainstitucional deatención deem%arazos.

B&mero deR2(Ls.

Xilómetros decaminosruralesconstruidos.

 Toneladasde'ertilizantes.

B&mero dem#dicos por8a%itante.

B&mero deromotoresal'a%etizados.

+amilia de indicadores para el sector educación+amilia de indicadores para el sector educación

E/TRFCTFR( 3EB27RE

3E+)B)C)2BLMBE( 3E

:(L2R (+FEBTE/ 3E C2B3)C)2BE/

Page 70: Enap - Monitoreo y Evaluacion - 15 Jun 15

7/18/2019 Enap - Monitoreo y Evaluacion - 15 Jun 15

http://slidepdf.com/reader/full/enap-monitoreo-y-evaluacion-15-jun-15 70/138

)B3)C(32RE/ B27RE 2ER(T):(LMBE( 3E

(/E(LC(BW(R D;

D= D? DA D

)B3)C(32RE/3E )7(CT2B(C)2B(L

)B3)C(32RE/3E )7(CT2/ECT2R)(L

)B3)C(32RE/3E RE/FLT(32

)B3)C(32RE/3E R23FCT2

)ncidencia de

po%rezaetrema.

orcenta0e de lapo%lación cuyo

ingresoconsumo est@por de%a0o de la l*neade po%reza etrema4F/Y 1 dólar6.

1?.SZ

41S6 .3.

 Tasa deanal'a%etismo.

orcenta0e de lapo%lación de 1Aaños a mas, 9ueno sa%e leer niescri%ir.

B&mero deR2(Ls.

B&mero derogramas de(l'a%etización.

B&mero depromotoresal'a%etizados

B&mero depersonas 9uetra%a0an comoal'a%etizadores.

+FEBTE/ 3E:ER)+)C(C)2B

C2B3)C)2BE/E[TERB(/

.3.

.3.

.3.

)BE)

)BE)

B(

B(

Crecimiento

económicosostenido.

)nversióneneducación.

articipaciónde lapo%laciónanal'a%eta.

Eistencia depro'esionaleseneducación.

A.SZ 416

.3.

.3.

)ndicadores de desempeño en la gestión p&%lica

Page 71: Enap - Monitoreo y Evaluacion - 15 Jun 15

7/18/2019 Enap - Monitoreo y Evaluacion - 15 Jun 15

http://slidepdf.com/reader/full/enap-monitoreo-y-evaluacion-15-jun-15 71/138

)nsumos roductos

)nsumos roductos

Econom*a Efcacia

Efciencia

roductividad

Efciencia

roductividad

Resultado )mpacto

EfcaciaCalidad

EfcaciaCalidad

rogramación

E0ecución

Page 72: Enap - Monitoreo y Evaluacion - 15 Jun 15

7/18/2019 Enap - Monitoreo y Evaluacion - 15 Jun 15

http://slidepdf.com/reader/full/enap-monitoreo-y-evaluacion-15-jun-15 72/138

A. Reglas para la construcción de indicadores

Regla 1< Todos los elementos de la cadena de resultados de%entener por lo menos un indicadorRegla 1< Todos los elementos de la cadena de resultados de%entener por lo menos un indicador

Page 73: Enap - Monitoreo y Evaluacion - 15 Jun 15

7/18/2019 Enap - Monitoreo y Evaluacion - 15 Jun 15

http://slidepdf.com/reader/full/enap-monitoreo-y-evaluacion-15-jun-15 73/138

Cada nivel de la columna de o%0etivos del marco lógico de%e tener por lo menos un indicador.Esto es v@lido para toda la 0erar9u*a de resultados 9ue se desea o%tener< misiónvisión, fn ,propósito, componentes, actividades u otro tipo de resultado, seg&n el tipo de intervención.

Resultados Indicadores

/ortalecer el servicio de auxilio vial. 1iempo promedio de respuesta.

*eorar el mantenimiento de a red vial 1ramos de vías atendidos

Conservación de la red vial departamental. %ongitud de vías conservadas.

rror 8: %o disponer de al menos un indicador para cada elemento de la

cadena de resultados.

rror 8: %o disponer de al menos un indicador para cada elemento de la

cadena de resultados.+alta de indicadores para determinado nivel de la cadena de resultados. La difcultad paraidentifcar indicadores podr*a de%erse al desconocimiento de las estad*sticas disponi%les o a lamala 'ormulación de los resultados.

Regla ;< Los indicadores de%en ser v@lidos o pertinentesRegla ;< Los indicadores de%en ser v@lidos o pertinentes

Los indicadores de%en estar relacionados con el resultado 9ue se pretende medir En algunos

Page 74: Enap - Monitoreo y Evaluacion - 15 Jun 15

7/18/2019 Enap - Monitoreo y Evaluacion - 15 Jun 15

http://slidepdf.com/reader/full/enap-monitoreo-y-evaluacion-15-jun-15 74/138

Los indicadores de%en estar relacionados con el resultado 9ue se pretende medir. En algunoscasos, puede emplearse un proy< indicador 9ue ayuda a medir el resultado a trav#s devaria%les relacionadas.

rror -: Falta de valide= o pertinencia de los indicadores

El indicador guarda poca relación con el o%0etivo o cam%io 9ue pretende medir.

rror -: Falta de valide= o pertinencia de los indicadores

El indicador guarda poca relación con el o%0etivo o cam%io 9ue pretende medir.

Resultados Indicadores

Desarrollar servicios de peae complementarios. !ervicios nuevos implementados

+e)a$ilitación de carreteras departamentales. %ongitud de carreteras re)a$ilitadas.

Regla =< Los indicadores de%en guardar una 0erar9u*a congruentecon la cadena de resultadosRegla =< Los indicadores de%en guardar una 0erar9u*a congruentecon la cadena de resultados

3e%en seleccionarse indicadores adecuados y 9ue correspondan a cada componente de la 0erar9u*a

Page 75: Enap - Monitoreo y Evaluacion - 15 Jun 15

7/18/2019 Enap - Monitoreo y Evaluacion - 15 Jun 15

http://slidepdf.com/reader/full/enap-monitoreo-y-evaluacion-15-jun-15 75/138

3e%en seleccionarse indicadores adecuados y 9ue correspondan a cada componente de la 0erar9u*ade resultados.

 &erar6uía de resultados Indicadores7isión< U/omos la empresa de la 77L responsa%le de larecaudación de pea0e, mantenimiento de v*as, serviciosviales y gerenciamiento de o%rasQ tra%a0amos paracontri%uir a la integración y el desarrollo sosteni%le de laciudad, mediante un sistema integral de gestión decalidad, en el marco de la responsa%ilidad socialempresarialV.

 Tiempo promedio dedesplazamiento en L7.

2%0etivo estrat#gico general< Elevar la calidad de losservicios de la empresa.V

 Tiempo total de atención encasetas de pea0e

2%0etivo estrat#gico especifco< +ortalecer elgerenciamiento de o%ras.

2%ras concluidas de con'ormidadcon el cronograma apro%ado.

(cción< 3esarrollar proyectos de in'raestructura vial. royectos viales e0ecutados.

rror 0: Con2usión en la naturale=a de los indicadoresrror 0: Con2usión en la naturale=a de los indicadores

/uele ocurrir cuando se utilizan las consecuencias inmediatas de las actividades como indicadoresde impacto o e'ecto. Este error tam%i#n puede presentarse al considerar los e'ectos so%re el%ienestar de la po%lación o%0etivo como indicadores de proceso o producto.

Regla ?< Los indicadores de%en ser verifca%lesRegla ?< Los indicadores de%en ser verifca%les

Los indicadores de%en ser verifca%les en costo y tiempo razona%les. En general, es pre'eri%leutilizar los datos y la in'ormación generada por instituciones y organizaciones especializadas. Bo

Page 76: Enap - Monitoreo y Evaluacion - 15 Jun 15

7/18/2019 Enap - Monitoreo y Evaluacion - 15 Jun 15

http://slidepdf.com/reader/full/enap-monitoreo-y-evaluacion-15-jun-15 76/138

de%en 'ormularse indicadores cuya medición y verifcación sea una tarea sumamente comple0a.

rror 3: eleccionar indicadores no verifca+lesrror 3: eleccionar indicadores no verifca+lesLos indicadores, aun cuando est#n 'ormalmente %ien construidos, no son verifca%les de%ido a9ue la 'uente de verifcación no eiste, la 'uente est@ desactualizada o los datos no est@ndesagregados al nivel re9uerido.

Resultados Indicadores Medios de!erifcación

2ptimizar el mantenimiento de v*as :*as adecuadamentemantenidas

5erencia T#cnica

+ortalecer la gestión empresarial. Tasa de especialización

del personal deEmape.

5erencia de

(dministración y+inanzas

Contri%uir a la integración, lacompetitividad y el desarrollososteni%le de la región.

Mndice de 3esarrolloOumano

BF3, )n'orme so%re el3esarrollo Oumano;D1D.

Regla A< Bo se de%e con'undir indicadores con o%0etivosRegla A< Bo se de%e con'undir indicadores con o%0etivos

Los indicadores de%en epresarse en 'orma de una varia%le mensura%le, 9ue reNe0e

Page 77: Enap - Monitoreo y Evaluacion - 15 Jun 15

7/18/2019 Enap - Monitoreo y Evaluacion - 15 Jun 15

http://slidepdf.com/reader/full/enap-monitoreo-y-evaluacion-15-jun-15 77/138

p , 9 0cuantitativamente el grado de alcance de los o%0etivos.

rror D: Con2usión entre indicadores o+7etivosrror D: Con2usión entre indicadores o+7etivos

El indicador est@ redactado %a0o la 'orma de o%0etivoQ es decir, como cam%io esperado en lasituación actual, mas no en 'orma de una proposición mensura%le.

Resultados Indicadores

7antenimiento periódico de caminosdepartamentales

Xilómetros de caminosdepartamentales con mantenimientoperiódico

Ela%oración de planes vialesdepartamentales participativos B\ de 5o%iernos regionales 9uecuentan con planes vialesdepartamentales participativos.

2ptimizar el mantenimiento de @reasverdes

orcenta0e de @reas verdes atendidascon nuevas t#cnicas

Regla < Bo se de%e con'undir indicadores con actividades3istinguir los indicadores de las actividades teniendo en cuenta 9ue, mientras #stas se referen alos productos 9ue se desean entregar los indicadores se referen a mediciones 9ue por lo

Page 78: Enap - Monitoreo y Evaluacion - 15 Jun 15

7/18/2019 Enap - Monitoreo y Evaluacion - 15 Jun 15

http://slidepdf.com/reader/full/enap-monitoreo-y-evaluacion-15-jun-15 78/138

los productos 9ue se desean entregar, los indicadores se referen a mediciones 9ue, por logeneral, toman la 'orma de metas '*sicas.

rror E: Con2usión entre indicadores actividades

Los indicadores no son actividades ni o%0etivosQ son n&meros 9ue permiten medir logros a losdistintos niveles de resultados esperados.

Resultados Indicadores

+omentar el reconocimiento de lostra%a0adores

 Tra%a0adores receptores de incentivos

2ptimizar la gestión presupuestal Mndice de e0ecución presupuestal.

7odernizar las T)Cs de la institución. Fnidades org@nicas 9ue utilizan T)Csactualizadas

Regla S< /e de%en esta%lecer metas para cada indicador

La meta es el valor a alcanzar en un determinado periodo de tiempo. La con'usión puede

Page 79: Enap - Monitoreo y Evaluacion - 15 Jun 15

7/18/2019 Enap - Monitoreo y Evaluacion - 15 Jun 15

http://slidepdf.com/reader/full/enap-monitoreo-y-evaluacion-15-jun-15 79/138

evitarse esta%leciendo metas e indicadores por separado.

Resultados Indicadores MetasCapacidades t#cnicas,fnancieras institucionales de5o%iernos Regionales'ortalecidas para lograr unagestión sosteni%le de lavialidad.

 Tasa de 5R cuentan conórganos responsa%les dela gestión vial, con'unciones defnidas ypro'esionalescapacitados

DZ

+ortalecer el servicio detraslado de emergencia.

 Tiempo de respuesta en TE

1A minutos

7e0orar el mantenimiento dela red vial

 Tramos de v*as atendidos 1D= Xms

rror : Con2usión entre indicadores metasEs me0or separar los indicadores de las metas, para esta%lecer separadamente la l*nea de %asey la tendencia.

Regla < Fn indicador operacionaliza sólo un elemento de lacadena de resultadosEl marco lógico agrupa varia%les independientes y dependientes, organizadas en varios nivelesd l d F i di d d % ili @ d d d i d d

Page 80: Enap - Monitoreo y Evaluacion - 15 Jun 15

7/18/2019 Enap - Monitoreo y Evaluacion - 15 Jun 15

http://slidepdf.com/reader/full/enap-monitoreo-y-evaluacion-15-jun-15 80/138

de resultados. Fn indicador no de%e utilizarse m@s de una vez dentro de una misma cadena deresultados.

 &erar6uía de Resultados Indicadores7isión< U/omos la empresa de la 77Lresponsa%le de la recaudación de pea0e,mantenimiento de v*as, servicios viales ygerenciamiento de o%rasQ tra%a0amos paracontri%uir a la integración y el desarrollososteni%le de la ciudad, mediante un sistemaintegral de gestión de calidad, en el marco de la

responsa%ilidad social empresarialV

Mndice de 3esarrollo Oumano.

Mndice de competitividad regional.

Mndice de Competitividad Fr%ana.

2E5< UElevar la calidad de los servicios dela empresa.V

 Tiempo total de atención en casetasde pea0e 4transporte ve8icular liviano6.

2EE< U2ptimizar el sistema de co%ro depea0e.V

Centros adecuadamenteimplementados.

(ctividad< U)mplementar un sistemaautomatizado de pea0eV

lazas automatizadas.

rror %G H: Repetición de indicadores

Este error 8ace re'erencia a la utilización de un mismo indicador para dos resultados distintos.

Regla B\ < Bo se de%en 'usionar indicadores

/e de%en seleccionar los indicadores m@s representativos y no agrupar varios indicadores enuna 'rase etensa /i los indicadores son independientes entonces de%en epresarse por

Page 81: Enap - Monitoreo y Evaluacion - 15 Jun 15

7/18/2019 Enap - Monitoreo y Evaluacion - 15 Jun 15

http://slidepdf.com/reader/full/enap-monitoreo-y-evaluacion-15-jun-15 81/138

una 'rase etensa. /i los indicadores son independientes, entonces de%en epresarse porseparado. ( continuación se o'rece un e0emplo so%re la manera incorrecta y la maneracorrecta de 'ormular indicadores.

ResultadoIndicadores(Incorrecto)

Indicadores(Correcto)

Caminosdepartamentalesre8a%ilitados y conmantenimiento

Caminos departamentalesre8a%ilitados, 9ue cuentan conmantenimiento periódico y5o%iernos regionales 9ue

participan en elfnanciamiento delmantenimiento rutinario

 Tasa de caminos departamentalesre8a%ilitados.

orcenta0e de caminos

departamentales conmantenimiento periódico.

B&mero de 5o%iernos regionales9ue participan en elfnanciamiento del mantenimientorutinario

rror %G : Fusión de indicadores

Especialmente en los indicadores de resultado intermedio se comete el error de 'usionardentro de una misma 'rase varios indicadores distintos e independientes.

Regla B\ 1D< Bo se de%en especifcar demasiados indicadores

/i se disponen de demasiados indicadores y todos parecen ser apropiados, entonces se de%e priorizary seleccionar a9uellos cuyo monitoreo no tenga un costo alto y 9ue permita una evaluación e'ectiva.

Page 82: Enap - Monitoreo y Evaluacion - 15 Jun 15

7/18/2019 Enap - Monitoreo y Evaluacion - 15 Jun 15

http://slidepdf.com/reader/full/enap-monitoreo-y-evaluacion-15-jun-15 82/138

y 9 y g y 9 p

Resultados Indicadores

+ortalecer el gerenciamiento de o%ras. 2%ras concluidas de con'ormidad con elcronograma apro%ado.

 Tasa de retorno so%re patrimonio neto4R2E6.

Mndice de compromiso institucional.

+ortalecer los mecanismos de di'usiónorientados a usuarios y po%lación.

E'ectividad de las campañas de di'usiónde los servicios %rindados por Emape.

*ndice de satis'acción de la po%laciónusuaria.

Mndice de satis'acción de usuarios detransporte p&%lico y pesado.

rror %G 8J: levado n/mero de indicadores Consiste en asignar un n&mero eagerado de indicadores para medir una determinada varia%le.Este error ocurre cuando se determinan indicadores de producto 4actividades6 en los 9ue se sueledeterminar un gran n&mero de indicadores, en parte de%ido a la con'usión de #stos con lasactividades.

Page 83: Enap - Monitoreo y Evaluacion - 15 Jun 15

7/18/2019 Enap - Monitoreo y Evaluacion - 15 Jun 15

http://slidepdf.com/reader/full/enap-monitoreo-y-evaluacion-15-jun-15 83/138

. Cuadro de mando integral

Cuadro de mando integral en sector p&%lico

erspectiva depa*s

Page 84: Enap - Monitoreo y Evaluacion - 15 Jun 15

7/18/2019 Enap - Monitoreo y Evaluacion - 15 Jun 15

http://slidepdf.com/reader/full/enap-monitoreo-y-evaluacion-15-jun-15 84/138

Entidad &%lica

erspectiva depa*s

erspectiva de cliente

erspectiva deprocesos internos

erspectiva deaprendiza0e ycrecimiento

erspectivafnanciera yeconómica

erspectiva decliente

erspectiva deprocesos internos

erspectiva deaprendiza0e ycrecimiento

erspectivafnanciera

erspectiva decliente

erspectiva deprocesos internos

erspectiva deaprendiza0e ycrecimiento

pa*s

Empresa &%lica Empresa rivada

PaísIndicadores

Lector*a del 32 Lector*a de ((

alance scorecard

Page 85: Enap - Monitoreo y Evaluacion - 15 Jun 15

7/18/2019 Enap - Monitoreo y Evaluacion - 15 Jun 15

http://slidepdf.com/reader/full/enap-monitoreo-y-evaluacion-15-jun-15 85/138

Procesosinternos

Indicadores

Aprendi=a7e crecimiento

ClientesIndicadores

Indicadores

FinancieraIndicadores

 Tasa de retornoso%re patrimonio

neto 4R2E6

 Tasa de Retornoso%re activos

4R2(6

B&mero de visitasdiarias al portal de

(( a*ses cu%iertos Tasa de crecimiento

de la empresa

 Tasa deautomatización de

los servicios

 Tasa deautomatización de

los procesos

roductos nuevosgenerados

 Tasa de'acturaciónelectrónica

Estudios demercado

realizados

Mndice de lector*a

 Tasa de puntualidad

rogramasproducidos

3esarrollo decomple0o editorial

Renovación de9uipos y m@9uinas

Fsuarios de T: yRadio (ndina

 Tasa de

especialización delos recursos

8umanos

Perspectiva fnanciera

:alor a largo plazo

Relaciones causae2ecto3efne la cadena por la

Cuadro de mando integral

Page 86: Enap - Monitoreo y Evaluacion - 15 Jun 15

7/18/2019 Enap - Monitoreo y Evaluacion - 15 Jun 15

http://slidepdf.com/reader/full/enap-monitoreo-y-evaluacion-15-jun-15 86/138

roductividadCrecimientode ingresos

:alor a largo plazopara los accionistas

3efne la cadena por la9ue los activos intangi%lesse trans'ormar@n en valortangi%le

Perspectiva del cliente

recio +unción 7arca(sociaciónCalidad Tiempo

(tri%utos productoservicio Relación )magen

Propuesta de valor parael cliente(clara las condiciones 9uecrear@n valor para el cliente

Perspectiva de los procesos internos

5estionaroperaciones

5estionarclientes

5estionarinnovación

5estionarprocesos

reguladoresy sociales

Procesos de creación de

valor3efne los procesos 9uetrans'ormar@n los activosintangi%les en resultadosfnancieros y para clientes

Perspectiva de aprendi=a7e crecimiento

Capital 8umanoCapital

organizacionalCapital de la in'ormación

A1rupación de

activos actividades3efne los activosintangi%les alineados eintegrados para crearvalor.

Cuadro de 7ando )ntegral Editora er&

-JJ -J8J -J88 -J8- -J80

Lector*a del 32B&mero de

S ;1 D S;1 ; ;AA = 1 A ?1D S D==3. 7edios,

Fuentes de in2ormaciónMedios de verifcación

Perspectiva Indicador#nidad de

medida"ínea de

+ase

Metas anuales

Page 87: Enap - Monitoreo y Evaluacion - 15 Jun 15

7/18/2019 Enap - Monitoreo y Evaluacion - 15 Jun 15

http://slidepdf.com/reader/full/enap-monitoreo-y-evaluacion-15-jun-15 87/138

Lector*a del 32lectores por d*a

  S,;1 D,S;1 ;,;AA =,1 A,?1D S,D==5. )n'orm@tica

Lector*a de (gencia (ndinaB&mero de

lectores por d*a,1=S 1D,AD 1;,D? 1=, 1A,1 1,=S

3. 7edios,5. )n'orm@tica

 Tasa de retorno so%re

patrimonio neto 4R2E6 orcenta0e ;AZ ;AZ ;AZ ;AZ ;AZ ;AZ 5. (dministración y +inanzas Tasa de retorno so%re activos

4R2(6orcenta0e 1Z 1Z 1Z 1Z 1Z 1Z 5. (dministración y +inanzas

 Tasa de crecimiento de laempresa

orcenta0e Z Z Z Z Z Z5. de Comercialización, 5. de

(dministración y +inanzas

B&mero de visitas diarias alportal de ((

B&mero deingresos por d*a

;1,SA ;A,D;= ;,SSS ==,D= =,DAS ?=,S5. )n'orm@tica, 3irección de

7edios

a*ses cu%iertos B&mero D D ; = ? A3. 7edios eriodisticos,

5. )n'orm@tica

 Tasa de automatización deservicios

orcenta0e 1DZ ;DZ =DZ ?DZ ADZ ADZ5. de Comercialización, 3. de

7edios, 5. de )n'orm@tica

 Tasa de automatización deprocesos

orcenta0e =DZ =DZ =AZ ?DZ ADZ DZ 5. laneamiento y 3esarrollo,5. )n'orm@tica

roductos nuevos generadosroductos

nuevos creadosD 1 ; ; = ?

5. Comercializacion,3irección de 7edios

Estudios de mercadorealizados

Bumero D 1 ; ; = ? 5. de Comercialización

 Tasa de 'acturacionelectrónica

orcenta0e D.DZ ;.AZ =.AZ ?.AZ A.AZ A.AZ5. de Comercialización,

5. de roducción

Mndice de lector*a Ratio A.; A.= A.? A.A A. A.S Estudios internos y eternos

 Tasa de puntualidad deentrega de servicios gr@fcos

orcenta0e DZ AZ DZ AZ SZ Z5. roducción, 5. de

Comercilización

rogramas producidos B&mero D = 1; 1; 3ireccion de 7edios,5. )n'orm@tica

3esarrollo de comple0oeditorial

7etroscuadrados

D D D D D D5. de laneamiento y

3esarrollo, 5. de roducción,Renovacion de e9uipos y

ma9uinariasorcenta0e D D D D 1 1

5. )n'orm@tica,5. roduccion

País

Financiera

Clientes

ProcesosInternos

Aprendi=a7e crecimiento

Cuadro de mando integral de )B3EC)

erspectiva de pa*s

)ndicadoresMndice de

desarrollo 8umano

Mndice deT d %

Mndice de gestióndel riesgo de

desastres

Mndice decompetitividad

glo%al

Page 88: Enap - Monitoreo y Evaluacion - 15 Jun 15

7/18/2019 Enap - Monitoreo y Evaluacion - 15 Jun 15

http://slidepdf.com/reader/full/enap-monitoreo-y-evaluacion-15-jun-15 88/138

erspectiva delos usuarios

)ndicadores

erspectiva de

procesos internos)ndicadores

erspectiva de

aprendiza0e y crecimiento

)ndicadores

e'ectividadgu%ernamental

 Tasa de po%reza

5o%iernos regionales9ue e0ercen sus

'unciones en 5R3

 Tasa de participaciónde organizaciones

p&%licas ensimulacros.

Fnidadesorg@nicas con

procesosautomatizados.

/edesinstitucionalesmodernizadas

ersonalcapacitado

Cuadro de mando integral de la /uperintendencia Bacional de 7igracionesPerspectiva de país

IndicadoresMndice de

competitividad envia0es y turismo

Mndice dee'ectividad

gu%ernamental Tasa de desempleo

Page 89: Enap - Monitoreo y Evaluacion - 15 Jun 15

7/18/2019 Enap - Monitoreo y Evaluacion - 15 Jun 15

http://slidepdf.com/reader/full/enap-monitoreo-y-evaluacion-15-jun-15 89/138

Perspectiva de

los usuariosIndicadores

Perspectiva deprocesos internos

Indicadores

Perspectiva deaprendi=a7e crecimiento

Indicadores

Mndice deprocedimientos del

 TF( automatizados

*ndice de cumplimientodel plazo esta%lecidoen los procedimientos

y servicios

/ervicios migratorios TF( optimizados.

Entidadesinterconectadas a

7igraciones

ersonal capacitado Tasa de compromisola%oral

 Tasa decrecimiento de laefciencia la%oral

en controlmigratorio

Mndice desatis'acción de losusuarios eternos

Co%ertura dedi'usión de los

servicios y

procedim.

Mndice depro'esionalización del

personal

Page 90: Enap - Monitoreo y Evaluacion - 15 Jun 15

7/18/2019 Enap - Monitoreo y Evaluacion - 15 Jun 15

http://slidepdf.com/reader/full/enap-monitoreo-y-evaluacion-15-jun-15 90/138

S. Evaluación de procesos

Evaluación de proceso< defnición

Page 91: Enap - Monitoreo y Evaluacion - 15 Jun 15

7/18/2019 Enap - Monitoreo y Evaluacion - 15 Jun 15

http://slidepdf.com/reader/full/enap-monitoreo-y-evaluacion-15-jun-15 91/138

La evaluación de procesos permite conocer la

din@mica de implementación de actividades.

• Cantidad de actividades realizada.

Calidad de las actividades, 4E0., /atis'acción deusuarios6

• Costo asociado a dic8as actividades.

• (ctividades

Evaluación de procesos< preguntas clave

Las preguntas 'undamentales para la evaluación son las

Page 92: Enap - Monitoreo y Evaluacion - 15 Jun 15

7/18/2019 Enap - Monitoreo y Evaluacion - 15 Jun 15

http://slidepdf.com/reader/full/enap-monitoreo-y-evaluacion-15-jun-15 92/138

• !Cu5nto ;emos ;ec;oK

•  L@u9 tan +ien lo ;emos ;ec;oK

• LCu5nto ;a costadoK

siguientes<

Evaluación de procesos< venta0as y desventa0as

/ ' l i t l i l t ió d

Page 93: Enap - Monitoreo y Evaluacion - 15 Jun 15

7/18/2019 Enap - Monitoreo y Evaluacion - 15 Jun 15

http://slidepdf.com/reader/full/enap-monitoreo-y-evaluacion-15-jun-15 93/138

• /e en'oca eclusivamente en el implementación de

las actividades.• Bo investiga la medida en 9ue las actividades 8an

generado resultados.

• Ftilidad %@sica< )dentifca aspectos eitosos yaspectos defcientes, con la fnalidad de realizar

cam%ios en la programación 4decisiones

operativas6.

• Es de utilidad principalmente para la institución

e0ecutora.

Calidad de los productos

3i'erencias entre ...

Page 94: Enap - Monitoreo y Evaluacion - 15 Jun 15

7/18/2019 Enap - Monitoreo y Evaluacion - 15 Jun 15

http://slidepdf.com/reader/full/enap-monitoreo-y-evaluacion-15-jun-15 94/138

Calidad pedagógicade textos escolares

Porcentae deaceptación deraciones

 #porte calórico de

raciones alimenticias.

2ivel de participación

comunal

1iempo promedio deentrega de servicios

3rado desatisfacción deusuarios.

L( C(L)3(3 2-ET):( E/ L( C(L)3(3 T]CB)C(

Calidad o%0etiva Calidad o%0etiva

Page 95: Enap - Monitoreo y Evaluacion - 15 Jun 15

7/18/2019 Enap - Monitoreo y Evaluacion - 15 Jun 15

http://slidepdf.com/reader/full/enap-monitoreo-y-evaluacion-15-jun-15 95/138

. Evaluación de resultados

Evaluación de resultados

Page 96: Enap - Monitoreo y Evaluacion - 15 Jun 15

7/18/2019 Enap - Monitoreo y Evaluacion - 15 Jun 15

http://slidepdf.com/reader/full/enap-monitoreo-y-evaluacion-15-jun-15 96/138

• ermite determinar el grado de logro de los resultados

esperados.• Los resultados esperados se referen, por lo general, a

cam%ios en el %ienestar de la po%lación<

empleo e ingresos

accesos a servicios

derec8os pol*ticos

• 7#todo general de medición< comparación antesdespu#s.

• )mportante< 3i'erenciar resultados intermedios 4productos6 yresultados fnales 4propósito6

Evaluación de resultados< preguntas clave

Page 97: Enap - Monitoreo y Evaluacion - 15 Jun 15

7/18/2019 Enap - Monitoreo y Evaluacion - 15 Jun 15

http://slidepdf.com/reader/full/enap-monitoreo-y-evaluacion-15-jun-15 97/138

• !Las actividades realizadas devinieron en los

resultados esperados$• !Los productos o resultados %enefciaron a la

po%lación o%0etivo predeterminada$

• !En 9ue magnitud$

• Calidad o%0etiva de los productos

• Calidad su%0etiva de los productos.

Criterios de an@lisis

• 2rientación de las inversiones fnanciadas 8acia los segmentos m@spo%res de la po%lación. Tasa de incidencia de la po%reza mayor alPertinencia

Page 98: Enap - Monitoreo y Evaluacion - 15 Jun 15

7/18/2019 Enap - Monitoreo y Evaluacion - 15 Jun 15

http://slidepdf.com/reader/full/enap-monitoreo-y-evaluacion-15-jun-15 98/138

po%res de la po%lación. Tasa de incidencia de la po%reza mayor al=SZ.

Pertinencia

• Cumplimiento de las metas '*sicas y fnancieras de proyectos. Engeneral, verifcación del cumplimiento de los o%0etivos de losproyectos.

fcacia

• Relación entre las metas '*sicas y las metas fnancieras esta%lecidas.fciencia

• Comparación antesdespu#s de los niveles de po%reza en las regiones%enefciarias de la EB Crecer.

Impacto

• (preciación de la capacidad para mantener los impactos positivos delas intervenciones a largo plazo.

/osteni%ilidad

Criterios de an@lisis

Page 99: Enap - Monitoreo y Evaluacion - 15 Jun 15

7/18/2019 Enap - Monitoreo y Evaluacion - 15 Jun 15

http://slidepdf.com/reader/full/enap-monitoreo-y-evaluacion-15-jun-15 99/138

Efcacia

• Efcacia< grado en el 9ue se 8an alcanzado los o%0etivos de la

Page 100: Enap - Monitoreo y Evaluacion - 15 Jun 15

7/18/2019 Enap - Monitoreo y Evaluacion - 15 Jun 15

http://slidepdf.com/reader/full/enap-monitoreo-y-evaluacion-15-jun-15 100/138

intervención.

• Relación entre lo planeado y lo realizado.

• (nalizar razones 9ue est@n detr@s de la efcacia o la ausencia de

esta< /FFE/T2/.

E+)C(C)( ^Resultados o%tenidos

Resultados planeados

U Efcacia< logro de las metas en el tiempo previstoV

Efciencia

• Efciencia < o%tención del m@imo producto con el m*nimo costo.

Page 101: Enap - Monitoreo y Evaluacion - 15 Jun 15

7/18/2019 Enap - Monitoreo y Evaluacion - 15 Jun 15

http://slidepdf.com/reader/full/enap-monitoreo-y-evaluacion-15-jun-15 101/138

• Efciencia ^ productividad< est@ contenida en la L del marco

lógico< productosactividadesinsumos.• Es una relación entre las varia%les<

- roducto.

- )nsumo.

E+)C)EBC)( ^7etas o%tenidas

Recursos utilizados

• 7edidas de productividad<

arcial y total.

7edia

E'ectos e impactos

La evaluación eige el esta%lecimiento de un modelo causal 9ue permitavincular el proyecto con los e'ectos resultantes de la implementación

Page 102: Enap - Monitoreo y Evaluacion - 15 Jun 15

7/18/2019 Enap - Monitoreo y Evaluacion - 15 Jun 15

http://slidepdf.com/reader/full/enap-monitoreo-y-evaluacion-15-jun-15 102/138

vincular el proyecto con los e'ectos resultantes de la implementación.

uede distinguirse entre los resultados %rutos 4R6 y los resultados netos4RB6 de un proyecto y e'ectos eternos 4EE6.

R, R% N

R% R,

l resultado neto es e6uivalente al impacto del proecto

R< Cam%ios o%serva%les en la po%lación o%0etivo despu#s 9ue elproyecto 8a estado en 'uncionamiento durante un tiempo razona%le.

RB< (lteraciones en la po%lación o%0etivo 9ue pueden atri%uirse &nica yeclusivamente al proyecto.

EE< E'ectos eternos so%re la po%lación o%0etivo.

ertinencia

• La razón de ser de la intervención

Page 103: Enap - Monitoreo y Evaluacion - 15 Jun 15

7/18/2019 Enap - Monitoreo y Evaluacion - 15 Jun 15

http://slidepdf.com/reader/full/enap-monitoreo-y-evaluacion-15-jun-15 103/138

!Est@ en l*nea con las prioridades de la

comunidad %enefciaria y del pa*s en su con0unto$

• (n@lisis de pertinencia ^ cuestión de prioridades.

• 3ecisión< Continuación o fnalización del proyecto.

•Continuación< !"ue cam%ios de%en realizarse$

- R2K/)T2 de la intervención.

- C(7)2/ /2C)(LE/ ocurridos mientras la intervención'ue e0ecutado.

• Relación entre los aspectos<

+actores de sosteni%ilidad

1. +ortalecimiento institucional.

Page 104: Enap - Monitoreo y Evaluacion - 15 Jun 15

7/18/2019 Enap - Monitoreo y Evaluacion - 15 Jun 15

http://slidepdf.com/reader/full/enap-monitoreo-y-evaluacion-15-jun-15 104/138

;. 7arco regulatorio adecuado.

=. Trans'erencia tecnológica y capacitación de po%lación

%enefciaria.

?. +actores socioculturales.

A. +inanciamiento de costos operativos.

)ndicadores de desempeño en la gestión p&%lica

Page 105: Enap - Monitoreo y Evaluacion - 15 Jun 15

7/18/2019 Enap - Monitoreo y Evaluacion - 15 Jun 15

http://slidepdf.com/reader/full/enap-monitoreo-y-evaluacion-15-jun-15 105/138

)nsumos roductos

)nsumos roductos

Econom*a Efcacia

Efciencia

roductividad

Efciencia

roductividad

Resultado )mpacto

EfcaciaCalidad

EfcaciaCalidad

rogramación

E0ecución

)ndicadores de evaluación del desempeño

Clasifcación de acuerdo con el mecanismo de control parael cual se o%tiene la in'ormación.

Page 106: Enap - Monitoreo y Evaluacion - 15 Jun 15

7/18/2019 Enap - Monitoreo y Evaluacion - 15 Jun 15

http://slidepdf.com/reader/full/enap-monitoreo-y-evaluacion-15-jun-15 106/138

1. Econom*a

;. Efcacia.

=. Efciencia.

?. 4Calidad6

 Tipos de indicadores< e0emplos

A. fcacia

Page 107: Enap - Monitoreo y Evaluacion - 15 Jun 15

7/18/2019 Enap - Monitoreo y Evaluacion - 15 Jun 15

http://slidepdf.com/reader/full/enap-monitoreo-y-evaluacion-15-jun-15 107/138

1. orcenta0e de cam%io en la calidad de vida de los

(gricultores

;. orcenta0e de niños o%esos menores de años %a0o control

,. fcacia

1. romedio de +iscalizaciones por +iscalizador

;. romedio mensual de reclamos resueltos por 'uncionarioC. conomía

1. orcenta0e de recursos aportados por terceros

;. orcenta0e de co%ranza

'. Calidad

1. Tiempo de entrega de viviendas

;. Tiempo promedio de solicitudes de %onifcación

3efnición de econom*a

 /e en'ocan en el control de recursos o entradas

Page 108: Enap - Monitoreo y Evaluacion - 15 Jun 15

7/18/2019 Enap - Monitoreo y Evaluacion - 15 Jun 15

http://slidepdf.com/reader/full/enap-monitoreo-y-evaluacion-15-jun-15 108/138

del sistema.  Capacidad de una institución para generar y

movilizar adecuadamente los recursos fnancieros

en pos de su misión institucional.

 Eval&an la relación entre los recursos y su gradode aprovec8amiento por parte de los procesos o

actividades del sistema.

E0emplos< capacidad de autofnanciamiento,

efcacia en la e0ecución presupuestal, o nivel de

recuperación de prestamos.

3efnición de efcacia

  /e en'ocan en el control de los resultados o salidas

Page 109: Enap - Monitoreo y Evaluacion - 15 Jun 15

7/18/2019 Enap - Monitoreo y Evaluacion - 15 Jun 15

http://slidepdf.com/reader/full/enap-monitoreo-y-evaluacion-15-jun-15 109/138

del sistema.

  5rado de cumplimiento de los o%0etivos

planteados.

  Bo considera los recursos asignados.

  Re9uiere de o%0etivos claramente defnidos.  Eval&an la relación entre las salidas del sistema y

las metas esperadas.

  E0emplos< grado de cumplimiento de las metas,

grado de satis'acción de usuarios, etc.

3efnición de efciencia

Relación entre la producción '*sica de un

Page 110: Enap - Monitoreo y Evaluacion - 15 Jun 15

7/18/2019 Enap - Monitoreo y Evaluacion - 15 Jun 15

http://slidepdf.com/reader/full/enap-monitoreo-y-evaluacion-15-jun-15 110/138

producto y los insumos o recursos utilizadospara alcanzar ese nivel de producto.

E0ecución de acciones, %enefcios o

prestaciones de un servicio utilizando el

m*nimo de recursos posi%les.

uede aplicarse para medir el nivel de

productividad

Relaciona vol&menes de %ienes y servicios orecursos con los gastos administrativos

e'ectuados ara lo rarlos.

3efnición de calidad

Capacidad de la institución para responder en 'orma

@ id di l id d d li

Page 111: Enap - Monitoreo y Evaluacion - 15 Jun 15

7/18/2019 Enap - Monitoreo y Evaluacion - 15 Jun 15

http://slidepdf.com/reader/full/enap-monitoreo-y-evaluacion-15-jun-15 111/138

r@pida y directa a las necesidades de sus clientes,

usuarios o %enefciarios.

Eval&an la relación entre Elementos de la calidad<

oportunidad, accesi%ilidad, precisión y continuidad en

la entrega del servicio, comodidad y cortes*a.E0emplos< numero de reclamos so%re el total de casos

atendidos, tiempo de tramitación de %enefcios, tiempo

de espera en ofcinas de atención al pu%lico o

velocidad de respuesta entre cartas, llamadas oreclamos por parte de los usuarios.

Page 112: Enap - Monitoreo y Evaluacion - 15 Jun 15

7/18/2019 Enap - Monitoreo y Evaluacion - 15 Jun 15

http://slidepdf.com/reader/full/enap-monitoreo-y-evaluacion-15-jun-15 112/138

. Evaluación de impacto

!"u# es evaluación de impacto$

• Es un tipo de evaluación epost.

• Eval&a los cam%ios en el %ienestar de los individuos 9ue pueden

Page 113: Enap - Monitoreo y Evaluacion - 15 Jun 15

7/18/2019 Enap - Monitoreo y Evaluacion - 15 Jun 15

http://slidepdf.com/reader/full/enap-monitoreo-y-evaluacion-15-jun-15 113/138

Eval&a los cam%ios en el %ienestar de los individuos 9ue pueden

ser atri%uidos a un determinado plan, programa o proyecto.• rincipal utilidad< proveer 'eed%ac_ 9ue ayude a me0orar la

e'ectividad de las intervenciones 'uturas.

• +orma parte de la responsa%ilidad de los polic maOers 'rente a

la sociedad 4accounta+ilit).• 3i'erencia con otros tipos de evaluación< estimación de la

magnitud de los e'ectos y asignación de las causas.

!or 9u# realizar una evaluación de impacto$

  La in'ormación generada por la E) permite tomar decisiones so%re

E[(B/)KB, 723)+)C(C)KB o EL)7)B(C)KB de un plan, programa

Page 114: Enap - Monitoreo y Evaluacion - 15 Jun 15

7/18/2019 Enap - Monitoreo y Evaluacion - 15 Jun 15

http://slidepdf.com/reader/full/enap-monitoreo-y-evaluacion-15-jun-15 114/138

o proyecto, y esta%lecer prioridades de gasto p&%lico.

  /e 8a logrado el o%0etivo deseado$

• Los e'ectos son eplicados por la intervención o son el resultado

de otros 'actores 9ue ocurrieron simult@neamente$• Los impactos var*an a trav#s de los di'erentes grupos de

%enefciarios, regiones y durante el tiempo$• Eisten e'ectos indeseados, positivos o negativos$• Cu@n e'ectiva es la intervención en comparación con

intervenciones alternativas$

!Cu@ndo realizar una evaluación de impacto$

CRI<RI* C"A!: Potencial de los resultados de la I para +rindar

Page 115: Enap - Monitoreo y Evaluacion - 15 Jun 15

7/18/2019 Enap - Monitoreo y Evaluacion - 15 Jun 15

http://slidepdf.com/reader/full/enap-monitoreo-y-evaluacion-15-jun-15 115/138

lecciones de la experiencia. (P*<%CIA" ' APR%'IA&)

Cuatro cuestiones relevantes:

8. Ls el proecto (pro1rama o plan) considerado estrat91ico para lareducción de la po+re=aK.

-. LContri+uir5 la evaluación a cerrar la +rec;a de conocimiento respectode lo 6ue 2unciona no 2unciona en la reducción de la po+re=aK.

0. Lst5 la intervención pro+ando un en2o6ue innovativo para la reducciónde la po+re=aK

3. L<endr5 la intervención impactos di2erenciados se1/n 1eneroK

D. Lsta destinado la intervención a 1rupos di2íciles de alcan=arK

!Cómo evaluar el impacto$

Cuestión 'undamental<

Page 116: Enap - Monitoreo y Evaluacion - 15 Jun 15

7/18/2019 Enap - Monitoreo y Evaluacion - 15 Jun 15

http://slidepdf.com/reader/full/enap-monitoreo-y-evaluacion-15-jun-15 116/138

LQué habría ocurrido si el proyecto no se ejecutabaK

2%viamente, ello no puede ser o%servado realmente.

Es posi%le aproimarse construyendo un C%ARI* C*%<RAFAC<#A"

MQ<*'*

1. 3iseño eperimental.;. 3iseño cuasi

eperimentales.=. 3iseños noeperimentales.

!"u# es un diseño de evaluación$

Es la manera pr@ctica y concreta de llevar a ca%o la evaluación.

U'I*V< plan o estrategia conce%ida para evaluar la

Page 117: Enap - Monitoreo y Evaluacion - 15 Jun 15

7/18/2019 Enap - Monitoreo y Evaluacion - 15 Jun 15

http://slidepdf.com/reader/full/enap-monitoreo-y-evaluacion-15-jun-15 117/138

intervención.

El diseño señala al evaluador lo 9ue de%e 8acer para alcanzar sus

o%0etivos de estudio, contestar las interrogantes 9ue se 8a

planteado y analizar la certeza de las 8ipótesis 'ormuladas.

Clave del diseño< identifcación del grupo de noparticipantes en

el proyecto 4C%ARI* C*%<RAFAC<#A"6.

El escenario contra'actual se puede determinar con tres

metodolog*as< diseño eperimental, diseño cuasieperimental y

diseño noeperimental.

7#todos de diseño

A. 'I* PRIM%<A"

• )mplica esta%lecer un con0unto de individuos 4u otra unidad de an5lisis6igualmente ele1i+les y deseosos de participar en el proyecto.

Page 118: Enap - Monitoreo y Evaluacion - 15 Jun 15

7/18/2019 Enap - Monitoreo y Evaluacion - 15 Jun 15

http://slidepdf.com/reader/full/enap-monitoreo-y-evaluacion-15-jun-15 118/138

,. 'I* C#AI PRIM%<A"

C. 'I* C#A"I<A<I!*

• 7#todos cualitativos.

• 7#todos participatorios.

• /e genera un >rupo de Comparación 9ue se aseme0a al ><, usandometodolog*as econom#tricas.

• or lo general, los >rupos de < C se seleccionan despu#s de laintervención, usando m#todos no aleatorios.

•Luego dividirlos aleatoriamente en dos grupos<

a) >rupo de tratamiento.

+) >rupo de control.

3iseños eperimentales< metodolog*a

• )mplica la identifcación de un con0unto de individuos 4u otra unidad de an@lisis6

igualmente ele1i+les y deseosos de participar en el proyecto.

L l di i ió l t i d

Page 119: Enap - Monitoreo y Evaluacion - 15 Jun 15

7/18/2019 Enap - Monitoreo y Evaluacion - 15 Jun 15

http://slidepdf.com/reader/full/enap-monitoreo-y-evaluacion-15-jun-15 119/138

• Luego, la división aleatoria en dos grupos.

  1. (9uellos 9ue reci%ir@n la intervención 45RF2 3E TR(T(7)EBT26.

  ;. (9uellos 9ue son ecluidos de la intervención 45RF2 3E C2BTR2L6

• 3e%ido a la selección aleatoria, el proceso de asignación crea autom@ticamente los 5.

3E TR(T(7)EBT2 y 3E C2BTR2L.

• El 5RF2 3E C2BTR2L generado aleatoriamente sirve como un C2BTR(+(CTF(LER+ECT2, li%re de /E/52 3E /ELECC)KB.

• rincipal %enefcio< /implicidad en la interpretación de los resultados el impacto

puede ser medido por la di'erencia entre la situación del 5. 3E TR(T(7)EBT2 y 5. 3E

C2BTR2L.

3iseño eperimental< pro%lemas

1. La aleatorización puede no ser 9tica, por9ue signifcar*a denegar los

%enefcios del proyecto a una po%lación per'ectamente elegi%le.

;. uede ser políticamente di'*cil proveer los productos del proyecto a

Page 120: Enap - Monitoreo y Evaluacion - 15 Jun 15

7/18/2019 Enap - Monitoreo y Evaluacion - 15 Jun 15

http://slidepdf.com/reader/full/enap-monitoreo-y-evaluacion-15-jun-15 120/138

un grupo y neg@rselo a otro.=. El alcance del proyecto podr*a ser de alcance nacional y en tal caso

no 8a%r*a posi%ilidad de esta%lecer un 5. 3E C2BTR2L.

?. Los individuos pertenecientes a los 5RF2/ 3E TR(T(7)EBT2 y 3E

C2BTR2L podr*an cam+iar ciertas caracter*sticas durante el

experimento, 9ue invaliden o contaminen los resultados.

A. odr*a ser muy di'*cil asegurar 9ue la selección sea verdaderamente

aleatoria.

. odr*a ser muy costoso y muy largo el proceso de aleatorización.

3iseño cuasi eperimentales

Consiste en la construcción de un >rupo de Comparación, similar al

5rupo de Tratamiento.

7#t d d l ió l t i i di t

Page 121: Enap - Monitoreo y Evaluacion - 15 Jun 15

7/18/2019 Enap - Monitoreo y Evaluacion - 15 Jun 15

http://slidepdf.com/reader/full/enap-monitoreo-y-evaluacion-15-jun-15 121/138

7#todo de selección no es aleatoria, sino mediante<

MPAR&AMI%<* 4matching6

C*MPARACI*% RF"I!A.

La 'ormación de los grupos puede ser ex post.

Los cuasieperimentos tra%a0an con 1rupos intactos..

Esto no 9uiere decir 9ue sea imposi%le tener un cuasieperimento

donde los grupos sean e9uipara%les en las varia%les relevantes de

estudio.

3iseños cuasieperimentales< Umatc8ingV

• Consiste en la construcción de un 5RF2 3E C27(R(C)KB identifcando a los no

participantes en el proyecto compara%les en sus caracter*sticas esenciales a los

participantes

Page 122: Enap - Monitoreo y Evaluacion - 15 Jun 15

7/18/2019 Enap - Monitoreo y Evaluacion - 15 Jun 15

http://slidepdf.com/reader/full/enap-monitoreo-y-evaluacion-15-jun-15 122/138

participantes.

• (m%os grupos 5RF2 3E TR(T(7)EBT2 J 5RF2 3E C2BTR2L ` de%er*an ser

comparados so%re la %ase de ciertas caracter*sticas 9ue se sa%e 9ue inNuir*an en

los resultados del proyecto.

• 3iseños rospectivos y 3iseños Retrospectivos.

• rincipal venta0a< los 5RF2/ pueden ser comparados so%re la %ase de la data

eistente y por ende son mas r@pidos y %aratos.

• rincipal desventa0a< sesgo de selección.

• 2tra desventa0a< re9uiere considera%le epertise en m#todos estad*sticos.

3iseños cuasieperimentales< UComparación reNeivaV

• La C27(R(C)KB RE+LE[):(< el contra'actual es construido so%re la %ase de la

situación de los participantes en el proyecto antes y despu#s.

Page 123: Enap - Monitoreo y Evaluacion - 15 Jun 15

7/18/2019 Enap - Monitoreo y Evaluacion - 15 Jun 15

http://slidepdf.com/reader/full/enap-monitoreo-y-evaluacion-15-jun-15 123/138

• Los participantes 'uncionan, al mismo tiempo, como 5RF2 3E TR(T(7)EBT2 y

5RF2 3E C27(R(C)KB.

• articularmente &til en evaluaciones de intervención de co%ertura total.

• 3esventa0a< la situación de los participantes podr*a variar de%ido a razones

independientes del proyecto.

• ( menos 9ue sean diseñadas cuidadosamente, las comparaciones reNeivas no 

pueden ser capaces de distinguir entre los e'ectos del proyecto y los e'ectos

eternos.

7#todo eperimental< es9uema de diseño

8. 'iseño de los 1rupos aleatorios.

  5T 4R6 [ 21

5C 4R6 2;

Page 124: Enap - Monitoreo y Evaluacion - 15 Jun 15

7/18/2019 Enap - Monitoreo y Evaluacion - 15 Jun 15

http://slidepdf.com/reader/full/enap-monitoreo-y-evaluacion-15-jun-15 124/138

  5C 4R6 2;

-. 'iseño con medición previa posterior con 1rupo de control.

  5T 4R6 21 [ 2;

  5C 4R6 2= [ 2?

0. 'iseño de alomón para cuatro 1rupos.

  5T1 4R6 21 [ 2;

 5C1 4R6 2= 2?

 5T; 4R6 [ 2A

 5C; 4R6 2

3iseño cuasieperimental< es9uemas de diseño

8. MA<CBI%>.

Page 125: Enap - Monitoreo y Evaluacion - 15 Jun 15

7/18/2019 Enap - Monitoreo y Evaluacion - 15 Jun 15

http://slidepdf.com/reader/full/enap-monitoreo-y-evaluacion-15-jun-15 125/138

  >< *8 *-

  >C *8 *-

-. C*MPARACI*% RF"I!A.

  > *8 *-

0. 'I* PR PRIM%<A".

  > *8

3efnición de evaluación de impacto

Comparación de la situación con y sin proyecto, mediante laconstrucción de un escenario contra'actual.

Page 126: Enap - Monitoreo y Evaluacion - 15 Jun 15

7/18/2019 Enap - Monitoreo y Evaluacion - 15 Jun 15

http://slidepdf.com/reader/full/enap-monitoreo-y-evaluacion-15-jun-15 126/138

E< /ituación antesdel proyecto

+< /ituación antesdel proyecto

< Estado de no tratamiento

C< Estado de tratamiento

3< Estado de no tratamiento

ituaciones o+serva+les ituaciones no o+serva+les

(< Estado de tratamiento,enefciarios

Controles

Antes del proecto 'espu9s delproecto

7#todos de cuantifcación de impacto

En esencia, una evaluación de impacto tiene el o%0etivo demedir el cam%io o%servado por los %enefciarios al 8a%erpasado de una situación sin proyecto a otra denominadasituación con proyecto.

Page 127: Enap - Monitoreo y Evaluacion - 15 Jun 15

7/18/2019 Enap - Monitoreo y Evaluacion - 15 Jun 15

http://slidepdf.com/reader/full/enap-monitoreo-y-evaluacion-15-jun-15 127/138

ituacionesBipot9ticas

Antes delProecto

'espu9s delProecto

ResultadosComparativos

Con proecto1DD 1AD AD

in proecto1DD 1;D ;D

,enefcios incrementalesD =D =D

"ínea de,ase

"ínea dealida

Impacto delproecto

p y

3iseños de la evaluación de impacto

La siguiente ta%la muestra la relación de los di'erentes tipos de diseñoseperimentales con la aleatoriedad de los su0etos o%0eto de lainvestigación el control de varia%les etrañas y la presencia o no de

Page 128: Enap - Monitoreo y Evaluacion - 15 Jun 15

7/18/2019 Enap - Monitoreo y Evaluacion - 15 Jun 15

http://slidepdf.com/reader/full/enap-monitoreo-y-evaluacion-15-jun-15 128/138

xperimentales

Cuasiexperimentales

Preexperimentales

(signación de lossu0etos (leatorios

(leatoriosvoluntarios :oluntarios

Control devaria%les

7@imo a0a Binguno

5rupo de control /iempre (lgunas veces Binguno

investigación, el control de varia%les etrañas y la presencia o no degrupos de control.

+uente< ernal, C#sar (. 7etodolog*a de la investigación.

 Tipos de 'allas del programa

rogramarocesoUcausalV

E'ectorogramade #ito

uso enmovimiento "ue

condu0o a

Page 129: Enap - Monitoreo y Evaluacion - 15 Jun 15

7/18/2019 Enap - Monitoreo y Evaluacion - 15 Jun 15

http://slidepdf.com/reader/full/enap-monitoreo-y-evaluacion-15-jun-15 129/138

causaldeseado

de #ito

rogramarocesoUcausalV

E'ectodeseado

+alla en lateor*a

uso enmovimiento

"ue nocondu0o a

rogramarocesoUcausalV

E'ectodeseado

+alla en elprograma

uso enmovimiento

"ue 8a%r*aconducido

a

+uente< eiss, Carol O. )nvestigación evaluativa. 7#todos para determinar la efciencia de los programas deacción.

)lustración del modelo eperimental

El diseño cl@sico para las evaluaciones 8a sido el modelo eperimental, aun9uemas a modo de e8ortación 9ue en la practica. Este modelo utiliza un grupoeperimental y otro de control.

Page 130: Enap - Monitoreo y Evaluacion - 15 Jun 15

7/18/2019 Enap - Monitoreo y Evaluacion - 15 Jun 15

http://slidepdf.com/reader/full/enap-monitoreo-y-evaluacion-15-jun-15 130/138

+uente< eiss, Carol O. )nvestigación evaluativa. 7#todos para determinar la efciencia de los programas deacción.

(ntes 3espu#s

Eperimental a %

Control c d

/i la di'erencia entre a y% es mayor 9ue ladi'erencia entre c y d, elprograma es un #ito.

3e entre la po%lación a la 9ue se toma como %lanco, se eligen al azar unidadespara 9ue fguren en el grupo 9ue reci%ir@ el programa o en el Ugrupo decontrolV, 9ue no lo reci%ir@.

/e toman medidas de la varia%le criterio 9ue venga al caso antes de 9uecomience el programa y despu#s de 9ue termine. /e calculan las di'erencias yse califca de #ito al programa cuando el grupo eperimental 8a me0oradomas 9ue el grupo de control.

Epectativas en lo 9ue respecta a los e'ectos del programa condos grupos ordenados en UetapasV

3e%ido a los pro%lemas de no poder encontrar a un solo su0eto UetraV para 9uesirva de control, por ello Xendall para una evaluación de un programa en unaescuela de medicina 8izo 9ue la mitad del grupo reci%iera el nuevo programadurante el primer semestre y la otra mitad durante el segundo semestre, con esto

Page 131: Enap - Monitoreo y Evaluacion - 15 Jun 15

7/18/2019 Enap - Monitoreo y Evaluacion - 15 Jun 15

http://slidepdf.com/reader/full/enap-monitoreo-y-evaluacion-15-jun-15 131/138

5rupo 1

5rupo ;

rimera medición /egunda medición  Tercera medición

evaluó en tres tiempos al comenzar el programa, al fnal del primer semestre y alfnal del año.

En e'ecto, el eperimento se repitió dos veces. (dem@s la tercera medición,toma%a todo un semestre despu#s de 9ue el primer grupo 8a%*a 9uedadoepuesto, aportando a 9ue si los e'ectos desaparec*an o no, este modelo poseeal parecer una amplia aplica%ilidad.

+uente< eiss, Carol O. )nvestigación evaluativa. 7#todos para determinar la efciencia de los programas deacción.

3iseño de series temporales

Es uno de los cuasieperimentos mas atractivos. Consiste en una serie demediciones en intervalos de tiempo, permitiendo advertir si las medidastomadas antes y despu#s del programa representan una continuación de

Page 132: Enap - Monitoreo y Evaluacion - 15 Jun 15

7/18/2019 Enap - Monitoreo y Evaluacion - 15 Jun 15

http://slidepdf.com/reader/full/enap-monitoreo-y-evaluacion-15-jun-15 132/138

rograma

 T1 T;  T=  T? TA T

El cam%io de 8acia ( puedeatri%uirse alprograma&nicamente en elcaso de a%a0o.

(

(

(

pautas o normas anteriores o si señalan un cam%io decisivo. En la siguientegr@fca muestran tres casos en 9ue las medidas de antes 46, despu#s 4(6tendr@n signifcación di'erente.

+uente< eiss, Carol O. )nvestigación evaluativa. 7#todos para determinar la efciencia de los programas deacción.

Page 133: Enap - Monitoreo y Evaluacion - 15 Jun 15

7/18/2019 Enap - Monitoreo y Evaluacion - 15 Jun 15

http://slidepdf.com/reader/full/enap-monitoreo-y-evaluacion-15-jun-15 133/138

1D. L*nea de %ase

L*nea de %ase< defniciónL*nea de %ase< defnición

• ReNe0a la situación de la po%lación o%0etivo en relación con las

dimensiones o pro%lemas 9ue el proyecto pretende a%ordar.

Page 134: Enap - Monitoreo y Evaluacion - 15 Jun 15

7/18/2019 Enap - Monitoreo y Evaluacion - 15 Jun 15

http://slidepdf.com/reader/full/enap-monitoreo-y-evaluacion-15-jun-15 134/138

Es el punto de partida de la intervención.• or lo general, la l*nea %asal recoge datos m@s precisos so%re la

po%lación o%0etivo, lo 9ue me0ora el diseño del proyecto.

• 5eneralmente, se nutre de 'uentes secundarias de in'ormación

4censos, encuestas anteriores, estad*sticas ofciales, estudios

previos y otras6.

• Cuando no eiste in'ormación secundaria o esta no es confa%le,

se recurre a 'uentes primarias. Esta puede o%tenerse por

entrevistas a in'ormantes califcados o encuestas por muestreo.

  asos para la preparación de un Estudio asal

En un EL se o%servan sistem@ticamente 'enómenos o 8ec8os de un campo de la realidad4unidades de an@lisis6, so%re la cual interesa analizar determinadas caracter*sticas4varia%les6, con el propósito de dimensionar o cuantifcar determinados cam%ios 4valores enlas varia%les o datos6. ( tal e'ecto, se ela%ora una muestra de las unidades de estudio, se

Page 135: Enap - Monitoreo y Evaluacion - 15 Jun 15

7/18/2019 Enap - Monitoreo y Evaluacion - 15 Jun 15

http://slidepdf.com/reader/full/enap-monitoreo-y-evaluacion-15-jun-15 135/138

'eterminación del 5m+itode estudio

'eterminació

n de loso+7etivos del

estudio

elección devaria+les eindicadoresdel estudio

'iseño delcuestionari

o

Construcció

n de la +asede datos

An5lisis dedatos

'eterminació

n del marcomuestral

Reali=acióndel tra+a7ode campo

Prue+a

piloto delcuestionari

o

Redacción del

in2orme fnal

8 - 0 3 D E H 8J

trans'orman las varia%les e indicadores en preguntas de un cuestionario y, fnalmente, serecopilan los datos mediante una encuesta.

RecopilaciónFnidades

royecto

:aria%les

2%0etivosdel estudio

7apa conceptual del EL

Page 136: Enap - Monitoreo y Evaluacion - 15 Jun 15

7/18/2019 Enap - Monitoreo y Evaluacion - 15 Jun 15

http://slidepdf.com/reader/full/enap-monitoreo-y-evaluacion-15-jun-15 136/138

3iseño del

cuestionario

rue%a piloto

 Tra%a0o de campo

ase de datos

)ndicadoresy an@lisis

Fniverso po%lación

riorización

de po%lación Estratifcación depo%lación y

cuoteo Tamaño y marco

muestral

de datosde an@lisis

:aria%les de'uentes

secundarias

:aria%les de'uentes primarias

:aria%lescuantitativas

:aria%lescualitativas

de estudio

Redacciónde )n'orme

Indicadores#nidaddeMedida

"ínea de +ase

Periodo-JJ-J88-JJ3 -JJD

1. Tasa de crecimiento del )N 8D.-J S

)ndicadores de impacto

Page 137: Enap - Monitoreo y Evaluacion - 15 Jun 15

7/18/2019 Enap - Monitoreo y Evaluacion - 15 Jun 15

http://slidepdf.com/reader/full/enap-monitoreo-y-evaluacion-15-jun-15 137/138

agropecuario orcenta0e A.1D (acumulado)

;. :alor agregado agropecuario 7ill /. ;1 1= ;; ;S? N 04DH

=. :alor de eportaciones agrarias4incluye eportaciones 'orestales6

7ill F/Y 1 =;D 1 A; N HD

?. ) per c@pita ruralBuevos/oles

; S ; 11 N 030

A. )ncidencia de po%reza general rural orcenta0e S;.AD S1.=A 3.EJ S. )ncidencia de po%reza etrema rural orcenta0e ?D.=D =S.= .DJ S

S. E( agropecuaria ocupada orcenta0e ==.AD =?.SD N 0.H S

. B\ de personas ocupadas en el sectoragrario

7iles depersonas

= 1? ? DA? N 33-

. Tasa de crecimiento del empleo

agrario orcenta0e =.AS

N 8J.3 S

(acumulado)

1D. roductividad del tra%a0o agrarioBuevos/oles

A ?1? A ?? N -0

3iseño de unaevaluación

Cuyo propósito es<• :erifcar logro de o%0etivos.• /ometer 8ipótesis a prue%a.

•  Tienen grado de control m*nimo• reeperimentos

3iseño de evaluación

Page 138: Enap - Monitoreo y Evaluacion - 15 Jun 15

7/18/2019 Enap - Monitoreo y Evaluacion - 15 Jun 15

http://slidepdf.com/reader/full/enap-monitoreo-y-evaluacion-15-jun-15 138/138

 Tipos

Boeperimentales

Eperimentales49ue administran

est*mulos otratamientos6

 Transeccionales otransversales

Longitudinales oevolutivos

En una mismaevaluación puedenincluirse dos o m@sdiseños de distintos

tipos

4 diseños m&ltiples6

• 7anipulación intencional devaria%les 4independientes6

• 7edición de varia%les4dependientes6

• Control y validez• 3os o m@s grupos de comparación• articipantes asignados al azar

• )mplican grupos intactos• Cuasieperimentos

• EperimentosUpurosV

• Recolección dedatos en un&nico momento

• Eploratorios• 3escriptivos• Correlacionales

causales

Caracter*stica

 Tipos

ropósito

 Tipos

• 3iseños de tendencia4trend6

• 3iseños de an@lisisevolutivo de grupos4co8ort6

• 3iseños panel

(nalizar cam%ios atrav#s del tiempo