1clase 1 Evaluacion Expost

download 1clase 1 Evaluacion Expost

of 37

description

cualquira

Transcript of 1clase 1 Evaluacion Expost

Presentacin de PowerPoint

UNIVERSIDAD NACIONAL DE SAN ANTONIO ABAD DEL CUSCOESCUELA DE POSTGRADOMAESTRIA EN ECONOMIAEVALUACION EXPOST DE PROYECTOS SNIP

ARMANDO TARCO SANCHEZQu es la Evaluacin Ex Post?La evaluacin ex post se define como una evaluacin objetiva y sistemtica sobre un proyecto cuya fase de inversin ha concluido o est en la fase de post inversin. El objetivo es determinar la pertinencia, eficiencia, efectividad, impacto y la sostenibilidad a la luz de los objetivos especficos que se plantearon en la preinversin. Una evaluacin ex post debe proveer informacin til y verosmil. Es una herramienta de aprendizaje y de gerencia para mejorar los procesos de anlisis, planificacin y ejecucin de proyectos, as como la toma de decisiones.Objetivos de la Evaluacin Ex postRetroalimentacin a travs de las lecciones y recomendaciones para mejorar la administracin y desempeo de la inversin pblica, para el mismo proyecto evaluado, proyectos similares y polticas del sector.Transparencia del proceso y los resultados de la inversin pblica.A travs de la evaluacin de los xitos y fracasos, se genera valiosa informacin la cual puede retroalimentar y ayudar a mejorar la inversin pblica. En tanto se disponga del mayor nmero de experiencias documentadas posibles, se contribuir a optimizar el uso de recursos de inversin pblica.La nocin de transparencia de la evaluacin ex post contribuye a que la poblacin y los beneficiarios en particular, tengan un conocimiento claro sobre los procesos, los resultados y el impacto de la inversin pblica. La informacin acerca de los resultados e impactos de la inversin pblica debe de ser preparada para el pblico y las autoridades.Es importante sealar que la evaluacin ex post no es sinnima de control o fiscalizacin; se trata de analizar los resultados de los PIP y obtener lecciones aprendidas para mejorar la calidad de la inversin pblica, as como proveer de informacin a las autoridades y poblacin.Criterios que se aplican en la Evaluacin Ex PostLos Cinco Criterios de EvaluacinPERTINENCIAMedidas en que los objetivos de un PIP son coherentes con las necesidades de los beneficiarios, los contextos regionales y local, y las polticas del pas.EFICIENCIAMedida en que los recursos/insumos (fondos, tiempo, etc.) se han convertido econmicamente en productos (output) del proyecto. Se asocia con los componentes de un PIP.EFICACIAMedida en que se lograron o se espera lograr los objetivos del PIP. Se asocia al propsito del PIP y los fines directos.IMPACTOCambios de largo plazo, positivos y negativos, primarios y secundarios, producidos directa o indirectamente por un PIP. Se asocia con los fines de un PIP.SOSTENIBILIDADContinuidad en la generacin de los beneficios de un PIP a lo largo de su perodo de vida til. Se asocia con el mantenimiento de las capacidades para proveer los servicios y el uso de stos por parte de los beneficiarios.Criterios de Evaluacin Ex Post y Modelo Lgico de un PIP

Lineamientos de la poltica sectorial- funcional y contexto (nacional, regional, local). Necesidades y prioridades de la poblacin y su nivel de satisfaccin con el proyecto.Consistencia entre las acciones, componentes y resultados previstos. Identificacin y preparacin para los riesgos importantes (factores externos).PertinenciaCorrespondencia de conceptos y trminos

Las Preguntas de evaluacin por criteriosLas Preguntas de evaluacin por criteriosEn cada criterio se considera una serie de preguntas, denominadas Preguntas de Evaluacin, las cuales son de bastante utilidad para el diseo de un estudio de evaluacin.a) Pertinencia: Medidas en que los objetivos de un PIP son coherentes con las necesidades de los beneficiarios, los contextos regionales y local, y las polticas del pas.Relevancia dentro de las polticas y prioridades del sectorAl momento de su aprobacin, el objetivo central fue vlido dentro del marco de las polticas y prioridades del sector?Es el objetivo central an vlido, en el contexto actual, tanto a nivel nacional, local, regional, as como en el marco de las polticas y prioridades del sector? Se dieron cambios de polticas y prioridades, desde la declaracin de viabilidad del proyecto?Satisfaccin de las necesidades y prioridades de los beneficiariosLos bienes y servicios intervenidos con el proyecto, han sido demandados tal y como fue proyectado? De ser as qu factores han contribuido? De no ser as, cules son las causas que explican las diferencias encontradas?Estn los beneficiarios directos satisfechos con los bienes y servicios que se intervinieron con el proyecto? Porque estn satisfechos o insatisfechos? El proyecto consider las necesidades importantes de los beneficiarios?continuaValidez de la estrategia del proyectoFue la estrategia inicial del proyecto (alternativa seleccionada, combinacin de componentes etc.) la ms adecuada para el contexto de ese momento y el actual? Fue posible aplicar otra estrategia?Son las acciones y productos consistentes con el objetivo central del proyecto as como con los fines inicialmente diseados?Gestin de los riesgos importantesSe identificaron los riesgos importantes, tanto en la fase de ejecucin como en la post inversin y stos se consideraron en el plan de implementacin del PIP y en la gestin de los bienes y servicios intervenidos con ste?b) Eficiencia: Medida en que los recursos/insumos (fondos, tiempo, etc.) se han convertido econmicamente en productos (output) del proyecto. Se asocia con los componentes de un PIP.Logro de los productos del Proyecto Previstos y RealesLos productos previstos en los componentes se ejecutaron en trminos de la misma cantidad y calidad? En caso de ser positiva la respuesta qu factores contribuyeron?. En caso de ser negativa la respuesta cules fueron las causas?Eficiencia en Cuanto al Periodo y Costo del ProyectoEl PIP se ejecut en los plazos previstos en la preinversin y en el expediente tcnico (si hubo modificaciones)? En caso de ser positiva la respuesta qu factores contribuyeron? Si existieron retrasos, cules fueron las causas?, qu fue lo que realiz la UE para hacer frente a los mismos y evitar posteriores retrasos?El PIP se ejecut con el presupuesto previsto en la preinversin y en el expediente tcnico (si hubo modificaciones)? En caso de ser positiva la respuesta qu factores contribuyeron? Si los costos fueron mayores, cules fueron las causas?, qu fue lo que realiz la UE para hacer frente a los mismos y evitar posteriores incrementos?Existi alguna estrategia de ejecucin ms eficiente? continuaEficiencia GlobalCul ha sido el grado de la eficiencia en trminos generales en la ejecucin del proyecto considerando el nivel de ejecucin de componentes y la eficiencia en cuanto al periodo y costo del proyecto?Problemas de EjecucinCules han sido los principales factores que influyeron en la eficiencia?Cules fueron las principales dificultades y limitaciones de la Unidad Ejecutora en relacin a la ejecucin del proyecto?

c) Eficacia: Medida en que se lograron o se espera lograr los objetivos del PIP. Se asocia al propsito del PIP y los fines directos.Operacin y Utilizacin de los productos generados en la fase de inversin Los productos generados por el proyecto, son operados y utilizados tal y como fueron concebidos? Cul es el nivel de operacin y utilizacin?Si los niveles de operacin y utilizacin son los previstos cules son los factores que han contribuido o contribuyen?Si los niveles de operacin y utilizacin de los productos son menores de lo que se tena previsto Cules son las razones? Fue posible realizar acciones para mejorar dichos niveles? A futuro cmo se pueden mejorar estos niveles?Con los productos generados en la fase de inversin Se producen los bienes y/o servicios intervenidos con el proyecto en la cantidad y calidad prevista? Si no fuese as cules son las causas? cmo se podra mejorar?

continuaLogro del Objetivo Central del Proyecto Fue alcanzado, o se alcanzara, el objetivo central del proyecto (en trminos de metas)? Cul es el nivel de logro del objetivo central?Si el objetivo fue alcanzado cules son los factores que han contribuido o contribuyen? Si el logro del objetivo no es el previsto Cules son las razones por las cuales el objetivo del proyecto no se ha cumplido an o el nivel es menor al que se tena previsto? Fue posible realizar acciones para lograr el objetivo del proyecto? Cmo se puede mejorar a futuro?Eficacia Global Cul ha sido el grado de la eficacia en trminos generales del proyecto, considerando el grado de operacin y utilizacin de los productos (componentes) para la produccin de los bienes y servicios en la post inversin, logro del objetivo central (beneficios directos) y la rentabilidad social del proyecto?Cules han sido los factores que ms influenciaron en la eficacia del proyecto? Cmo se puede mejorar la eficacia del proyecto?. continuaRentabilidad SocialConsiderando informacin de beneficios y costos reales Cul es la rentabilidad social del proyecto? Cmo han variado los resultados respecto a los indicadores previstos de costo/ beneficio o costo/efectividad cuando se declar viable o se verific la viabilidad (de ser el caso)?Cules son las razones por las cuales la rentabilidad social real sea igual, mayor o menor a la proyectada originalmente?De ser el caso, Cul es el Costo Social de la demora en la ejecucin y puesta en marcha del proyecto?d) Impacto: Cambios de largo plazo, positivos y negativos, primarios y secundarios, producidos directa o indirectamente por un PIP. La evaluacin de los impactos solo considerar los impactos directos y responder a las preguntas siguientes:Impactos PrevistosHasta qu punto los impactos previstos (los fines directos o cambios favorables y previstos) fueron alcanzados?Cmo y hasta qu punto el proyecto contribuy con estos cambios? Hasta qu punto podemos atribuir estos cambios al proyecto? Qu ser necesario para poder maximizar los impactos previstos?Impactos Negativos e Impactos No PrevistosQu impactos negativos gener o genera el proyecto? El proyecto ha tomado algn tipo de medida con el fin de minimizar los impactos negativos? Qu es necesario para minimizar los efectos negativos?Existe algn impacto positivo no-previsto? Qu tendra que hacerse para maximizar estos efectos positivos?e) Sostenibilidad: Continuidad en la generacin de los beneficios de un PIP a lo largo de su perodo de vida til.Operacin y MantenimientoEn la actualidad Cules son las condiciones fsicas y funcionales de la infraestructura, equipos e instalaciones (productos asociados con los componentes) que se ejecutaron con el proyecto? Estn operativas? Si no lo estuviesen, cul es el motivo?En cuanto al mantenimiento, Qu tipo de estrategia es la que se maneja? Mantenimiento preventivo y/o mantenimiento correctivo? Se cuenta con un plan de mantenimiento bien definido? Se han realizado las acciones de mantenimiento previstas? Si no se estuviese realizado el mantenimiento cules son las causas? cmo se puede mejorar?Se producen los bienes y/o servicios intervenidos con el proyecto en la cantidad y calidad prevista? Si no fuese as cules son las causas? cmo se podra mejorar? Cules son las principales dificultades y limitaciones en cuanto a la operacin y mantenimiento?. continuaCapacidad Tcnica y Gerencial del Operador.Se realizaron los arreglos institucionales para la operacin y mantenimiento? Funcionan correctamente?Las entidades responsables y usuarios (de ser el caso) tienen la suficiente capacidad tcnica y administrativa para cumplir con la operacin y el mantenimiento?Recibi el operador capacitacin en cuanto a la operacin y mantenimiento? Fue suficiente? El operador cuenta con un programa de capacitacin propio?Sostenibilidad FinancieraCul es el presupuesto planeado y el asignado para la operacin y mantenimiento?Cmo estn financiados los costos de operacin y mantenimiento? Hasta qu punto los ingresos generados mediante la operacin del proyecto cubren los gastos operativos, el mantenimiento y de reinversin en el proyecto?Cules son las probabilidades de que el costo de operacin y mantenimiento sea cubierto durante la vida til del proyecto?RiesgosExisten riesgos de desastres o de conflictos sociales para el proyecto? Se adoptaron medidas para reducirlos, si es as cules? Cmo est preparado para asimilar o recuperar de los desastres o conflictos?

Sostenibilidad GlobalCul es el grado de sostenibilidad global del proyecto?Cules han sido los factores que ms influenciaron la sostenibilidad del proyecto?Cmo es que la sostenibilidad del proyecto puede ser mejorada?Momentos de Evaluacin Ex Post de un PIPEl ciclo de un PIP y el proceso de evaluacin

Evaluacin de CulminacinSer realizada al finalizar la fase de inversin en trminos fsicos, independientemente si se cuenta con la liquidacin de obras o el informe de cierre del PIP, mientras la documentacin est disponible, la memoria de las experiencias est fresca y sea fcil ubicar a los involucrados.Es una auto-evaluacin a cargo de la UE mediante un proceso participativo de todos los involucrados con el PIP, tanto en la fase de preinversin como en la de inversin. Esta evaluacin es obligatoria para todos los PIP. Dependiendo del monto de inversin, se aplicarn distintos contenidos para la evaluacin.Seguimiento Ex PostCuando en la evaluacin de culminacin se concluye la necesidad de realizar acciones para asegurar la operacin y el mantenimiento adecuado de los proyectos, la UE conducir, en colaboracin con la entidad responsable de la operacin y mantenimiento, un proceso de seguimiento para asegurar la implementacin de las recomendaciones de la evaluacin de culminacin. En caso de identificarse problemas se recomendar o realizar las acciones necesarias.El seguimiento ex post es particularmente importante para los proyectos que sern transferidos a los operadores, como gobierno local, comunidades, y para los proyectos parcialmente operados y mantenidos por los usuarios.Evaluacin de ResultadosEs una evaluacin integral de un proyecto donde se utilizan los cinco criterios; pertinencia, eficiencia, eficacia, impacto y sostenibilidad y tiene como objetivo servir a los dos propsitos principales de la evaluacin ex post del PIP;Retroalimentacin a travs de las lecciones y recomendaciones para mejorar la administracin y desempeo de la inversin pblica.Transparencia del proceso y los resultados de la inversin pblica.Estudio de ImpactoEs un estudio centrado en algunos temas que proporcionan informacin para la mejora de las estrategias y polticas para el desarrollo socioeconmico. Se aplica a proyectos con especial importancia, en los que se esperan efectos de sinergia a mediano y largo plazo.En este estudio se mide el impacto indirecto y final de un PIP o un grupo de PIP relacionados con una determinada poltica para analizar la contribucin a los cambios generados.Relaciones entre los Criterios y los Momentos de la Evaluacin Ex PostLos momentos de la Evaluacin ex Post y los Criterios Aplicados

Perspectiva General de la Evaluacin Ex PostPerspectiva General de la Evaluacin Ex Post en el SNIP

Gracias