La evaluación es un proceso sistemático mediante el cual se La evaluación es un proceso sistemático mediante el cual se

obtiene la información necesaria sobre los resultados, previstos o obtiene la información necesaria sobre los resultados, previstos o

no, y el funcionamiento de un proyecto cultural para saber en qué no, y el funcionamiento de un proyecto cultural para saber en qué

medida se logran los objetivos y se desarrolla la producción, y medida se logran los objetivos y se desarrolla la producción, y

poder tomar así las decisiones oportunas para reconducir dicho poder tomar así las decisiones oportunas para reconducir dicho

proyecto mediante la modificación de cualquiera de sus aspectosproyecto mediante la modificación de cualquiera de sus aspectos

DEFINICIÓN:

MODELOS DE EVALUACIÓN:MODELOS DE EVALUACIÓN:

• Evaluación por objetivos: la más utilizadaEvaluación por objetivos: la más utilizada• Evaluación centrada en las causas y consecuencias del Evaluación centrada en las causas y consecuencias del

proyectoproyecto• Evaluación realista: la más modernaEvaluación realista: la más moderna

PUEDE SER:PUEDE SER:

• Evaluación previa: del planteamiento y definición del Evaluación previa: del planteamiento y definición del proyectoproyecto

• Evaluación intermedia: del proceso en que se desarrolla Evaluación intermedia: del proceso en que se desarrolla el proyectoel proyecto

• Evaluación final: después de llevar a cabo el proyectoEvaluación final: después de llevar a cabo el proyecto

¿POR QUÉ EVALUAMOS UN PROYECTO CULTURAL?¿POR QUÉ EVALUAMOS UN PROYECTO CULTURAL?

• Para mejorarlo: en su desarrollo actual o en futuros desarrollosPara mejorarlo: en su desarrollo actual o en futuros desarrollos

• Para justificar nuevas propuestas: que lo complementen o Para justificar nuevas propuestas: que lo complementen o amplíenamplíen

• Para extinguirlo: si no hay motivos de continuidadPara extinguirlo: si no hay motivos de continuidad

¿POR QUÉ NO EVALUAMOS UN PROYECTO CULTURAL?¿POR QUÉ NO EVALUAMOS UN PROYECTO CULTURAL?

- El objetivo de un proyecto es su propia realización: la acción por la El objetivo de un proyecto es su propia realización: la acción por la acciónacción

- Menosprecio de la evaluación: no hay tiempo….más adelanteMenosprecio de la evaluación: no hay tiempo….más adelante- No se crea un criterio riguroso, vale la percepción simple: No se crea un criterio riguroso, vale la percepción simple:

autocomplacenciaautocomplacencia- Se desconoce la forma de llevar a cabo la evaluaciónSe desconoce la forma de llevar a cabo la evaluación- Existe miedo a los resultados: por qué se deben exponer y quedar Existe miedo a los resultados: por qué se deben exponer y quedar

expuestoexpuesto- El resultado de la evaluación, aunque no sea bueno, no va a El resultado de la evaluación, aunque no sea bueno, no va a

modificar el proyectomodificar el proyecto- Se contempla como algo externo que debe ser evaluado por otros Se contempla como algo externo que debe ser evaluado por otros

agentesagentes

¿QUÉ VENTAJAS TIENE EVALUAR UN ¿QUÉ VENTAJAS TIENE EVALUAR UN PROYECTO CULTURAL? PROYECTO CULTURAL?

• Reorientar y reforzar el proyecto en todo momento: para Reorientar y reforzar el proyecto en todo momento: para conseguir sus objetivosconseguir sus objetivos

• Mejorarlo en futuras edicionesMejorarlo en futuras ediciones

• Generar nuevas ideas que den origen a nuevos proyectosGenerar nuevas ideas que den origen a nuevos proyectos

• Obtención de datos objetivos ante terceros: patrocinadoresObtención de datos objetivos ante terceros: patrocinadores

• Apreciar y valorar en el equipo el trabajo realizadoApreciar y valorar en el equipo el trabajo realizado

• Imagen de seriedad y profesionalidadImagen de seriedad y profesionalidad

¿QUÉ EVALUAMOS EN UN PROYECTO CULTURAL?¿QUÉ EVALUAMOS EN UN PROYECTO CULTURAL?

• El contexto: punto de partida correctoEl contexto: punto de partida correcto

• Los objetivos o resultados: en qué medida se han conseguido Los objetivos o resultados: en qué medida se han conseguido (indicadores)(indicadores)

• El proceso: contrastar eficiencia con resultados obtenidosEl proceso: contrastar eficiencia con resultados obtenidos

• Finalidad: impacto del proyectoFinalidad: impacto del proyecto

¿PARA QUIÉN SE REALIZA LA EVALUACIÓN?¿PARA QUIÉN SE REALIZA LA EVALUACIÓN?

• Para el exterior: evaluar los objetivos externos del proyecto Para el exterior: evaluar los objetivos externos del proyecto

• Para el equipo: objetivos externos, internos y de procesoPara el equipo: objetivos externos, internos y de proceso

¿QUIEN REALIZA LA EVALUACIÓN?¿QUIEN REALIZA LA EVALUACIÓN?

A.A. El propio equipoEl propio equipo• Ventaja: simple y cómodaVentaja: simple y cómoda• Inconveniente: se es juez y parteInconveniente: se es juez y parte

B.B. Agentes externos al equipo, con o sin relación jerárquicaAgentes externos al equipo, con o sin relación jerárquica• Ventaja: más fiable en sus resultadosVentaja: más fiable en sus resultados• Inconveniente: puede percibirse de forma negativa por el Inconveniente: puede percibirse de forma negativa por el

equipoequipo

EVALUACIÓN CUANTITATIVA / CUALITATIVA:EVALUACIÓN CUANTITATIVA / CUALITATIVA:

A. Evaluación cuantitativa:A. Evaluación cuantitativa:• Todo aquello que puede ser medibleTodo aquello que puede ser medible• Válida para comparaciones en el tiempo y en el Válida para comparaciones en el tiempo y en el

espacioespacio• Concreta y delimita el proyectoConcreta y delimita el proyecto• No es fiable para medir hábitos o calidad de un No es fiable para medir hábitos o calidad de un

proyectoproyecto• Se emplean indicadores posibles de medirSe emplean indicadores posibles de medir

B. Evaluación cualitativa:B. Evaluación cualitativa:• Centro de interés: percepción general sobre un temaCentro de interés: percepción general sobre un tema• Más sensible a las opiniones y a las actitudes que a Más sensible a las opiniones y a las actitudes que a

las cifraslas cifras• Suele ser complementaria de la anteriorSuele ser complementaria de la anterior• Indicadores basados en opiniones, percepcionesIndicadores basados en opiniones, percepciones

REALIZACIÓN DE LA EVALUACIÓN:REALIZACIÓN DE LA EVALUACIÓN:

Debe realizarse a lo largo de todas sus fases: planificación, desarrollo, ejecución Debe realizarse a lo largo de todas sus fases: planificación, desarrollo, ejecución y finalización.y finalización.Se utilizaSe utiliza::• Evaluación continua: permanente, poco profunda, para ir realizando Evaluación continua: permanente, poco profunda, para ir realizando

pequeños cambios. Información en tiempo real (efecto película)pequeños cambios. Información en tiempo real (efecto película)• Evaluación final, definitiva: detecta el cumplimiento de objetivos y el Evaluación final, definitiva: detecta el cumplimiento de objetivos y el

funcionamiento de todos los elementos del proyecto (efecto foto)funcionamiento de todos los elementos del proyecto (efecto foto)FasesFases::• Diseño: se decide el tipo de evaluación, indicadores y medición, así como la Diseño: se decide el tipo de evaluación, indicadores y medición, así como la

temporización y responsables de cada actividadtemporización y responsables de cada actividad• Descripción: recogida, ordenación y sistematización de la informaciónDescripción: recogida, ordenación y sistematización de la información• Comparación: análisis y comparación de los datos con los parámetros Comparación: análisis y comparación de los datos con los parámetros

establecidos en los objetivos del proyectoestablecidos en los objetivos del proyecto• Proceso: estudio de las causas o cambios producidosProceso: estudio de las causas o cambios producidos• Difusión: comunicación de los resultadosDifusión: comunicación de los resultados• Toma de decisiones: si es necesario se cambia la orientación general del Toma de decisiones: si es necesario se cambia la orientación general del

proyectoproyecto

MÉTODOS GENERALES DE EVALUACIÓNMÉTODOS GENERALES DE EVALUACIÓN

• Evaluación experimentalEvaluación experimental: comparación entre un contexto donde : comparación entre un contexto donde se ha intervenido y otro donde no se ha hechose ha intervenido y otro donde no se ha hecho

• Evaluación reflexivaEvaluación reflexiva: comparación de un mismo contexto antes y : comparación de un mismo contexto antes y después de la intervencióndespués de la intervención

• Evaluación transversalEvaluación transversal: comparación entre diferentes contextos : comparación entre diferentes contextos en los que se ha intervenido de manera igual o parecidaen los que se ha intervenido de manera igual o parecida

• Evaluación de opiniónEvaluación de opinión: mediante la opinión de expertos sin : mediante la opinión de expertos sin buscar datos comparativos concretos.buscar datos comparativos concretos.

CRITERIOS DE EVALUACIÓN:CRITERIOS DE EVALUACIÓN:

• Eficacia: comprobar en qué medida se han logrado los objetivosEficacia: comprobar en qué medida se han logrado los objetivos

• Eficiencia: comprobar los resultados en relación a los recursos Eficiencia: comprobar los resultados en relación a los recursos humanos, de infraestructura y económicoshumanos, de infraestructura y económicos

• Impacto: finalidad del proyecto, a largo plazoImpacto: finalidad del proyecto, a largo plazo

• Equidad: capacidad de distribución de los resultados obtenidos de Equidad: capacidad de distribución de los resultados obtenidos de manera equitativa entre los destinatarios del proyectomanera equitativa entre los destinatarios del proyecto

• Sensibilidad: punto de vista del destinatario del proyectoSensibilidad: punto de vista del destinatario del proyecto

• Sostenibilidad: comprueba la capacidad del proyecto de mantener Sostenibilidad: comprueba la capacidad del proyecto de mantener sus resultados a lo largo del tiemposus resultados a lo largo del tiempo

INSTRUMENTOS UTILIZADOS:INSTRUMENTOS UTILIZADOS:

• Registros: papel, es una información cuantitativa y cualitativa, deben Registros: papel, es una información cuantitativa y cualitativa, deben ser fáciles de obtener y fiables, con mucha informaciónser fáciles de obtener y fiables, con mucha información

• Mediciones: recuentos, talonarios de entradas, ingresos y gastos, es Mediciones: recuentos, talonarios de entradas, ingresos y gastos, es una información cuantitativa muy precisa, exacta, que permanece una información cuantitativa muy precisa, exacta, que permanece en el tiempoen el tiempo

• Encuestas: de opinión, hábitos, etc., con muestras o de la totalidad Encuestas: de opinión, hábitos, etc., con muestras o de la totalidad de usuarios, es una información cuantitativa y cualitativa, es l mejor de usuarios, es una información cuantitativa y cualitativa, es l mejor método para obtener información personal, con posibles engaños método para obtener información personal, con posibles engaños en las respuestas y técnicas complejas y costosasen las respuestas y técnicas complejas y costosas

• Entrevista personal: información cualitativa muy precisa, resultados Entrevista personal: información cualitativa muy precisa, resultados poco objetivospoco objetivos

• Entrevista grupal: poca objetividad y cuantificaciónEntrevista grupal: poca objetividad y cuantificación

• Observación: complemento de los anterioresObservación: complemento de los anteriores

INDICADORES: HERRAMIENTAS DE EVALUACIÓNINDICADORES: HERRAMIENTAS DE EVALUACIÓN

Informan de una situación o resultado, pero ha de Informan de una situación o resultado, pero ha de contrastarse con algún valor de referencia. contrastarse con algún valor de referencia.

Son fijados por el equipo en función de cada proyecto Son fijados por el equipo en función de cada proyecto El resultado del indicador nos sirve para tomar decisionesEl resultado del indicador nos sirve para tomar decisiones

Existen indicadores de:Existen indicadores de:• ContextoContexto• ResultadosResultados• ProcesoProceso• ImpactoImpacto

Los diferentes proyectos y sus objetivos pueden requerir:Los diferentes proyectos y sus objetivos pueden requerir:• Indicadores cuantitativos: mediciones, registro, etc.Indicadores cuantitativos: mediciones, registro, etc.• Indicadores cualitativos: observaciones, opiniones de expertos o Indicadores cualitativos: observaciones, opiniones de expertos o

participantesparticipantes

CARACTERÍSTICAS DE LOS INDICADORES:CARACTERÍSTICAS DE LOS INDICADORES:

Al menos han de tener las siguientes:Al menos han de tener las siguientes:• Han de ser fijados previamente al proyecto (los de proceso) o en su Han de ser fijados previamente al proyecto (los de proceso) o en su

realización (los de resultados)realización (los de resultados)• Vinculados a objetivos específicos y a los contenidos del proyectoVinculados a objetivos específicos y a los contenidos del proyecto• Deben tener objetivos neutros, que no se presten a interpretaciónDeben tener objetivos neutros, que no se presten a interpretación• Serán mesurables de manera sencillaSerán mesurables de manera sencilla• Tendrán sensibilidad ante pequeñas variaciones del contextoTendrán sensibilidad ante pequeñas variaciones del contexto• Perdurables en el tiempoPerdurables en el tiempo• Comparables con los de otros proyectosComparables con los de otros proyectos• Comprobables por tercerosComprobables por terceros• Accesibles con nuestros recursosAccesibles con nuestros recursos

CONSIDERACIONES FINALESCONSIDERACIONES FINALES

La evaluación de un proyecto cultural es necesaria y se justifica La evaluación de un proyecto cultural es necesaria y se justifica en la propia realización del proyecto ya que, gracias a ella, se en la propia realización del proyecto ya que, gracias a ella, se enriquece y facilita su correcta ejecución así como la de enriquece y facilita su correcta ejecución así como la de proyectos futuros.proyectos futuros.

En el proceso de evaluación deben implicarse todos los En el proceso de evaluación deben implicarse todos los estamentos y organizaciones que participen en el proyecto en un estamentos y organizaciones que participen en el proyecto en un proceso de evaluación continua adaptado a las circunstancias proceso de evaluación continua adaptado a las circunstancias que se den en cada momento.que se den en cada momento.

BIBLIOGRAFÍA:BIBLIOGRAFÍA:

• D. Roselló, Diseño de Proyectos Culturales, Ed. Ariel,• Ll. Bonet; X. Castañer; J.Font, Gestión de proyectos culturales, Ed. Ariel •Josep Ballart; Jordi Juan, Gestión del patrimonio cultural, Ed. Ariel •François Colbert; Manuel Cuadrado, Marketing de las Artes y la Cultura, Ed. Ariel Barry Lord; Gail Dexter Lord, Manual de gestión de museos, Ed. Ariel •François Colbert; Manuel Cuadrado, Marketing de las Artes y la Cultura, Ed. Ariel •Webs:•www.uv.es/econcult/pau/ Profesor Pau Rausell Köster (Departamento de Economía Aplicada de la Universidad de Valencia y www.uv.es/econcult •www.aeue.es Web de las editoriales universitarias españolas•http://www.dva.gva.es Diputación de Valencia SARC•www.fundacioncac.es/cas/ Fundación Ciudad de la Artes y las Ciencias •www.anabad.org/archivo/docdow ANANBAD: Confederación de Asociaciones de Archiveros, Bibliotecarios, Museólogos y Documentalistas.•DVD: - “Anuari ESTDÍSTIC 2005” Comunidad Valenciana, IVE