Página 1 de 15

d) Construir el Marco de Evaluación Institucional.

Página 2 de 15

MARCO DE REFERENCIA DE LA EVALUACIÓN INSTITUCIONAL

I. Antecedentes de la evaluación en la UADY

La evaluación en la Universidad Autónoma de Yucatán (UADY), tiene sus orígenes

desde la década de los ochentas, época en la que las funciones de planeación

pasaron a formar parte de las responsabilidades de la Secretaría de Rectoría. En

ese momento inicia también las acciones de evaluación institucional, de

evaluación sistemática de los programas operativos anuales, y las visitas que el

rector y el responsable de la planeación universitaria realizan a las escuelas y

facultades. La estructura organizacional en esta etapa era muy sencilla, ya que

dejó de ser una entidad administrativa para convertirse en una función más de la

Secretaría de Rectoría. Esta modalidad permaneció hasta el año de 1987 (Dájer,

Barrera y Pérez, 2003).

En 1999, al desaparecer la anterior Dirección General de Planeación, la función de

planeación-evaluación pasó a ser responsabilidad de la Dirección General de

Desarrollo Académico (DGDA) y, a partir de este año, los procesos de evaluación

se circunscribieron a procesos de autoevaluación en las distintas DES, utilizando

la metodología propuesta por la SEP; y el proceso fue coordinado por esta

dirección a través de un comité institucional y de la Unidad de Gestión Institucional

quienes laboraron directamente con los equipos de planeación-evaluación de las

dependencias (DES) y con el centro de investigación de la Universidad.

A partir de 2007, la evaluación institucional es una de las funciones de la

Coordinación Institucional de Planeación y Desarrollo, instancia dependiente de la

Rectoría.

Actualmente, se ha desarrollado en la UADY la cultura de evaluación que se

convierte en actitud favorable hacia este tipo de tareas, colaboración de todos los

miembros de la comunidad y práctica institucional cotidiana y sistemática. El

proceso de evaluación ha pasado de un modelo directivo y centrado en un grupo

Página 3 de 15

exclusivo de personas a un modelo participativo con amplia colaboración de los

cuerpos académicos y comunidades académicas.

II. Construcción del marco de referencia

En los ámbitos universitarios, sobre todo cuando se tratan aspectos de

planificación y gestión, es creciente el interés por contar con una información de

calidad y con potencial estratégico (Estellés, 2001)…

en la que fundamenten los responsables sus decisiones,

con la que los distintos implicados en el sistema puedan tener un

conocimiento cabal y un diagnóstico preciso de la realidad de las

instituciones universitarias.

Los indicadores facilitan este diagnóstico para adquirir un conocimiento de la

realidad institucional a través de mediciones que sustentan las decisiones de la

mesa directiva.

Partiendo de la necesidad de establecer indicadores que sirvieran como

‘referentes’1 de la evaluación institucional, se decidió realizar una selección de

indicadores que sirvieran para conocer los resultados y desempeño de lo más

relevante del quehacer universitario. Con esta perspectiva, entiéndase por marco

de referencia de evaluación institucional como el conjunto de elementos que

delimitan o ‘enmarcan’ el alcance de la evaluación, expresados en relación a la

visión de la universidad (PDI). El objetivo del marco de referencia es monitorear la

situación presente de la UADY mediante un diagnóstico que facilite la detección de

los puntos fuertes y las áreas de oportunidad, con la finalidad de tomar decisiones

y realizar proyectos de mejora sobre aquellas áreas que requieran soporte.

1 Referente: Que refiere o que expresa relación a algo. Fuente: Diccionario de la Real Academia Española.

Página 4 de 15

Para la selección, fue necesario estudiar la documentación existente y actualizada

sobre la información que reúne la universidad con la finalidad de conocer sus

avances o áreas de oportunidad, a manera de preámbulo en la orientación de los

elementos de evaluación que debe contener el marco de referencia; algunos de

los documentos consultados fueron: los informes de actividades, los informes del

PIFI, presentaciones y propuestas de las funciones institucionales, archivos sobre

los antecedentes de la evaluación en la universidad, entre otros.

Similarmente, con el propósito de abarcar la Visión UADY plasmada en el Plan de

Desarrollo Institucional (PDI), se analizó este documento y se obtuvieron más de

230 indicadores que miden los 14 atributos de la visión institucional. Se tuvo que

realizar un primer filtro de éstos con base en aquellos que dan respuesta a

organismos externos que los solicitan, como: el Programa Integral de

Fortalecimiento Institucional (PIFI), la Asociación Nacional de Universidades e

Instituciones de Educación Superior (ANUIES), la Asociación Mexicana de

Órganos de Control y Vigilancia en Instituciones de Educación Superior

(AMOCVIES), el Programa Nacional de Posgrados (PNP), el Consorcio de

Universidades Mexicanas (CUMEX), el Consejo de Universidades Públicas e

Instituciones Afines (CUPIA) y Estadísticas 911 de la Secretaría de Educación

Pública (SEP).

Posteriormente se realizó una revisión exhaustiva de distintos modelos de

evaluación de países de Europa, Asia, América del Norte y América Latina;

similarmente, se revisaron los ámbitos de evaluación de diferentes instituciones

acreditadoras de Estados Unidos y se compararon con los elementos de

evaluación e indicadores de los organismos externos, retroalimentando así la serie

de indicadores para el marco de evaluación y que se consideraron de utilidad para

la Universidad.

El propósito de estas revisiones fue delimitar con los comparativos realizados, los

elementos de análisis que permitieran organizar los indicadores dentro de las

funciones institucionales de Docencia, Investigación, Extensión y Gestión, así

Página 5 de 15

como el proceso de enseñanza a través de sus principales actores (profesores y

estudiantes). Los actores del proceso se consideraron debido a que éstos son

elementos clave para el proceso de aprendizaje, que es la razón de ser en toda

organización educativa.

Finalmente se realizó un análisis más fino de lo más relevante y sustancial que

diera respuestas acerca del rumbo que sigue la Universidad en el cumplimiento de

la visión plasmada en el PDI, obteniendo como producto final, la selección de una

serie de indicadores que constituyen el marco de referencia.

Figura 1. Construcción del marco de referencia. La selección de indicadores se realizó con base en

los lineamientos del PDI, las funciones institucionales y los actores del proceso de aprendizaje.

Se espera que el marco de referencia para la evaluación institucional sirva como

‘referente’ para la administración de las dependencias y direcciones generales de

Página 6 de 15

la universidad con el afán de mover los esfuerzos institucionales hacia un mismo

sentido: la visión 2020.

III. Marco de referencia de evaluación institucional

Indicadores del marco de referencia

Un indicador es un dato estadístico que permite elaborar un juicio sobre el

funcionamiento de un sistema.

El término indicador se refiere a una síntesis de información definitoria o

relacionada con la calidad institucional (Sizer, 1992; Segers y Dochy, 1996).

Igualmente, un indicador debe poseer las siguientes características:

Relevante o útil para la toma de decisiones.

Verificable: Que se pueden comprobar mediante información confiable.

Libre de sesgo estadístico o personal.

Válido: Correspondencia entre la información que suministra el indicador y

el fenómeno objeto de análisis.

Confiable: Deben medir lo mismo en diferentes contextos y en diferentes

momentos.

Fácil de interpretar: A fin de facilitar su uso aún en el caso de no ser

expertos en el área específica.

Su valor estratégico vendrá determinado por la medida en que sea relevante para

gestionar los procesos de cambio y adecuación en la institución.

Los indicadores representan los parámetros cuantitativos y cualitativos que

definen los aspectos trascendentales sobre los cuales se llevará a cabo la

evaluación institucional para medir el grado de cumplimiento de los objetivos de la

visión de la institución y coadyuvar a la toma de decisiones sobre puntos críticos,

Página 7 de 15

fortalecer las estrategias y los programas que dan soporte a las funciones

sustantivas de la universidad, así como la orientación de los recursos a través de

planes de mejora.

Estos indicadores pueden ser alimentados o complementados por otros

indicadores de mayor especificidad, asimismo, otorgan un panorama general de lo

que acontece en la universidad a través de la evolución de los mismos.

Siguiendo estas argumentaciones, se identificaron los indicadores más

importantes que permitieran observar las mejoras institucionales; éstos se

clasifican de acuerdo a su complejidad en tres tipos:

a) Indicadores Estratégicos (IE): Reflejan el cumplimiento de las metas y

objetivos institucionales al incidir de manera significativa en los procesos de

cambio, adecuación y mejora institucional.

b) Indicadores de los Procesos Clave (IC): Informan sobre los procesos clave

con los que opera la institución.

c) Indicadores básicos (IB): Alimentan y complementan la información de los

indicadores de los procesos clave.

Se consideró que la manera más adecuada de organizar los tipos de indicadores

sea mediante categorías o dimensiones de análisis que correspondan a las

funciones institucionales de Docencia, Investigación, Extensión y Gestión;

igualmente se consideró agregar una categoría denominada Actores del proceso

de aprendizaje, que incluye a los estudiantes y profesores como elementos de

medición.

Entonces, cada categoría contiene una serie de indicadores que deben dar

respuesta sobre el desempeño y los resultados de la universidad.

A continuación se ilustran los indicadores que constituyen el marco de referencia

de evaluación, clasificados por colores de acuerdo al tipo de indicador.

Página 8 de 15

Actores del proceso de aprendizaje

IE IC IB

Página 9 de 15

IE IC IB

Página 10 de 15

Funciones Institucionales

IE IC IB

Página 11 de 15

IE IC IB

Página 12 de 15

IE IC IB

Página 13 de 15

IE IC IB

Página 14 de 15

Comentarios finales

El marco de referencia de evaluación ofrece la oportunidad de actualizarse

permanente, es decir, se pueden modificar, eliminar o incorporar nuevos

indicadores, de acuerdo con la experiencia de las unidades de docencia,

investigación y extensión, los procesos de la gestión y de aprendizaje, así como la

incorporación de otros ámbitos de acción universitaria que se consideren.

Por último, los indicadores estratégicos constituyen los elementos de evaluación

que dan la pauta u orientación para que los actores universitarios lleven a cabo

evaluaciones más profundas de sus áreas que vayan más allá del simple dato y

permitan la reflexión de los resultados para generar estudios acerca de la

universidad.

Página 15 de 15

Referencias

Dájer, A., Barrera, M. y Pérez, J. (2003). Desarrollo de una coordinación de

autoevaluación en la Universidad Autónoma de Yucatán.

Estellés, M. (2001) Gestión del conocimiento: La información herramienta

estratégica en la Universidad. Ponencia en las XIX Jornadas de Gerencia

Universitaria. Sevilla, 25-26 de octubre.

Segers, M. y Dochy, F. (1996) Quality assurance in higher education: Theoretical

considerations and empirical evidence. Studies in Educational Evaluation,

22, 2, 115-137.

Sizer, J. (1992) Performance indicators in government higher institutions

relationships: Lessons for government. Higher Education Management, 4,

2,156-163.