Agustín EchevarríaUniversidad Interamericana de

Puerto Rico 5 de agosto de 2010

Aseguramiento de la calidad de las instituciones de educación superior: el

proceso de “assessment” y la Middle States Commission on Higher Education

2

Introducción

El afán por la calidad, el rendimiento de cuentas y el deseo de saber si las IES consiguen sus metas y objetivos han llevado a que:

• las IES propicien una cultura en que profesores, directivos y administradores colaboren para determinar la consecución de los logros propuestos.

• las agencias acreditativas (“acreditadoras”), en los últimos quince años, han desarrollado estándares rigurosos para asegurar que las instituciones y sus programas académicos realicen un proceso de “assessment” (avalúo), encaminado a conocer cuán bien están consiguiendo sus metas y objetivos relacionados con el aprendizaje de los estudiantes.

Coloquio: Aseguramiento de la calidad en las IES

3

• es un campo relativamente nuevo

• es el proceso continuo para:establecer resultados esperados del aprendizaje de los estudiantes de forma clara y medibleasegurar que la institución provee oportunidades suficientes para lograr los resultados esperadosrecopilar, analizar e interpretar, de forma sistemática, las pruebas para determinar los logros alcanzados por los alumnosusar la información obtenida para entender y mejorar la enseñanza y el aprendizaje; también para tomar decisiones de planificación estratégica y de presupuesto

* Linda Suskie, 2009

¿Qué es el assessment? *

4

• es un proceso que utiliza diversos instrumentos para recopilar información y realizar inferencias confiables

• está fundamentalmente en manos de los profesores, pero necesita del compromiso y colaboración de la alta dirección universitaria, del equipo administrativo y de la participación informada de los estudiantes

Uso del assessment

• en cualquier disciplina, actividad o institución que postule unas metas o resultados esperados

• el assessment del aprendizaje se da en las instancias en donde el alumno aprende:

Continuación...

5

cursos

programas académicos (cursos más actividades, internados y prácticas ...)

el currículo de educación general (contiene unas metas que la institución quiere lograr para todos sus estudiantes)

actividades co-curriculares, de desarrollo y bienestar estudiantil y de servicio comunitario (responsabilidad social)

Continuación...

6

• dentro del assessment del aprendizaje se da un juicio informado (evaluación) para determinar:

si los estudiantes han logrado sus objetivos de aprendizaje

las fortalezas y debilidades de las estrategias utilizadas para enseñar y aprender

qué cambios, si algunos, se deben hacer en las metas, objetivos y estrategias de enseñanza-aprendizaje

Continuación...

7

• assessment de la efectividad institucional – cuán bien una IES está logrando su misión y sus principales metas estratégicas

• como el aprendizaje está en el centro de la misión universitaria, el assessment del aprendizaje es un componente mayor del assessment de la efectividad institucional

• incluye otros elementos de la misión institucional: la investigación, el servicio comunitario, becas y ayudas para los estudiantes ...

Assessment del aprendizaje y assessment de la efectividad institucional

8

• Formas directas

rango (“rating”) de destrezas hechas por supervisores, utilizando una rúbrica

notas de reválidas y exámenes estandarizados

proyectos de investigación, tesis, disertaciones, ejecuciones prácticas, corregidas con rúbricas

portafolios

exámenes – con programas detallados de las metas de aprendizaje (“blueprint”)

pruebas de valor añadido (pre y post)

reflexiones de los alumnos, etc. ...

* Linda Suskie, 2009

Aprendizaje del estudiante: (algunos ejemplos de formas directas o

indirectas para determinarlo) *

9

• Formas indirectas

notas de cursos

tasas de retención y graduación

tasas de admisión a post-grado

tasas de ubicación en empleo

niveles de satisfacción de alumnos, egresados y patronos

honores, becas y premios recibidos por estudiantes y egresados

Continuación...

10

• La Comisión de Educación Superior (MSCHE), por sus siglas en inglés (1919), es una asociación no gubernamental de carácter voluntario, cuya misión es garantizar la calidad y el mejoramiento de las instituciones de educación superior a través de rigurosos estándares de acreditación.

• Mantiene una relación constante con las instituciones miembros para promover su mejoramiento continuo.

• La acreditación es una expresión de confianza que hace la MSCHE sobre la misión, metas, objetivos, recursos y el desempeño de una institución que ha cumplido con los estándares de acreditación, luego de un riguroso proceso de evaluación.

• La evaluación para la acreditación es realizada por colegas, asignados por la Comisión, quienes en su nombre certifican si la institución cumple con los siguientes criterios:

La Middle States Commission on Higher Education (MSCHE) y los estándares de acreditación

11

que su misión es afín a la de una institución de educación superior

que está guiada por metas bien definidas, que incluyen metas para el aprendizaje de los estudiantes

que se han establecido las condiciones y los procedimientos para que la misión y las metas se puedan cumplir

que se realiza un proceso de assessment, tanto de la eficacia institucional como del aprendizaje y que utiliza los resultados para el mejoramiento y la renovación institucional

que la misión y las metas se cumplen firmemente

que está organizada y cuenta con los recursos humanos y los de apoyo que se necesitan para continuar cumpliendo con su misión y metas

que conoce los requisitos de afiliación y los estándares de acreditación de la MSCHE

Continuación ...

12

1) Énfasis en el assessment institucional y en el assessment de aprendizaje y su efecto en el mejoramiento de la enseñanza y el aprendizaje

2) Diversidad de formas que existen para ofrecer la educación

3) Prueba (“evidence”) que sustente que la institución cumple con los estándares de acreditación

Principios importantes que deben guiar a la institución en

el desarrollo de los estándares

13

• Catorce estándares de acreditación que se interrelacionan y colectivamente constituyen el corpus de cumplimiento.

• Los primeros siete estándares están relacionados al contexto institucional y los otros siete tratan sobre la efectividad educativa. Examinaremos los que se relacionan con el proceso de assessment.

ESTÁNDAR 2

La Institución lleva a cabo una planificación y asignación continuas de los recursos basados en su misión, metas y objetivos. Además, utiliza los resultados de sus actividades de assessment para el desarrollo institucional y el logro de los cambios necesarios para mantener y mejorar la calidad institucional (programas y servicios).

• Este estándar requiere que la institución:

Se autoevalúe y haga del assessment un proceso inherente a sus actividades.

Utilice la planificación como un elemento básico para el fortalecimiento institucional.

Estándares de Acreditación de la MSCHE

14

• El Proceso de Planificación1) Es un esfuerzo coordinado y participativo que involucra a

todos los componentes de la institución, de forma que las metas puedan ser consideradas desde una perspectiva integral y holística, con una visión de futuro.

2) Ayuda a la institución a administrar eficientemente, a mantener el control fiscal, a mejorar los servicios y los procesos y a asignar los recursos efectivamente.

3) Las IES cuentan, además del Plan Estratégico, con una variedad de planes, a saber: Plan Académico, Plan Financiero, Plan de Reclutamiento, Plan para el Desarrollo Tecnológico y el Plan Maestro para las Mejoras Capitales, entre otros. El proceso de assessment está interrelacionado con todos los anteriores.

4) Para lograr una planificación efectiva hay que considerar los siguientes aspectos:

Continuación...

15

Misión y metas clarasde la institución y de las unidades

(consideración de factores internos

y externos)

Desarrollar e implantar objetivos y estrategias para

el logro de la misión y lasmetas de los programas

y servicios

Asignar los recursoshumanos y los

recursos fiscales

Priorizar las metas de acuerdo a los fondos

disponibles

Llevar a cabo actividades periódicas de assessment institucional

y del aprendizaje

mejoramiento continuo y

renovación institucional

16

ESTÁNDAR 7

La Institución ha desarrollado un proceso de assessment que evalúe su eficacia en el logro de su misión y sus metas y en el cumplimiento de los estándares de acreditación.

• La efectividad de una institución está en la contribución que cada programa y servicio hacen de forma integrada al logro de las metas institucionales.

• El assessment periódico de la institución es uno de los elementos fundamentales para medir su efectividad, lo que permite conocer y asegurar que se está cumpliendo con lo siguiente:

Las metas institucionales y las metas de los programas están claras para el público, estudiantes, profesores y personal administrativo.

Los programas y los recursos institucionales están organizados y coordinados para el logro de las metas institucionales y de los programas.

La institución está logrando su misión y sus metas.

La institución usa los resultados del assessment para mejorar el aprendizaje y el progreso institucional.

Assessment Institucional

17

• Una institución que esté acreditada debe poseer o demostrar las siguientes características o actividades:

Documentar, organizar y sustentar el proceso de assessment que esté dirigido a evaluar y mejorar el alcance de los programas y los servicios, el logro de la misión, metas y objetivos y los planes para alcanzarlos; todo ello en cumplimiento con los estándares de acreditación

Colaboración de los profesores y el personal administrativo en el proceso

Uso de medidas cualitativas y cuantitativas para maximizar la información y los datos disponibles, de forma tal que los resultados obtenidos puedan ser confiables para la toma de decisiones.

Evaluaciones periódicas de la efectividad del proceso de assessment institucional y prueba de que los resultados se analizan con los colaboradores y se usan en la planificación y asignación de los recursos para el mejoramiento institucional

Aspectos fundamentales del Assessment Institucional

18

ESTÁNDAR 12

Educación General (nivel subgraduado o pre-grado) El currículo institucional está diseñado para que todos los estudiantes adquieran y demuestren aprovechamiento a nivel universitario en educación general, que incluye:

• destrezas en la comunicación oral y escrita

• conocimiento científico y matemático

• desarrollo de la capacidad para el pensamiento: análisis y razonamiento crítico

• dominio de la tecnología

• sentido de la estética

• valores y diversas perspectivas para entender la sociedad global

Continuación ...

19

• Tiene que existir una integración entre los cursos del programa de educación general y los de especialidad.

• Los requisitos de educación general deben estar claramente descritos en las publicaciones oficiales de la institución.

• El assessment del programa de educación general es parte del assessment del aprendizaje de los alumnos.

Continuación ...

ESTÁNDAR 14

Assessment del aprendizaje del estudiante Demuestra que, al graduarse o en otras instancias de su programa académico, el estudiante posee los conocimientos, destrezas y competencias, conforme a las metas institucionales y a las de la educación superior.

• Es un componente esencial e integral del assessment institucional, que permite monitorear el proceso de enseñanza-aprendizaje, y si los estudiantes poseen los conocimientos, las destrezas y las competencias que se esperan al completar un curso, otra actividad educativa, co-curricular o programa de estudios.

Continuación ...

20

21

• La institución tiene que proveer evidencia de que el assessment es un proceso continuo y que se están utilizando los resultados del assessment del aprendizaje para mejorar o hacer cambios, si necesarios, en las metas y objetivos de los programas y servicios.

• Los resultados del assessment del aprendizaje deben ser utilizados también para evaluar el proceso en sí, con el objetivo de hacer las modificaciones que permitan aumentar su importancia y efectividad.

Continuación ...

22

• Las IES deben asegurarse que cuentan con:

Enunciados (pronunciamientos, declaraciones) claros sobre los resultados esperados del aprendizaje en términos de los conocimientos, destrezas, competencias que el estudiante debe poseer al finalizar un curso, programa académico o actividad educativa, cónsonos con la misión, los estándares de educación superior y los de la disciplina correspondiente

Una cultura institucional sobre el uso de los resultados del assessment para el mejoramiento continuo del proceso de enseñanza-aprendizaje, guiado por los profesores con el apoyo de la administración universitaria

Continuación ...

23

• Es un programa computadorizado para apoyar un sistema completo de avalúo y de información, con el objetivo de recopilar y manejar los datos a nivel de los programas, los departamentos y la institución, para la medición de la efectividad institucional.

• Permite:

Planificar el avalúo, tanto académico como no académico

Recopilar los datos de manera sistemática, utilizando las encuestas electrónicas que provee la aplicación o instrumentos de recopilación de datos existentes en la institución

Comparar los datos con los resultados esperados

Generar informes detallados para el cumplimiento y el mejoramiento de los programas académicos

TK20 CampusWide Anejo

24

MUCHAS GRACIAS POR SU ATENCIÓN