“Evaluación de competencias a nivel del programa”
José Rafael López Islas
Tecnológico de Monterrey
Coloque aquí el logo de su institución
Temas
• El contexto.
• El programa de evaluación de competencias de egreso.
• Las implicaciones.
• Los retos.
• Los aprendizajes y recomendaciones.
Coloque aquí el logo de su institución
El contexto
Coloque aquí el logo de su institución
• Universidad privada, sin
fines de lucro
• Fundada en 1943 por la
sociedad civil
• 26 campus en México
• 55 mil alumnos en pregrado,
y 12 mil en posgrado
• 7,300 profesores
• Acreditada por vez primera
por SACSCOC en 1950
• 206 en el ranking mundial
de QS, y 56 en opinión de
empleadores
Visión
Formar líderescon espíritu
emprendedor, sentido humano y
competitivos internacionalmente
Coloque aquí el logo de su institución
• Innovación como característica central de la Institución.
•Rediseño del modelo educativo en 1998.
•Cambios en el contexto internacional, especialmente las agencias acreditadoras:•De la medición de la capacidad institucional…
•…a la medición de los resultados de aprendizaje como base para evaluar la calidad de las instituciones educativas.
Coloque aquí el logo de su institución
Fundamento teórico -metodológico
Coloque aquí el logo de su institución
•El concepto competencia en el ámbito de recursos humanos.
• La crítica a las universidades por enfocarse en las competencias disciplinares en vez de las generales (soft skills).
•El uso en educación del término competencias para definir perfiles de egreso, consistente con requerimientos de agencias acreditadoras.
• La educación basada en competencias como modelo disruptivo.
Coloque aquí el logo de su institución
Conceptos clave
Coloque aquí el logo de su institución
•Competencia de egreso: combinación de atributos—con respecto al conocimiento y su aplicación, a las actitudes y a las responsabilidades—que hacen referencia a las capacidades que un estudiante debe haber desarrollado al momento de su graduación.
Coloque aquí el logo de su institución
•Criterios de desempeño: enunciados específicos medibles basados en comportamientos observables que evidencian el desarrollo de una competencia.
Coloque aquí el logo de su institución
Modelo de implementación de cuatro etapas
Coloque aquí el logo de su institución
Definición
Acciones educativas
Cursos, actividadesco-curriculares, programas
de apoyo, recursos de aprendizaje
Directa Indirecta
Valoración
Medición
Evaluación
Decisión de mejora continua
Plan de Evaluación
Competencias de egreso
Criterios de desempeño
Cierre de ciclo
Coloque aquí el logo de su institución
Coloque aquí el logo de su institución
• Etapa 1: Definir perfiles de egreso basados en competencias
•Se define perfil de egreso que incluye 6-8 competencias de egreso disciplinares y ocho generales.
•Cada competencia tiene definidos al menos dos criterios de desempeño.
• Las competencias de egreso son transversales al currículo.
• La malla curricular debe ser consistente con las competencias de egreso.
Coloque aquí el logo de su institución
Coloque aquí el logo de su institución
Ejemplo de Ingeniero Químico y de Sistemas:
Competencia de egreso disciplinar:El alumno diseña equipos de procesos o procesos químicos completos para la producción de materiales o productos que satisfacen las demandas específicas del mercado.
Criterios de desempeño:1: El alumno resuelve problemas de diseño abierto (open ended designproblems), de manera satisfactoria y de acuerdo a criterios previamente establecidos. (Rúbrica)2: El alumno obtiene un dictamen igual o superior a "Satisfactorio" en la sección de "Diseño e Ingeniería de Sistemas" en el Examen Nacional de Egreso de Ingeniería Química. (Examen).
Coloque aquí el logo de su institución
• Etapa 2: Elaborar el plan de evaluación del programa académico
• El plan de evaluación es la guía para realizar la evaluación de las competencias de egreso del programa.
• Para cada criterio de desempeño de cada una de las competencias de egreso, se identifican:
• Método de medición• Frecuencia de la medición• Dónde medir (en qué curso)• Forma de cumplimiento y metas• Responsable(s)
Coloque aquí el logo de su institución
• Etapa 2: Elaborar el plan de evaluación del programa académico
Coloque aquí el logo de su institución
• Etapa 3: Llevar a cabo la evaluación de las competencias de egreso
•Asegurar que el plan de evaluación de cada programa se lleva a cabo adecuadamente.
•Se evalúa el programa académico y no al alumno o al profesor en lo individual, a través de evidencias del desarrollo de las competencias a nivel programa.
•No se requiere medir todo, ni todo el tiempo: • La medición puede ser semestral, anual o bianual.
• La medición se realiza sobre una muestra aleatoria.
Coloque aquí el logo de su institución
• Etapa 3: Llevar a cabo la evaluación de las competencias de egreso
•Es una tarea adicional a la evaluación del curso pero puede
hacerse sobre el producto de un curso (course embedded
assessment ).
•También es posible realizarlo en un evento especial
(assessment center /day ).
•En ambos casos, se trata de evaluación del desempeño
(también llamada evaluación auténtica ).
Coloque aquí el logo de su institución
21
Combinación de conocimientos, habilidades y actitudes que hacen referencia a las capacidades que un estudiante debe haber desarrollado al momento de su graduación
Habilidades
Actitudes
Conocimientos
Valores
Competencia de egreso
Competencia de egreso
Coloque aquí el logo de su institución
22
Habilidades
Actitudes
Conocimientos
Valores
Competencia de egreso
Evaluación tradicional
Examen
Quiz© UQO
Coloque aquí el logo de su institución
23
Habilidades
Actitudes
Conocimientos
Valores
Competencia de egreso
Evaluación del
desempeño
La evaluación del desempeño implica que un estudiante enfrente un problema altamente significativo donde tiene que aplicar sus conocimientos y habilidades para resolverlo.
Rúbricas
Coloque aquí el logo de su institución
Dimensiones
Niveles de desempeño
Incipiente o
ElementalEn desarrollo
Satisfactorio
o
Adecuado
Sobresaliente
o
Excelente
Estructura del texto
El texto no muestra una estructura, únicamente
presenta ideas aisladas, sin coherencia y que pueden
estar relacionadas entre sí, pero se encuentran vagas y
desconectadas.
El texto muestra una estructura de introducción, desarrollo y conclusión pero puede estar incompleto en
alguno de los tres elementos básicos.
El texto muestra una clara evidencia de tener
introducción, desarrollo y conclusión
El texto muestra una clara evidencia de tener
introducción, desarrollo y conclusión, además presenta
ideas congruentes y relacionadas entre sí, citando
autores destacados relacionados con el tema.
Presentación y organización
de ideas
Escrito deficiente. Trata de escribir sobre el tema pero lo logra parcialmente. No hay enunciados claros de la idea principal y hay confusión en las ideas secundarias. Falla en la secuencia efectiva de
ideas.
Escrito limitado con características de
comunicación efectiva parcialmente dadas. El
propósito no está totalmente claro y, aunque la idea
principal está escrita, no hay evidencia de mantener el foco
de la idea principal.
Escrito adecuado que comunica un mensaje
completo a una audiencia específica. Aunque el
propósito está claro, el desarrollo de ideas
secundarias no se realiza en su totalidad. La organización de las ideas es evidente pero
puede faltar especificidad, puede estar incompleto o no
desarrollado en secuencia efectiva.
Escrito muy bien desarrollado que es efectivo al comunicar un mensaje completo a una audiencia específica. Bien
organizado y mantiene el foco central con un propósito
claramente expuesto con ideas secundarias.
Ortografía, sintaxis y
puntuación
El texto presenta severas deficiencias en el uso del
lenguaje y/o en la estructura de las oraciones; por
ejemplo: las ideas no son claras, el orden es
incomprensible. El texto presenta más de 10 errores
de ortografía y/o de puntuación.
El texto demuestra algunas deficiencias en el uso de
lenguaje y/o en la estructura de oraciones. El texto presenta
entre 6 y 10 errores de ortografía y/o de puntuación.
El texto demuestra evidencia del uso correcto de lenguaje. La estructura de oraciones es adecuada. El texto presenta
de 1 a 5 errores de ortografía y/o de puntuación.
El texto demuestra evidencia de un dominio total del uso correcto de lenguaje y de la
estructura de sus oraciones. El texto no presenta ningún error de ortografía ni de puntuación.
Niveles de desempeño
Dimensiones
Descripción de los
niveles de desempeño
Elementos de
una rúbrica
Coloque aquí el logo de su institución
Coloque aquí el logo de su institución
Coloque aquí el logo de su institución
• Etapa 4: Identificar y llevar a cabo acciones de mejora
•Es una etapa clave pues implica la mejora continua de los
programas.
• Las mejoras pueden referirse a cualquier aspecto del proceso:
perfil, currículo, actividades de aprendizaje, infraestructura,
recursos, evaluación.
Coloque aquí el logo de su institución
Implicaciones
Coloque aquí el logo de su institución
Se requiere encontrar nuevas formas de facilitar el aprendizaje
•No podemos desarrollar competencias de egreso complejas con
modelos de enseñanza tradicionales.
•Debe haber mayor vinculación con el entorno.
•Debemos rediseñar el modo de enseñar/aprender. Por ejemplo:
flipped learning (aprendizaje invertido).
Coloque aquí el logo de su institución
Se requiere construir un currículo con un mayor nivel de integración
• La malla curricular debe contar con conexiones transversales.
•Es posible desarrollar un mayor sentido de apropiación del
currículo por parte de todos los docentes.
•Se debe incorporar por diseño el desarrollo de competencias de
egreso generales a lo largo del currículo.
Coloque aquí el logo de su institución
Se requiere una forma sustancialmente diferente de evaluar el aprendizaje
•Evaluar competencias implica utilizar formas de evaluación no
tradicionales.
•Dominar el uso de instrumentos tales como rúbricas toma
tiempo y requiere de un sólido apoyo institucional.
Coloque aquí el logo de su institución
Las responsabilidades de los profesores se transforman
• Los docentes deben desarrollar nuevas maneras de enseñar,
de construir el currículo y de evaluar el aprendizaje.
•Se requiere replantear la estrategia de incentivos a los
docentes.
Coloque aquí el logo de su institución
Se necesita contar con un sólido apoyo informático
•El seguimiento a toda la actividad de evaluación de
competencias de egreso es muy complejo.
•Se requiere de herramientas informáticas conectadas con los
sistemas de información de alumnos y cursos.
•Tener un sistema propio (como el Sistema para Administrar la
Evaluación de Programas, SAEP ) tiene ventajas pero implica
costos. Es necesario evaluar opciones en el mercado.
Coloque aquí el logo de su institución
Es necesario contar con liderazgo, capacidad de gestión y de manejo del cambio
•Mover al cambio requiere apoyo institucional al más alto nivel.
•El programa demanda el liderazgo y la gestión de una entidad
central.
•Se requiere un plan para el manejo del cambio, incluyendo una
estrategia efectiva de comunicación.
Coloque aquí el logo de su institución
Es una oportunidad para alinear los esfuerzos institucionales con los requerimientos de acreditación
•Es posible evitar doble esfuerzo si se alinea el programa
institucional con los requerimientos de agencias acreditadoras.
•Puede convertirse en un medio para asegurar la sostenibilidad
del programa de evaluación de competencias.
Coloque aquí el logo de su institución
Principales retos
Coloque aquí el logo de su institución
•Diseñar un modelo completo en su alcance pero sencillo en su aplicación y fácil de comunicar.
•Diseñar una estrategia efectiva de movilización al cambio.
•Asegurar la asignación de recursos y apoyo institucional.
•Cerrar ciclos de mejora.
•Mostrar resultados y avances de manera sistemática.
Coloque aquí el logo de su institución
Recomendaciones
Coloque aquí el logo de su institución
•Empezar pronto, aunque no se haya resuelto el debate teórico-metodológico, y aprender sobre la marcha.
• Integrar la definición de perfiles de egreso basados en competencias a la estrategia regular de revisión curricular.
•En la etapa inicial construir un equipo con docentes innovadores, y darles el apoyo para correr riesgos.
•Construir una estrategia de comunicación que explique las razones (en sentido positivo y negativo) para iniciar un programa de evaluación de competencias de egreso.
Coloque aquí el logo de su institución
Reflexión final
•La evaluación de competencias de egreso permite asegurar que la institución está cumpliendo con lo que promete en sus perfiles de egreso.
•La evaluación va asociada a la mejora continua.
•No olvidar que el perfil de egreso debe preparar para el primer empleo pero también para el último, el más importante.
•Esto implica dar seguimiento a nuestros graduados.
Top Related