Experiencias en la Evaluación de la Calidad de la Educación

Superior en México

Dr. Rodolfo Tuirán12 de octubre 2009

La difusión de las prácticas de evaluación y acreditación de la educación superior en México, con sus múltiples propósitos, enfoques e instancias, es resultado de un largo y complejo proceso.

En este proceso han participado diversos actores:

La SEP y el CONACYT. Las instituciones de educación superior. Los organismos más representativos de las IES

(ANUIES y FIMPES, entre otros). Y las instancias evaluadoras (CENEVAL, CIEES y

COPAES, entre otros).

Antecedentes

1971. ANUIES se propuso crear un centro nacional de exámenes y certificación (reuniones de Villahermosa y Toluca).

1973. ANUIES recomendó que las universidades realizaran estudios periódicos para diagnosticar los factores internos y externos que estimulan o limitan el proceso de expansión y mejoramiento de sus funciones de docencia, investigación y servicio a la sociedad (Reunión de Veracruz).

1978. Se expide la Ley para la Coordinación de la Educación Superior, que establece que la federación fomentará la evaluación de la educación superior con la participación de las instituciones.

------ Se aprueba el documento “La planeación de la educación superior en México” en la XVII Reunión Ordinaria de la Asamblea General de la ANUIES.

1979. Se creó el Sistema Nacional de Planeación Permanente de la Educación Superior (SINAPPES).

1984. Se estableció el Sistema Nacional de Investigadores (SNI).

1989. Se aprueba Declaraciones y aportaciones de la ANUIES para la modernización de la educación superior, que propuso la articulación de los procesos de evaluación con los de planeación y preparación de presupuestos en las IES.

AntecedentesHan pasado un cuarto de siglo desde que

se creó el SNI

1989. Se instala la Comisión Nacional para la Evaluación de la Educación Superior (CONAEVA), que impulsó las siguientes tres estrategias para la creación y operación del Sistema Nacional de Evaluación: (1) la autoevaluación, (2) la evaluación del sistema y los subsistemas (a cargo de especialistas e instancias), y (3) la evaluación interinstitucional de programas académicos y funciones de las instituciones (mediante el mecanismo de

evaluación de pares calificados).

1991. Se crean los Comités Interinstitucionales para la Evaluación de la Educación Superior (CIEES).

1992. Se establece el Padrón de Posgrado de Excelencia (PPE).

1994. Se constituye el Centro Nacional para la Evaluación de la Educación Superior (CENEVAL).

1994. Se integra el Consejo de Acreditación para la Enseñanza de la Ingeniería (CACEI), que marca la creación de organismos acreditadores de programas de licenciatura en distintas disciplinas y áreas del conocimiento

1996. Se crea el PROMEP, con el objetivo de mejorar la capacidad académica del personal docente de las instituciones de educación superior y fomentar el desarrollo y la consolidación de sus cuerpos académicos.

AntecedentesHan pasado dos décadas desde que se creó la

CONAEVA

1997. Dieciséis resolutivos de la ANUIES en Oaxaca para operar el entonces llamado Sistema Nacional de Evaluación y Acreditación de la Educación Media Superior y Superior.

1998. Se publica El sistema nacional de evaluación y acreditación: un proyecto de visión al 2010 y propuestas para su consolidación. Entre sus 25 estrategias y acciones en materia de evaluación, certificación y acreditación, mejora de metodologías e instrumentos, destaca la creación del COPAES, generalización en las IES del uso de exámenes de selección para ingreso, uso de los EGEL como medio útil para la evaluación de los egresados en su proceso de titulación, y fortalecimiento de las funciones diagnóstica y acreditadora de los CIEES.

2000. Se publica el acuerdo 279 del titular de la SEP

------- Se crea el Consejo para la Acreditación de la Educación Superior (COPAES)

Antecedentes

Situación Actual

Situación actual

• Hoy en día se reconoce que la evaluación cumple una función muy importante.

• La evaluación es un medio y no un fin en sí misma.

• Se acepta que los resultados de las evaluaciones deben ser visibles y tener consecuencias. Lo más importante es qué se hace después de conocer los resultados de las evaluaciones.

Hoy en día, las prácticas de evaluación externa y acreditación en la educación superior:

Están ampliamente difundidas y aceptadas.

Tienen cada vez mayor cobertura en todos los subsistemas, aunque con avances y rezagos que propician circuitos diferenciados de calidad.

Son varios los niveles, aspectos y procesos evaluados.

Las instancias y actores de evaluación son diversos y se acepta su autoridad y legitimidad.

Están respaldadas por políticas gubernamentales e institucionales

Situación actual

Se ha avanzado en:

La formalización legal de los procesos.

La credibilidad de las instancias evaluadoras y acreditadoras.

La profesionalización de esas instancias.

la disponibilidad de cuadros preparados e independientes para realizar las tareas de evaluación.

Sin embargo, todavía no se configura un sistema nacional de evaluación y acreditación

Situación actual

Se han desplegado diferentes tipos de evaluaciones:

A nivel individual. Concursos de oposición de docentes e investigadores; exámenes de ingreso de estudiantes a las instituciones de Educación Superior.

A nivel de programas académicos. Evaluación diagnóstica y procesos acreditación.

A nivel institucional. Acreditación social y acreditación institucional.

De política pública o evaluación sistémica. De eficacia, eficiencia, pertinencia, equidad, calidad.

Tipos de evaluaciones

Ámbitos y organismos de evaluación y acreditación

A nivel individual. CENEVAL, SNI, PROMEP, IES.

A nivel de programas académicos. CIEES, COPAES, Programa de Posgrados de Calidad, SEP-RVOE.

A nivel institucional. PIFI, FIMPES, ANUIES y CUMEX, entre otros

De política pública (o evaluación sistémica). (eficiencia, eficacia, pertinencia, equidad, calidad). Especialistas de la OCDE, ANUIES, SEP-Hacienda-Congreso, entre otros.

Instancias de Evaluación y Acreditación

A nivel individual

:

Alumnos

ÁmbitoTrayector

iaProceso

Organismo

Ingreso

Trayecto

Egreso

Evaluación y

Certificación

Evaluación

Evaluación

IESCENEVAL

IESCENEVAL

IES, SEP yCENEVAL

Ámbitos e instancias de evaluación, acreditación y certificación

A nivel Individual

:

Personal Académic

o

ÁmbitoTrayector

iaProceso

Organismo

Ingreso

Permanencia Evaluación

Evaluación IES: exámenes de oposición

IES: Procesos de promoción y permanencia

SEP-IES: Programas de estímulos

SNI y PROMEP

Ámbitos e instancias de evaluación

ProgramasAcadémico

s

Ámbito ProcesoOrganism

o

Evaluación

Organismos acreditadores de COPAES

Ámbitos e instancias de evaluación y acreditación

Acreditación

IES

CIEES

SEP-CONACYT

SEP y gobiernos estatales (RVOE)

Instituciones

Ámbito ProcesoOrganism

o

Acreditación

Social o Institucion

al

FIMPES

ANUIES

CUMEX

Ámbitos y organismos de evaluación, acreditación y certificación

Evaluación CIEES

Organismos de evaluación:Ámbito individual

CENEVALResultados de aprendizaje y preparación de los alumnos

CENEVAL

• Su actividad principal es el diseño y aplicación de instrumentos estandarizados de evaluación de conocimientos, habilidades y competencias, así como el análisis y la difusión de los resultados que arrojan las pruebas.

• Desde 1994 ha aplicado aproximadamente 22'000,000 de exámenes.

• Cada año evalúa alrededor de 1,600,000 sustentantes.

• Tiene 136 pruebas en operación (instrumentos diferentes)

65,34593,596

114,987

126,124

161,456

236,595

250,108

279,850

287,269

335,733396,058

443,580418,938

586,293

582,799

0

100,000

200,000

300,000

400,000

500,000

600,000

700,000

1994 1995 1996 1997 1998 1999 2000 2001 2002 2003 2004 2005 2006 2007 2008

# Aplic

ados

Número de Sustentantes del examen de ingreso a la licenciatura (EXANI-II) o el

posgrado (EXANI-III), 1994-2008

EXANI

1,808

2,9223,961

5,816

6,252

6,8578,963

10,439

13,405

13,498

14,009

16,940

0

2,000

4,000

6,000

8,000

10,000

12,000

14,000

16,000

18,000

1997 1998 1999 2000 2001 2002 2003 2004 2005 2006 2007 2008

# Aplic

ados

1994

1995

1996

1997

1998

1999

2000

2001

2002

2003

2004

2005

2006

2007

0

50

100

150

200

250

300

350

400

21

56

83 83 93112 120

158

198 205

243

283

371 374

Número de Instituciones y sustentantes del Examen de Egresados (EGEL), 1994-2008

EGEL

234 3,353

8,294

9,325

11,01418,065

24,122 28,666

37,67448,427

53,730 60,802

74,56976,932

85,014

0

10,000

20,000

30,000

40,000

50,000

60,000

70,000

80,000

90,000

1994 1995 1996 1997 1998 1999 2000 2001 2002 2003 2004 2005 2006 2007 2008

Área de ciencias de la Vida y la Conducta

1. Ciencias Agronómicas-Agroindustria

2. Ciencias Agronómicas-Fitotecnia

3. Ciencias Agronómicas-Zootecnia

4. Ciencias Farmacéuticas

5. Enfermería

6. Medicina General

7. Medicina Veterinaria y Zootecnia

8. Odontología

9. Psicología Clínica

10. Psicología Educativa

11. Psicología Industrial

12. Psicología Social

13. Química

Área de Ciencias Sociales y Humanidades

14. Administración

15. Ciencias de la Comunicación

16. Contaduría

17. Comercio-Negocios Internacionales

18. Derecho

19. Economía

20. Mercadotecnia

21. Pedagogía – Ciencias De La Educación

22. Turismo – Gestión Empresarial

23. Turismo – Planificación y Desarrollo

22

Exámenes Generales para el Egreso de la Licenciatura (EGEL)

Área de las Ingenierías y de las Tecnologías

24. Ciencias Computacionales

25. Informática

26. Ingeniería Computacional

27. Ingeniería Industrial

28. Ingeniería Civil

29. Ingeniería Eléctrica

30. Ingeniería Electrónica

31. Ingeniería Mecánica

32. Ingeniería Mecánica Eléctrica

33. Ingeniería De Software

34. Ingeniería Química

EGEL

Sistema Nacional de Investigadores

Sistema Nacional de Investigadores

• Principal instancia de evaluación externa de la calidad de los productos de trabajo de los profesores-investigadores de las instituciones de educación superior.

• Con este sistema se ha buscado fomentar la permanencia de personal de tiempo completo del más alto nivel académico en las instituciones públicas.

• El SNI se ha multiplicado por más de diez desde su creación, al pasar de 1,396 investigadores en 1984 a 14,681 en 2008.

Evolución del número de investigadores del SNI en el país y proporción representada por

ellos en algunas instituciones federales, 1984-2008

EL COLE

GIO D

E MEXICO, A

.C.

INSTITUTO POLIT

ECNICO NACIO

NAL

UNIVERSID

AD AUTONOM

A AGRARIA

ANTONIO

NARRO

UNIVERSID

AD AUTONOM

A METROPOLIT

ANA

UNIVERSID

AD NACIO

NAL AUTONOM

A DE M

EXICO

UNIVERSID

AD PEDAGOGICA NACIO

NAL

0.0

10.0

20.0

30.0

40.0

50.0

60.0

70.0

80.0

90.0

100.0

CINVESTAV

Profesores de Tiempo Completo de las Universidades Públicas Estatales que

son miembros del SNI, 2003-2009

CINVESTAV

UAEM UG

UASLP

UAEH

UAQ

UC

UDG

BUAP

UABC

UQROO

UNICACH

UAZ

UAA

UTM

UACJ

UABJO

UAC

UNACAR

UJA

T

UAT

UNACH

UDO

UAG

UAN

CESUES

ENBA

UAIM

UChtlpa

0.0

10.0

20.0

30.0

40.0

50.0

60.0

70.0

80.0

90.0

100.0 96.6

71.0

48.3

30.8

30.4

30.1

25.4

25.1

24.3

23.1

22.3

22.2

21.0

20.0

18.3

18.2

17.4

16.7

16.4

16.2

15.6

15.4

14.0

13.3

12.2

12.0

11.8

11.6

11.4

9.7

9.6

8.7 8.6 8.2

7.5

7.4

6.7

6.7

6.5

6.2

5.9

5.8

5.7

5.3

5.3

4.5

4.0

3.6

2.5

1.5

1.4

2002 2009

Organismos de evaluación y acreditación: Ámbito de los

programas académicos

CIEES: Evaluación diagnóstica

Los Comités Interinstitucionales para la Evaluación de la Educación Superior (CIEES) realizan evaluaciones diagnósticas de los programas educativos y de las funciones de gestión y extensión de las instituciones.

Los CIEES son cuerpos colegiados, integrados por académicos de instituciones de educación superior, que evalúan programas, funciones, servicios y proyectos ubicados en el quehacer sustantivo de las instituciones.

Además de la evaluación diagnóstica, los CIEES tienen facultades para realizar acreditación y el reconocimiento a unidades académicas o a programas específicos; dictaminación puntual sobre proyectos o programas; y asesoría a instituciones para la formulación e implantación de programas y proyectos.

CIEES

Profesores competentes, organizados en cuerpos académicos.

Planes y programas actualizados y pertinentes.

Equipamiento moderno y suficiente.

Instalaciones de calidad

Sistemas eficientes de gestión y administración.

Procedimientos adecuados para la contratación y promoción de su personal académico.

Procesos e instrumentos apropiados y confiables de evaluación del aprendizaje y la certificación (titulación) de los estudiantes.

Paradigma de un programa educativo de nivel superior de buena

calidad

Intercambio

documental

Auto-evaluación

SolicitudAceptació

n

Pre-diagnósti

co

Visita de Evaluació

n

Entrega y respuesta

Auto-evaluación.

Nueva metodologí

a

Procedimiento de Evaluación

Informe de Evaluación y

recomendaciones

Seguimiento

Aseguramiento de la Calidad

Modelo CIEES2009

61 Indicadores

de evaluación

Evaluación diagnóstica

10 Categoría

s

4 Ejes

Procedimiento de Evaluación

Caso practico: Diagrama de flujo del proceso de autoevaluación por pares internos

Nivel 1Programa educativo que cumple con todos los requisitos requeridos para ser reconocido por su calidad: planta académica de excelencia, planes y programas de estudio actualizados, infraestructura, entre otros.

Nivel 2Programa educativo que requiere entre uno y dos años para poder cumplir satisfactoriamente con todos los indicadores solicitados a un programa de calidad; tiene deficiencias que requieren de este plazo para poder cumplirse. Por ejemplo, planta docente que requiere una mayor proporción de profesores con estudios de posgrado.

Nivel 3Programa educativo que requiere de dos y mas años para someterse a un proceso de acreditación y cumplir satisfactoriamente con los indicadores de un programa de calidad.

Indicadores de los CIEES

Los CIEES, desde su creación, han emitido más de 105 mil recomendaciones para impulsar la mejora de los programas de educación superior.

El funcionamiento de los CIEES involucra la participación de casi 4,000 pares académicos de las instituciones de educación superior.

Las recomendaciones de los CIEES

1,659

1,677

1,699

1,724

1,735

1,763

1,782

1,794

1,801

1,807

1,824

1,847

1,865

1,969

1,981

1,989

2,024

2,041

2,064

2,074

2,082

2,096

2,112

2,146

2,159

2,166

2,184

2,216

2,244

2,259

2,292

2,184

2,3392,363

916 909 914 911 914 905 925 934944 950 955 953 950 1,014 1,030 1,040 1,024 1,029 1,029 1,035 1,040 1,032 1,025 1,029 1,020 1,025 1,021 1,013 997 991 977 1,021 979 976

417 410 408 403 402 395 389 388 386 385 381 378 374 374 374 373 369 369361 360 354 350 348 348 345 345 340 337 336 335 332 340 328

324

2,992

2,996

3,021

3,038

3,051

3,063

3,096

3,116

3,131

3,142

3,160

3,178

3,189

3,357

3,385

3,402

3,417

3,439

3,454

3,469

3,476

3,478

3,485

3,523

3,524

3,536

3,545

3,566

3,577

3,585

3,601

3,545

3,646 3,663

0

500

1,000

1,500

2,000

2,500

3,000

3,500

4,000

dic-0

6en

e-0

7feb

-07

mar

-07

abr-0

7ma

y-0

7jun

-07

jul-0

7ago

-07

sep-0

7oct

-07

nov

-07

dic-0

7en

e-0

8feb

-08

mar

-08

abr-0

8ma

y-0

8jun

-08

jul-0

8ago

-08

sep-0

8oct

-08

nov

-08

dic-0

8en

e-0

9feb

-09

mar

-09

abr-0

9ma

y-0

9jun

-09

jul-0

9ago

-09

sep-0

9oct

-09

nov

-09

dic-0

9

Nivel 1

Nivel 2

Nivel 3

Total

Evolución de los programas evaluados por los CIEES (Pregrado, Posgrado y Otros), 2006-

2009

1,246

1,262

1,284

1,308

1,319

1,347

1,365

1,377

1,384

1,390

1,406

1,424

1,434

1,498

1,507

1,512

1,546

1,561

1,584

1,593

1,601

1,616

1,631

1,651

1,665

1,672

1,690

1,711

1,732

1,743

1,773

1,794

1,806 1,824

470464 469 466 469 460 480 489 499 505 511 510 510

558 572 582 567 572 572 579 584 584 587 586 581 586 582 572 554 547 531 523 521 519

258 252 250 245 244 237 231 230 228 227 223 221 219 218 218 217 213

213 205 204 198 194 193 193 190 190 185 182 181 180 177 176 173 169

1,974

1,978

2,003

2,019

2,032

2,044

2,076

2,096

2,111

2,122

2,140

2,155

2,1632,274

2,297

2,311

2,326

2,346

2,361

2,376

2,383

2,394

2,411

2,430

2,436

2,448

2,457

2,465

2,467

2,470

2,481

2,493

2,500 2,512

0

500

1,000

1,500

2,000

2,500

3,000

dic-0

6en

e-0

7feb

-07

mar

-07

abr

-07

may

-07

jun-0

7jul

-07

ago-0

7sep

-07

oct

-07

nov

-07

dic-0

7en

e-0

8feb

-08

mar

-08

abr

-08

may

-08

jun-0

8jul

-08

ago-0

8sep

-08

oct

-08

nov

-08

dic-0

8en

e-0

9feb

-09

mar

-09

abr

-09

may

-09

jun-0

9jul

-09

ago-0

9sep

-09

oct

-09

nov

-09

dic-0

9

Nivel 1

Nivel 2

Nivel 3

Total

Evolución de los programas de TSU y Licenciatura evaluados por los CIEES (2006

– 2009)

Porcentaje de Programas con Nivel 1 de los CIEES, 2002-2009

COLMEX

UCARIBEBUAP

UASLP UAA UCUAC

UACJ

UAEMxUJED

UADY

UQROOUAT

UASUDO

UJATUACH UV

UAEH UDGUANL

UAQUABJO

UNISON

UAAAN UG

UNACH

UNACARUAG

UABCUAEMUAM

ITSON

UAZUAN

UPN

UNICACHUTM

UMSNH

UACAMUMAR

CESUES

UATx

UABCS0.0

20.0

40.0

60.0

80.0

100.0

120.0

100.

0

100.

0

93.4

86.0

83.7

82.4

79.7

79.5

79.4

78.6

75.0

75.0

74.7

74.0

73.8

73.7

72.7

70.1

69.8

68.5

67.9

66.7

63.6

63.1

60.0

58.3

55.1

52.2

48.0

47.4

40.0

37.7

36.8

35.7

34.6

30.8

30.8

28.6

25.0

23.8

18.2

10.0

10.0

3.7

2002 2009

COPAES: Acreditación

El Consejo para la Acreditación de la Educación Superior (COPAES) está facultado por la SEP para conferir reconocimiento formal a organismos nacionales o extranjeros cuyo fin sea acreditar programas educativos de nivel superior

COPAES regula los procesos de acreditación de programas educativos de técnico superior universitario, profesional asociado y licenciatura de instituciones públicas y particulares.

COPAES

COPAES

Objetivos particulares:

Promover la superación constante de los umbrales de calidad de los programas de educación superior, mediante el desarrollo de procesos de acreditación eficaces y confiables;

Coadyuvar con las autoridades educativas en su propósito de elevar y asegurar la calidad de la educación superior;

Orientar a la sociedad sobre la calidad de los programas; Dar seguimiento a los organismos que logren el reconocimiento del

Consejo Intervenir como mediador de buena fe en controversias entre los

organismos acreditadores y las instituciones.

Áreas de conocimiento de los organismos acreditadores reconocidos por COPAES

• Ingeniería,

• Contaduría y Administración,

• Medicina,

• Enfermería,

• Psicología,

• Odontología,

• Medicina Veterinaria y Zootecnia,

• Computación e Informática,

• Economía,

• Derecho,

• Ciencias Sociales,

• Agronomía,

• Nutriología,

• Diseño,

• Turismo,

• Arquitectura,

• Comunicación,

• Ciencias Químicas,

• Ciencias del Mar y

• Actividad Física.

Porcentaje de programas acreditados por organismos reconocidos por el COPAES,

2002-2009

UCARIBE

UATxUAA

UABC

UASLPUDG

UAMBUAP

UANL

UJED

UNIS

ON

UAEMx

UG

ITSON

UQROO

UAQ UVUAZ

UACAMUAG

UNACAR

0.0

20.0

40.0

60.0

80.0

100.0

120.0

10

0.0

95

.0

66

.7

65

.9

65

.3

64

.1

62

.8

61

.5

58

.0

55

.0

53

.7

51

.9

50

.8

50

.0

47

.5

47

.1

44

.0

43

.4

42

.9

42

.1

38

.5

38

.1

36

.6

36

.4

36

.1

34

.9

34

.2

25

.0

25

.0

23

.1

22

.9

22

.4

20

.1

19

.2

19

.0

14

.3

14

.3

12

.0

10

.0

9.1

8.7

7.4

2002 2009

Importancia Estratégica de la Evaluación y la Calidad de la ES

2007-2012

El desarrollo independiente de los diferentes organismos de evaluación ha conducido a instancias estructuralmente aisladas.

Es preciso alinear y armonizar funciones, garantizar congruencia de propósitos y contribuir más efectivamente a la mejora de la calidad de la educación.

Se requiere también establecer mecanismos eficientes y ágiles de coordinación de los organismos e instancias involucradas.

El énfasis en la evaluación de proceso nos ha llevado a obviar algunas preguntas relevantes: ¿las personas, los programas o las instituciones logran sus objetivos fundamentales?

Críticas

Programa Sectorial de Educación, 2007-2012

• Entre las acciones prioritarias del PROSEDU, es posible identificar las siguientes:

– Articular el quehacer de las diferentes instancias de evaluación y acreditación existentes y concretar la creación de un Sistema Nacional de Evaluación, Acreditación y Certificación de la Educación Superior.

– Impulsar la evaluación permanente de los organismos que tienen funciones de evaluación y acreditación, así como de sus prácticas.

– Institucionalizar la formación, capacitación y actualización de los profesionales que realizan las tareas de evaluación y acreditación.

– Impulsar reformas al marco jurídico para contribuir a dar objetividad y confiabilidad a los procesos de evaluación, acreditación y certificación.