Los Exámenes de Altas Consecuencias: Implicaciones Educativas · 2019-08-23 · Exámenes de Altas...

43
Los Exámenes de Altas Consecuencias: Implicaciones Educativas Dr. Melchor Sánchez Mendiola UNAM

Transcript of Los Exámenes de Altas Consecuencias: Implicaciones Educativas · 2019-08-23 · Exámenes de Altas...

Page 1: Los Exámenes de Altas Consecuencias: Implicaciones Educativas · 2019-08-23 · Exámenes de Altas Consecuencias Pruebas o exámenes cuyos resultados tienen consecuencias importantes

Los Exámenes de Altas Consecuencias:

Implicaciones Educativas

Dr. Melchor Sánchez MendiolaUNAM

Page 2: Los Exámenes de Altas Consecuencias: Implicaciones Educativas · 2019-08-23 · Exámenes de Altas Consecuencias Pruebas o exámenes cuyos resultados tienen consecuencias importantes

Jueces 12:5-6

“Y los galaaditas tomaron los vados del Jordán a los de Efraín; y aconteció que cuando decían los fugitivos de Efraín: Quiero pasar, los de Galaad

les preguntaban: ¿Eres tú efrateo? Si él respondía: No, entonces le decían: Ahora, pues,

di Shibolet. Y él decía Sibolet; porque no podía pronunciarlo correctamente.

Entonces le echaban mano, y le degollaban junto a los vados del Jordán. Y murieron entonces de

los de Efraín cuarenta y dos mil”.

Page 3: Los Exámenes de Altas Consecuencias: Implicaciones Educativas · 2019-08-23 · Exámenes de Altas Consecuencias Pruebas o exámenes cuyos resultados tienen consecuencias importantes
Page 4: Los Exámenes de Altas Consecuencias: Implicaciones Educativas · 2019-08-23 · Exámenes de Altas Consecuencias Pruebas o exámenes cuyos resultados tienen consecuencias importantes

Exámenes de Altas Consecuencias

Pruebas o exámenes cuyos resultados tienen consecuencias importantes y

directas para los individuos, programas o instituciones

involucrados en el examen.

AERA, APA, NCME. Standards for Educationaland Psychological Testing. 2014

Page 5: Los Exámenes de Altas Consecuencias: Implicaciones Educativas · 2019-08-23 · Exámenes de Altas Consecuencias Pruebas o exámenes cuyos resultados tienen consecuencias importantes

Exámenes de Altas Consecuencias

Graduación (Examen Profesional)Selección (ENARM, ingreso UNAM)Promoción (exámenes finales de

cursos de licenciatura o posgrado)Certificación (exámenes de Consejos)

Page 6: Los Exámenes de Altas Consecuencias: Implicaciones Educativas · 2019-08-23 · Exámenes de Altas Consecuencias Pruebas o exámenes cuyos resultados tienen consecuencias importantes

www.nap.edu

Page 7: Los Exámenes de Altas Consecuencias: Implicaciones Educativas · 2019-08-23 · Exámenes de Altas Consecuencias Pruebas o exámenes cuyos resultados tienen consecuencias importantes

Exámenes de Altas Consecuencias y sus efectos: Calle de dos sentidos

Examen deAltas ConsecuenciasPolíticos

HumanosEconómicos

Sociales

Educativos

Page 8: Los Exámenes de Altas Consecuencias: Implicaciones Educativas · 2019-08-23 · Exámenes de Altas Consecuencias Pruebas o exámenes cuyos resultados tienen consecuencias importantes

Consecuencias de un Examen

Brennan RL, Ed. Educational Measurement.National Council on Measurement in Education

4th Ed. 2006

Intencionales No intencionales

Positivas

Negativas

I - P NI - P

I - N NI - N

Page 9: Los Exámenes de Altas Consecuencias: Implicaciones Educativas · 2019-08-23 · Exámenes de Altas Consecuencias Pruebas o exámenes cuyos resultados tienen consecuencias importantes

Efectos educativos de un EAC PositivosMotivación al estudio Estandarización de la evaluación Puede elevar la calidad Unifica criterios - si se hace bien -

(alineado con el currículo)Koretz DM, Linn RL. Effects of high-stakes

educational testing on instruction and achievement.AERA & NCME, Chicago. 1991

Page 10: Los Exámenes de Altas Consecuencias: Implicaciones Educativas · 2019-08-23 · Exámenes de Altas Consecuencias Pruebas o exámenes cuyos resultados tienen consecuencias importantes

Efectos educativos de un EAC Negativos “Enseñando a la prueba” (“teaching

to the test”) explícito e implícito Cursos de preparación (leyes de mercado) Efectos en currículo formal y oculto Inferencias inapropiadas de resultados

Madaus G. The influence of testing on the curriculum.NSSE Yearbook. University of Chicago Press. 1988

Page 11: Los Exámenes de Altas Consecuencias: Implicaciones Educativas · 2019-08-23 · Exámenes de Altas Consecuencias Pruebas o exámenes cuyos resultados tienen consecuencias importantes

Efectos educativos de un EACEAC generan controversia por convicciones

filosóficas, políticas o sesgos personales/grupales.Intensa retórica que nubla la discusión.Escasez de evidencia publicada convincente

positiva y negativa.Necesidad inescapable de tomar decisiones.

Cizek GJ. More unintended consequences of high-stakes testing. Educational Measurement:

Issues and Practice. 2001; 20:19-27

Page 12: Los Exámenes de Altas Consecuencias: Implicaciones Educativas · 2019-08-23 · Exámenes de Altas Consecuencias Pruebas o exámenes cuyos resultados tienen consecuencias importantes

“…el uso de la puntuación de un examen definitivamente

implica consecuencias; de otra manera uso es sólo una

abstracción”.

Brennan RL, Ed. Educational Measurement.National Council on Measurement in Education

4th Ed. 2006

Page 13: Los Exámenes de Altas Consecuencias: Implicaciones Educativas · 2019-08-23 · Exámenes de Altas Consecuencias Pruebas o exámenes cuyos resultados tienen consecuencias importantes

“Los desarrolladores del examen son los candidatos obvios para

validar las afirmaciones que hacen sobre la interpretación de los resultados de un examen…”

Brennan RL, Ed. Educational Measurement.National Council on Measurement in Education

4th Ed. 2006

Page 14: Los Exámenes de Altas Consecuencias: Implicaciones Educativas · 2019-08-23 · Exámenes de Altas Consecuencias Pruebas o exámenes cuyos resultados tienen consecuencias importantes

“ El poder de examinar es el

poder de destruir…”

Abraham Flexner. Medical educationin the United States and Canada.

1910. p. 169www.carnegiefoundation.org

Page 15: Los Exámenes de Altas Consecuencias: Implicaciones Educativas · 2019-08-23 · Exámenes de Altas Consecuencias Pruebas o exámenes cuyos resultados tienen consecuencias importantes
Page 16: Los Exámenes de Altas Consecuencias: Implicaciones Educativas · 2019-08-23 · Exámenes de Altas Consecuencias Pruebas o exámenes cuyos resultados tienen consecuencias importantes
Page 17: Los Exámenes de Altas Consecuencias: Implicaciones Educativas · 2019-08-23 · Exámenes de Altas Consecuencias Pruebas o exámenes cuyos resultados tienen consecuencias importantes

¿Qué es evaluación?“…cuando una persona, con algún

tipo de interacción directa o indirecta con otra, obtiene e

interpreta información de manera consciente sobre el

conocimiento y la comprensión, habilidades y actitudes de la

otra persona. Hasta cierto puntoevaluación es un intento de

conocer a esa persona”.

www.psy.gla.ac.uk/~steve/best/rowntree.html

Page 18: Los Exámenes de Altas Consecuencias: Implicaciones Educativas · 2019-08-23 · Exámenes de Altas Consecuencias Pruebas o exámenes cuyos resultados tienen consecuencias importantes

“Colectar datos de evaluación es como recoger la basura, es mejor que sepas qué vas a hacer con ella antes de recogerla”

Mark Twain

Page 19: Los Exámenes de Altas Consecuencias: Implicaciones Educativas · 2019-08-23 · Exámenes de Altas Consecuencias Pruebas o exámenes cuyos resultados tienen consecuencias importantes
Page 20: Los Exámenes de Altas Consecuencias: Implicaciones Educativas · 2019-08-23 · Exámenes de Altas Consecuencias Pruebas o exámenes cuyos resultados tienen consecuencias importantes
Page 21: Los Exámenes de Altas Consecuencias: Implicaciones Educativas · 2019-08-23 · Exámenes de Altas Consecuencias Pruebas o exámenes cuyos resultados tienen consecuencias importantes

El largo camino educativo del médico

EspecialistaMédico Mantenimientode la competencia

EMP EMP EMC…DPC

Page 22: Los Exámenes de Altas Consecuencias: Implicaciones Educativas · 2019-08-23 · Exámenes de Altas Consecuencias Pruebas o exámenes cuyos resultados tienen consecuencias importantes
Page 23: Los Exámenes de Altas Consecuencias: Implicaciones Educativas · 2019-08-23 · Exámenes de Altas Consecuencias Pruebas o exámenes cuyos resultados tienen consecuencias importantes

HACE

DEMUESTRA CÓMO

SABE CÓMO

SABE

Lo que pasa realmente en la práctica diaria (evaluación de 360o, portafolios)

Habilidad para demostrar habilidades clínicas específicas (ECOE, pacientes estandarizados)

Habilidad para aplicar conocimiento factual (preguntas de opción múltiple)

Habilidad para citar conocimiento factual (preguntas de opción múltiple)

Pirámide de MillerAcad Med 1990; 65:S63-67

Page 24: Los Exámenes de Altas Consecuencias: Implicaciones Educativas · 2019-08-23 · Exámenes de Altas Consecuencias Pruebas o exámenes cuyos resultados tienen consecuencias importantes

“No todo lo que puede ser

contado cuenta, y no todo lo que cuenta puede ser

contado”

Albert Einstein

Page 25: Los Exámenes de Altas Consecuencias: Implicaciones Educativas · 2019-08-23 · Exámenes de Altas Consecuencias Pruebas o exámenes cuyos resultados tienen consecuencias importantes

EDUCACIÓN MÉDICA BASADA EN EVIDENCIA

EDUCACIÓN BASADAEN OPINIÓN

EDUCACIÓN BASADAEN EVIDENCIA

Educación Médica Basada en Evidencias: ¿Ser o no ser?Sánchez Mendiola M. Inv Ed Med 2012;1(2):82-89.

Page 26: Los Exámenes de Altas Consecuencias: Implicaciones Educativas · 2019-08-23 · Exámenes de Altas Consecuencias Pruebas o exámenes cuyos resultados tienen consecuencias importantes

http://evidencelibrary.abms.org

Page 27: Los Exámenes de Altas Consecuencias: Implicaciones Educativas · 2019-08-23 · Exámenes de Altas Consecuencias Pruebas o exámenes cuyos resultados tienen consecuencias importantes
Page 28: Los Exámenes de Altas Consecuencias: Implicaciones Educativas · 2019-08-23 · Exámenes de Altas Consecuencias Pruebas o exámenes cuyos resultados tienen consecuencias importantes

http://riem.facmed.unam.mx

Page 29: Los Exámenes de Altas Consecuencias: Implicaciones Educativas · 2019-08-23 · Exámenes de Altas Consecuencias Pruebas o exámenes cuyos resultados tienen consecuencias importantes
Page 30: Los Exámenes de Altas Consecuencias: Implicaciones Educativas · 2019-08-23 · Exámenes de Altas Consecuencias Pruebas o exámenes cuyos resultados tienen consecuencias importantes

http://onlinelibrary.wiley.com/doi/10.1111/jedm.12000/abstract

Page 31: Los Exámenes de Altas Consecuencias: Implicaciones Educativas · 2019-08-23 · Exámenes de Altas Consecuencias Pruebas o exámenes cuyos resultados tienen consecuencias importantes

http://ncme.org/publications/items/

Page 32: Los Exámenes de Altas Consecuencias: Implicaciones Educativas · 2019-08-23 · Exámenes de Altas Consecuencias Pruebas o exámenes cuyos resultados tienen consecuencias importantes

www.aera.net/Publications/tabid/10067/Default.aspx

Page 33: Los Exámenes de Altas Consecuencias: Implicaciones Educativas · 2019-08-23 · Exámenes de Altas Consecuencias Pruebas o exámenes cuyos resultados tienen consecuencias importantes

www.ceneval.edu.mx/ceneval-web/content.do?page=7344

Page 34: Los Exámenes de Altas Consecuencias: Implicaciones Educativas · 2019-08-23 · Exámenes de Altas Consecuencias Pruebas o exámenes cuyos resultados tienen consecuencias importantes

www.inee.edu.mx

Page 35: Los Exámenes de Altas Consecuencias: Implicaciones Educativas · 2019-08-23 · Exámenes de Altas Consecuencias Pruebas o exámenes cuyos resultados tienen consecuencias importantes
Page 36: Los Exámenes de Altas Consecuencias: Implicaciones Educativas · 2019-08-23 · Exámenes de Altas Consecuencias Pruebas o exámenes cuyos resultados tienen consecuencias importantes
Page 37: Los Exámenes de Altas Consecuencias: Implicaciones Educativas · 2019-08-23 · Exámenes de Altas Consecuencias Pruebas o exámenes cuyos resultados tienen consecuencias importantes

www.facmed.unam.mx

Page 38: Los Exámenes de Altas Consecuencias: Implicaciones Educativas · 2019-08-23 · Exámenes de Altas Consecuencias Pruebas o exámenes cuyos resultados tienen consecuencias importantes
Page 39: Los Exámenes de Altas Consecuencias: Implicaciones Educativas · 2019-08-23 · Exámenes de Altas Consecuencias Pruebas o exámenes cuyos resultados tienen consecuencias importantes

Lo bueno…

Recurso imprescindible para la calidad.¡Llegó para quedarse! Se puede mejorar.Rendición de cuentas.Evaluación formativa. Fuente de motivación para aprender.Del aprendizaje y para el aprendizaje.

Page 40: Los Exámenes de Altas Consecuencias: Implicaciones Educativas · 2019-08-23 · Exámenes de Altas Consecuencias Pruebas o exámenes cuyos resultados tienen consecuencias importantes

Lo malo…

Puede profundizar la desigualdad.Refuerza cultura de fiscalización, control y

castigo.Prioriza funciones administrativas.Mucha evaluación pero con pocos cambios.Implementación de programas que después

no se evalúan.

Page 41: Los Exámenes de Altas Consecuencias: Implicaciones Educativas · 2019-08-23 · Exámenes de Altas Consecuencias Pruebas o exámenes cuyos resultados tienen consecuencias importantes

Lo feo…

Homogeneidad que niega la diversidad.Usos sesgados de los resultados de la

evaluación…cuando se usan.Fomenta la cultura de la simulación.Conducida por personal improvisado.

Page 42: Los Exámenes de Altas Consecuencias: Implicaciones Educativas · 2019-08-23 · Exámenes de Altas Consecuencias Pruebas o exámenes cuyos resultados tienen consecuencias importantes
Page 43: Los Exámenes de Altas Consecuencias: Implicaciones Educativas · 2019-08-23 · Exámenes de Altas Consecuencias Pruebas o exámenes cuyos resultados tienen consecuencias importantes

“Todo lo que merece ser hecho, merece también ser bien hecho”

Andre Maurois