Dylan Wiliam (@dylanwiliam)
Evaluación Formativa: La manera másefectiva de construir aprendizajes
www.dylanwiliamcenter.com
Estructura: cuatro preguntas
• Por qué es necesario mejorar el logro educativo
• Por qué tenemos que centrar nuestros esfuerzos
• Por qué la evaluación formativa debe ser unaprioridad
• Por qué la evaluación formativa require un nuevomodelo de desarrollo profesional
2
Por qué es necesario mejorar el logro educativo3
• En economías avanzadas, en los próximos 20 a 30 años
– Entre un cuarto y un tercio de los empleos podrían serexternalizados en otro país (Blinder, 2011)
– Casi la mitad de los empleos podrían ser realizados pormáquinas (Frey & Osborne, 2013)
• La opción para la gente joven
– Esperar que alguien te invente un nuevo trabajo
– Crearte uno tu mismo
Change 1969-1999
+14%
+8%
–5%
–8%
–3%
El mundo del trabajo está cambiando
Categoría de habilidades
A Comunicación compleja
B Pensamiento experto/resolución de problemas
C Manual no-rutinaria
D Rutinaria cognitiva
E Rutinaria manual
Qué clase de habilidades están desapareciendo más rápidamentede los lugares de trabajo?
4
Autor, Levy and Murnane (2003)
¿Qué tipo de escuelas necesitamos?
Modelo de escuela Ethos Proceso clave
Refinerías de talento La escuela debe proveer oportunidades para que los estudiantes muestren su potencial
Asegurar buena docencia y cobertura del currículum
Incubadoras de talento
Todos los alumnos pueden aprender, pero no todos pueden lograr resultados de excelencia
Potenciar/sonsacar las capacidades que tiene el alumno
Fábricas de talentos Todos los estudiantespueden lograr resultados de excelencia
“Lo que sea necesario”
¿Por qué las escuelas deberían hacer un análisis de Pareto?6
• Vilfredo Pareto (1848-1923)
– Economista, filósofo, y sociólogo,asociado con la regla del 80:20
• Mejora de pareto
– Un cambio que puede hacer que a lo menos una persona (ej. estudiante) este mejor sin empeorar otro (ej. profesor).
• Eficiencia de Pareto/ Óptimo de Pareto
– Una asignación (ej. de recursos) es Pareto eficiente o Pareto optima cuando no se puede efectuar ninguna mejora de Pareto adicional
Usar la evidencia de investigación
7
Estudios Relevantes
• Fuchs & Fuchs (1986)
• Natriello (1987)
• Crooks (1988)
• Bangert-Drowns et al. (1991)
• Dempster (1991)
• Dempster (1992)
• Elshout-Mohr (1994)
• Kluger & DeNisi (1996)
• Black & Wiliam (1998)
• Nyquist (2003)
• Brookhart (2004)
• Allal & Lopez (2005)
• Köller (2005)
• Brookhart (2007)
• Wiliam (2007)
• Hattie & Timperley (2007)
• Shute (2008)
• Kingston & Nash (2011, 2015)
8
Evaluación formativa: un concepto controvertido
Amplitud
Período
Impacto
Ciclo largo plazo Ciclo mediano plazo Ciclo corto plazo
Entre semestres y unidades de aprendizajes
Cuatro semana a un año
Monitoreo, alineación curricular
Dentro y entre clases
Minuto a minuto y día a
día
Compromiso, receptivo
Dentro y entre unidades de aprendizaje
Una a cuatro semanas
Evaluación con estudiantes involucrados
9
Hacia dónde va el estudiante
Dónde esta ahora el estudiante
Cómo conseguir que estudiante lo alcance
Docente
Par
Estudiante
Desmenuzando la Evaluación Formativa
Aclarar, compartir y comprender
las intencionesdel
aprendizaje
Obtenerevidencias del
aprendizaje
Entregarretroalimentaciónque promueva el
avance de losestudantes
Activar a estudiantes como recursospara el aprendizaje de otros
Activar estudiantes como dueños de suspropios aprendizajes
10
A dónde va el alumno A dónde está el alumno Cómo llevar allá al alumno
Profesor
Par
Estudiante
Desmenuzando la evaluación formativa
Usar evidencia de logro para adaptar lo que pasa en
la sala de clases para satisfacer las necesidades
del estudiante
Un Sistema de posicionamiento educativo
• Un buen professor:
– Establece en que nivel están los alumnos respecto a susaprendizajes.
– Identifica el destino de las enseñanzas
– Cuidadosamente planifica un itinerario.
– Comienza el viaje del aprendizaje.
– Hace controles periódicos sobre el progreso en el tiempo.
– Hace ajustes en el curso según lo exigan las condiciones.
12
Educational Endowment Foundation toolkit13
Intervención Costos Calidad de la Evidencia
Meses extra de aprendizaje
Retroalimentación ££ +8
Metacognición y autoregulación ££ +8
Tutorías entre pares ££ +6
Primeros años de intervención £££££ +6
Tutorías uno a uno ££££ +5
Tareas para la casa (Secundaria) £ +5
Aprendizaje colaborativo £ +5
Fonoaudiología £ +4
Tutorías de pequeños grupos £££ +4
Comportamiento en intervenciones £££ +4
Tecnología Digital ££££ +4
Aprendizaje social y emocional £ +4
Educational Endowment Foundation toolkit14
Intervention Cost Quality of evidence
Extra months of learning
Involucramiento parental £££ +3
Reducción del tamaño de la clase £££££ +3
Escuelas de verano £££ +3
Participación en deportes £££ +2
Participación en Arte ££ +2
Tiempo extendido en el colegio £££ +2
Instrucción individualizada £ +2
Actividades extraprogramáticas ££££ +2
Estilos de aprendizaje £ +2
Mentoría £££ +1
Tareas para la casa (primaria) £ +1
Educational Endowment Foundation toolkit15
Intervención Costos Calidad de la Evidencia
Meses extra de aprendizaje
Asistentes de profesores ££££ 0
Pago por desempeño ££ 0
Intervenciones vocacionales £££ 0
Agrupamiento de materias £ 0
Uniforme escolar £ 0
Entorno/infraestructura ££ 0
Agrupar por habilidades £ -1
A dónde va el alumno Dónde está el alumno Cómo llevar allá al alumno
Profesor
Par
Estudiante
Desmenuzando la evaluación formativa
Clarificar, compartir y
entender intenciones de
aprendizaje
Generar discusión efectiva, tareas y actividades que
fomenten evidencia de aprendizaje
Entregar retroalimentación que movilice a los
estudiantes
Activar estudiantes como recursos entre ellos
Activar a los estudiantes como dueños de su propio aprendizaje
Estrategias y técnicaspara la evaluaciónformativa en el aula
17
Aclarar, compartir y entender los objetivosde aprendizaje
18
Compartir los objetivos de aprendizaje
• Explica los objetivos de aprendizaje al comienzo de la clase/unidad: – Objetivo de aprendizaje
– Criterio de logro
• Menciona los objetivos de aprendizaje y criterios de logro en el lenguaje de los estudiantes
• Usa posters con palabras claves para hablar del aprendizaje:– Ej., describir, explicar, evaluar
• Usa la planificación y esquemas prudentemente
• Usa ejemplos escritos de diferentes estandares para darle mássustancia a las rúbricas de evaluación (ej. Reportes de laboratorio).
• Da oportunidades a los estudiantes para diseñar sus propiaspruebas.
19
Construyendodiscusiones, actividades y tareasefectivas en la sala de clases que generenevidencia de aprendizaje
20
Obteniendo la evidencia
• Idea clave: al preguntar se debería:
– Generar pensamiento
– Proveer datos que informe sobre la enseñanza
• Mejorar las preguntas de los profesores:
– Generando preguntas con los colegas
– De bajo/alto nivel y abiertas/cerradas
– Con tiempo de espera apropiado
• Alejándose del modelo I-R-E (iniciación-respuesta-evaluación):
– Basquetbol en vez de “pimponeo”
– No “manos arriba” (excepto para preguntar algo)
– Preguntas estilo “silla caliente”
• Sistemas de respuestas para todos los estudiantes :
– Tarjetas ABCD, pizarras individuales, tickets de salida
21
Darretroalimentación que mejore los aprendizajes
22
Efectos de la retroalimentación
• Kluger & DeNisi (1996) revisaron 3000 reportes de investigaciones
• Excluyendo aquellos:
– Sin controles adecuados
– Con diseño pobre
– Con menos de 10 participantes
– Que no miden el desempeño
– Sin detalles de la magnitud de los efectos
• Lo que dejó un total de 131 reportes, 607 tamaños de efecto,incluyendo a 12652 individuos
• La evidencia señala que, en promedio, la retroalimentaciónaumenta los logros:
– Efectos son altamente variables
– 38% (231 de 607) de los efectos fueron negativos
23
Obtener bien la retroalimentación es difícil
Tipo de respuesta Retroalimentación indica desempeño…
Cuando no está la altura de la meta
Cuando excede la meta
Cambia la conducta Aumenta el esfuerzo Disminuye el esfuerzo
Cambia la meta Reduce su aspiración Aumenta su aspiración
Abandona la meta Decide que la meta es muydifícil
Decide que la meta es muyfácil
Rechaza la retroalimentación
Retroalimentación esignorada
Retroalimentación esignorada
24
Retroalimentación que promueve el aprendizaje
• Idea clave: la retroalimentación debe:
– Generar reflexión
– Dar guías de cómo mejorar
• Anotaciones sólo con comentarios
• Anotaciones enfocadas
• Referencias explicitas a rubricas
• Entregar sugerencias sobre cómo mejorar:
– No entregar soluciones completas
• Reagendar evaluaciones :
– Por ejemplo, prueba de unidad a tres cuartos del camino
25
Activadandoestudiantes comorecursos de aprendizajes entre ellos mismos
26
Ayudar a los estudiantes a ser recursos de aprendizaje
• Estudiantes evaluando el trabajo de sus compañeros:
– “Pre-flight checklist”
– “Dos estrellas y un deseo”
– Elegir-intercambiar-elegir
– Daily sign-in
• Entrenar estudiantes a plantear preguntas / identificar las debilidades del grupo
• Revisión de los estudiantes al final de la lección
27
Activando a estudiantes comodueños de su propioaprendizaje
28
Ayudar a estudiantes a que se adueñen de supropio aprendizaje
• Estudiantes evaluando su propio trabajo:
– Con rúbricas
– Con modelos
• Autoevaluación de la comprensión:
– Portafolio de aprendizajes
– Luces de tráfico
– Discos rojos/verdes
– Tazas de colores
– Más / Menos / Interesante
29
Hasta acá con la parte fácil
Un modelo para el aprendizaje de losprofesores
• Contenido, después proceso
• Contenido (lo que queremos que los profesorescambien): – Evidencia
– Ideas (estrategias y técnicas)
• Proceso (cómo hacer el cambio):– Elección
– Flexibilidad
– Pasos pequeños
– Accountability (rendición).
– Apoyo
31
Accountability con apoyo
• Qué se necesita de los profesores:
– Un compromiso con:• El mejoramiento continuo de la práctica
• Enfocarse en aquellas cosas que hacen la diferencia a losestudiantes.
• Qué se necesita de los líderes:
– Un compromiso de construir comunidades de aprendizaje efectivas para profesores a través de:• Creando expectativas para la mejora continua de las prácticas
• Manteniendo el foco en las cosas que hacen la diferencia a losestudiantes
• Entregando el tiempo, espacio, permisos y apoyos para innovar
• Apoyando el tomar riesgos
32
Para encontrar más…
www.dylanwiliam.net
www.dylanwiliamcenter.com
33
http://www.dylanwiliam.nethttp://www.dylanwiliamcenter.com