1

Experto en Metodologías educativas innovadoras

Evaluación y feedback como herramientas para el fomento

y la evaluación del aprendizaje

Duodécima sesión interactiva

ProfesorAlfredo Prieto MartínUniversidad de Alcalá

2

¿Dónde estamos?Asignatura Preguntas importantes1.Paradigmas educativos y modelos de (enseñanza) aprendizaje (3 ECTS)

¿Qué queremos que aprendan nuestros estudiantes?Los resultados de aprendizaje que deseamos para nuestros alumnos

2. Definiendo el aprendizaje que perseguimos y estableciendo planes para lograrlo y comprobarlo (3 ECTS)

¿Cómo vamos a ayudarles a hacerlo?Diseño en retrospectiva y Gamificación del diseño

3.Metodologías de enseñanza y aprendizaje (6 ECTS)

¿Con qué métodos vamos a ayudarles a hacerlo?Modelo inverso fomento del estudio previoMetodologías innovadoras, activas, inductivas, sociales

Evaluación y feedback como herramientas para el fomento y la evaluación del aprendizaje (4 ECTS)

¿Cómo valoraremos su aprendizaje? ¿Cómo utilizaremos la evaluación para producir más aprendizaje?

Evaluación formativa y acreditativa

Evaluar la utilidad y eficacia de lo que hemos hecho para que aprendan ¿Qué hemos logrado que aprendan? ¿Qué es lo que no logramos que aprendan?

Investigación sobre el efecto de la innovación y mejora de la calidad de la docencia ¿Cómo se demuestra?

3

Plan de la sesión interactiva

1. Feedback y recomendaciones sobre los foros y tareas a realizar

en las primeras semanas de la cuarta asignatura

2. Pódiums de los distintos tipos de actividad

3. Evaluación de la comprensión y la transferencia

4. Preguntas de los participantes.

4

Cuarta asignatura

5

6

7

Canal youtube clasemáticas

8

Canal youtube Flippeando

9

Evaluación de la participación en

el foro:os felicito de

corazón

10

Participación en foros (de la primera y segunda asignatura)

FRAN

patxo

Lourdes

Domingo Lara

AlbaTxe

ma

Eduardo

Cristina R

odriguez

0

5

10

15

20

25

30

35

40

Diseño

paradigmas

cuestiones generales

11

Participación en foros de tercera asignatura

fran

Cr Marí

apatx

oEle

na

Lourdes

José Carl

os

Domingo

Milagro

sLar

a

Rafa Avila Alba

Daniel

Txema

Marta

Eduard

oleti

cia

Cristina R

odriguez

0

5

10

15

20

25

30

35

competenciasrecetarios

12

Pódium de los foros (provisional)

3ª Elena

1ª Cristina

2º Fran

nuevo foro repositorio de rúbricas

14

Primer ejercicio de la cuarta asignatura Foro Repositorio de rúbricas

1. Aportar Ejemplos de rúbricas os han funcionado bien para transmitir resultados a vuestros alumnos y para orientarles en la realización de los ejercicios y tareas

1. Comentar los contextos de las actividades en las que las usasteis y como os funcionaron.

• Animaros a compartir vuestras mejores rúbricas.

15

Ejercicio de la cuarta asignatura Foro sobre problemas con la evaluación del aprendizaje

1. Opción foro Problemas con la evaluación– ¿Qué problemas tenemos para evaluar el aprendizaje de

nuestros alumnos? Podemos añadir otros hilos que se os ocurran

2. Opción diseño – Para los que queraís ejercitaros en el diseño de la

evaluación y especialmente para los que no hayáis empleado todavía evaluación, leer las experiencias que se expongan en el foro y realizar una propuesta de como planificaríais la evaluación de una serie de resultados de aprendizaje correspondientes a una Unidad de una de vuestras asignaturas.

16

cuarta asignatura del experto (evaluación)• Debéis preparar una estrategia de evaluación del aprendizaje

producido en una unidad• Esto incluye 1. Repasar los objetivos/resultados de una unidad y clasificarlos en

cuatro tipos o categorias 1 adquisición de conocimientos, 2 desarrollo de habilidades, 3 entendimientos o ideas que deben comprender 4 transferencias que deben ser capaces de hacer

2. Un plan de actividades a realizar de preparación y evaluación formativa durante el tiempo presencial de clase pero relacionándolas con el tipo de resultados que pretendemos que alcancen.

3. Un plan de evaluación acreditativa que produzca juicios validos y fiables acerca de si vuestros alumnos han alcanzado esos resultados.

Actividad de integración (y de recuperación al final del experto)

• Mi idea es que al final y como tarea de culminación del experto (y de recuperación para los que no hayáis podido realizar algunas de las tareas de las cuatro asignaturas) integréis en relación a una unidad de una de vuestras asignaturas los siguientes aspectos de la planificación UbD

• Estadio 1 Selección de resultados de aprendizaje clasificándolos en:• A) Adquisición de conocimientos y habilidades• C) Comprensión y extracción de sentido • T) Transferencia a nuevas situaciones• Estadio 2 Evaluación acreditativa Selección de procedimientos de evaluación

apropiados a la evaluación válida de cada uno estos resultados (en función de su tipo).

• Estadio 3 Actividades de enseñanza aprendizaje y Evaluación formativa Selección de actividades que faciliten el que los alumnos se ejerciten en todo aquello que pueda propiciar la consecución de los distintos tipos de resultados de aprendizaje. Planificar cómo podéis realizar el seguimiento de los alumnos y cómo les podéis proporcionar Feedback formativo .

18

Materiales que colocaré esta semana

• Lo que la investigación enseña acerca de la evaluación

• Gestión por el profesor del seguimiento y el feedback

• Evaluación para la comprensión y la transferencia

• Evaluación de competencias

Evaluación de la experimentación como usuarios de las herramienta de gamificación del blog captain up

09-oct 14-oct 21-oct 27-oct 05-nov 01-dic 08-dicFran 5.200 8380 10.710 11.635 12195 14720 14790Daniel 5.125 6440 9.385 9.455 9550 10.700 12420

José Carlos 1.510 2560 2.775 2.775 3.045 3140 5275

Patxo (2) 1.405 1725 1.725 2450 2.450 3010 3010

Txema (2) 750 835 1000 1730 2600 2830 2830

Leticia 0 0 0 2.730 2.730 2730 2730Elena 445 1115 1.115 1.115 1115 2.620 2620

Lourdes 900 900 1.100 1555 1740 2455 2455

Rafa Ávila 1.215 1510 1510 1965 1965 1965 1965

Domingo 1.835 1835 1.845 1845 1845 1860 1860

Cristina (2) 100 515 520 570 955 1670 1670

Lara 885 895 1145 1145 1145 1160 1160

Eduardo 350 350 350 650 680 690 690

49550 52320

209-Oct

11-Oct

13-Oct

15-Oct

17-Oct

19-Oct

21-Oct

23-Oct

25-Oct

27-Oct

29-Oct

31-Oct

2-Nov

4-Nov

6-Nov

8-Nov

10-Nov

12-Nov

14-Nov

16-Nov

18-Nov

20-Nov

22-Nov

24-Nov

26-Nov

28-Nov

30-Nov2-D

ec4-D

ec6-D

ec8-D

ec0

2,000

4,000

6,000

8,000

10,000

12,000

14,000

16,000

FranDanielJosé CarlosPatxo (2)Txema (2)LeticiaElena LourdesRafa ÁvilaDomingoCristina (2)LaraEduardo

52.320

Por encima de 4000 =10Gamificación

2.500

1.500

4.000

Entre 2.500

Y 4.000

Entre 1.500

Y 4.000

< 1.500

21

Pódium gamificación

3º José Carlos

1ºFran 2º Daniel

22

Comentarios a entradas del blog(DISQUS)

• Fran 12• Leticia 5• Jose Carlos 4• Patxo 1

2ª Leticia

3º JoséCarlos

1º Fran

23

Asistencia a sesiones• Patxo 3• Txema 1• Fran 1/2

2ª Txema 3º Fran

1º Patxo

24

Tareas evaluablesparadigmas integración gamificación Autoevaluación

documento hipermedia

Albisu San Miguel Ane

Anusategui Arias Jose María x x x 100 x

Ávila Hernández Rafael x x

Bazarra Rodriguez María Lourdes x x x 50 x

Bolumar Cobo Leticia x x x 100 x

Calmaestra Caracuel Francisco Javier x x x 100 xCaro Lazaro Alba x x 70 xConejo Siles Domingo x x x 100 x

Crespo Picó María Milagros x

Elduque Viñuales Daniel x x x 100 xIsabel Olmos German

Mallen Martín Elena x x 100 xPérez Duque Lara x x x 70 x

Prieto Beni Fracisco Javier x x x 100

Rodriguez Marco Cristina x 60 x

Sáenz de Cosca Eduardo xSancho Blas José Carlos x x x 100 xSerna Cruz María Teresa

Solsona Barrufet Marta x

25

Premio a la superación de dificultades para ver los vídeos

1º Domingo

26

Evaluación de la comprensión y la transferencia

Sin comprender en profundidad Comprendiendo en profundidad

Saber AC) Adquisición de conocimientos declarativos sobre hechos definiciones y conceptos básicos

C) Comprensión y extracción de sentido los alumnos que comprenden pueden analizar sintetizar y evaluar información, no solo recordar lo previamente aprendido y aplicarlo directa y mecánicamenteLos que comprenden hacen conexiones, extraen conclusiones y son capaces de explicarlas con sus propias palabras

Saber hacer

AH) Adquisición de habilidades para realizar acciones o procesos competentemente (conocimiento procedimental)Recetas

T) Transferencia a nuevas situaciones aplicación de lo previamente aprendido comprendido y abstraido a nuevas situaciones

Cómo evaluar distintos tipos de resultados de aprendizaje

Diferencias entre comprensión (entendimientos genuinos) y conocimientos

factualesEntendimientos (comprensión) Conocimientos

factuales ¿Qué son?

Asimilación de ideas importantes en la forma de generalizaciones o abstracciones

Hechos y conceptos básicos

Transferi-bilidad

a través de situaciones, lugares y tiempos Limitada o nula

¿Cómo se logran?

Deben ser ganados, construidos en la mente del que aprende, mediante procesos de indagación, inferencia y replanteamiento

Pueden ser aprendidos de memoria , sin comprensión

Cómo se evalúan

Se evalúan mejor a través de ejecuciones que requieren comprensión (aplicación compleja, explicación, predicción no repetición)Pueden evaluarse con MCQs del tipo dado tal y cuál ¿aplica tu entendimiento de las leyes de … y predice que ocurrirá si…

Con preguntas tipo con respuestas correctas y erróneas Respuesta V/F MCQDefine X

Evidencias de que el alumno ha extraído el sentidoDemuestras que comprendes cuando… No has sacado sentido si …Detectas un patrón en los datosEres capaz de explicarlo con tus propias palabras o representarlo de una manera original

Sólo puedes repetir el patrón que te contaronNo eres capaz de detectar un nuevo patrón o confirmarlo por ti mismo

Resumes una historia y lo que significa en tus propias apalabras Eres capaz de leer entre líneas para hacer inferencias acerca del carácter motivos y sentimientos que originan un texto

Solo lee literalmente y recuenta los detallesSolo establece hechos o repite lo que otros dicen que la historia significaNo entienden las inferencias que otros hacen

Conectar hechos con observaciones y generalizaciones a partir de una narrativa histórica Construyes generalizaciones en tus propias palabrasLees entre líneas

Sólo repiten conclusionesNo llegan a conclusiones propias y originalesNo hacen (o ven la necesidad de hacer) cualquier conexión entre su propia experiencia y la historiaNo pueden resumir o generalizar acerca de un periodo histórico

Reconocen cuando el que habla en otro idioma hace un chiste o habla de manera sarcástica

Traducen literalmente y no llegan a inferencias acerca del propósito del que habla

Criterios y pruebas para la evaluación de distintos tipos de resultados de aprendizaje

Resultado de aprendizaje Criterios pruebas

AC) Adquisición de conocimientos sobre hechos definiciones y conceptos básicos

Declarativos, se X recordar lo previamente aprendido, se repetir lo que me enseñaron de la manera que me lo enseñaron

Respuesta V/F MCQDefine…

AH) Adquisición de habilidades para realizar acciones o procesos competentemente

(conocimiento procedimental)Procedimental hago aplico lo que sé directa y mecánicamente

Resuelve problema de libroDemuestra como harías esto

C) Comprensión y extracción de sentido

Explicación y aplicación fundamentada

Pueden realizar inferencias hacer conexiones y explicarlas

T) Transferencia a nuevas situaciones

aplicación de la abstracción previamente aprendida a situaciones prácticas nuevas para el estudiante

¿Qué pueden hacer con lo que han aprendido de manera autónoma?Resuelve una nueva situación Dados estos resultados experimentales concluye

31

Las seis facetas de la comprensiónLos individuos que comprenden y pueden transferir su aprendizaje: 1. Pueden explicar, hacer conexiones, llegar a inferencias y expresarlas en

vuestras propias palabras.2. Pueden interpretar, sacar sentido, convertir información en una teoría

coherente y convincente.3. Pueden aplicar y ajustar su aplicación en situaciones variadas, ir más allá del

contexto en el que se aprendieron. 4. Tienen perspectiva y son capaces de apreciar, comparar y considerar varios

puntos de vista.5. Muestran empatía, perciben con sensibilidad, son capaces de ponerse las

sandalias de otro y encontrar valor en lo que a otros les parece extraño .6. Demuestran tener conocimiento de si mismos y conciencia metacognitiva de la

limitación de su comprensión, reconocen y definen bien aquello que no logran comprender. Reconocen sus propios hábitos mentales en relación a la comprensión y son conscientes de los prejuicios que pueden impedirla.Son capaces de dar significados personales a las experiencias de aprendizaje propias

Procedimientos para una evaluación acreditativa de la comprensión más válida

• La evaluación de alta repercusión (high stakes) de impacto mayor y función acreditativa (al final de cada unidad o módulo) requiere de mayor validez y fiablilidad en las pruebas y las medidas para evitar errores de tipo I y de tipo II El que no comprende

Supera la evaluación El que comprende no supera la evaluación

¿Cómo saber si mi evaluación esta alineada con el objetivo de comprensión?* Muy probable

Algo improbable

Muy improbable

Error I falso positivo ¿Cómo de probable es que un alumno pueda hacer bien la evaluación …haciendo suposiciones inteligentes, repitiendo lo memorizado o conectando la clavija en el enchufe, tal vez con un recuerdo preciso pero sin o muy poca comprensión?Haciendo un esfuerzo y mucho trabajo y entusiasmo, pero con comprensión limitada? Produciendo un producto admirable o una presentación muy bonita pero con comprensión limitada Error 2 Falso negativo ¿Cómo de probable es que un alumno pueda no superar la evaluación …Sin cumplir los requerimientos de esta tarea , pero a la vez revelan una buena comprensión de las ideas? No son hábiles en algunos aspectos de la tarea , pero esas habilidades no son centrales al objetivo o implican algun aprendizaje o talento natural sin relación con el objetivo* Algún muy probable significa que la evaluación no esta alineada con los objetivos de comprensión

34

Sesión de próxima semana

• El jueves 17 de diciembre a las 9:0 h o el sábado 19 a las 12 h.

35

Cuestiones

Si quieres saber más…Lee el blog Profesor 3. 0

http://profesor3punto0.blogspot.com.es/

O sigue a @alfredoprietoma en twitter

Alfredo Prieto

Alfredo.prieto@uah.es