Taller de Evaluación y Redacción de Pruebas

Preparado por Wilfredo Soto

I. SaludosII. Reflexión y técnica rompehieloIII. Definición de Términos

MediciónAssessmentEvaluación

IV. Algunas Técnicas de AssessmentV. Semejanzas y diferencias entre los conceptos: Medición, Assessment y EvaluaciónVI. Tipos de Evaluación

ObjetivasSubjetivas

Agenda

VII. Redacción de Ejercicios- Ventajas y Desventajas

1. Pareo2. Cierto o Falso3. Selección Múltiple4. Preguntas de respuesta corta5. Preguntas de respuesta abierta

VIII. Ejercicios de AplicaciónIX. Evaluación de la Actividad

Define los siguientes conceptos:Medición

Evaluación

Assessment

Pruebas

Medición

Es un procedimiento a través del cual se obtiene un descripción cuantitativa, con referencia a un patrón determinado, del comportamiento de un fenómeno educativo.La medición describe cuantitativamente el grado de dominio de un estudiante en una asignatura; no incluye descripciones cualitativas ni conlleva el hace juicios relativos al valor de la conducta medida.

La medición es parte del “assessment”. Es la obtención de una expresión nύmerica que refleja el grado en que el estudiante ha desarrollado sus dimensiones cognoscitivas, afectivas y psicomotoras.Para que resulte útil, los instrumentos y métodos utilizados en la medición deben ser confiables y válidos.

“Assessment” Procedimiento sistemático y comprensivo en el cual múltiples indicadores y fuentes de información son utilizados en la recopilación de datos con el propósito de mejorar la enseñanza y el aprendizaje.Provee información sobre:

* Qué y cuánto están aprendiendo los estudiantes* Cuán bien los programas, las

escuelas están logrando sus objetivos.

Influye en lo que los administradores hacen, los maestros enseñan, en lo que hacen los estudiantes y en lo que se convertirán.El proceso de “assessment”por su naturaleza precede al de evaluación.

Evaluación es un proceso sitemático, continuo, cíclico e integral destinado a determinar, a través de una pluralidad de medios, el estado de logros de las metas previamente establecidas. La información que se obtiene a través de este proceso permite comprender mejor lo que ocurre y sirve de base para la toma de decisiones que contribuyan a mantener, eliminar o mejorar un sistema.Esto es,”un proceso para describir (cualitativa y cuantitativamente) y determinar el valor de algo”.(College Assessment Planning Act)

Evaluación, cont.El proceso evaluativo está al servicio de una toma de decisiones, ello implica el carácter instrumental de la evaluación, es un medio para un fin.Toda evaluación implica un juicio de valor sobre el objetivo evaluado y por consiguiente, un criterio de comparación. Estos dos componentes son los elementos medulares del proceso educativo.La evaluación es un proceso sistemático, no improvisado, en el cual pueden distinguirse cuatro pasos fundamentales:1. Especificar la decisiones que se quieren tomar una vez se obtengan los resultados. De igual forma, hay que especificar los criterios que servirán para emitir los juicios valorativos.2. Recopilar la información.3. Comparar la información recopilada con el criterio establecido y emitir un juicio sobre el objeto evaluado.4. Tomar decisiones.

El proceso de evaluación conlleva:

Recoger datos sobre componentes y actividades de la enseñanza.Formular juicios valorativos a partir de los datos y en función de unos criterios predeterminados.Tomar decisiones.

En resumen:La evaluación nos permite interpretar, hacer juicios y tomar decisiones firmes y objetivas a base de los datos provistos por la medición (cuantifica estadísticamente) y el “assessment” (recopila datos cuantitativos y cualitativos).

El examen objetivoTodos los formatos de exámenes objetivos se

dividen en dos clases:Tipo suministro- La respuesta cortaTipo selección- cierto o falso, pareo, selección múltiple

Una de las virtudes del item objetivo es que es una forma económica de obtener información de los estudiantes porque toma menos tiempo contestar una prueba objetiva que una prueba de ensayo.

Sugerencias para la contrucción de exámenes objetivos

1. Examine para medir resultados importantes del aprendizaje.

2. Construya preguntas que esten de acuerdo con la edad y habilidades de los estudiantes, así como de los propósitos del examen.

3. Escriba los ítemes de manera clara. La ambiguedad es una de las debilidades de los ítemes objetivos.

4. Utilizar números simples si el propósito del item es medir más el procedimiento que el computo.

5. Evite copiar oraciones directamente del libro.

6. Evite utilizar ítemes interrelacionados. 7. Debe haber una respuesta o alternativa

correcta. 8. Evite las preguntas negativas. 9. Evite un patrón para tener la respuesta

correcta.10.Realice una revisión independiente del

examen.

Sugerencias para elaborar los ejercicios de Cierto o falso

Incluya enunciados que puedan juzgarse claramente como ciertos o falsos.Evite el uso de palabras claves que sugieren la contestación (ejs. Usualmente, generalmente, siempre, nunca, todo, sólo)No incluya información trivial.No use aseveraciones negativas.Incluya oraciones simples y cortas.Incluya una sóla idea en cada oración, a menos que pretenda medir relaciones de causa y efecto.

Si considera importante incluir ciertas opiniones, debe indicar su fuente.Asegúrese de que los enunciados positivos y negativos tienen un extensión similar.Incluya un número aproximadamente igual de oraciones ciertas y de oraciones falsas.Evite el uso de patrones de respuestas.

Itemes de selección múltiple

Este tipo de item es considerado el mejor,más versátil y más valioso. Son ampliamente adaptados a diferentes materias y pueden ser utilizados para medir el aprendizaje de memoria, como destrezas complejas.

Tiene varias formas, como una pregunta seguida de posibles complementos, una aseveración seguida de posibles respuestas. La pregunta, aseveración u oración incompleta se conoce como la raíz. Las posibles respuestas se conocen como alternativas o distractores. En escuela elemental 3 o 4 alternativas son aceptables. En niveles superiores las alternativas deben ser 4 o 5.

Los términos que se utilizan en los ítemes de selección múltiple son:

Clave- la contestación correctaDistractores- las contestaciones

incorrectas

Ventajas

1. Se presta para medir conocimiento, comprensión, inferencias, evaluaciones, vocabulario, aplicación de principios, interpretación, ubicación geográfica y otros.

2. Reduce grandemente la posibilidad de adivinar si se usan suficientes alternativas.

3. Se puede probar gran cantidad de material en poco tiempo.

4. Se puede corregir fácilmente, con rapidez y objetividad.

Desventajas

1. Como todos los tipos de ítems objetivos, puede hacer énfasis en la memoria.

2. Penaliza al lector lento.3. Es difícil contribuir ítems de selección

múltiple.

Usos de los ítemes de selección múltiple

El ítem de selección múltiple se puede usar para medir los resultados del conocimiento y varios tipos de capacidad intelectual.

La amplia aplicabilidad del ítem de selección múltiple se puede demostrar mejor ilustrando ciertos tipos de pregunta que es posible hacer una de las áreas del conocimiento.

Conocimiento en terminología¿Qué palabra significa lo mismo que…?¿Qué enunciado define mejor el término…?En el siguiente contexto, ¿qué significa la

palabra…?

Conocimiento de hechos específicos

¿Dónde se encuentra….?¿En que año ocurrió…?¿Quién descubrió…?¿Cómo se llama el…?

Conocimiento de tendencias y secuencias¿Cuál de los siguients enunciados describe mejor

la presente tendencia de…?¿Cuáll es la causa más importante de…?¿Cuál sería el efecto de …?¿Cuál de las siguientes secuencias indica el orden

adecuado de…?

Conocimiento de clasificaciones y categorías¿Cuáles son los principales tipos de…?¿Cuáles son las clasificaciones más importantes de..?¿Cuáles son las características de…?¿Cómo clasificaría…?

Conocimiento de Criterio¿Cuál de los siguientes criterios sirve para juzgar…?¿Qué criterios usó para juzgar…?¿Cuál es el criterio más importante para seleccionar…?

Conocimiento de metodologías

¿Qué método se usa para…?¿Cuál es la mejor manera de …?¿Cuál sería el primer paso para hacer…?

Conocimiento de principios y generalizaciones

¿Qué enunciado expresa mejor el principio de…?

¿Qué enunciado resume mejor el concepto de…?

¿Cuál de los siguientes principios explica mejor…?

Conocimientos de Teoría y Estructuras

¿Cuál enunciado es más consistente con la teroría de…?

¿Cuál es la mejor prueba de la teoría…?¿Qué principios son esenciales en la teoría

de…?

Naturalmente, las preguntas anteriores proporcionan solo un muestra de las muchas preguntas que se podrían hacer en cada área. Las oraciones(pies) para los ítemes de selección múltiple relativos a materias específicas tienden a utilizar un lenguaje relacionado más directamente con el tema en particular.

Sugerencias para la contrucción de ítemes de selección múltiple

1. Elabore cada ítems para medir un resultado importante del aprendizaje.

2. La raíz del ítem debe ser significativa por sí misma y presentar un problema definido.

3. Escriba la raíz del ítem en lenguaje claro y sencillo.

4. Incluya en la raíz del ítem los elementos que sean más comunes en todas las alternativas.

5. Utilice los enunciados negativos solamente cuando los resultados importantes del aprendizaje lo requieran.

6. Haga hincapié en la construcción negativa siempre que la utilice en la raíz del ítem.

7. Asegúrese que la respuesta que se pretende es la correcta o, claramente la mejor.

8. Haga que todas las opciones sean gramaticalmente consistentes con la raíz del ítem.

9. Evite claves que permitan a los estudiantes seleccionar la respuesta correcta o eliminar una opción incorrecta.a. La similitud de la redacción del pie y de la respuesta correcta.

b. Enunciar la respuesta correcta en el lenguaje del libro de texto.c. Enunciar la respuesta correcta más detalladamente.d. Incluir dos respuestas que tengan el mismo significado.

10. Haga que las respuestas de distracción aparezcan como posibles atractivos para el estudiante poco informado.

a. Usar los conceptos equivocados de los estudiantes o sus errores comunes.

b. Redactar las opciones en el lenguaje del estudiante.c. Usar palabras que suene bien (preciso, importante) tanto en el distractor como en la correcta.d. Construir los distractores similares a la correcta, tanto en longitud como en complejidad.

11. Evite el uso de la opción “todas las anteriores”y ninguna de las anteriores.

12. Varie al azar la posición de la respuesta correcta.

Pareo

Definición:El ejercicio de correspondencia o pareo

consiste en dos columnas paralelas, en las que las palabras, números o símbolos de una columna van a parear con una palabra, frase u oración de la otra columna. Los ítemes de la columna en la que la correspondencia es buscada son llamadas premisas y los ítemes de la columna de la cual se hace la selección son llamadas respuestas.

Usos:El pareo se utiliza para hacer las siguientes

relaciones:Personas -----------------LogrosFechas--------------------Eventos históricosTérminos-----------------DefinicionesReglas -------------------SímbolosSímbolos-----------------ConceptosAutores-------------------Títulos de librosMáquinas-----------------UsosPlantas o Animales------Clasificaciones

Principios-----------------IlustracionesObjetos-------------------Nomnbres de

ObjetosPartes---------------------Funciones

Ventajas de los ítemes de pareo1. Requieren poco tiempo en lectura.2. Pueden ser corregidos por una máquina3. Hace posible medir gran cantidad de

material.4. Es fácil de construir.5. Se presta para medir conocimientos sobre

quién, qué, cuándo y donde.

Desventajas1. Es limitado para la medición de hechos

basados en un aprendizaje de memoria.2. Es díficil encontrar material homogéneo.3. Es ineficaz para medir niveles altos de

aprendizaje.

Sugerencias para redactarlos

1. La lista de respuesta debe consistir de frases cortas, palabras o números.

2. Cada ejercicio debe consistir de ítemes homogeneos.

3. Mantenga cada lista relativamente corta.4. Organice las respuestas de una forma

sistemática.5. Evite dar claves externas irrelevantes.6. Explique los fundamentos en los que el

pareo fue hecho.7. Evite tener el mismo número de premisas y

respuestas.8. Mantenga consistencia gramatical.9. Redacte de manera que todo quede en una

cara del papel.

Pregunta de respuesta extendida o abierta

Es aquella que permite al estudiante seleccionar la información que juzga pertinente para la respuesta, organizarla de acuerdo con su mejor juicio e integrar y evaluar las ideas que incluirá en la misma.

Ejemplo: Describa la influencia de la Teoría de la evolución de la especies en el desarrollo de la psicología como ciencia.

Sugerencias para preparar las preguntas tipo ensayo

1. Limite este tipo de pregunta a los logros complejos, esto es, aquellos que incluyen la organización, integración y expresión del conocimiento.

2. Decida si la pregunta será de respuesta restringida o respuesta extendida(abierta).

3. Redacte la pregunta en forma clara de modo que el estudiante sepa la tarea que realizará.

4. Indique el tiempo límite aproximado que el estudiante debe dedicar a cada pregunta y el número máximo de puntos que se le otorgará a la respuesta.

Sugerencias para preparar ítemes de contestación breve

1. Asegúrese de que estos ítemes puedan contestarse con una palabra, una frase corta, un número u otro símbolo.

2. Evite usar oraciones textuales de libros o artículos.

3. Indique el grado de precisión y las unidades que se espera en las respuestas a los ítemes cuantitativos.

4. Redacte el ítem en tal forma que solo una contestación sea correcta.

5. Presente los blancos para las respuestas con igual longitud.

6. Incluya blancos de oraciones incompletas al final de éstas.

ÁSSESSMENT’Procediemiento sitemático y comprensivo

mediante el cual se recopila informacin a través de diferentes tcnicas y medios para determinar el nivel de efectividad del proceso enseñanza aprendizaje.

A través del assessment el maestro se asegura de saber qu aprende el estudiante, cómo lo aprende y si sus métodos y estratégias de enseñanza son adecuados para lograr un aprendizaje auténtico.

Es la programación de diversas actividades en que se aplican técnicas sencillas y estratégias con la cuales recopila información que indica cuán bien están los estudiantes y si están aprendiendo lo que se les enseña.Se fundamenta en la teoría del Constructivismo y de los Estilos de Aprendizaje.También se fundamenta en la motivación, el esfuerzo y la autoestima, teoría humanista.Desde la perspectiva filosófica, se ha comprobado que las personas se desempeñan mejor cuando conocen sus metas y saben cómo su ejecución compara con unos estándares y criterios debidamente establecidos.

Principios del Proceso de “Assessment”

Proceso múltiple y variado que, integrado al proceso enseñanza-aprendizaje, permite establecer un control de calidad en forma progresiva en el desarrollo de los estudiantes.Un proceso de autoanálisis y juicio crítico en que se integran la medición, el “Assessment”y la evaluación.Un medio de retroalimentación que permite un proceso social colaborativo del aprendizaje.

El proceso de enseñanza es uno colaborativo. Este se da entre el maestro y alumno, sino entre alumno y alumno.

El “Assessment”es un proceso múltiple, variado y progresivo de desarrollo del aprendizaje de los estudiantes que se integra al mismo proceso enseñanza-aprendizaje. Es un proceso participativo entre maestros y estudiantes.

Utilidad del “Assessment”

Al estudiante:1. Identificar áreas en las que están rezagados.2. Propiciar una retroalimentación en el proceso de aprendizaje de tal modo que puedan reflexionar en cuanto a su progreso.

Al maestro:1. Reflexionar respecto a dónde están y hacia donde van en términos de los objetivos del curso.2. Evidenciar entre lo que se quiere lograr(objetivos) y lo que se hace(producto).3. Promover la investigación en el proceso educativo para poder hacer cambios y fomentar la variedad de estratégias de enseñanza.

Técnicas de Assessment

Técnica de la preguntaSe utiliza para comprobar el nivel de conocimiento alcanzado por los alumnos una vez realizada una tarea o lección.

Las preguntas varían de acuerdo a los aspectos del conocimiento que se desea evaluar.

La pregunta se utiliza para:1. Repasar datos de lecciones de clases o

lecturas asignadas.

2. Diagnosticar aprendizajes previos en los estudiantes.

3. Dar seguimiento al aprendizaje de los estudiantes(assessment).

4. Ayudar a organizar e interpretar información de los estudiantes.

5. Promover el dialogo y la interacción entre maestros y estudiantes.

6. Enfatizar puntos o áreas importantes durante lecciones de clase.

7. Fomentar el desarrollo de destrezas complejas de pensamiento, como son el análisis, la síntesis y la evaluación.

Tipos de Preguntas

Preguntas cerradas

De cognición-memoria

Convergentes

(Weirgend, J. 1971)

Preguntas Abiertas

Divergentes

Evaluativas

Cuerpo para llevar vida.

Ejemplo 2:Soy símbolo de interrogación. Me destaco por ser magno representante de la pregunta. Soy curvo y me acompaña un punto. Soy el primero y el último.

Ejercicio:Redacte un monólogo con un tema de su

clase.