Rul, J. (2008):...
Transcript of Rul, J. (2008):...
Rul, J. (2008): Evaluación-decisión
Evaluar y decidirEvaluar y decidir“evaluar para mejorar”“evaluar para mejorar”
“la evaluación “llave” para la mejora”“la evaluación “llave” para la mejora”“saber y actuar”“saber y actuar”
“conocer y decidir mejor”“conocer y decidir mejor”Evaluar para mejorar Evaluar para mejorar “saber para decidir”“saber para decidir”
Jesús Jesús RulRul
Rul, J. (2008): Evaluación-decisión
SUMARIOSUMARIO
La función cognoscitiva de la La función cognoscitiva de la evaluaciónevaluación
1. Aproximación a la evaluación como actividad humana
2. La “función evaluativa”. El núcleo de la evaluación y los problemas: acepción, función, evaluabilidad
ConocimientoConocimiento y decisiy decisióónn3. Los temas relevantes de la educaci3. Los temas relevantes de la educacióónn
4. Evaluaci4. Evaluacióón y decisin y decisióón (cambio)n (cambio)
Rul, J. (2008): Evaluación-decisión
11Aproximación a la evaluación
como actividad:
“hechos y significadoshechos y significados”cuento de los 3 sabios ciegos: “elefante”.
columna-serpiente-lanza
LA FUNCIÓN COGNOSCITIVA DE LA EVALUACIÓN
Rul, J. (2008): Evaluación-decisión
La evaluación versa sobre “significados valorativos atribuidos a hechos”
HECHOS
Funciones designificación
Estrategias, técnicasde atribución valor
--ValoraciónValoraciónSentido-opinión--Medición Medición datos--ComprensiónComprensiónSaber-experiencia--EvaluaciónEvaluaciónInformación-juicio
ObservaciónExperienciaPruebaComunicación
Significados
--Contexto familiar y Contexto familiar y socioculturalsociocultural
Educación: hechos relevantesEducación: hechos relevantes
--Modelo y tradición Modelo y tradición administrativaadministrativa
--“Dispositivo de enseñanza”:“Dispositivo de enseñanza”:Currículum, organización, docencia
--“Calidad” y “nivel” alumnos“Calidad” y “nivel” alumnos
“funciones significantes”
actores
Rul, J. (2008): Evaluación-decisión
Funciones de significaciónFunciones de significaciónMEDICIÓNMEDICIÓN. Es determinar la cantidad de una magnitud por comparación con otra que se toma como unidad o patrón (datos)
VALORACIÓNVALORACIÓN. Es el juicio que aprecia o determina el valor de algo (opinión, creencia, suposición)
EVALUACIÓNEVALUACIÓN. Es el juicio que se crea o construyesobre hechos o fenómenos, basado en información objetivada (datos) y en valoraciones contrastadas(opinión)
COMPRENSIÓNCOMPRENSIÓN. Facultad, capacidad o perspicacia para entender o penetrar las cosas. Entender, alcanzar, penetrar
Rul, J. (2008): Evaluación-decisión
EL NÚCLEO DE LA EVALUACIÓNEL NÚCLEO DE LA EVALUACIÓN: :
OBJETOOBJETO
DATOSINFORMACIÓN
SIGNIFICIÓN(juicio de valor)
1. Selección de “objetos relevantes”
2. Obtener datos e información rigurosa y plural
3. Atribuir significación a la información (juicios ponderados)
Rul, J. (2008): Evaluación-decisión
Evaluación (modelo): 4 factores Evaluación (modelo): 4 factores y 2 movimientosy 2 movimientos
SUJETOevaluador,
participantes
OBJETOhecho, tema, contenido
VALORsignificación, sentido
FINESexplícitosimplícitos
Movimiento 1: Subjetivo.Juicio valorativo
(Valores apriorísticos)
Movimiento 2: Objetivo.Juicio evaluativo
(valores fundamentados)
Rul, J. (2008): Evaluación-decisión
1.1.Concepto de Evaluación: Concepto de Evaluación: aproximación descriptivaaproximación descriptiva
“Proceso sistemático de atribución de juicios de juicios de valorvalor (significados) a determinados objetosobjetos(datos e información), , estratégicamente seleccionados, como consecuencia de las acciones subjetivosubjetivo--objetivas objetivas realizadas por los agentes evaluadores en un contexto específico, con arreglo a finesfines de conocimiento, orientación decisional y creación cultural”(Rul, 1995)
Ejemplos: diagnóstico médico, probación jurídica
Rul, J. (2008): Evaluación-decisión
Adquirir SABER: SABER: Significación, visión, perspectivaSignificación, visión, perspectiva:
EstratEstrateegigiaass- IntuicióIntuiciónn (experi(experieenciancia lúcidalúcida))- MetodologMetodologíasías diagndiagnóóstisticacas y prons y pronóóstisticacass::
a. Proceso diagnóstico escolar: “PDE”b. Modelo análisis sistémico: “AG5+3”, “NIC”
c. Método “Delphi”
-Metodologías de medición y evaluación:a. Producción: “pruebas”, “modelos acreditación”b. Aprendizaje: “GE-Rs”, Modelos Stake...
Rul, J. (2008): Evaluación-decisión
33Los problemas de la evaluación: acepción, función, evaluabilidad
LA “FUNCIÓN EVALUATIVA”
Rul, J. (2008): Evaluación-decisión
EvaluaciEvaluacióón: el problema de n: el problema de la la ““acepciacepcióónn””
ImprecisiImprecisióón y confusin y confusióón conceptualn conceptual: : valoracivaloracióón, medicin, medicióón, comprensin, comprensióón, evaluacin, evaluacióón.n.Expectativas desproporcionadasExpectativas desproporcionadas: asimetr: asimetríía a entre hechos y significados; y entre modelos y entre hechos y significados; y entre modelos y resultados.resultados.
Rul, J. (2008): Evaluación-decisión
EvaluaciónEvaluación: : el problema el problema de la “de la “funciónfunción””
• Siglo XX dos tendencias: ““positivistapositivista”” y “humanistahumanista””. L. Lucha de paradigmas y metodologías
• Siglo XXI: se mantienen las tendencias, pero la luchaestá centrada en la función:
Función de producción. Interés en los resultados. Metáforas: “caja negra” (mecánico)
Función de conocimiento (aprendizaje). Interés en el saber práctico. Metáforas: “organismo” (sistema).
Rul, J. (2008): Evaluación-decisión
MODELOS ESTADÍSTICOSEstandarización Estandarización ::
•Mediciones •Opiniones
MODELOS ACREDITATIVOSNormalización: Normalización:
(prestigio, pertenencia)•Mediciones •Opiniones
MODELOS COMPRENSIVOSComprensión:Comprensión:•Comunicación
•Experiencia
MODELOS GENERATIVOS
Aprendizaje:Aprendizaje: (conocimiento)•Información auténtica
•Juicio ponderado
Función:Función:CuantitativaCuantitativa
Valor:Valor:ObjetividadObjetividad
Función:Función:CualitativaCualitativa
Valor:Valor:SubjetividadSubjetividad
Función:Función:SancionadoraSancionadora
Valor:Valor:ReconocimientoReconocimiento
Función:Función:CognoscitivaCognoscitiva
Valor:Valor:SaberSaber
producción
conocimiento
Rul, J. (2008): Evaluación-decisión
Evaluación: el problema de Evaluación: el problema de la “evaluabilidad”la “evaluabilidad”
ESCEPTICISMO.ESCEPTICISMO. No es posible ir más allá del subjetivismo de la opinión. Función: juego opiniones
ACREDITACIONISMO.ACREDITACIONISMO. La posición y prestigio de determinadas personas determina la realidad de las cosas, su valor y adecuación. Función: sanción
DEMARCACIONISMO.DEMARCACIONISMO. Es posible si, y sólo si, se ajusta a criterios que hay que especificar a priori (demarcación). Función: juicio cualificado (fundado en datos e información objetivada)
Rul, J. (2008): Evaluación-decisión
El problema de la “demarcacióndemarcación”1Toda demarcación presupone la posibilidad de
normas universales, en el “tercer mundo *”, de verdad lógica y de inferencia lógicamente válida
Demarcar permite distinguir entre evaluación y no-evaluación o pseudoevaluación.
Los productos del conocimiento pueden ser evaluados y comparados sobre la base de criterios universales
Primer mundo: mundo físicoSegundo mundo: mundo de la conciencia, estados mentales, creenciasTercer mundo: mundo de las ideas, de la lógica, del espíritu objetivo (Popper, 1972)
Rul, J. (2008): Evaluación-decisión
El problema de la “demarcacióndemarcación”2Lo específico de la evaluación como acción es
(demarcación):
a. Generación de información objetivada sobre determinados objetos evaluables, esto es, descriptibles
b. Atribución de juicios ajustados a la información inmediata generada en el proceso evaluativo a partir del conocimiento disponible sobre el objeto (información mediata)
Ejemplos de evaluación son el diagnóstico en Medicina y la probación en Derecho
Rul, J. (2008): Evaluación-decisión
El problema de la “demarcacióndemarcación”3
La función clave de la evaluación es de “conocimientoconocimiento--juiciojuicio”:
a. Incrementar el conocimiento práctico sobre la realidad evaluada: saber adquirido a resultas de la evaluación
b. Atribución de valores ajustados que aporten sentido al conocimiento disponible: juicio evaluativo y propuestas de acción.
Las funciones derivadas son: - Orientar las decisiones personales y grupales a
partir del aprendizaje suscitado por la evaluación- Crear y/o reafirmar valores compartidos
Rul, J. (2008): Evaluación-decisión
OBJETO
ConocimientoMediato
CIENCIAEVALUACIÓN
ConocimientoInmediato(concreto)
SignificaciónSignificacióndescriptivadescriptiva
Valoración
Juicios de valor
(adecuados al conocimiento concreto)
Significación Significación valorativavalorativa
Rul, J. (2008): Evaluación-decisión
Evaluación: juicios de valorEvaluación: juicios de valor
JUICIO VALORATIVOJUICIO VALORATIVO: Es una opinión o creencia sobre cualquier tema basada en la experiencia con una gran carga de subjetividad (visión personal)
JUICIO EVALUATIVOJUICIO EVALUATIVO: Es una opinión sobre un hecho basada en información objetivada y plural (opinión cualificada)
Rul, J. (2008): Evaluación-decisión
problema de la “evaluabilidadevaluabilidad””
EscepticismoEscepticismo
AcreditacionismoAcreditacionismo DemarcacionismoDemarcacionismo
Plano Epistemológico
(lógica)
Plano Fenomenológico
(hechos)
problema de la “funciónfunción””
medirmedir valorarvalorar comprendercomprender evaluarevaluar
Rul, J. (2008): Evaluación-decisión
RESUMEN de la “función evaluadora de la educación”RESUMEN de la “función evaluadora de la educación”
-La evaluación es un potente recurso de regulación y conocimiento, pese a la precariedad de las experiencias existentes
-Evaluar la educación es complejo: las pruebas externas dan una foto fija con muchas sombras; las estadísticas de opinión suscitan un interés cambiante y, por ello, efímero; crear conocimiento y juicio ponderado sobre aspectos relevantes del sistema es costoso
-Hay que distinguir entre acciones de “medición”, de “valoración” y de “evaluación” propiamente dicha. En sentido estricto, los órganos evaluadores son los docentes, los centros educativos y la Inspección, siempre que relacionen “conocimiento y juicio”
-Dotarse de una red por la que circule información y conocimiento sobre el sistema educativo es la meta. Los actores clave de esta red, con papeles distintos, son: los Centros educativos, la Inspección y otros organismos como institutos y organismos internacionales
Rul, J. (2008): Evaluación-decisión
11Los temas relevantes en
educación:
a.Mejora nivel y calidad alumnos
b.Logro objetivos educativos
CONOCIMIENTO Y DECISIÓN
Rul, J. (2008): Evaluación-decisión
Logro Objetivos
Calidad y nivel
alumnos
Investigación y consulta
Programa de estudios
Clima del centre
Calidad y nivel
docentes
Dirección institución
Adquisición y gestión
recursos
Prestigio institución
Apertura y relaciones
Rul, J. (2008): Evaluación-decisión
FACTORFACTOREES INSTITUCIONALS INSTITUCIONALEES BS BÁÁSICSICOOS DES DE LLOOS S CENTRCENTROOS EDUCATIS EDUCATIVOVOSS
1.1. DesDesarrollo arrollo institucionalinstitucional: 1.1. Incidir en la “visióvisiónn” para acertar en la “misiómisiónn” (criteriode eficacia)
Centralidad del aprendizaje: lograr metas en el nivel ycalidad de los alumnos
Clima institucional saludable y centrado en el aprendizaje1.2. Incidir en los “recursosrecursos” para optimizar los “efectefectooss” (criterio de eficiencia)
Capacidad (competencias y autonomía), liderazgo, estilo de gestión
2. 2. DesDesarrollo arrollo humhumano yano y profesionalprofesional: : 2.1. Incidir en el “capital humcapital humanoano” para optimizar las
respuestas y las sinergias: investigación, capacitación, asesoramiento
Programa de estudios: creación de oferta formativa adaptada y exitosa
Incentivación, prestigio social y capacitación de los docentes
Rul, J. (2008): Evaluación-decisión
CULTURA DEL CAMBIO: dimensionesCULTURA DEL CAMBIO: dimensiones
EsferaEmocional
EsferaCognoscitiva
Esfera Operativa
Esfera EstructuralCAMBIO
CONOCIMIENTOCONOCIMIENTO
ACTITUDESACTITUDES
RREECCUURRSSOOSS
PPRRAACCTTIICCAASS
Rul, J. (2008): Evaluación-decisión
“Acción de crear o modificar una determinada realidad específica”
INNOVACIÓNINNOVACIÓN:
INNOVARINNOVAR:“Proceso para la promoción de cambios
concretos como consecuencia de la acción intencional motivada por necesidades de
adaptación y/o de optimización”
GESTIÓN DE LA INNOVACIÓN GESTIÓN DE LA INNOVACIÓN CONCEPTOCONCEPTO
Rul, J. (2008): Evaluación-decisión
DIFERENCIACIÓNDIFERENCIACIÓN
REFORMA.REFORMA. Es un cambio a gran escala que integra diversos ámbitos
interrelacionados de una determinada la realidad
CAMBIO. CAMBIO. Es una estrategia de acción humana orientada a la transformación de
determinadas realidades por inadecuación al entorno (adaptación) o por una expectativa
de mejora (calidad)
INNOVACIÓN.INNOVACIÓN. Es un cambio concreto a escala media y pequeña que procura generar
mejoras tangibles, en la acción personal, profesional e institucional
Rul, J. (2008): Evaluación-decisión
INNOVACIÓNINNOVACIÓN: FUNCIÓN Y FUNCIONES
FUNCIÓN:
--Transformadora en la Transformadora en la dimensiódimensió fenoménica fenoménica ((conductesconductes, , realitzacionsrealitzacions) y axiológica (valores, ) y axiológica (valores, intereses, implicaciónintereses, implicación) )
FUNCIONES:
--”Visión” de la realidad que promueve una “misión””Visión” de la realidad que promueve una “misión”
--Integración de esfuerzos y recursos en la acciónIntegración de esfuerzos y recursos en la acción
--Lograr experiencia de mejora: “Lograr experiencia de mejora: “funciona mejor”, funciona mejor”, “es efectivo”, “satisface”, “crea sinergias” ...“es efectivo”, “satisface”, “crea sinergias” ...
Rul, J. (2008): Evaluación-decisión
ETAPAS PROCESO CAMBIO
1. Iniciación. Estudios, promotores
2. Difusión. Información, comunicación
3. Adopción. Participación, compromiso
4. Implementación. Gestión: planificación,
seguimiento, control
5. Institucionalización. Integración organizativa
(modificación funcional)
Rul, J. (2008): Evaluación-decisión
Situación A:INSTITUCIÓN EDUCATIVA
>Global>Específica
Situación B:INSTITUCIÓN EDUCATIVA
>Global>Específica
CambioCambio
Estrategias (visión logro)
-Intuición (experiencia lúcida)
-Diagnósticos (valoración)
-Medición (pruebas)
-Evaluación (saber concreto)
Gestión del cambio:
-Proyecto (criterios de selección)-Promotores-Recursos implicados-Etapas
Rul, J. (2008): Evaluación-decisión
-El cambio debe ser estratégico:El cambio debe ser estratégico:
• Selección núcleos sinérgicos
• Equilibrio energético: energía en uso, energía adicional cambio
--El cambio debe ser efectivo:El cambio debe ser efectivo:
• Eficacia: logro de metas, institucionalización
• Eficiencia. Relación metas / recursos implicados:
>Sucede a distintos niveles: operativo, tecnológico, volitivo y
actitudinal
>Modulado en el tiempo: gestión de la eficacia y satisfacción
CRITERIOS BÁSICOS DE GESTIÓN DEL CAMBIOCRITERIOS BÁSICOS DE GESTIÓN DEL CAMBIO