Indicadores educativos, su significado y la importancia de su sustento teórico-conceptual

77
Indicadores educativos, su significado y la importancia de su sustento teórico- conceptual 1ª sesión presencial 8 de octubre, 2011 María Adriana Dander Flores

description

Indicadores educativos, su significado y la importancia de su sustento teórico-conceptual. 1ª sesión presencial 8 de octubre, 2011 María Adriana Dander Flores. Contenido. Comentarios sobre las lecturas de la actividad previa Metodología para el diseño de un sistema de indicadores - PowerPoint PPT Presentation

Transcript of Indicadores educativos, su significado y la importancia de su sustento teórico-conceptual

Page 1: Indicadores educativos, su significado y la importancia de su sustento teórico-conceptual

Indicadores educativos, su significado y la importancia de su sustento teórico-conceptual

1ª sesión presencial 8 de octubre, 2011

María Adriana Dander Flores

Page 2: Indicadores educativos, su significado y la importancia de su sustento teórico-conceptual

Contenido

•Comentarios sobre las lecturas de la actividad previa

•Metodología para el diseño de un sistema de indicadores

•Concepto de indicador y su evolución

•Actividad de cierre

Page 3: Indicadores educativos, su significado y la importancia de su sustento teórico-conceptual
Page 4: Indicadores educativos, su significado y la importancia de su sustento teórico-conceptual

Aspectos a destacar CONCLUSIONES

• Crear y mantener marcos muestrales

• Diseño de encuestas, colección y análisis de datos

• Desarrollo de la capacidad técnica y profesional para mantener y desarrollar sistemas de indicadores de acuerdo con determinados estándares

Page 5: Indicadores educativos, su significado y la importancia de su sustento teórico-conceptual

•Desarrollar la capacidad analítica

•Uso eficiente de los recursos disponibles

Page 6: Indicadores educativos, su significado y la importancia de su sustento teórico-conceptual
Page 7: Indicadores educativos, su significado y la importancia de su sustento teórico-conceptual

Aspectos destacados

•Redes

•Grupo técnico

Page 8: Indicadores educativos, su significado y la importancia de su sustento teórico-conceptual
Page 9: Indicadores educativos, su significado y la importancia de su sustento teórico-conceptual

Aspecto destacado

•Proceso de medición de los aspectos sociales

Page 10: Indicadores educativos, su significado y la importancia de su sustento teórico-conceptual

El diseño de sistemas de indicadores: consideraciones teórico - metodológicas

Cuadernos de investigación del Instituto Nacional para la Evaluación de la

Educación (INEE)

Page 11: Indicadores educativos, su significado y la importancia de su sustento teórico-conceptual

¿Qué es el INEE?

• Organismo público descentralizado, de carácter técnico cuyo objeto es desarrollar y ofrecer herramientas a las autoridades educativas para efectuar la evaluación de los subsistemas educativos de educación básica y media superior (Arts. 1 y 2 del decreto de creación del 8 de agosto de 2002).▫ Colabora con la SEP en materia de evaluación del

SEN y en la fijación de lineamientos con los cuales las autoridades locales evalúan a sus sistemas educativos locales.

Page 12: Indicadores educativos, su significado y la importancia de su sustento teórico-conceptual

Misión del INEE

MISIÓNContribuir a la mejora de la educación a través de la evaluación

de la calidad del sistema educativo.Difusión transparente y oportuna de resultados para toma de

decisiones, la mejora pedagógica en las escuelas y la rendición de cuentas.

• Desarrolla herramientas que permiten a los actores sociales evaluar a los sistemas de educación básica y media superior.

Colabora con SEP en la evaluación del SEN Evalúa externamente al Sistema Educativo Nacional (SEN). Comprometido con altos estándares metodológicos y técnicos. Independencia técnica.

Page 13: Indicadores educativos, su significado y la importancia de su sustento teórico-conceptual

Tareas del INEE

1. Evaluaciones de aprendizajes: proyectos nacionales e internacionales▫ EXCALE 3º de preescolar, 3º y 6º de

primaria y 3º de secundaria y último nivel de educación media superior

▫ PISA, LLECE2. Evaluación de condiciones de la oferta

educativa: recursos y procesos de las escuelas

3. Integración de resultados en Sistema de Indicadores

4. Difusión y diseminación de resultados

Page 14: Indicadores educativos, su significado y la importancia de su sustento teórico-conceptual

Aportaciones principales

• Informes anuales sobre el estado que guarda la educación básica y media superior en México.

•A partir de 2005, el INEE desarrolla sus propias pruebas de evaluación del logro (Exámenes para la calidad y el logro educativos, Excale)▫Excale 12 evalúa ….

•Construcción de un SIE de EB y EMS.▫Banco de Indicadores Educativos (BIE, ver

www.inee.edu.mx).

Page 15: Indicadores educativos, su significado y la importancia de su sustento teórico-conceptual

•Realiza evaluaciones de Recursos y procesos de las escuelas. En particular se han abordado la infraestructura, la violencia en las escuelas así como la práctica docente.

•Se han editado más de 200 publicaciones (ver www.inee.edu.mx).

•Ha editado más de 200 publicaciones (informes, reportes técnicos, materiales para maestros).

•Desarrolló explorador Excale y corpus Excale para escritura

Page 16: Indicadores educativos, su significado y la importancia de su sustento teórico-conceptual

Productos en materia de indicadores

Publicaciones anuales:

Panorama Educativo de México

Publicaciones ocasionales

Memorias

Sininde

Supervisión escolar en primarias

Consulta digital:

Banco de Indicadores Educativos

Tablas estadísticas (TEI)

Page 17: Indicadores educativos, su significado y la importancia de su sustento teórico-conceptual

METODOLOGÍA PARA DISEÑO DE UN SISTEMA DE INDICADORES

Primera Etapa. Elaboración del listado inicial de indicadores¨ Objetos empíricos. Más tangibles: personas,

instituciones, equipos, materiales; menos tangibles: currículo, normatividad, tradiciones, etc.

¨ Cada objeto empírico no puede aprehenderse en su totalidad; hay que seleccionar aspectos pertinentes, según el propósito: construir objetos teóricos

¨ El propósito del sistema de indicadores es evaluar la calidad educativa; es clave precisar la noción de calidad, para poder pasar del objeto empírico al teórico

METODOLOGÍA PARA DISEÑO DE UN SISTEMA DE INDICADORES

Primera Etapa. Elaboración del listado inicial de indicadores¨ Objetos empíricos. Más tangibles: personas,

instituciones, equipos, materiales; menos tangibles: currículo, normatividad, tradiciones, etc.

¨ Cada objeto empírico no puede aprehenderse en su totalidad; hay que seleccionar aspectos pertinentes, según el propósito: construir objetos teóricos

¨ El propósito del sistema de indicadores es evaluar la calidad educativa; es clave precisar la noción de calidad, para poder pasar del objeto empírico al teórico

Page 18: Indicadores educativos, su significado y la importancia de su sustento teórico-conceptual

¡Debe contarse con marco de referencia y conceptual!

Los sistemas de indicadores no deben diseñarse a partir de la información existente, sino del marco de referencia adoptado, aunque no se cuente desde el principio con información suficiente, y deba generarse después la que haga falta

¡Debe contarse con marco de referencia y conceptual!

Los sistemas de indicadores no deben diseñarse a partir de la información existente, sino del marco de referencia adoptado, aunque no se cuente desde el principio con información suficiente, y deba generarse después la que haga falta

Page 19: Indicadores educativos, su significado y la importancia de su sustento teórico-conceptual

Segunda Etapa. Desarrollo del listado inicial: fichas por indicador¨ Nombre, breve y claro

¨ Definición, con precisión y rigor conceptual

¨ Explicación, situando el indicador en un marco pertinente

¨ Fuentes de obtención de la información

¨ Fórmula de cálculo y criterios para su estimación.

¨ Desagregaciones posibles (género, entidad, modalidad…)

¨ Elementos para la interpretación de los resultados.

Segunda Etapa. Desarrollo del listado inicial: fichas por indicador¨ Nombre, breve y claro

¨ Definición, con precisión y rigor conceptual

¨ Explicación, situando el indicador en un marco pertinente

¨ Fuentes de obtención de la información

¨ Fórmula de cálculo y criterios para su estimación.

¨ Desagregaciones posibles (género, entidad, modalidad…)

¨ Elementos para la interpretación de los resultados.

Page 20: Indicadores educativos, su significado y la importancia de su sustento teórico-conceptual
Page 21: Indicadores educativos, su significado y la importancia de su sustento teórico-conceptual

Tercera Etapa. Jueceo inicial de los indicadores desarrollados

Cualidades técnicas• Validez es la capacidad del indicador de

medir lo que pretende de la realidad observada.

• Confiabilidad implica que la definición conceptual y operacional del indicador permite obtener mediciones consistentes con información equivalente en distintos momentos.

• Comparabilidad es la característica conceptual del indicador por la que abstrae rasgos centrales del objeto de estudio, independientemente del contexto donde éste se encuentre inmerso.

Tercera Etapa. Jueceo inicial de los indicadores desarrollados

Cualidades técnicas• Validez es la capacidad del indicador de

medir lo que pretende de la realidad observada.

• Confiabilidad implica que la definición conceptual y operacional del indicador permite obtener mediciones consistentes con información equivalente en distintos momentos.

• Comparabilidad es la característica conceptual del indicador por la que abstrae rasgos centrales del objeto de estudio, independientemente del contexto donde éste se encuentre inmerso.

Page 22: Indicadores educativos, su significado y la importancia de su sustento teórico-conceptual

• Estabilidad temporal es la propiedad metodológica del indicador que le permite para compararse consigo mismo de forma consistente a lo largo del tiempo.

• Sensibilidad es la cualidad para captar diferencias significativas entre varios objetos de estudio pertinentes.

Page 23: Indicadores educativos, su significado y la importancia de su sustento teórico-conceptual

Cualidades prácticas• Actualidad: se refiere a la vigencia de

información provista por las últimas mediciones.

• Factibilidad: es la posibilidad de disponer, en tiempo, forma y a un costo razonables, de la información necesaria para el cálculo del indicador.

• Importancia: es la cualidad del indicador de proveer información central del sistema educativo y su entorno o de sus componentes tanto sistémicos como de calidad, por sí mismo o en conjunto con otros indicadores.

Page 24: Indicadores educativos, su significado y la importancia de su sustento teórico-conceptual

• Utilidad: característica del indicador por la cual coadyuva a la toma de decisiones en el marco de las políticas públicas y a la rendición de cuentas transparentes para la sociedad.

• Claridad: es la capacidad para facilitar la comunicación e interpretación adecuada de lo que el indicador representa.

Page 25: Indicadores educativos, su significado y la importancia de su sustento teórico-conceptual

Cualidades del conjunto¨ Cobertura, si atiende todos los aspectos relevantes

¨ Balance, si lo hace en forma equilibrada

¨ Parsimonia, si tiene un número razonable de indicadores, ni excesivo ni escaso

Cualidades del conjunto¨ Cobertura, si atiende todos los aspectos relevantes

¨ Balance, si lo hace en forma equilibrada

¨ Parsimonia, si tiene un número razonable de indicadores, ni excesivo ni escaso

Page 26: Indicadores educativos, su significado y la importancia de su sustento teórico-conceptual

Proceso de jueceo de los indicadores

Page 27: Indicadores educativos, su significado y la importancia de su sustento teórico-conceptual

Jueces de 3 tipos para análisis a priori¨ Expertos, especialistas en los temas

cubiertos y en las fuentes de información

¨ Usuarios especializados, autoridades de nivel alto y medio con experiencia

¨ Usuarios de base, directores, maestros y padres de familia

Jueces de 3 tipos para análisis a priori¨ Expertos, especialistas en los temas

cubiertos y en las fuentes de información

¨ Usuarios especializados, autoridades de nivel alto y medio con experiencia

¨ Usuarios de base, directores, maestros y padres de familia

Page 28: Indicadores educativos, su significado y la importancia de su sustento teórico-conceptual

Jueceo. Tres vueltas (tipo delphi); en cada una se califica de 1 a 5:¨ 1ª Vuelta: opiniones sobre las cualidades (validez,

confiabilidad etc.) de cada indicador, a partir de nombre, definición, explicación, fuentes, fórmula, desagregaciones…

¨ 2ª Vuelta: nueva opinión teniendo información sobre opiniones de otros participantes; quienes tengan opiniones discrepantes darán argumentos para defender su posición.

¨ 3ª Vuelta: nuevas opiniones dando información de los argumentos de los participantes con opiniones extremas o discordantes en la vuelta anterior.

¨ Ocasionalmente puede realizarse un panel en la 2ª ó 3ª vuelta.

Jueceo. Tres vueltas (tipo delphi); en cada una se califica de 1 a 5:¨ 1ª Vuelta: opiniones sobre las cualidades (validez,

confiabilidad etc.) de cada indicador, a partir de nombre, definición, explicación, fuentes, fórmula, desagregaciones…

¨ 2ª Vuelta: nueva opinión teniendo información sobre opiniones de otros participantes; quienes tengan opiniones discrepantes darán argumentos para defender su posición.

¨ 3ª Vuelta: nuevas opiniones dando información de los argumentos de los participantes con opiniones extremas o discordantes en la vuelta anterior.

¨ Ocasionalmente puede realizarse un panel en la 2ª ó 3ª vuelta.

Page 29: Indicadores educativos, su significado y la importancia de su sustento teórico-conceptual

Más peso a opiniones de unos jueces en relación con ciertos criterios:

¨ Expertos más peso para criterios técnicos

¨ Usuarios especializados para factibilidad, importancia y utilidad

¨ Usuarios de base para sobre la claridad

Más peso a opiniones de unos jueces en relación con ciertos criterios:

¨ Expertos más peso para criterios técnicos

¨ Usuarios especializados para factibilidad, importancia y utilidad

¨ Usuarios de base para sobre la claridad

Page 30: Indicadores educativos, su significado y la importancia de su sustento teórico-conceptual

Cuarta Etapa: prueba piloto o primera aplicación del sistema¨ Procesos de depuración y cálculo para

obtener los primeros valores de cada indicador

¨ Nuevo análisis de la calidad de cada indicador y el sistema a posteriori

¨ Valorar si la información es interpretada correctamente y utilizada

Cuarta Etapa: prueba piloto o primera aplicación del sistema¨ Procesos de depuración y cálculo para

obtener los primeros valores de cada indicador

¨ Nuevo análisis de la calidad de cada indicador y el sistema a posteriori

¨ Valorar si la información es interpretada correctamente y utilizada

Page 31: Indicadores educativos, su significado y la importancia de su sustento teórico-conceptual

Otros pasos. Referentes: de la medición a la evaluación. Tres tipos:

¨ Óptimos: países avanzados, mejores entidades (benchmarking, mejores prácticas)

¨ Promedio: países similares, promedios nacionales…

¨ Mínimos: países o entidades de menor desarrollo, mínimos normativos…

Otros pasos. Referentes: de la medición a la evaluación. Tres tipos:

¨ Óptimos: países avanzados, mejores entidades (benchmarking, mejores prácticas)

¨ Promedio: países similares, promedios nacionales…

¨ Mínimos: países o entidades de menor desarrollo, mínimos normativos…

Page 32: Indicadores educativos, su significado y la importancia de su sustento teórico-conceptual

¨ Cada uno tiene cierto sentido; ninguno es suficiente; conviene usar los tres

¨ Otros referentes posibles: contrastar la situación presente con pasado y futuro (metas)

¨ Posiblemente los más pertinentes: finalmente…

Un sistema educativo de calidad es aquel que siempre mejora respecto a sí mismo, sin idealizar el pasado y con metas ambiciosas pero realistas para el futuro

¨ Cada uno tiene cierto sentido; ninguno es suficiente; conviene usar los tres

¨ Otros referentes posibles: contrastar la situación presente con pasado y futuro (metas)

¨ Posiblemente los más pertinentes: finalmente…

Un sistema educativo de calidad es aquel que siempre mejora respecto a sí mismo, sin idealizar el pasado y con metas ambiciosas pero realistas para el futuro

Page 33: Indicadores educativos, su significado y la importancia de su sustento teórico-conceptual

Refinamiento de los indicadores y maduración del sistema¨ Desarrollar indicadores de buena calidad

implica tiempo

¨ Además de seguir la metodología hay que revisarlos una y otra vez

¨ El ritmo anual de la estadística educativa hace que el refinamiento lleve años

¨ Interrelación con usuarios

¨ Investigación para el sustento de nuevos indicadores.

Refinamiento de los indicadores y maduración del sistema¨ Desarrollar indicadores de buena calidad

implica tiempo

¨ Además de seguir la metodología hay que revisarlos una y otra vez

¨ El ritmo anual de la estadística educativa hace que el refinamiento lleve años

¨ Interrelación con usuarios

¨ Investigación para el sustento de nuevos indicadores.

Page 34: Indicadores educativos, su significado y la importancia de su sustento teórico-conceptual

Ejemplo de la relación entre investigación y desarrollo de indicadores

MARCO DE REFERENCIA 1, DEBER SER

2. SER: CARACTERIZACIÒN

3.TRAYECTORIAS

DISEÑO

DE INSTRUMENTOS

CASOS

DOCUMENTALES

ESTUDIOS

DE CASO

4. LOS IDEALESINDICADORES

D

D

D

Page 35: Indicadores educativos, su significado y la importancia de su sustento teórico-conceptual

…la creación de un indicador nuevo toma largo tiempo… difícilmente puede abreviarse, dada la naturaleza iterativa de los procesos de formación de conceptos y de los esfuerzos de medición…[y] el necesario para los ajustes por ensayo-error. Aun si ya existen antecedentes de investigación y cierto consenso alrededor de un problema, es probable que pasen al menos 10 años entre el deseo de contar con una medida y la producción efectiva de esta.

Judith Innes de Neufville, 1975

…la creación de un indicador nuevo toma largo tiempo… difícilmente puede abreviarse, dada la naturaleza iterativa de los procesos de formación de conceptos y de los esfuerzos de medición…[y] el necesario para los ajustes por ensayo-error. Aun si ya existen antecedentes de investigación y cierto consenso alrededor de un problema, es probable que pasen al menos 10 años entre el deseo de contar con una medida y la producción efectiva de esta.

Judith Innes de Neufville, 1975

Page 36: Indicadores educativos, su significado y la importancia de su sustento teórico-conceptual

El control de la calidad de los indicadores

Para tener calidad no basta proponérselo; hay que poner los medios: metodología consistente + mecanismos de control de calidad. Tres componentes del modelo de calidad del INEE:

¨ Criterios de calidad precisos, a cumplir en cada paso

¨ Procedimientos claros a seguir para asegurar se cumplan los criterios

¨ Instancias internas y externas, con personas calificadas, que supervisen la operación de procedimientos y el cumplimiento de criterios

El control de la calidad de los indicadores

Para tener calidad no basta proponérselo; hay que poner los medios: metodología consistente + mecanismos de control de calidad. Tres componentes del modelo de calidad del INEE:

¨ Criterios de calidad precisos, a cumplir en cada paso

¨ Procedimientos claros a seguir para asegurar se cumplan los criterios

¨ Instancias internas y externas, con personas calificadas, que supervisen la operación de procedimientos y el cumplimiento de criterios

Page 37: Indicadores educativos, su significado y la importancia de su sustento teórico-conceptual

Concepto de indicador y su evolución

Page 38: Indicadores educativos, su significado y la importancia de su sustento teórico-conceptual

•La investigación y el desarrollo de sistemas de indicadores educativos es un campo de estudio reciente aunque la idea de dar un significado de cuantificación a los fenómenos sociales es bastante antigua.

Page 39: Indicadores educativos, su significado y la importancia de su sustento teórico-conceptual

•El desarrollo de la noción de indicador nace como resultado de la necesidad de proporcionar cifras de población o datos económicos con información sobre otras dimensiones de la vida social.

Page 40: Indicadores educativos, su significado y la importancia de su sustento teórico-conceptual

•El término indicador se utiliza en varios sentidos que no necesariamente coinciden entre sí.

•Trilogía del proceso de operacionalización: ▫Variables▫Dimensiones▫Indicadores

Page 41: Indicadores educativos, su significado y la importancia de su sustento teórico-conceptual

•La variable denota un aspecto particular de la realidad que se estudia, el cual puede aislarse de forma analítica.

•No permanece constante.

•Adopta valores de acuerdo con los sujetos de la población estudiada.

Page 42: Indicadores educativos, su significado y la importancia de su sustento teórico-conceptual

•Un indicador singular no basta para considerar las dimensiones totales de un concepto amplio, por lo que se deben desarrollar más indicadores que capten una medida del total de las dimensiones de un fenómeno a estudiar.

Page 43: Indicadores educativos, su significado y la importancia de su sustento teórico-conceptual

R.A. Bauer (1966)El problema clave de un sistema de indicadores sociales… es que nunca podemos medir directamente las variables que nos interesan, sino que tenemos que seleccionar substitutos en el lugar de esas variables. Podemos, por ejemplo, estar interesados en saber si una persona es o no ambiciosa. Pero no podemos observar la ambición en sí misma. Podemos hacer preguntas a la persona, y escuchar sus respuestas, o bien observar qué tan intensamente trabaja y en busca de qué tipo de retribución; a partir de ello podemos inferir si la persona es o no ambiciosa

Page 44: Indicadores educativos, su significado y la importancia de su sustento teórico-conceptual

•El concepto de indicador puede tener un carácter sintético, integrando más aspectos particulares.

•T. Wyatt (1994) propone la siguiente definición de indicador educativo:

estadística sintética (summary) sobre el estado actual de un sistema educativo

Page 45: Indicadores educativos, su significado y la importancia de su sustento teórico-conceptual

•La definición más aceptada en la actualidad se deriva de la de Oakes, la cual propone que un indicador es

una estadística relevante para la política educativa que proporciona información sobre el estado o situación, la calidad o el producto del sistema educativo

Page 46: Indicadores educativos, su significado y la importancia de su sustento teórico-conceptual

Un indicador debe ofrecer información sobre…•Los logros de un sistema educativo, relativo a la obtención de resultados determinados.

•Algunas características que se relacionen con ciertos resultados, es decir, que el indicador tenga valor predictivo.

Page 47: Indicadores educativos, su significado y la importancia de su sustento teórico-conceptual

•Rasgos centrales del sistema educativo, o la descripción de los problemas, con el fin de entender el funcionamiento.

•Aspectos relevantes para la política educativa, que permita apoyar la toma de decisiones.

Page 48: Indicadores educativos, su significado y la importancia de su sustento teórico-conceptual

Características de un indicador•Medir aspectos de todos ámbitos del sistema a evaluar, lo que permite hacer comparaciones.

•Medir aspectos duraderos del sistema, lo que permite analizar tendencias y cambios en el tiempo.

Page 49: Indicadores educativos, su significado y la importancia de su sustento teórico-conceptual

•Ser inteligibles para audiencias amplias

•Tener factibilidad de tiempo, de costo y de capacidad técnica requeridos para su obtención.

•Ser generalmente aceptados por sus cualidades técnicas de validez y confiabilidad

Page 50: Indicadores educativos, su significado y la importancia de su sustento teórico-conceptual

Definición pragmática, Shavelson (1989)

un indicador es una estadística simple o compuesta que se relaciona con un constructo educativo básico y es útil en un marco de políticas públicas

Page 51: Indicadores educativos, su significado y la importancia de su sustento teórico-conceptual

Definición de la Comisión Europea (1999)Un indicador pude definirse como la medición de un objetivo a perseguir, de un recurso a movilizar, de un efecto alcanzado, de una estimación de calidad, o de una variable de contexto. Un indicador ofrece información cuantificada con el propósito de ayudar a los participantes en acciones públicas a comunicarse, negociar y tomar decisiones… Un indicador cuantifica un elemento que se considera relevante para el monitoreo o la evaluación de un programa.

Page 52: Indicadores educativos, su significado y la importancia de su sustento teórico-conceptual

Tipos básicos de indicadores•Estadísticas simples

•Estadísticas compuestas

Page 53: Indicadores educativos, su significado y la importancia de su sustento teórico-conceptual

Tipología de indicadores, Comisión Europea•El grado de procesamiento de la

información de base requerida para su construcción. Pueden ser elementales, derivados o compuestos. Los indicadores pueden desagregarse por categorías.

•La comparabilidad de la información contenida, podrán ser específicos o genéricos.

Page 54: Indicadores educativos, su significado y la importancia de su sustento teórico-conceptual

•Al grado de alcance de la información ofrecida, puede haber indicadores de programa y de contexto.

•Las fases del programa a que se refieran, podrán ser indicadores de recursos o insumos, de salidas o productos inmediatos, de resultados o productos mediatos, y de impacto, o productos a largo plazo.

Page 55: Indicadores educativos, su significado y la importancia de su sustento teórico-conceptual

•Los criterios de evaluación o, si se prefiere, según las dimensiones del concepto de calidad, podrá haber indicadores de relevancia, eficacia, eficiencia o desempeño.

•La cercanía del momento de obtención de la información con los procesos a evaluar, y el momento de su utilización. Se podrá distinguir entre indicadores de monitoreo, para uso inmediato, o de evaluación, para emplearse al final del proceso.

Page 56: Indicadores educativos, su significado y la importancia de su sustento teórico-conceptual

Se subraya que…

Un sistema de indicadores es más que una simple colección de estadísticas.

Page 57: Indicadores educativos, su significado y la importancia de su sustento teórico-conceptual

•El sistema de indicadores pretende cubrir ciertas funciones, las cuales están ligadas a nuestro contexto social. ▫Pronosticar tendencias▫Ser de fácil colección, medición e interpretación en sus resultados

▫Tener bajos costos de operación▫Ser técnicamente consensuados

Page 58: Indicadores educativos, su significado y la importancia de su sustento teórico-conceptual

▫Ser políticamente aprobados a través de las consultas. Ser aplicables a diferentes escalas y unidades de manejo (nivel de agregación).

▫Tener un alto conocimiento, dominio y referencia

▫Estar en función de la dimensión a medir y debe permitir resolver los problemas más relevantes de la Educación

▫Estar ponderados bajo un sistema de clasificación de alerta, de acuerdo con un nivel de tolerancia predeterminado.

Page 59: Indicadores educativos, su significado y la importancia de su sustento teórico-conceptual

Primeras recolecciones a gran escala de información de carácter educativo

•Dos grandes proyectos que fueron ordenados por el Congreso de los Estados Unidos de América:

•Evaluación Nacional del Progreso Educativo (Nacional Assessment of Educational Progress, NAEP)

•Encuesta sobre Igualdad de Oportunidades Educativas (Equality of Educational Opportunity Survey, EEOS).

Page 60: Indicadores educativos, su significado y la importancia de su sustento teórico-conceptual

•En 1973 la OCDE (Organización para la Cooperación y el Desarrollo Económico) diseñó un conjunto de 46 indicadores con el fin de valorar la contribución hecha por la educación a diferentes campos de estudio social, económico y de conocimientos.

Page 61: Indicadores educativos, su significado y la importancia de su sustento teórico-conceptual

Finales de la década de 1980 •La publicación A Nation at Risk: The

Imperative for Educational Reform (US National Commission on Excellence in Education, 1983) provocó un gran debate social lo que trajo como consecuencia un monitoreo muy cercano del sistema educativo, escuelas y su personal, en Estados Unidos.

Page 62: Indicadores educativos, su significado y la importancia de su sustento teórico-conceptual

•La OCDE dio inicio en 1987 al proyecto Indicators of National Education Systems (INES), que se ha convertido en un programa de gran poder sobre el desarrollo de indicadores en el ámbito internacional.

Page 63: Indicadores educativos, su significado y la importancia de su sustento teórico-conceptual

A nivel nacional…

•Creación de la Secretaría de Educación Pública, en 1921.

•Antecedentes del formato 911: recolecciones que realizaba la entonces Secretaría de Comercio.

•50 años de recolección de estadísticas educativas carentes de calidad y regularidad

Page 64: Indicadores educativos, su significado y la importancia de su sustento teórico-conceptual

•Década de los 70’s, se dio formalidad a los sistemas de estadísticas educativas.

•1978: surgió el formato 911 al firmarse el convenio entre el INEGI (Instituto Nacional de Estadística y Geografía) y la SEP.

•Con el ingreso de México a la OCDE, se rediseñaron los formatos de recolección con el fin de dar respuesta a los nuevos requerimientos, por lo que aumentó considerablemente la información requerida a las escuelas, y aplicándose a partir del ciclo escolar 1996-97.

Page 65: Indicadores educativos, su significado y la importancia de su sustento teórico-conceptual

•En la década de los 80’s, la entonces Dirección General de Planeación, Programación y Presupuesto de la SEP impulsó el debate sobre la implementación y uso de indicadores educativos, principalmente relacionados con el acceso, la permanencia y la trayectoria de los alumnos en los subsistemas educativos.

Page 66: Indicadores educativos, su significado y la importancia de su sustento teórico-conceptual

Sexenios 2000–2006 y 2006 - 2012

•El Programa Nacional de Educación 2001-2006, marcó la importancia de desarrollar la tarea de implementar un sistema de indicadores para todos los tipos educativos.

•Programa Nacional de Educación 2007 – 2012, también lo considera.

Page 67: Indicadores educativos, su significado y la importancia de su sustento teórico-conceptual

•Existe un amplio consenso acerca de que los indicadores han sido diseñados para dar información a los tomadores de decisiones.

•Los indicadores tienden a emitir señales sobre temas o aspectos que pueden ser importantes en determinadas circunstancias.

•En los últimos años, los indicadores sociales han tomado un lugar importante.

Page 68: Indicadores educativos, su significado y la importancia de su sustento teórico-conceptual

Estándares o referentes para emitir juicios de valor

Page 69: Indicadores educativos, su significado y la importancia de su sustento teórico-conceptual

•Evaluar a partir de la información arrojada por los indicadores requiere referencias de algún parámetro de comparación.

•Existen diversas posibilidades elementales para seleccionar estos parámetros:

▫comparación de sí misma a través del tiempo

▫comparaciones con otros estándares externamente definidos.

Page 70: Indicadores educativos, su significado y la importancia de su sustento teórico-conceptual

•El parámetro o estándar es el referente con el cual debe contrastarse el resultado de la medición.

•¿Con qué se debe comparar?

Page 71: Indicadores educativos, su significado y la importancia de su sustento teórico-conceptual

Método de selección del

parámetro de

comparación

Ventaja Desventaja

Comparación de sí

misma a través del

tiempo

Presenta estabilidad y

madurez del sistema de

indicadores en término de

los datos

El indicador puede ser

corrompible sobre todo con

el uso en rendición de

cuentas

Comparación con metas

establecidas con

determinado fin.

Hay un grado de avance

del seguimiento de la meta

Focalizar grupos de

atención

El indicador puede ser

corrompible sobre todo con

el uso en rendición de

cuentas

Comparación con

estándares

internacionales

Contar con una medida de

comparación con países

que tienen un Sistema

Educativo de Media más

avanzados

Incrementa las diferencias

entre lo comparado debido

al modelo adoptado y a la

metodología aplicada al

indicador.

Comparativo óptimo Se tiene claro hacia donde

se debe llegar

Son difíciles de determinar

Comparativos promedio Visión del comportamiento

del sistema

Son inestables en el

tiempo.

Comparativos máximos o

mínimos

Detectar fortalezas y

debilidades

Se presta a sobrevaluar la

jerarquización de los

resultados de indicador

Page 72: Indicadores educativos, su significado y la importancia de su sustento teórico-conceptual

La consolidación de los sistemas de indicadores•El proceso de desarrollo de

indicadores es necesariamente largo porque para asegurar su solidez, se debe cumplir con diversos requisitos metodológicos y técnicos e involucrar a grupos de actores calificados.

•Los productos generados deben someterse a revisiones y correcciones tantas veces como sea necesario, antes de considerarlos bien establecidos.

Page 73: Indicadores educativos, su significado y la importancia de su sustento teórico-conceptual

•La creación de un indicador nuevo es de larga duración, la cual difícilmente se puede acortar dado que la formación de conceptos y los esfuerzos de medición implican la realización de procesos repetitivos, además de que se deben tener presentes las preocupaciones públicas o institucionales antes de producir una medida.

Page 74: Indicadores educativos, su significado y la importancia de su sustento teórico-conceptual

•La utilidad de un sistema de indicadores depende de su solidez técnica, de la legitimidad que le dé la participación de los diversos actores en su construcción y de la riqueza del proceso de elaboración mismo, con aportes técnicos, discusiones que aclaren puntos difíciles y consensos más o menos amplios y sólidos laboriosamente alcanzados.

Page 75: Indicadores educativos, su significado y la importancia de su sustento teórico-conceptual

Gracias por su atención.

Page 76: Indicadores educativos, su significado y la importancia de su sustento teórico-conceptual

Actividad de cierreFormar grupos de trabajoElaborar primer listado de indicadores de acuerdo con los aspectos solicitadosTiempo 1 hora

Page 77: Indicadores educativos, su significado y la importancia de su sustento teórico-conceptual

Listado inicial de indicadores 8 de octubre de 2011

Tema Pregunta(s) Indicador(es) para darle respuesta

Referente o parámetro de comparación