1

SISTEMA DE MEJORA DE LA CALIDAD DE FE Y ALEGRA

Un dato bien recogido es la primera garanta para la validez de la evaluacin.

Si los datos no son buenos, ni el anlisis ni la interpretacin lo sern.

1. QU VAMOS A HACER?

INTRODUCCIN

Estamos ad portas de dos procesos fundamentales para la consolidacin del Sistema de Mejora de la Calidad en

nuestros centros educativos, el primero es el inicio de un nuevo ciclo del sistema dentro del cual seremos

protagonistas de una nueva fase de evaluacin, y el segundo proceso tiene que ver con la puesta en marcha de los

reconocimientos a aquellos centros educativos que se han destacado en la implementacin el sistema y merecen

ser exaltados pblicamente por sus avances en calidad y cultura de mejora. Aprovechando que los diferentes

equipos nacionales se encuentran realizando sus planificaciones del ao 2015, queremos anticipar con ustedes los

espacios y recursos necesarios para cada uno de estos procesos.

En primer lugar, la aplicacin de cuestionarios requerir que adelantemos varias tareas previamente, una de las ms

importantes radica en que los equipos nacionales definan el listado de centros educativos que harn la aplicacin, y

con esta lista, el inventario de actores que van a participar (estudiantes de 6, estudiantes de 9, profesores,

directivos, familias, comunidad) de tal manera que desde la USEI podamos coordinar la impresin y el envo de las

hojas de respuesta de manera oportuna. A su vez, es importante que los equipos nacionales separen en sus

agendas el mes de mayo de 2015 para las aplicaciones. Todas estas indicaciones se explican en mayor detalle en el

tercer apartado de este documento.

En segundo lugar, los reconocimientos del Sistema de Mejora de la Calidad, proceso que como ustedes recordarn

fue motivo de amplia discusin y debate en nuestro pasado encuentro de enlaces en Bogot. Este encuentro tuvo

como resultado el inicio de un trabajo conjunto con todos los pases, donde si bien no contamos con la

participacin de todos los acompaantes, si hubo un pequeo grupo que hizo grandes aportes, los cuales tuvimos

en cuenta a la hora de consolidar la propuesta final de criterios para otorgar estos reconocimientos. La

socializacin de esta metodologa la haremos en dos partes, primero les enviaremos el documento con los criterios

y todas las indicaciones pertinentes para que estn familiarizados con la metodologa, una especie de protocolo, y

luego a travs de los acompaantes federativos y la USEI resolveremos todas las dudas, coordinando con ustedes

los ajustes pertinentes al contexto de cada uno de sus pases. La tarea previa en este tema que les pediremos que

vayan adelantando es el envo de todos los formatos 6b hasta el 14 de diciembre de este ao, y que tengan en

cuenta que ms adelante vamos a necesitar los formatos 7 y 8 hasta el 30 de marzo de 2015.

De esta manera, en este documento vamos a profundizar en todos los detalles sobre la aplicacin de cuestionarios

de la fase de evaluacin del Sistema de Mejora de la calidad, el documento tiene seis partes incluida esta

introduccin. La primera parte habla sobre la fase de evaluacin, su importancia y de que est compuesta. La

segunda parte explica el sentido de cada uno de los cuestionarios. La tercera parte tiene todos los detalles de la

organizacin, logstica y responsables de las aplicaciones. La cuarta y quinta tiene recomendaciones de orden

general y algunas puntuales para los acompaantes, las cuales hemos venido acumulando durante todas las

aplicaciones previas realizadas, por lo cual esperamos que en esta aplicacin de 2015 superemos muchos de los

inconvenientes que all se mencionan.

2

1. FASE: Evaluacin

Actividad: Aplicacin de pruebas y cuestionarios

A travs de este ejercicio se busca recoger informacin sobre los contenidos del Sistema de Mejora de la Calidad

que son:

-El contexto social y comunitario en el cual se desarrolla y proyecta el centro educativo. El contexto limita y

orienta la concrecin de las intenciones del Proyecto Educativo en cada centro. La calidad de un centro se

reconoce cuando responde a la realidad de su contexto, a sus intereses y sus necesidades, y desde ah contribuye a transformar y mejorar esa realidad.

-Los recursos son elementos que influyen en la calidad proceso educativo, aunque no la determinen por s

mismos. En el marco de un esfuerzo integral de mejora de la calidad de la Educacin Popular, Fe y Alegra

asume que es necesario conocer el estado de los recursos y reflexionar sobre la forma en que se organiza y

distribuye tanto el talento humano como el uso de los espacios, equipamientos y materiales disponibles en los

centros educativos.

-Los procesos son el factor bsico en el que se apoya la estrategia de mejora de la calidad de la Educacin

Popular de Fe y Alegra. Est en nuestras manos mejorar la gestin de los centros y los recursos, la relacin

pedaggica entre enseanza y aprendizaje, la experiencia de construccin y ejercicio de ciudadana en y desde

los centros educativos y la proyeccin a la comunidad. -Los resultados nos informan de la calidad de los procesos, porque son parte del producto que debe generar un

centro. Pero ni son el nico criterio de calidad, ni pueden entenderse sin los tres factores anteriores. Fijar

nuestros propios indicadores de resultados nos proporciona un referente para la auto-superacin. Y examinar

nuestra capacidad para mejorar los resultados de los estudiantes nos da una medida del acierto de la

estrategia que asumimos de mejora de la calidad.

3

El cuadro de resumen que presenta de modo general los cuestionarios que se aplicarn es el siguiente:

Cuadro sntesis de cuestionarios

Tipo de prueba Nombre del

cuestionario Nmero de preguntas Informacin / Recomendaciones

Tp 1

Medida del

contexto

socio

econmico Grado 9 y 6: 28

Lo contestan slo los estudiantes. Es el

mismo cuestionario para ambos grados.

Es fundamental que las preguntas 1, 2, 3,

4, 19 y 24 hayan sido trabajadas con

anterioridad con los estudiantes que van

a participar en el ejercicio. Los

estudiantes deben llevar la respuesta

correspondiente el da de la prueba (en

una hoja, cuaderno, etc.). Se responde

en las hojas de respuesta numricas.

Tp 2

Procesos

escolares

Estudiantes: 69

Docentes: 120

Directivos: 90

Familias: 56

Comunidad: 54

Lo contestan todos los miembros de la

comunidad educativa y es el que requiere

ms tiempo. Cada estamento tiene su

propio cuestionario y solo para el caso de

los estudiantes se emplea el mismo para 6

y para 9. Se responde en las hojas de

respuesta numricas. En el caso de los

directivos se responde de forma colectiva

y se completa slo una hoja de respuesta

por centro. Con familias y comunidad que

no saben leer es necesario el apoyo de

algunas personas del centro educativo

(idealmente estudiantes de 11 y 10) que

no se encuentren realizando pruebas en

ese momento.

Tp 3 Resultados

Lengua

Grado 9: 23

Grado 6: 20

Lo responden los estudiantes de grado 6

y 9. Cada grado tiene su prueba

particular. Se responde en las hojas de

respuesta alfabticas.

Tp 4 Resultados

Matemticas

Grado 9: 34

Grado 6: 34

Lo responden cada uno de los grados

correspondientes con pruebas

diferenciadas. Se responde en las hojas

de respuesta alfabticas.

Tp 5 Gnero

Estudiantes: 30

Docentes: 31

Directivos: 29

Familias: 17

Comunidad: 13

Lo contestan todos los miembros de la

comunidad educativa. Como en el caso de

las pruebas Tp 2, cada estamento tiene su

propio cuestionario y solo 6 y 9 realizan

el mismo. Se responde en las hojas de

respuesta numricas.

4

Tp 7 Recursos Directivos: 56

Lo contesta el rector o la rectora. Se

entrega desde antes de la aplicacin y

se contesta en el mismo cuestionario.

Es fundamental que las respuestas sean

honestas y fidedignas, pues sern

cotejadas en los procesos de

certificacin.

Tp 8 Valores Grado 9: 36

Grado 6: 39

Lo responden cada uno de los grados

correspondientes con pruebas

diferenciadas. Se responde en las hojas de

respuesta numricas.

2. EXPLICACIN SOBRE LOS CUESTIONARIOS QUE VAN A SER APLICADOS

2.1 Cuestionario para la medida del contexto socioeconmico El contexto socioeconmico y educativo de los estudiantes se evala mediante un cuestionario (TP1) formado por 28 preguntas, que hacen referencia a los siguientes aspectos: nivel de estudios

de los padres, profesin, caractersticas de la vivienda, personas que forman el ncleo

familiar, actividades de ocio, ciertas posesiones de la familia, trabajo del propio alumno y algunas

caractersticas del entorno.

Es importante destacar que este cuestionario no debe confundirse, ni suplanta la actividad de

anlisis de contexto, que corresponde a otro elemento dentro de la fase de evaluacin. La informacin que se recoge con este cuestionario permite generar un ndice de contexto y asignarle

una puntuacin a cada centro educativo, que posteriormente servir de referencia para el ejercicio

de interpretacin de resultados.

La informacin que se recoja con este instrumentos debe ser lo ms fidedigna y completa posible.

2.2 Cuestionarios para los equipos directivos

Mediante un amplio cuestionario de 90 preguntas (TP2) se pide informacin sobre los procesos

escolares. As , se espera conocer sobre el funcionamiento del centro, la gestin directiva,

los procesos de aprendizaje y de formacin humana, y la relacin con el entorno comunitario.

Solamente se responde un cuestionario por centro y no se busca la opinin exclusiva del Director

o la Directora; ms bien se insiste en que sea contestado de manera colectiva por el equipo

directivo en su conjunto, y se anima a que tomen el tiempo necesario para pensar sobre las

cuestiones y para dar una respuesta de comn acuerdo. As, este cuestionario da tambin

informacin sobre las opciones pedaggicas que se desprenden del proyecto educativo y el ideario

de Fe y Alegra. Con la informacin procedente de los equipos directivos se analiza la gestin directiva (estilo de

liderazgo y de gestin, racionalidad en la utilizacin de los recursos y la formacin continua del

equipo educativo), los procesos de enseanza y aprendizaje (la planeacin de la enseanza

y la evaluacin), los procesos de ejercicio y construccin de la ciudadana (manejo y resolucin de

5

conflictos, ambiente socio afectivo en el centro y formacin para la ciudadana) y los procesos de

relacin entre la escuela y la comunidad (la apertura del centro a la comunidad y las alianzas

mutuas y la incidencia y la implicacin en la vida de la comunidad).

Adicionalmente, los miembros de los equipos directivos responden otro cuestionario (TP5), de

modo individual, de 29 preguntas. Este cuestionario hace referencia a la postura relacionada con el

trato equitativo e igualitario que se da a las nias, nios, hombres y mujeres en el centro, as como

sobre sus distintas opiniones sobre cuestiones de igualdad y perspectiva de gnero.

2.3 Cuestionarios para los docentes

Los y las docentes valoran en esta evaluacin (TP2) los procesos que tienen lugar tanto en el

funcionamiento general del centro como dentro del aula. El cuestionario se entrega a todo el

profesorado del centro que participa en la evaluacin. Para ello se ha empleado un extenso cuestionario de 120 preguntas, que recorre todos los

componentes y variables analizados en esta evaluacin. Incluye todos los aspectos que se acaban

de presentar en los prrafos anteriores para los equipos directivos (gestin, procesos de

enseanza aprendizaje, contexto, construccin y ejercicio de la ciudadana), pero de forma ms

amplia. Por una parte, en muchos aspectos se incluyen ms indicadores (y por tanto ms preguntas

concretas) con el objeto de obtener una opinin ms detallada y pormenorizada. Y, por otra

parte, se incluyen aspectos que no estaban presentes en el anterior, como el de las estrategias de

aula para la promocin de los aprendizajes (sobre las que, lgicamente, se preguntar tambin a los

estudiantes). Tambin los y las docentes responden un cuestionario de 31 preguntas (TP5) que hace referencia

a la postura relacionada con el trato equitativo e igualitario que se da a las nias, nios, hombres y

mujeres y su opinin sobre ciertas situaciones relacionadas con temas de igualdad, equidad y

perspectiva de gnero.

2.4 Cuestionarios para las familias La evaluacin que recoge las percepciones de las familias (TP2) se realiza a partir de un

cuestionario ms breve, de 56 tems. Se espera que este cuestionario sea resuelto por las

familias de los estudiantes tanto de 6como de 9 grado que participan en la evaluacin. Sin

embargo, tambin pueden ser invitados padres y madres de familia que tengan hijos o hijas en otros

grados. Este cuestionario se responde en la hoja de respuestas, como todos los dems, as que el

cuestionario no debe ser marcado o tachado en ningn lugar.. A travs de estas preguntas las familias expresan su opinin sobre la gestin directiva (la

informacin compartida, la colegialidad en las decisiones), el uso racional de los recursos (la

prioridad hacia los ms desfavorecidos o los servicios mutuos escuela-comunidad), diversos

aspectos en relacin con los procesos de enseanza y aprendizaje (sobre todo en relacin con los

objetivos educativos y con la evaluacin), la construccin y el ejercicio de la ciudadana (la

percepcin de la colaboracin escuela-familia o la medida en que la escuela se compromete con los

problemas de la comunidad) y la interrelacin escuela-comunidad.

Como en los casos anteriores, los participantes de las familias tambin responden un cuestionario

breve sobre gnero (TP5) de 17 preguntas que hace referencia a la postura relacionada en el trato

equitativo e igualitario que se da a las nias, nios, hombres y mujeres.

6

2.5 Cuestionarios para los representantes de la comunidad local

En este ejercicio tambin recogemos informacin de las personas de la comunidad local el territorio que rodea al centro educativo para averiguar sus puntos de vista respecto a la presencia que el centro educativo tiene en ese entorno. Las personas que se consultan no son

familias del centro no pueden ser los tos o tas, abuelitos o abuelitas de alguno de los o las estudiantes, ni docentes, ni tampoco estudiantes (aunque no se descarta que pudiera haber antiguos estudiantes entre las personas que responden). Son personas relevantes de la comunidad,

a veces miembros de asociaciones vecinales o de comedores populares, comerciantes o

trabajadores, juntas de accin local, que en todo caso son cercanas y pueden conocer diferentes

aspectos del funcionamiento del centro educativo que hay en su zona.

El cuestionario (TP2) tiene parecida extensin al de las familias (54 preguntas) y, como en el

anterior, se resuelve en la hoja de respuestas. Las preguntas estn muy seleccionadas (no se

incluyen, por ejemplo, las relativas a los procesos de enseanza y aprendizaje a los que, por ser

internos, la comunidad local normalmente no tiene acceso) y permiten recoger informacin sobre

el estilo de liderazgo y de gestin, la racionalidad en el uso de los recursos, la equidad y justicia en

las relaciones, la construccin de un proyecto colectivo que se apoye en la identidad sociocultural y

en la corresponsabilidad democrtica, la formacin en valores, la apertura del centro a la

comunidad y la incidencia y la implicacin que el centro tiene en la comunidad. La comunidad adems responde al cuestionario de gnero (TP5) de 13 preguntas en donde

interesa conocer su opinin sobre aspectos relacionados con el trato equitativo e igualitario que se les da a los nios, nias, hombres y mujeres en la escuela.

2.6 Cuestionarios para los estudiantes sobre los procesos educativos

Junto al profesorado y a los equipos directivos, los y las estudiantes son la fuente de informacin

que ms aspectos de anlisis proporciona en esta evaluacin. Por una parte, respondern a

preguntas relacionadas con los procesos que articulan la calidad educativa en los centros de Fe y

Alegra, a los que nos hemos referido en los prrafos anteriores. Por otra, nos dan informacin

sobre los resultados obtenidos, tanto en trminos de su formacin humana (valores y actitudes de

diversa ndole) como de los aprendizajes realizados en las reas de lengua y matemticas. Adems,

como ya lo vimos en el punto 2.1. nos comparten la informacin necesaria para conocer el

contexto socioeconmico de la poblacin que recibe el centro educativo.

Ahora bien, el cuestionario de estudiantes sobre los procesos educativos (TP2) se dedica a

indagar sobre distintos aspectos de la gestin directiva, la enseanza y el aprendizaje, la

convivencia y la construccin de ciudadanas, desde la perspectiva de los chicos y chicas de los

grados 6 y 9. Tiene un total de 69 preguntas y, mediante los mismos aspectos que hemos

presentado en los cuestionarios anteriores, permite que los y las estudiantes den sus opiniones

sobre la organizacin y el funcionamiento de su centro y, en conjunto, sobre la educacin escolar

que reciben. Doce aspectos o variables se analizan a partir de sus respuestas. Adems de los

aspectos ya citados, cabe destacar las cuestiones relativas a la presencia de proyectos educativos

transversales e interdisciplinares, la importancia de diversos objetivos educativos como la

autorregulacin, el sentido de pertenencia a la comunidad o el de aprender a aprender, las

estrategias de aprendizaje de tipo cooperativo, reflexivo y activo, el uso de la evaluacin para

mejorar, la colaboracin entre los estudiantes, con los maestros y de la escuela con las familias, la

elaboracin de normas y la experiencia para afrontar la resolucin de conflictos, el

comportamiento ajustado a los valores que se han aprendido, la responsabilidad por el entorno y

7

los asuntos pblicos y, en fin, la promocin de experiencias de participacin y de liderazgo del

compromiso social. Los y las estudiantes adems van a responder el cuestionario sobre gnero (TP5) de 30 preguntas

que hace referencia a la postura relacionada en el trato equitativo e igualitario que se da a las

nias, nios, hombres y mujeres y su opinin sobre lo que se hace en el centro. 2.7 Cuestionarios de resultados: lengua, matemticas y valores

Los estudiantes de los grados 6 y 9, como parte de este ejercicio de evaluacin integral,

responden una serie de pruebas que pretenden abordar algunas de las capacidades relacionadas a

tres reas bsicas en su proceso educativo: lengua, matemticas y valores (formacin humana).

Evidentemente estas no agotan la diversidad de resultados de un proceso educativo de calidad,

pero si brindan informacin pertinente para reflexionar sobre los logros y avances de cada uno de

los centros educativos, en trminos de resultados.

Para los tres casos lengua, matemticas y valores se aplican cuestionarios diferenciados para cada uno de los grados. Su extensin vara en cada caso. Para su aplicacin, el responsable debe

garantizar las ptimas condiciones que permitan que los y las estudiantes puedan responder sin

problemas. De igual forma es de vital importancia asegurar que durante la aplicacin de estas

pruebas las respuestas sean completamente transparentes y fidedignas, por lo cual hay que prestar

particular atencin al clima de trabajo durante estos espacios.

2.8 Cuestionario de recursos

La autoevaluacin de los recursos disponibles en los establecimientos educativos es un elemento

clave dentro del proceso de mejora de la calidad impulsado por Fe y Alegra. Si bien los recursos

no son el centro ni el foco primordial, s son variables importantes que deben ser consideradas en

cualquier proceso de mejora. Adems, estn estrechamente relacionadas con una serie de

exigencias mnimas que responden a los derechos de todos los nios, nias y jvenes que estudian

en un centro educativo, as como a sus directivos, docentes, familias y comunidad en general.

En este cuestionario (TP7) se encuentran dos estilos de preguntas, unas en las que se piden

datos referidos al centro, y requieren de tomar un tiempo necesario para ofrecer la

informacin ms exacta posible. El otro tipo de preguntas, son de estimacin, y se requiere

sealar la respuesta que ms se aproxima a la realidad de la institucin. El rector y/o el equipo de

direccin responden a este cuestionario que contempla un total de 56 preguntas. Lo ideal es que

el cuestionario sea entregado con anticipacin al centro, para que las preguntas que requieren de

indagaciones o pesquisas sean resueltas con la informacin ms clara y completa posible. Las

respuestas se anotan directamente en el cuestionario y ste debe recogerse diligenciado durante

los das de aplicacin de las dems pruebas y cuestionarios.

3 PROTOCOLO DE APLICACIN PARA ACOMPAANTES

3.1. Preparativos

3.1.1. Listado definitivo de centros educativos participantes

8

En primer lugar, se debe enviar al correo oficial de la USEI (Giovanny Otlora, correo:

fi.calidadatec@feyalegria.org) la relacin completa de centros educativos participantes, indicando el nombre oficial del centro educativo, si evaluar 6 o 9 grado, o ambos, y los

nmeros lo ms exactos posible- de docentes y de estudiantes, as como el nombre del acompaante del centro educativo (Formato 1). (Para los centros educativos con varios cursos por

grado, se espera poder cubrir un mnimo de 40 estudiantes de 6 y 40 estudiantes de 9, asimismo

poder cubrir un mnimo de 40 padres de familia repartidos entre 6 y 9, y un mnimo de 15

personas de la comunidad). Para este primer paso se estima como plazo mximo el 16 de febrero

de 2015. 3.1.2. Reunin con el equipo de aplicadores y de acompaantes

Es imprescindible que los evaluadores se apropien del sentido y del procedimiento de las pruebas

antes de aplicarlas. Es importante que se tenga claro cmo se va a realizar el ejercicio, que est

debidamente planeado y que se tengan a mano todos los materiales y recursos necesarios para el

mismo.

Es importante que se estudie con detenimiento el presente documento, as como la presentacin

(punto 3.1.4) de PowerPoint que ha sido diseada para socializar y sensibilizar a los centros

educativos. Durante la formacin y el manejo de las pruebas para los acompaantes rige el principio de la

discrecin y secreto profesional. Ninguna de las pruebas ni de las preguntas deben ser compartidas

o comentadas antes de la aplicacin. 3.1.3. Logstica, fotocopias e impresiones

Las hojas de respuesta se enviarn desde la USEI a cada una de las direcciones de los equipos

nacionales donde se realizar el ejercicio (Plazo mximo: finales de marzo de 2015). Es

responsabilidad de los equipos nacionales la impresin de los cuestionarios y el envo y distribucin

en las diferentes ciudades, tanto de los cuestionarios, como de las hojas de respuesta previamente

recibidas desde la USEI. Las hojas de respuesta se enviarn con dos meses de anterioridad desde la

USEI, y se espera que los equipos nacionales distribuyan los cuestionarios y hojas de respuesta con

dos o tres semanas de anterioridad a sus respectivas regionales, seccionales para que revisen el

estado, la cantidad recibida e informen a tiempo si existe alguna novedad que deba ser atendida

para garantizar que el material est completo.

Como en el caso anterior, es imprescindible que se mantenga una debida custodia del material

recibido.

3.1.4. Motivacin al centro y anuncio de fecha de aplicacin Para el xito de la aplicacin de las pruebas es necesario motivar a los directivos,

estudiantes, representantes de las familias y equipos docentes de los centros educativos

participantes. De igual manera, se debe comprender y compartir la importancia que tiene la

evaluacin que ser llevada a cabo y no ver la aplicacin como una actividad aislada sino como

parte de la primera fase del SMCFyA as como de cierre del presente ciclo de mejora, en los casos que aplique.

9

Es conveniente preparar el ambiente para que se genere una actitud positiva frente a esta tarea:

no sobra sealar y explicar que se trata de participar en un proceso de autoevaluacin que es el inicio de un proceso mayor que ser muy til para el centro educativo. De igual manera, se debe

explicar y resaltar que en este tipo de evaluacin son un eje fundamental la percepcin y las

opiniones de cada uno de los participantes. Experiencias anteriores han demostrado que toda la comunidad educativa y tambin la local - muestra una mejor disposicin a colaborar y un mayor entusiasmo al participar cuando conoce la razn de ser y la utilidad de las pruebas para los

procesos de mejora de la calidad. Recuerde que es muy importante explicar que no se trata de calificar (ni a los estudiantes, ni a los

docentes, ni al centro educativo), sino de identificar los aspectos que pueden mejorarse. Desactive

en lo posible todas las resistencias, temores y actitudes defensivas.

Proporcione informacin concreta a los centros educativos sobre el Sistema de Mejora de la

Calidad. Todo el equipo del centro debe conocer el cronograma de la evaluacin y las

colaboraciones que sern necesarias. No olvide citar a las familias de los estudiantes de 6 y/o 9

grado y a un grupo de representantes clave de la comunidad local. Estas son personas que nos van

a aportar informacin desde un punto de vista externo a la comunidad educativa, pero que

mantienen o han mantenido alguna relacin con el centro educativo y, por tanto, lo conocen bien.

Los representantes de la comunidad local son personas significativas que por sus desempeos y

funciones pueden tener una visin independiente de los procesos del centro educativo,

especialmente sobre los procesos de interrelacin entre la escuela y la comunidad. Como representantes de la comunidad local se pueden citar, por ejemplo, un representante

municipal, el prroco, un dirigente vecinal, una madre lder de comedores populares, una catequista,

un responsable de los servicios sociales, o un miembro significativo del personal que atiende el

centro de salud del barrio. Su nmero debera estar cercano a los 15 participantes. Para el cuestionario de contexto que deben contestar los estudiantes, se necesita del apoyo y la

colaboracin de los directores de grupo o de los coordinadores pedaggicos. Con anticipacin a la

fecha de aplicacin, los docentes de los grupos que vayan a ser evaluados entregarn a los

estudiantes unas preguntas para que stos los resuelvan junto a sus paps y mams (o figuras

equivalentes) y as facilitar el desarrollo de este cuestionario. Las respuestas a las preguntas 1, 2,

3, 4, 19 y 24 las deben tener listas los estudiantes el da de la aplicacin.

Es fundamental que se cumpla con este requisito en todos los centros y con todos los grupos. Los

estudiantes podrn sacar el da de la evaluacin una hoja con las respuestas anotadas para estas

preguntas. Garantizar que se cumpla con esta exigencia es una responsabilidad directa del

acompaante del centro educativo y del equipo responsable al interior de la institucin de la

aplicacin de pruebas. Sobre el cumplimiento del mismo se deber informar al momento de evaluar

las jornadas de aplicacin.

All donde perciba mayor ansiedad ante la perspectiva de someterse a una evaluacin, contemple

la posibilidad de proponer que hagan alguna prueba de ensayo en los das anteriores a la

aplicacin, usando preguntas de opcin mltiple, para que tanto los estudiantes como los

docentes se familiaricen con el tipo de respuestas. Recuerde que el cuestionario de recursos (TP7) se entrega con anticipacin (aproximadamente una

semana antes del inicio de la aplicacin de pruebas y cuestionarios) a cada centro educativo. Este

formulario debidamente completado se recoge el da de la aplicacin y se incluye en el paquete que

10

ser enviado para el procesamiento de datos.

Adems, tenga presente que para apoyar el trabajo de motivacin, el acompaante de la institucin

educativa cuenta con una presentacin que contiene elementos relevantes para la organizacin y

preparacin de la aplicacin (objetivo de la aplicacin, el enfoque de la evaluacin, la informacin

sobre qu se va a evaluar, los participantes e instrumentos que se utilizarn e informacin de

tiempos y pruebas segn cada participante). Sin duda ser un material que servir para que la

comunidad educativa quede informada e interesada en participar activamente. 3.2. El gran da

3.2.1. Cronograma de la aplicacin

El cronograma previamente se ha acordado con cada una de las regionales/seccionales. Asegrese

de que no existan impedimentos para realizar el ejercicio en los das previstos. Solo motivos de

fuerza mayor podran generar un aplazamiento o postergacin del ejercicio. Es importante que se

repasen y se tengan muy presentes los horarios, espacios y materiales necesarios para el da de

la aplicacin. No slo los equipos responsables del ejercicio, sino la comunidad educativa en

general, deben estar al tanto del ejercicio que se va a realizar. Hay que disponer de toda

organizacin para que los tiempos establecidos se cumplan. 3.2.2. Diligenciamiento de las hojas de respuesta

Las hojas de respuesta son el insumo bsico a partir del cual se realiza el posterior

anlisis estadstico en la Unidad de Servicios de Evaluacin e Investigacin (USEI) de Fe y Alegra.

Por esta razn, es de inters prioritario que sean manejadas y diligenciadas de forma ptima.

El ideal es que estas hojas sean resueltas con lpiz (para facilitarles a los participantes la revisin y

correccin de las mismas), pero si por algn motivo no se cuenta con este material, pueden

utilizarse bolgrafos o esferos. Un primer elemento a tener en cuenta es que los crculos de las hojas deben quedar bien rellenos.

Las marcas a medias pueden no ser registradas por el software estadstico y aquellas que se salen

de los contornos tambin pueden alterar la captura de los datos. Insista sobre este aspecto sencillo

al iniciar cada una de las pruebas. Con algunos representantes de las familias o de la comunidad se

puede requerir de apoyo para que puedan diligenciar correctamente las hojas, as que es

importante acordarlo con antelacin con el centro educativo (lo ideal es que para estos dos grupos

se cuente con apoyo de estudiantes de 10 u 11). En segundo lugar, los aplicadores deben explicar y orientar el proceso de diligenciamiento de los

datos sobre: estamento, sexo, nivel (slo aplica para estudiantes), tipo de prueba, cdigo del

centro y cdigo del pas. Esta informacin es bsica para la interpretacin de resultados, as que

asegrese de que todos y todas la tengan debidamente diligenciada. (Ver siguiente grfico)

11

Se recomienda llevar marcadores borrables (para los espacios con tableros acrlicos) o marcadores

y papelgrafo (para los espacios que no tienen estos tableros), con los cuales orientar esta parte del

ejercicio al inicio de cada una de las sesiones de evaluacin. Si llega con tiempo, puede hacer un

croquis similar al del grfico superior y orientar paso a paso a los participantes.

El espacio que ms dificultades suele generar es el de cdigo de pas y cdigo de centro. En el

ejemplo vemos que corresponden a los nmeros 0003 (cdigo de pas) y 0074 (cdigo de centro).

Se debe garantizar que estos cdigos estn perfectamente diligenciados, pues de lo contrario las

pruebas quedarn asignadas a otro pas o centro educativo. Explique que para cada recuadro, se

busca en la fila de nmeros (ubicada de modo horizontal, de izquierda a derecha), el nmero

correspondiente del cdigo y se rellena.

Finalmente, el recuadro para nmero de hoja, es de diligenciamiento exclusivo del aplicador.

Indqueles a los participantes que lo deben dejar en blanco. La idea es que una vez finalizado el

ejercicio, la persona que haya liderado la aplicacin retome las hojas que efectivamente sern

enviadas a la USEI y las enumere. El nmero de las hojas debe corresponder exactamente al que

se marque por fuera del sobre o paquete en el que se empaquen las hojas de respuesta,

para cada tipo de prueba y cada estamento evaluado. 3.2.3. Hoja de incidencias (formato 2) y seguimiento a indicadores de fases (formato 7)

En todos los casos, los aplicadores deben completar la hoja de incidencias (formato 2) durante, o

inmediatamente terminado el ejercicio (este documento lo recibir al tiempo que el conjunto de

pruebas y cuestionarios), el cual recoge las circunstancias especficas ocurridas durante la aplicacin. Es muy importante que en este formato queden muy bien registradas todas las incidencias del

ejercicio. Algunos elementos sobre los cuales deben estar especialmente atentos los aplicadores

son: el ambiente en el que se desarroll la prueba, situaciones llamativas a resaltar, problemas con

los cuestionarios, retrasos, hojas de respuesta que hayan sido anuladas, entre otros. Se sugiere

especificar, da por da, los sucesos de la aplicacin (anote la fecha al inicio de cada prrafo, por

ejemplo).

En el formato 2 hay un espacio - recuadro para anotar el nmero de participantes en cada sesin,

diferenciado por hombres y mujeres. Este nmero no necesariamente coincide con el nmero de

hojas de respuesta que se envan a la USEI (hay pruebas que se anulan, personas que se van del

ejercicio sin haber completado un porcentaje significativo de los tem, etc). Los dos datos

(participantes y hojas de respuesta enviadas) son de gran importancia para el proceso de

interpretacin estadstica.

Tenga en cuenta que es potestad del responsable de la aplicacin definir qu hojas sern enviadas a

la USEI. Todas las que lleguen a la oficina sern procesadas. Por esta razn, debe ser muy

profesional y tico al momento de tomar decisiones de este tipo.

Una vez finalizado el ejercicio, los equipos de aplicadores deben completar los 4 indicadores del

seguimiento a fases (formato 7) correspondientes a la aplicacin de cuestionarios. Nuevamente,

este es un ejercicio de alta responsabilidad, mediante el cual debe quedar claro por qu si o por

qu no se estn validando los indicadores propios del Sistema. Lalos con detenimiento antes de

proceder a su validacin.

12

3.3. Recogidas y envos

3.3.1 Cierre de la experiencia:

Antes de finalizar la experiencia de aplicacin de pruebas y cuestionarios revise que tenga:

1. Copia de la Hoja de incidencias con las anotaciones de todos los imprevistos, las decisiones

adoptadas sobre la marcha y el nmero de participantes en cada una de las sesiones. 2. Hojas de respuesta de:

No. PARTICIPANTE PRUEBA HOJA DE RESPUESTA

1 Estudiante 6 TP1 Hoja numrica

2 Estudiante 6 TP2 Hoja numrica

3 Estudiante 6 TP3 Hoja alfabtica

4 Estudiante 6 TP4 Hoja alfabtica

5 Estudiante 6 TP5 Hoja numrica

6 Estudiante 6 TP8 Hoja numrica

7 Estudiante 9 TP1 Hoja numrica

8 Estudiante 9 TP2 Hoja numrica

9 Estudiante 9 TP3 Hoja alfabtica

10 Estudiante 9 TP4 Hoja alfabtica

11 Estudiante 9 TP5 Hoja numrica

12 Estudiante 9 TP8 Hoja numrica

13 Docentes TP2 Hoja numrica

14 Docentes TP5 Hoja numrica

15 Equipo directivo TP2 Hoja numrica

16 Equipo directivo TP5 Hoja numrica

17 Equipo directivo TP7 En el formulario

18 Familias TP2 Hoja numrica

19 Familias TP5 Hoja numrica

20 Comunidad TP2 Hoja numrica

21 Comunidad TP5 Hoja numrica

3.3.2. Separacin por paquetes

Los responsables de aplicar las pruebas deben organizar y separar las Hojas de Respuesta de cada

cuestionario que fue resuelto en las sesiones (en el caso de los estudiantes, diferenciado por grado

tambin) mediante un plstico, sobre de manila, cinta, etc. Estos paquetes deben estar debidamente

marcados de forma visible, clara y legible al exterior, indicando el cdigo del colegio, el tipo de

prueba, el estamento -y el grado en el caso de los estudiantes- as como el nmero de hojas diferenciado por sexo y total. A continuacin, un ejemplo del rtulo esperado:

13

Finalmente se agrupan los distintos paquetes y se consolida uno general del centro educativo, que

debe estar cerrado de la mejor forma posible, para garantizar que la informacin no sea manipulada

ni que se mezcle con la de otros centros. Al exterior del paquete se debe anotar el nombre del

colegio y cdigo del centro. A continuacin, un rtulo de ejemplo:

3.3.3. Envo de hojas de respuesta a la USEI de Fe y Alegra: Todas las hojas de respuesta deben ser enviadas a la USEI de Fe y Alegra, direccin Cr 5# 34-39 de

Bogot, en donde sern procesadas para la elaboracin de los respectivos informes estadsticos y

descriptivos. Las cajas y los paquetes deben estar bien asegurados, procurando que las hojas de

respuesta estn lo mejor resguardadas posibles, de modo que se evite su deterioro durante el

envo. Los cuestionarios debern ser guardados en las oficinas regionales, pues podrn ser empleados en

futuras aplicaciones tanto al interior como al exterior de Fe y Alegra. Es importante mantener una

adecuada custodia del material, pues las pruebas no pueden circular libremente. Algunas partes de

los cuestionarios de procesos pueden ser repasados con los equipos pedaggicos, as como las

pruebas de resultados (para estudiar el tipo de preguntas, ayudar a la interpretacin de los

resultados, entre otros), pero las mismas no pueden ser empleadas nuevamente en aplicaciones de prueba con grupos de estudiantes.

4. ALGUNAS RECOMENDACIONES Garantizar que el equipo directivo haya realizado procesos de sensibilizacin previos (a todos los

estamentos que estarn involucrados en la aplicacin) y que la comunidad educativa conozca los objetivos de la convocatoria.

Organice y verifique el espacio en donde se realizar la aplicacin con el coordinador, director o encargado lder de la institucin educativa por lo menos con algunas horas de anticipacin antes de iniciar el ejercicio. Verifique que estn disponibles el nmero adecuado de mesas y sillas, que las personas que van a aplicar cuenten con los implementos necesarios, un lpiz por persona, y un nmero adecuado de borradores y tajalpices que puedan compartir entre ellos en caso de no tener uno propio. Ubique los pupitres/mesas/carpetas en formacin tipo examen.

Se sugiere que los grupos estn en salones contiguos (en la medida de lo posible) para facilitar el orden, el seguimiento y la organizacin a lo largo de la aplicacin.

Coordinar los tiempos con los responsables del centro educativo para el descanso de los

Cdigo de centro: 3076 Prueba: TP2 Estamento: Estudiantes Grado: Noveno No. Hojas Mujeres: 16 No. Hojas Hombres: 15 No. Hojas Total: 31

Cdigo de centro: 3076 Institucin Educativa Fe y Alegra El Recuerdo

14

participantes, especialmente para los estudiantes (quiz sea necesario modificar ligeramente el horario de los estudiantes involucrados en el ejercicio).

Establecer criterios claros para los participantes (especialmente estudiantes) que van terminando la prueba (salen del saln y se dirigen a un lugar en especfico acordado con el centro educativo, salen a descanso, se quedan en silencio en el saln, entre otros).

Verificar que hayan docentes encargados de cada grupo de participantes en el momento de la prueba (es decir, que estn al mismo tiempo con la persona responsable de la aplicacin).

Para la aplicacin de familias y comunidad, verificar que hayan estudiantes disponibles para el apoyo en el momento de la aplicacin (los estudiantes pueden ayudar a leer las preguntas para quienes tienen dificultades, as como a completar debidamente las hojas de respuesta).

Verificar el primer da de la aplicacin con el rector de la institucin que el cuestionario de recursos (Tp7) est diligenciado de manera completa. Si no est, garantizar la realizacin del mismo para el da siguiente.

Para el momento del registro del cuestionario de procesos (TP2) verificar que el equipo directivo en pleno est participando del ejercicio y que estn respondiendo en una sola hoja de respuesta.

Entregar de manera individual el cuestionario de gnero (TP5) al equipo directivo. Contar con materiales como lpices, tajalpiz, esferos, borradores suficientes para realizar el

ejercicio, especialmente con las familias y miembros de la comunidad. En el caso de los estudiantes, se sugiere que se solicite este material previamente a cada uno. Esto debe ser coordinado con el centro educativo con suficiente anticipacin.

Explicar a los participantes que no deben rayar, marcar o responder en los cuestionarios. Insistir tanto como sea necesario.

Brindar toda la informacin sobre cmo se debe responder cada pregunta (para los cuestionarios TP2 y TP5), as como la forma de registrar la primera parte de la hoja de respuestas (actor, sexo, tipo de prueba, nivel)

Es MUY IMPORTANTE verificar durante la prueba el diligenciamiento de todas las preguntas previstas por cuestionario. No permita que le regresen cuadernillos con preguntas en blanco (especialmente aquellos de procesos y gnero). Verifique rpidamente al momento de recibir cada hoja de respuesta.

Le recomendamos que antes de iniciar la aplicacin de una prueba en particular, tenga presente el nmero de preguntas que tiene el cuestionario. De esta manera, al recibir las hojas de respuestas de los participantes, podr verificar rpidamente si han dado respuesta a todas las preguntas.

NO reciba hojas de respuesta sin la identificacin del tipo de prueba, poblacin que aplica, sexo y cdigo de centro.

Lleve un registro de asistencia discriminado por sexo para incluir en el cuadro del formato 2. Le recomendamos hacer este conteo a la mitad de la aplicacin de cada uno de los cuestionarios o pruebas.

Al finalizar cada prueba: o Cuente las hojas de respuesta. o Organice las hojas por sexo del participante. o Verifique que la cantidad de hojas coincide con el nmero de participantes. Si no

coincide, anote en la Hoja de Incidencias la razn (alguien se fue sin completar la prueba, se anul la hoja, etc.).

o Enumere cada hoja de respuesta. o Marque el sobre o empaque en donde guardar las hojas de respuesta (usando el rtulo

sugerido pginas atrs o uno similar). o Guarde las hojas de respuesta y selle el sobre o empaque. o Registre las novedades con suficiente detalle en la Hoja de incidencias.

Est muy atento al desarrollo del ejercicio, asista a quienes observe que estn teniendo dificultades y resuelva todas las dudas e inquietudes de forma amable y clara (especialmente para los cuestionarios TP1, TP2 y TP5 las pruebas de resultados merecen mayor cuidado cuando un

15

estudiante solicite apoyo). Organice con antelacin el material que va a necesitar cada da. No es oportuno ni prctico

dilatar el inicio del ejercicio en la institucin por no tener esto preparado y organizado. Al finalizar cada jornada de aplicacin, tmese el tiempo necesario para corroborar que tiene

completos los sobres/empaques de cada uno de los cuestionarios que ha sido aplicado y que estn debidamente marcados. Asimismo, verifique que en la Hoja de incidencias haya quedado anotado todo lo relevante a lo que sucedi durante el da.

No olvide enviar o compartir con anterioridad las preguntas del cuestionario de contexto para que en el momento de la aplicacin se tenga la informacin precisa de los estudiantes de 6 y 9. (preguntas 1, 2, 3, 4, 19 y 24). Coordine con las personas responsables del centro para garantizar que las respuestas estn claras y disponibles el da de la aplicacin (puede ser solicitndolas como parte de una tarea, por ejemplo).

Al final de este documento se encuentra una agenda propuesta para cada da de aplicacin. Si se decide que los y las docentes apliquen el cuestionario de procesos (TP2) en dos partes y en das diferentes, defina la cantidad de preguntas que se respondern tanto en la primera sesin como en la segunda. (Recuerde que esta anotacin aplica nicamente para los y las docentes en la prueba TP2).

5. QU PUEDE Y NO PUEDE HACER EL RESPONSABLE DE LA APLICACIN MIENTRAS SE RESPONDEN LOS CUESTIONARIOS?

Para los cuestionarios de procesos y gnero, en trminos generales, se puede apoyar con amplitud y generosidad a los participantes que estn teniendo dificultades. Nunca se debe influenciar la respuesta de los participantes, pero s se les pueden explicar con detenimiento el sentido de las preguntas, ofrecerles ejemplos, entre otros.

En el caso de las pruebas de lengua, matemticas y valores, se debe procurar tener un mnimo de interrelacin con los participantes. Emplear ejemplos o reformular preguntas est prohibido. Asista haciendo el mnimo posible de aclaraciones para no interferir con la medicin de la prueba.

En caso de tener estudiantes con Necesidades Educativas Especiales realizando la prueba, ample y flexibilice la dinmica de trabajo. No los excluya. Coordine con los responsables del centro educativo para tener espacios y tiempos suficientes para que ellos resuelvan los cuestionarios.

Si para el da previsto para la aplicacin de pruebas y cuestionarios con familias o comunidad la convocatoria no resulta satisfactoria, NO hay problema con hacer una nueva invitacin para un da posterior, siempre y cuando est dentro de los tres das previstos de trabajo.

No ample o dilate indefinidamente el ejercicio de aplicacin de pruebas. Los tres das propuestos son ms que suficientes para alcanzar a realizar el ejercicio. Si alguna eventualidad impide cumplir con la agenda, infrmela debidamente.

16

A continuacin se propone una organizacin para la aplicacin de los tres das para cada centro:

CRONOGRAMA DE APLICACIN

Da primero Da segundo Da tercero

Tiempo Cuestionario Participante Tiempo Cuestionario Participante Tiempo Cuestionario Participante

120 Procesos escolares y

gnero

Familias 30 Gnero 6 grado y 9 grado (por

separado)

90 Procesos escolares y gnero

Comunidad

local

90 Procesos escolares

6 grado y 9

grado (por

separado)1

90 Lenguaje 6 grado y 9 grado (por

separado)

60 Valores 6 grado y 9 grado (por

separado)2

30 Descanso

30 Descanso

30 Descanso

30 Contexto 6 grado y 9 grado (por

separado)

120 Procesos escolares y

gnero3

Equipo

directivo

90 Matemticas 6 grado y 9 grado (por

separado)

60 Procesos escolares y

gnero

Docentes 60 Continuacin procesos escolares

Docentes

Le recomendamos que valide con sus compaeros y compaeras de los equipos pedaggicos regionales y seccionales la versin definitiva del cronograma de aplicacin de cada centro. Si desea, tambin puede contactarse con el Equipo de Coordinacin Nacional de Calidad para resolver cualquier duda o inquietud adicional.

1 Tenga en cuenta que es probable que los estudiantes de 9 tarden un poco menos que los estudiantes de

6.

2 La prueba de valores de 6 puede tomar un aproximado de 30 minutos. La prueba de valores de 9 puede

tomar un aproximado de 60 minutos.

3 Segn la organizacin particular que se defina para cada centro, la aplicacin del equipo directivo y de los

docentes se podr realizar en simultneo (total o parcialmente).