2 Declaración AERA uso Modelos de Valor Agregado (MVA) en evaluación educadores y programas.docx

download 2 Declaración AERA uso Modelos de Valor Agregado (MVA) en evaluación educadores y programas.docx

of 12

Transcript of 2 Declaración AERA uso Modelos de Valor Agregado (MVA) en evaluación educadores y programas.docx

  • 7/25/2019 2 Declaracin AERA uso Modelos de Valor Agregado (MVA) en evaluacin educadores y programas.docx

    1/12

    Declaracin de AERA sobre el uso de

    Modelos de Valor Agregado (MVA) para laevaluacin de educadores y programasde preparacin de educadores1Aprobado por el Consejo Directivo de AERA, Junio de 2015

    Resumen

    El propsito de esta declaracin es informar a aquellos que usan o consideran usar modelos de

    valor agregados (MVA), acerca de sus limitaciones cientficas y tcnicas en la evaluacin deeducadores y de los programas que preparan a los maestros !a declaracin "revemente

    revisa los antecedentes y el conte#to actual del uso de los MVA para evaluar, enumera

    pro"lemas psicomtricos especficos de los MVA y a"orda la valide$ de las inferencias a partir

    de los MVA, dado los desafos de aislar la contri"ucin de profesores y lderes escolares de

    entre muc%os otros factores que configuran el aprendi$a&e estudiantil !a declaracin tam"in

    a"orda las limitaciones de la utili$acin de los MVA para evaluar los programas de preparacin

    de educadores, dada la amplia variedad de e#periencias y conte#tos en los que los egresados

    de esos programas tra"a&an y la falta de informacin completa y compara"le so"re dic%os

    programas Adem's, la declaracin va m's all' de un e#amen de los desafos y limitaciones,

    especificando oc%o requisitos tcnicos que de"en cumplirse para que el uso de los MVA sea

    e#acto, fia"le y v'lido !a declaracin concluye su"rayando la importancia de cualquier sistema

    de evaluacin de educadores cumpla con las m's altos est'ndares en materia de estadsticas ymedicin !lama a reali$ar importantes inversiones en investigacin so"re los MVA y so"re

    mtodos y modelos alternativos, y advierte contra el uso de los MVA para que tengan en las

    evaluaciones un alto peso y consecuencias (%ig%staes)*

    +ntroduccin

    El propsito de esta declaracin es informar a aquellos que usan o est'n considerando el uso

    de los MVA so"re las limitaciones tcnicas y cientficas de su inclusin en la aplicacin de

    sistemas de evaluacin

    1 raduccin %ec%a por -int%ia -%iri"oga, .oviem"re /* de *0/1

    2!a 3eclaracin de AERA so"re el uso de los Modelos de Valor A4adido (MVA) para la evaluacin de profesores y delos programas de preparacin de educadores, fue preparado "a&o los auspicios de AERA y apro"ados por su -onse&o

    3irectivo 5n su"comit del -onse&o 3irectivo prepar "orradores iniciales que reci"ieron revisiones "a&o anonimato,

    de die$ e#pertos 6enry 7raun, del 7oston -ollege, sirvi como monitor independiente y presidi el proceso de revisin

    7asado en los comentarios, revisiones adicionales, y el posterior de"ate en el -onse&o 3irectivo, esta declaracin

    reci"i la revisin final del 3r 7raun y apro"acin por el -onse&o 3irectivo en &unio de *0/1

    286ig%staes8 es un concepto usado en el mundo educativo anglosa&n para referirse al uso de las puntuaciones de

    las prue"as que se aplican a estudiantes, profesores, directivos o instituciones, para determinar para los evaluados

    castigos (sanciones, multas, reduccin de la financiacin, pu"licidad negativa), distinciones (premios, la cele"racinp9"lica, una pu"licidad positiva), avances (grado de promocin o graduacin de estudiantes), o compensaciones

    (aumentos de salario o "onificaciones para los administradores y profesores), en funcin de sus resultados (. del )

  • 7/25/2019 2 Declaracin AERA uso Modelos de Valor Agregado (MVA) en evaluacin educadores y programas.docx

    2/12

    El uso de los MVA para evaluar a los profesores y a los programas de preparacin de

    educadores, sigue siendo o"&eto de discusin y de"ate E#iste un inters compartido en las

    comunidades de pr'ctica y de poltica p9"lica, en la e&ecucin de sistemas de evaluacin de

    educadores que puedan conducir a me&oras en las pr'cticas de ense4an$a y que sean &ustas y

    li"res de pre&uicios :in em"argo, e#iste un desacuerdo considera"le entre los formuladores de

    la poltica p9"lica de educacin y los responsa"les de la toma de decisiones acerca de si el

    estado de conocimiento so"re los MVA, solos o en com"inacin con otros indicadores, est' lo

    suficientemente desarrollado como para ser incorporados en los sistemas de rendicin de

    cuentas

    !as cuestiones cientficas en &uego, as como los desacuerdos que rodean a los MVA, est'n

    documentados en una amplia literatura/y, m's recientemente, en *0/1 una edicin especial del

    Educational Researchertitulado 8El valor a4adido al encuentro de las escuelas; !os efectos de

    la utili$acin de evaluacin estandari$ada (est7ased) para docentes, so"re la la"or de los

    maestros y directivos8*!a presente declaracin no revisa esa literatura M's "ien, se "asa en

    pericia en cuanto a testeo, estadstica y metodologa en el campo de la investigacin en

    educacin y ciencias afines y en las normas que guan la investigacin as como en sus

    aplicaciones rigurosas en la poltica p9"lica y en la pr'ctica

  • 7/25/2019 2 Declaracin AERA uso Modelos de Valor Agregado (MVA) en evaluacin educadores y programas.docx

    3/12

    !os MVA generalmente son vistos como superiores a los modelos de estatus para evaluar los

    impactos so"re los resultados de aprendi$a&e de los estudiantes, porque est'n "asados en

    alguna manera so"re los cam"ios en los test de rendimiento !os modelos de Estatus

    simplemente refle&an la proporcin de estudiantes que cumplen o e#ceden un um"ral de

    rendimiento al final del a4o escolar, sin tener en cuenta su nivel acadmico en el comien$o del

    a4o 7a&o un modelo de estatus, un maestro con un grupo de estudiantes con un punta&e de

    alto rendimiento al inicio del a4o, normalmente estar' en venta&a con un profesor cuyos

    estudiantes tienen punta&es de "a&o rendimiento al inicio del a4o En contraste, los MVA se

    centran en cam"ios "asados en los test (de inicio y fin de a4o) de tal manera que los maestros

    o directivos con co%ortes de estudiantes con mayor puntuacin al inicio de a4o, no

    necesariamente est'n en venta&a frente a otros

    Aunque los MVA pueden ser superiores a los modelos de estatus, no significa que ellos est'n

    listos para su uso en la evaluacin de educadores o de programas que forman profesores 6ay

    potencialmente graves consecuencias negativas en el conte#to de la evaluacin que pueda

    resultar de la utili$acin de los MVA "asados en datos incompletos o imperfectos, as como de

    la malinterpretacin o el mal uso de los resultados del MVA !os maestros y directivos, por

    e&emplo, con "a&as puntuaciones en los MVA pueden e#perimentar prdida en su avance

    profesional, prdida en compensaciones salariales, e incluso despidos Asimismo, cuando un

    gran n9mero de docentes y directivos son identificados o clasificados incorrectamente,

    entonces los recursos se retiran y redirigen, y el sistema educativo como un todo se puede

    degradar :lo si tales indicadores se "asa en datos de prue"a de alta calidad, auditados y

    respaldados por slidos test de validacin para los fines especficos propuestos, los MVA

    pueden usarse apropiadamente, &unto con otros indicadores pertinentes, para fines de

    desarrollo profesional o para la evaluacin del educador

    !imitaciones del uso del MVA para la evaluacin

    6ay cuestiones fundamentales que de"en a"ordarse para usar los MVA para evaluar los

    profesores y otros educadores Actualmente, los registros longitudinales de las puntuaciones de

    los estudiantes en las prue"as estandari$adas sirven como insumo para los MVA !as prue"as

    estandari$adas, sin em"argo, varan en el grado en que refle&an plenamente los constructos

    que son la meta, as como en sus niveles de precisin en el rango puntuaciones reportadas

    Adem's, los e#'menes estatales actuales, por requisito federal, miden slo los est'ndares del

    grado o a4o en que est'n los estudiantes, sin incluir elementos necesarios para medir el

    crecimiento de estudiantes que se desempe4an muy por de"a&o o muy por encima de su nivelde grado >or lo tanto, se de"e e&ercer precaucin acerca de la calidad de la evaluacin

    psicomtrica si los MVA est'n siendo considerados para fines de evaluacin docente

    Adem's, el uso de los MVA presenta desafos adicionales importantes en la evaluacin de los

    directores y el personal no docente !os c'lculos de los MVA e#istentes no %an demostrado

    poder aislar suficientemente la eficacia de los maestros, directores u otro personal profesional

    no docente !as investigaciones e#istentes, por e&emplo, sugieren que la eficacia de los

    directores slo podr' ser separada de la eficacia de la escuela cuando se aplica a directores

    relativamente nuevos o en la evaluacin de la me&ora de escuelas durante varios de los a4os

    de permanencia de un director en una escuela?

  • 7/25/2019 2 Declaracin AERA uso Modelos de Valor Agregado (MVA) en evaluacin educadores y programas.docx

    4/12

    !as limitaciones del uso de los MVA para aislar la eficacia relativa de docentes y directivos se

    complican a9n m's cuando se utili$an para comparar la eficacia de los programas de

    preparacin de educadores 6ay muy pocas prue"as de que los Modelos de Valor Agregado

    pueden ser utili$ados para evaluar la efectividad de programas de formacin de educadores,

    "asados en la agregacin del desempe4o como profesores o directivos, de los graduados @A

    primera vista, podra parecer de sentido com9n que los punta&es que arro&an los MVA de

    maestros o directivos novatos agregados en relacin a su preparacin, podran servir como

    "ase para la comparacin :in em"argo, ese uso presenta m's desafos en tanto los maestros

    y lderes est'n tra"a&ando en una amplia gama de escuelas, grados y distritos +mportantes

    diferencias en esos conte#tos, incluidas las variaciones en las po"laciones estudiantiles, los

    currculos, los tama4os de las clases y recursos, as como la calidad de la induccin y tutora a

    los educadores nuevos, contri"uyen a las diferencias en los resultados de los educadores y, por

    lo tanto, se confunden con las diferencias en la eficacia de sus programas de formacin !as

    dificultades se agravan si los maestros y directivos incluidos en esas evaluaciones no son

    representativos de todos los graduados a travs de programas, como es el caso, por e&emplo,

    cuando los programas son peque4os o los graduados no tra"a&an en los sistemas escolares

    p9"licosBinalmente, es pro"lem'tico desde el punto de vista logstico y metodolgicocontrolar las diferencias entre los programas de formacin docente, tanto en la preparacin

    previa de los matriculados as como en el tipo de e#periencias que %ayan tenido desde la

    finali$acin del programa

    Requisitos tcnicos para la utili$acin del MVA

    Cuienes est'n involucrados en o contemplan usar los MVA en un sistema de evaluacin, de"en

    sopesar los "eneficios potenciales contra las limitaciones y comple&idades descritas

    anteriormente Adem's, se de"e considerar si las consecuencias de tal uso podran dar lugar a

    me&oras en las pr'cticas de instruccin y ganancias significativas en el aprendi$a&e de los

    estudiantes

    3e"ido a las consecuencias adversas de evaluaciones defectuosas para los educadores y los

    estudiantes a los que sirven, el uso de los MVA en cualquier sistema de evaluacin de"e

    cumplir unos est'ndares tcnicos muy altos Esta seccin esta"lece los requisitos tcnicos,

    todos los cuales de"en ser cumplidos para el uso de los MVA a fin de que sean cientficamente

    rigurosos y equitativosD-ualquier ale&amiento de estos requisitos de"e descartar su uso

    +ncluso si todos los requisitos tcnicos que se enumeran a continuacin son satisfec%os, la

    valide$ de las inferencias a partir de las puntuaciones de los MVA depende de la capacidad de

    aislar la contri"ucin de los docentes y directivos en el aprendi$a&e de los estudiantes, de las

    aportaciones que %acen otros factores que no est'n "a&o su control Esto es muy difcil, no slo

    de"ido a las limitaciones de los datos, sino tam"in a causa del elevado ordenamiento no

    aleatorio de estudiantes y profesores en las escuelas y en las clases dentro de las escuelas En

    consecuencia, dic%o desenmara4amiento puede lograrse slo imperfectamente y con un grado

    de #ito desconocido El sesgo resultante no ser' distri"uido uniformemente entre escuelas,

    dada la amplia variacin de factores crticos como por e&emplo, la movilidad de los estudiantes,

    y podra %acer que algunos estudiantes, escuelas y profesores apare$can como con "a&o

    desempe4o Este sesgo residual en las puntuaciones de los MVA puede ser e#acer"ado por elerror de medicin en los predictores empleados en el modelo >or lo tanto, de"e e&ercerse la

  • 7/25/2019 2 Declaracin AERA uso Modelos de Valor Agregado (MVA) en evaluacin educadores y programas.docx

    5/12

    de"ida precaucin en las interpretaciones de los punta&es de los MVA, puesto que

    generalmente no sa"emos cmo controlar correctamente el impacto de estos otros factores

    (1) Las puntuaciones de los !A s"lo deben ser derivados de las cali#icaciones de los

    alu$nos en las evaluaciones %ue cu$plan con los est&ndares pro#esionales de

    con#iabilidad ' valide en relaci"n a la #inalidad prevista

    En relacin a las puntuaciones de evaluacin que se utili$ar'n en los MVA para cualquier

    propsito, es esencial que las evaluaciones cumplan los est'ndares profesionales para

    evaluaciones descritas en los Estndares para el Testeo Psicolgico y Educativo emitidos

    en *0/= por la American Educational Researc% Association (AERA), la American

    >syc%ological Association (A>A), y el .ational -ouncil on Measurement in Education

    (.-ME) !a evidencia relevante se de"e reportar en la documentacin de soporte a

    afirmaciones y los usos propuestos de los resultados del MVA, incluyendo la evidencia de

    que las prue"as utili$adas son una medida v'lida del crecimiento mediante la medicin real

    de la materia que se ense4a y la gama completa de los logros de los estudiantes,

    representados en las aulas de los docentes

    (2) Las puntuaciones de los !A deben estar aco$pa*adas por l+neas separadas de

    evidencia de la con#iabilidad ' valide %ue apo'an cada a#ir$aci"n ' aru$entointerpretativo

    -ada tipo de evaluacin (profesores, directivos, programas de formacin docente) requiere

    evidencias para apoyar el argumento de valide$ para cada determinada aplicacin Esa

    evidencia de"e tener en cuenta el impacto potencial de factores conte#tuales y del sesgo

    de seleccin, so"re la idoneidad de las deducciones reali$adas/0!os argumentos de

    valide$ utili$ados para apoyar el uso de las puntuaciones de valor agregado de los

    estudiantes para la evaluacin del programa (que son menos propensas a errores) son

    insuficientes para respaldar la agregacin y uso de dic%as puntuaciones con fines de

    evaluacin individual del personal

    (-) Las puntuaciones de los !A se deben basar en varios a*os de datos de un n.$ero

    su#iciente de alu$nos

    !a precisin de las puntuaciones de los MVA depende de la cantidad y calidad de los datos

    disponi"les, as como de las caractersticas del modelo >or lo tanto, las puntuaciones delos MVA no de"en utili$arse a menos que se deriven de los datos o"tenidos de un n9mero

  • 7/25/2019 2 Declaracin AERA uso Modelos de Valor Agregado (MVA) en evaluacin educadores y programas.docx

    6/12

    suficiente de estudiantes durante varios a4os !as puntuaciones de los MVA siempre de"en

    ir acompa4adas de una estimacin de la incertidum"re para protegerse de una so"re

    interpretacin de diferencias encontradas Adem's, se de"e tener cuidado al a"ordar el

    c'lculo de la inesta"ilidad que resulta de la movilidad de los profesores entre escuelas,

    grados y asignaturas

    (/) Las puntuaciones de los !A s"lo debe calcularse a partir de las puntuaciones en las

    pruebas %ue sean co$parables a lo laro del tie$po

    Muc%os Estados est'n pasando actualmente a nuevos sistemas de evaluacin y adoptandoest'ndares de desempe4o nuevos o revisados !as grandes transiciones suelen afectar al

    rendimiento estudiantil, tanto directa como indirectamente, en tanto los maestros y

    directivos se adaptan a las nuevas normas, evaluaciones y e#pectativas Aunque esos

    cam"ios son de esperar, representan una amena$a para la valide$ de las interpretaciones

    de las puntuaciones de los MVA, especialmente cuando se comparan estos punta&es antes,

    a lo largo de y despus de la transicin !os cam"ios en las evaluaciones estudiantiles no

    slo plantean dificultades para los MVA, sino que tam"in interrumpen las tendencias

    longitudinales en las medidas del estatus Estas situaciones pueden conducir a

    interpretaciones errneas del progreso de los estudiantes En estos casos, las

    evaluaciones a lo largo de los a4os ya no puede ser equiparadas y los vnculos estadsticos

    entre las puntuaciones no son suficientemente fuertes como para apoyar los argumentos

    de valide$ e interpretaciones necesarias para el MVA Aunque se pueden esta"lecercategoras consistentes a travs de las evaluaciones para algunos modelos, las

    interpretaciones de crecimiento de antes o despus de la transicin a la evaluacin actual

    pueden no ser compara"les >or consiguiente, los punta&es de los MVA generalmente no

    de"en ser empleados a lo largo de las transiciones

    (5) Los puntajes de los !A no deben ser calculados por rados o para asinaturas donde

    no eisten evaluaciones estandariadas %ue estn aco$pa*adas de evidencias de su

    con#iabilidad ' valide

    -uando la evaluacin estandari$ada de datos no est' disponi"le a travs de todos los

    grados (/*) o asignaturas (por e&emplo, salud, estudios sociales) en un estado o distrito,

    a menudo se usan medidas alternativas (por e&emplo, evaluaciones desarrolladas

    localmente, medidas pro#y, calificaciones o"servacionales) en los grados y asignaturas

    para implementar el MVA//ales evaluaciones alternativas no de"e utili$arse a menos que

    estn acompa4ados de evidencia de confia"ilidad y valide$ tal como lo requieren los

    Standards for Educational and Psychological Testingde AERA, A>A y .-ME 3e"ido a que

    la valide$ de los punta&es de los MVA es tan dependiente de la calidad de la evaluacin

    su"yacente, no de"en ser aplicadas en grados o asignaturas donde %ay una falta de

    evidencias so"re confia"ilidad y valide$

  • 7/25/2019 2 Declaracin AERA uso Modelos de Valor Agregado (MVA) en evaluacin educadores y programas.docx

    7/12

    () Los puntajes de los !A nunca deben utiliarse solos o aislados en siste$as de

    evaluaci"n de educadores o de prora$as de #or$aci"n docente

    :i se utili$an los resultados de los MVA, de"eran ser slo uno de los componentes de una

    evaluacin m's integral de educadores o de programas Adem's, su significado de"e ser

    interpretado en el conte#to del currculum y tareas docentes de un profesor individual, con

    advertencias e#plicitadas so"re los pro"lemas comunes de interpretacin, tales como el

    Fefecto de tec%o y sueloG de las prue"as para la estimacin del incremento (de punta&es)

    en estudiantes de alto y "a&o logro Htras medidas de la pr'ctica y los resultados de los

    estudiantes siempre de"en ser integrados en los &uicios acerca de la eficacia de los

    maestros en general

    (3) Los siste$as de evaluaci"n %ue usan !A deben incluir seui$iento continuo para

    aseurar calidad tcnica ' valide de su uso

    El monitoreo continuo es esencial para cualquier programa de evaluacin de educadores y

    es especialmente importante para aquellos que incorporen indicadores "asados en un

    MVA, que slo recientemente se %a empleado ampliamente :i los organismos que otorgan

    autori$aciones, e#igen el uso de MVA, ellos, &unto con las organi$aciones que implementan

    y reportan los resultados, son responsa"les de la reali$acin de la evaluacin continua de

    las consecuencias tanto previstas como las imprevistas El seguimiento de"e ser de

    suficiente alcance y e#tensin como para aportar evidencias para documentar la calidad

    tcnica de la aplicacin del MVA y la valide$ de su uso dentro de un determinado sistema

    de evaluacin -uando %ay prue"as fidedignas de que %ay consecuencias negativas, node"en escatimarse esfuer$os para mitigarlos Aunque cuando se utili$an m9ltiples

    indicadores, puede ser difcil determinar qu desafos tcnicos son atri"ui"les al MVA, la

    presencia de consecuencias negativas, por s sola, de"era detonar una alerta importante

    (4) Los in#or$es de evaluaci"n ' las decisiones basadas en los !A deben incluir

    esti$aciones estad+sticas de error asociadas con las $edidas del incre$ento (de

    puntajes) en los estudiantes as+ co$o cual%uier cali#icaci"n o $edici"n derivada de ellas

    3e"e e#istir transparencia con respecto a los usos y el sistema glo"al de evaluacin en los

    que los MVA est'n insertados !os informes de"eran incluir la &ustificacin y los mtodos

    utili$ados para estimar el error y la precisin asociada con diferentes puntuaciones del

    MVA Adem's, su confia"ilidad de a4o a a4o y de grado a grado de"e ser informado

    Adem's, cuando las puntuaciones de corte o niveles de rendimiento se esta"lecen con la

    finalidad de %acer decisiones evaluativas, se de"en documentar y reportar los mtodos

    utili$ados, as como la precisin de los estimados de clasificacin 3e"er' &ustificarse la

    inclusin de cada indicador y el peso que se le asigna en el proceso de evaluacin

    !os elementos del informe de"en incluir; (a) una descripcin de los datos y de los controles

    de calidad de los datos empleadosI (") la metodologa, los modelos estadsticos, y los

    mtodos inform'ticos utili$adosI c) una &ustificacin y e#plicacin de cmo cada indicadorse %a incorporado en el sistema de evaluacinI y d) evidencia de valide$ para apoyar el uso

  • 7/25/2019 2 Declaracin AERA uso Modelos de Valor Agregado (MVA) en evaluacin educadores y programas.docx

    8/12

    del sistema -uando en la ela"oracin de informe se identifican pro"lemas materiales en la

    utili$acin del MVA, se de"en esta"lecer procedimientos que desencadenen una revisin

    del sistema de evaluacin y posi"les modificaciones del sistema, necesarios para su uso

    continuo !a produccin del reporte se puede cumplir a travs de la preparacin de un

    manual tcnico, un manual de aplicacin, o un con&unto de informes de investigacin !a

    difusin de"e incluir formatos accesi"les que est'n ampliamente disponi"les para el p9"lico

    en general, as como para profesionales

    -onclusin

    Muc%os Estados y distritos %an incorporado los MVA como parte de un sistema integral para

    evaluar a los docentes, directores de escuelas y programas de preparacin de educadores

    E#isten considera"les riesgos de mala clasificacin e interpretaciones errneas en el uso de los

    MVA para informar a estas evaluaciones -omo se detall anteriormente, la comunidad de

    investigacin en educacin su"raya que el uso de los MVA en cualquier evaluacin de"e

    satisfacer los requisitos tcnicos de la precisin, confia"ilidad y valide$ Esto incluye la atencin

    no slo a la valide$ de constructo y la confia"ilidad de las evaluaciones de estudiantes, sino

    tam"in a la confia"ilidad de los resultados de los modelos de evaluacin de profesores y de

    programas de formacin para educadores, as como su consecuente valide$ En suma, los

    Estados y los distritos de"en aplicar las investigaciones pertinentes y los est'ndares

    profesionales que se refieren al testeo, el personal, y la evaluacin del programa antes de

    em"arcarse en la aplicacin del MVA

    !os est'ndares de la pr'ctica en estadsticas y testeo esta"lecen un alto nivel tcnico para la

    agregacin correcta de los resultados de la evaluacin de los estudiantes para cualquier

    propsito, especialmente aquellos relacionados con el %acer inferencias so"re la eficacia del

    profesor, el director de una escuela, de un programa de preparacin docente En consecuencia,

    la AERA recomienda que los MVA (que incluyen modelos de ganancia de punta&es de los

    estudiantes, modelos de transicin, modelos del crecimiento de percentiles del estudiante, y

    modelos de medidas de valor) no pueden ser usados sin evidencias suficientes de que se %a

    cumplido con el alto nivel tcnico e#igido, en formas que apoyen todas las afirmaciones,

    argumentos interpretativos, y los usos (por e&emplo, ranings, decisiones de clasificacin)

    Aunque puede %a"er diferencias de opinin acerca de la conveniencia de utili$ar los MVA para

    fines de evaluacin, %ay un amplio acuerdo en que datos poco fia"les o de mala calidad,

    atri"uciones incorrectas, falta de evidencias de la confia"ilidad o valide$ asociadas con

    puntuaciones de valor a4adido y aseveraciones sin fundamento, conducen a usos inde"idos

    que per&udican a los estudiantes y educadores

    >or 9ltimo, la AERA recomienda inversiones sustanciales en la investigacin so"re los MVA,

    as como so"re mtodos y modelos alternativos para la evaluacin del educador y de

    programas de formacin docente 6ay alternativas prometedoras actualmente en uso en los

    Estados 5nidos, que merecen atencin/*Estos incluyen el uso de datos de o"servacin de la

    maestra/

  • 7/25/2019 2 Declaracin AERA uso Modelos de Valor Agregado (MVA) en evaluacin educadores y programas.docx

    9/12

    El valor de la evidencia alta calidad, "asada en investigaciones no puede e#agerarse En

    definitiva, slo inferencias rigurosamente fundamentadas acerca de la calidad y la eficacia de

    los maestros, lderes educativos, y de los programas de preparacin de los educadores pueden

    contri"uir a me&orar el aprendi$a&e de los estudiantes

    Referencias

    American Educational Researc% Association (*000) Position statement on high-staes testingin pre-!"#$ education Retrieved fromhttp:!!!"aera"netAboutAERAAERARules#oliciesAERA#olicy$tatements#osition$tatementon%igh$ta&es'estingtabid11*De+ault"asp,

    American Educational Researc% Association, American >syc%ological Association, J .ational-ouncil on Measurement in Education (*0/=) Standards for educational andpsychological testing Kas%ington, 3-; American Educational Researc% Association

    American Educational Researc% Association, American >syc%ological Association, J .ational

    -ouncil on Measurement in Education (*0/=) Standards for educational andpsychological testing Kas%ington, 3-; American Educational Researc% Association

    7aer 7 3, HluLole , Nreen > - +++ (*0/ress

    Nrissom A, alogrides 3, !oe" : (*0/*) 2sing student test scores to measure principal

    performance .as%ville, .; Vander"ilt 5niversity

    6arris 6 ., 6errington - 3 (Eds) (*0/1) Value added meets t%e sc%ools; %e effects of

    using test"ased teac%er evaluation on t%e Lor of teac%ers and leaders S:pecial

    issueT Educational Researcher, ==(*)6enry N , ers%aL 3, Uulli R, :mit% A (*0/*) +ncorporating teac%er effectiveness into

    teac%er preparation program evaluation +ournal of Teacher Education, ?

  • 7/25/2019 2 Declaracin AERA uso Modelos de Valor Agregado (MVA) en evaluacin educadores y programas.docx

    10/12

    nig%t : !, Edmonson , !loyd N, Ar"aug% B, .olan , K%itney E,Mc3onald >

    (*0/*) E#amining t%e comple#ity of assessment and accounta"ility in teac%er

    education +ournal of Teacher Education, ?, Moore o%nson : (*0/*) +s >AR a good investmentO 5nderstanding t%e costs and

    "enefits of teac%er >eer Assistance and RevieL programs Educational

    Policy, *?(1), ?D?P@*D

    Rot%stein (*00D) :tudent sorting and "ias in valueadded estimation; :election ono"serva"les and uno"serva"les Education 3inance and Policy, =(=), 1

  • 7/25/2019 2 Declaracin AERA uso Modelos de Valor Agregado (MVA) en evaluacin educadores y programas.docx

    11/12

    1Vase !ocLood J Mc-affrey, *00@IRot%stein, *00D

    2Vase 6arris J 6errington, *0/1

    3Esta declaracin so"re la utili$acin de los MVA y otros modelos similares para la evaluacin del educador y la evaluacin de programas,

    se desarrolla con "ase en y complementa las normas profesionales y las recomendaciones e#istentes !a primera es Estndares para la

    Evaluacin Educativa y Psicolgica(*0/=), en la que se es"o$an lineamientos slidos y adecuados para el uso de tests en educacin y

    psicologa Estas normas y recomendaciones son patrocinadas y respaldadas por la American Educational Researc% Association (AERA), laAmerican >syc%ological Association (A>A) y el .ational -ouncil on Measurement in Education (.-ME) :egundo, el .ational Researc%

    -ouncil y la .ational Academy of Education pu"licaron un informe del taller, 4teniendo el Valor del Valor A5adido7raun et al, *0/0, que

    plantea diversas cuestiones clave, en particular que (/) el 8modelo8 de >7+ (>7+) se %a aplicado a una variedad de enfoques, que varan en

    sus requisitos de datos, su comple&idad estadstica, y el uso de la evaluacinI y (*) %ay muc%as inquietudes so"re las prue"as utili$adas y

    los aspectos tcnicos (en particular las fuentes de sesgo e imprecisin) y cuestiones de transparencia y comprensin p9"lica (7raun et al,

    *0/0) !a tercera es la 6eclaracin de Posicin sore las Prueas 7igh-Staes en la Educacin Pre-!-#$ %ec%a por AERA (American

    Educational Researc% Association, *000)

    46ay una gran variedad de modelos que agregan el incremento de punta&es de los estudiantes o +ndicadores de Valor A4adido (MVA) para

    "rindar cierta medida de cam"io que es incorporada en la evaluacin de educadores y de los programas de preparacin de educadores !a

    presente declaracin se refiere a todos los modelos como MVA y no a"orda las distinciones entre los diferentes modelos Estos modelos

    incluyen (a) Modelos "asados en Nanancia de >unta&e (por e&emplo, incremento) o Nanancia >romedio, que simplemente agregan la

    diferencia en punta&es restando los punta&es previos de los punta&es actuales en las prue"asI ") Modelos "asados en ransicin (o Modelos

    -ategricos), que calculan los cam"ios agregados en las categoras de rendimiento durante un perodo de * o m's a4osI (c) Modelos

    "asados en >ercentiles del -recimiento de los Estudiantes (:N>s), que responden a la pregunta 8W-u'l es el rango percentil de la

    puntuacin de una prue"a actual de un estudiante, frente a estudiantes con %istoria de puntuacin similaresO8 y, a continuacin, eval9an a

    los docentes so"re la "ase de la mediana o promedio de los percentiles agregados de sus estudiantesI y (d) Modelos de Valor Agregado y

    de Medidas Agregadas (MVA), que esta"lecen una puntuacin esperada de la prue"a actual para los estudiantes "as'ndose en los

    resultados de e#'menes de a4os anteriores, &unto con (posi"lemente) otras caractersticas demogr'ficas de los estudiantes, el aula y la

    escuela para intentar dar cuenta del impacto de otros factores m's all' de los logros estudiantiles para aislar el impacto del maestro -ada

    uno de estos modelos tiene diferentes venta&as e inconvenientes que de"en tenerse en cuenta al interpretar sus resultados, pero el de"ate

    est' m's all' del alcance de esta declaracin (vase 7raun et al, *0/0)

    5-onsultarAmerican :tatistical Association, *0/=

    6Vase -%iang, !ipscom", J Nill, *0/*INrissom, alogrides, J !oe", *0/*

    7Vase Nansle, .oell, J 7urns, *0/*

    8Ver6enry, ers%aL, Uulli, J :mit%, *0/*Inig%t et al, *0/*

    9Esta declaracin de condiciones, iguala y es consistente con la declaracin de posicin de la American Educational Researc% Association

    so"re prue"as 6ig%:taes en la educacin >re/*, apro"ada en *000

    10El desarrollo y uso de resultados de valor agregado (o de crecimiento) para maestros, directivos y programas de formacin de

    profesores, a menudo requiere diferentes medidas y mtodos de agregacin de datos y atencin a los errores de medicin 3iferentes MVA

    pueden "asarse en supuestos diferentes, y el grado en que los errores de medicin son conta"ili$ados de"e ser e#plcitado (!ocLood et

    al, *[email protected], 3arling6ammond, 6aertel, J ELart, *0/0I7raun, -%udoLsy, J oenig, *0/0)

    11Vase Buller J 6ollingLort%, *0/=INoe J 6old%eide, *0//

    12Buera de los Estados 5nidos, e#isten enfoques alternativos para garanti$ar altos niveles de calidad de los directivos y maestros, que

    no utili$an prue"as estandari$adas (por e&emplo, Binlandia, :ingapur)

    13Vase elNoldring et al, *0/1

    http://edr.sagepub.com/content/early/2015/11/10/0013189X15618385.full#ref-18http://edr.sagepub.com/content/early/2015/11/10/0013189X15618385.full#ref-18http://edr.sagepub.com/content/early/2015/11/10/0013189X15618385.full#ref-22http://edr.sagepub.com/content/early/2015/11/10/0013189X15618385.full#ref-22http://edr.sagepub.com/content/early/2015/11/10/0013189X15618385.full#ref-22http://edr.sagepub.com/content/early/2015/11/10/0013189X15618385.full#ref-15http://edr.sagepub.com/content/early/2015/11/10/0013189X15618385.full#ref-15http://edr.sagepub.com/content/early/2015/11/10/0013189X15618385.full#ref-2http://edr.sagepub.com/content/early/2015/11/10/0013189X15618385.full#ref-2http://edr.sagepub.com/content/early/2015/11/10/0013189X15618385.full#ref-5http://edr.sagepub.com/content/early/2015/11/10/0013189X15618385.full#ref-5http://edr.sagepub.com/content/early/2015/11/10/0013189X15618385.full#ref-5http://edr.sagepub.com/content/early/2015/11/10/0013189X15618385.full#ref-5http://edr.sagepub.com/content/early/2015/11/10/0013189X15618385.full#ref-5http://edr.sagepub.com/content/early/2015/11/10/0013189X15618385.full#ref-1http://edr.sagepub.com/content/early/2015/11/10/0013189X15618385.full#ref-1http://edr.sagepub.com/content/early/2015/11/10/0013189X15618385.full#ref-5http://edr.sagepub.com/content/early/2015/11/10/0013189X15618385.full#ref-3http://edr.sagepub.com/content/early/2015/11/10/0013189X15618385.full#ref-3http://edr.sagepub.com/content/early/2015/11/10/0013189X15618385.full#ref-3http://edr.sagepub.com/content/early/2015/11/10/0013189X15618385.full#ref-6http://edr.sagepub.com/content/early/2015/11/10/0013189X15618385.full#ref-14http://edr.sagepub.com/content/early/2015/11/10/0013189X15618385.full#ref-14http://edr.sagepub.com/content/early/2015/11/10/0013189X15618385.full#ref-14http://edr.sagepub.com/content/early/2015/11/10/0013189X15618385.full#ref-9http://edr.sagepub.com/content/early/2015/11/10/0013189X15618385.full#ref-16http://edr.sagepub.com/content/early/2015/11/10/0013189X15618385.full#ref-16http://edr.sagepub.com/content/early/2015/11/10/0013189X15618385.full#ref-17http://edr.sagepub.com/content/early/2015/11/10/0013189X15618385.full#ref-17http://edr.sagepub.com/content/early/2015/11/10/0013189X15618385.full#ref-19http://edr.sagepub.com/content/early/2015/11/10/0013189X15618385.full#ref-19http://edr.sagepub.com/content/early/2015/11/10/0013189X15618385.full#ref-19http://edr.sagepub.com/content/early/2015/11/10/0013189X15618385.full#ref-20http://edr.sagepub.com/content/early/2015/11/10/0013189X15618385.full#ref-20http://edr.sagepub.com/content/early/2015/11/10/0013189X15618385.full#ref-5http://edr.sagepub.com/content/early/2015/11/10/0013189X15618385.full#ref-8http://edr.sagepub.com/content/early/2015/11/10/0013189X15618385.full#ref-10http://edr.sagepub.com/content/early/2015/11/10/0013189X15618385.full#ref-10http://edr.sagepub.com/content/early/2015/11/10/0013189X15618385.full#ref-12http://edr.sagepub.com/content/early/2015/11/10/0013189X15618385.full#ref-12http://edr.sagepub.com/content/early/2015/11/10/0013189X15618385.full#ref-12http://edr.sagepub.com/content/early/2015/11/10/0013189X15618385.full#ref-22http://edr.sagepub.com/content/early/2015/11/10/0013189X15618385.full#ref-15http://edr.sagepub.com/content/early/2015/11/10/0013189X15618385.full#ref-2http://edr.sagepub.com/content/early/2015/11/10/0013189X15618385.full#ref-5http://edr.sagepub.com/content/early/2015/11/10/0013189X15618385.full#ref-5http://edr.sagepub.com/content/early/2015/11/10/0013189X15618385.full#ref-5http://edr.sagepub.com/content/early/2015/11/10/0013189X15618385.full#ref-1http://edr.sagepub.com/content/early/2015/11/10/0013189X15618385.full#ref-1http://edr.sagepub.com/content/early/2015/11/10/0013189X15618385.full#ref-5http://edr.sagepub.com/content/early/2015/11/10/0013189X15618385.full#ref-3http://edr.sagepub.com/content/early/2015/11/10/0013189X15618385.full#ref-6http://edr.sagepub.com/content/early/2015/11/10/0013189X15618385.full#ref-14http://edr.sagepub.com/content/early/2015/11/10/0013189X15618385.full#ref-9http://edr.sagepub.com/content/early/2015/11/10/0013189X15618385.full#ref-16http://edr.sagepub.com/content/early/2015/11/10/0013189X15618385.full#ref-17http://edr.sagepub.com/content/early/2015/11/10/0013189X15618385.full#ref-19http://edr.sagepub.com/content/early/2015/11/10/0013189X15618385.full#ref-19http://edr.sagepub.com/content/early/2015/11/10/0013189X15618385.full#ref-20http://edr.sagepub.com/content/early/2015/11/10/0013189X15618385.full#ref-5http://edr.sagepub.com/content/early/2015/11/10/0013189X15618385.full#ref-8http://edr.sagepub.com/content/early/2015/11/10/0013189X15618385.full#ref-10http://edr.sagepub.com/content/early/2015/11/10/0013189X15618385.full#ref-12http://edr.sagepub.com/content/early/2015/11/10/0013189X15618385.full#ref-18
  • 7/25/2019 2 Declaracin AERA uso Modelos de Valor Agregado (MVA) en evaluacin educadores y programas.docx

    12/12

    14Vase Noldstein, *0/0I>apey J Moore o%nson, *0/*

    15Vase 7aer, HluLole, J Nreen, *0/ointe, J Hrr, *0/0INold%a"er, *0/