Como_valorar_un_test_psicometrico

120
 Errores Conceptuales  y Metodológicos en la Evaluación PsicoPedagógica “Cómo Valorar un Test Psicométrico” Monografía Técnica

description

La presente monografía ha sido elaborada por profesionales1que hemosrecibido en el pasado formación impartida por los Profesores E. ManuelGarcía Pérez y Ángela Magaz Lago, Directores de los Programas Máster delGrupo ALBOR-COHS (www.gac.com.es )Todos/as nosotros/as formamos parte del “Grupo de Psicología Lógica”,integrado por Psicólogos/as, Psicopedagogos/as, Psiquiatras y otrosprofesionales de diversos países que compartimos un mismo objetivo: eldesarrollo profesional de la Acción Psicológica a partir de Métodos eInstrumentos cuya utilidad para la ayuda a otras personas haya sidoconvenientemente contrastada con la experiencia.Conocedores de la obra “Cómo Valorar Test Psicométricos”, elaborada porlos Profesores García Pérez y Magaz, hemos procedido a un análisis de lamisma desde el punto de vista de la calidad de sus contenidos y de suutilidad práctica. Estimamos que la misma constituye una aportación a losfines que persigue nuestro Grupo. Por ello, tras haber sabido de sudescatalogación por el editor, nos hemos dirigido a los autores parasolicitar su permiso a fin de incorporar sus contenidos a esta Monografía,llevando a cabo algunas modificaciones y añadido otras valoracioneselaboradas por algunos de nosotros/as.

Transcript of Como_valorar_un_test_psicometrico

Cmo Valorar un Test PsicomtricoErrores Conceptuales y Metodolgicos en la Evaluacin PsicoPedaggicaMonografa Tcnica

Cmo valorar un test psicomtrico?

CMO VALORAR UN TEST PSICOMTRICO?

Errores Conceptuales y Metodolgicos en la Evaluacin PsicoEducativa

Monografa Tcnica

Julio 2011manuscrito no publicado, exclusivamente para distribucin personal

Grupo Psicologa Lgica 2011

1

Cmo valorar un test psicomtrico?

Presentacin

La presente monografa ha sido elaborada por profesionales 1 que hemos recibido en el pasado formacin impartida por los Profesores E. Manuel Garca Prez y ngela Magaz Lago, Directores de los Programas Mster del Grupo ALBOR-COHS (www.gac.com.es) Todos/as nosotros/as formamos parte del Grupo de Psicologa Lgica, integrado por Psiclogos/as, Psicopedagogos/as, Psiquiatras y otros profesionales de diversos pases que compartimos un mismo objetivo: el desarrollo profesional de la Accin Psicolgica a partir de Mtodos e Instrumentos cuya utilidad para la ayuda a otras personas haya sido convenientemente contrastada con la experiencia. Conocedores de la obra Cmo Valorar Test Psicomtricos, elaborada por los Profesores Garca Prez y Magaz, hemos procedido a un anlisis de la misma desde el punto de vista de la calidad de sus contenidos y de su utilidad prctica. Estimamos que la misma constituye una aportacin a los fines que persigue nuestro Grupo. Por ello, tras haber sabido de su descatalogacin por el editor, nos hemos dirigido a los autores para solicitar su permiso a fin de incorporar sus contenidos a esta Monografa, llevando a cabo algunas modificaciones y aadido otras valoraciones elaboradas por algunos de nosotros/as. Esta Monografa es de libre distribucin, autorizndose a quienes lo deseen a realizar copias en cualquier formato: impreso o electrnico. Desde aqu invitamos a los Profesionales y Estudiantes de Psicologa que lo deseen a incorporar sus valoraciones, ya sea ampliando las de los instrumentos que aqu se incluyen u otros de uso en sus pases de origen. Pueden escribirnos al correo electrnico: [email protected] Julio de 2011

1

Mara Dolores Alburquerque (Alemania). Anglica M. Soria, Mara del Rosario Aldao, Patricia Gardey, Ana Gaddi y Mariana Carrada (Argentina). Galia Lescano, Luis Alberto Rodrguez, Martha Sialer, Roco Salgado, Rebeca Velasco, Rolando Pomalima y Karina Medina (Per). Mara Elena Vigneaux, Hctor Rojas, Pamela Cataln, Patricia Emeres, Ricardo Castro, Sandra Urra, Patricia Escobar y Alejandra Valenzuela (Chile). Sonia Ballesteros, Roco Prieto, Cristina Bravo, Alma Ors, Sandra Martnez, Pilar Jurado, Beatriz Recio, Encarna Snchez, Luis A. Sousa y Raquel Lavandeira (Espaa). Mara Jos Alfonso (Venezuela) y otros/as.

Grupo Psicologa Lgica 2011

2

Cmo valorar un test psicomtrico?

ndice:Pg. Carta a los lectores Una breve historia Qu es un test psicomtrico Clases de test psicomtricos La Valoracin de un test psicomtrico: cmo, por qu y para qu Cmo valorar un test psicomtrico? Validez De Contenido De Constructo Predictiva Concurrente Discriminante 18 20 20 21 22 5 10 12 14 16 18

Fiabilidad Test-retest Consistencia Interna 22 22 25 26 28 31 34

Tipificacin Utilidad prctica Resumen Un ejemplo Extracto de los criterios propuestos por la Comisin de Test del COP

Grupo Psicologa Lgica 2011

3

Cmo valorar un test psicomtrico?

Anexo: Errores conceptuales y metodolgicos en la evaluacin con los siguientes test: ANSIEDAD, de Reynolds y Richmond BENDER BOEHM CARAS COBAR COLUMBIA, Escala de Madurez Mental CONCEBAS CUMANIN D2, test de Atencin EACP EDAH EMTDAH FORMAS IDNTICAS FROSTIG ITPA MSCA PFSE PROLEC STAI-C TAMAI TOULOUSE-PIRON TO-PALABRAS WISC-III WISC-IV 40 42 43 45 47 49 50 51 54 57 58 65 67 69 71 76 80 86 91 94 99 101 103 107 116 117 118

Nota Importante Sobre los Profesores Garca Prez y Magaz Bibliografa

Grupo Psicologa Lgica 2011

4

Cmo valorar un test psicomtrico?

Carta a los lectoresEstimado/a lector/a:

(adaptacin de la original)

Nos gustara conocer la razn de tu inters por esta monografa, pero dada su naturaleza creemos que slo caben tres posibilidades: 1. Eres un profesional que realiza evaluaciones psicopedaggicas (actitudes, valores, aptitudes, habilidades,) 2. Eres un docente universitario que se ocupa de la enseanza o de las prcticas de evaluacin 3. Eres un estudiante de psicometra o de evaluacin psicolgica Evidentemente caben otras, pero esta Monografa est escrita pensando especialmente en los estudiantes, en los profesionales noveles y en los ms experimentados con una elevada carga o exigencias en su trabajo; en aquel psiclogo o psicloga que un da fuimos todos nosotros y que comenzamos nuestro trabajo empleando aquellos recursos que nos ensearon en la Facultad con una confianza ciega en ellos. Nunca dejaremos de reconocer el esfuerzo y la dedicacin de nuestros docentes, ni apreciaremos suficientemente las enseanzas de aqullos que nos dieron lo mejor que tenan en esos momentos. Ahora bien, la Universidad es quizs el templo de la sabidura, pero con el tiempo descubrimos que no es el templo de la verdad. Ni siquiera llega a ser el templo de la realidad. Han transcurrido ms o menos aos desde nuestra graduacin y constatamos que las enseanzas universitarias distan notablemente de la prctica psicolgica y psicoeducativa. La distancia cada vez es mayor y, en nuestra opinin, lo que se ensea en las Facultades de Psicologa y Educacin se encuentra muy alejado de la realidad o de las necesidades cotidianas del profesional. No obstante, esta situacin parece estar cambiando gracias a que los profesores ms jvenes inician diversos procesos de actualizacin y mejora de los mtodos e instrumentos, contando en sus investigaciones

Grupo Psicologa Lgica 2011

5

Cmo valorar un test psicomtrico?

con aportaciones de psiclogos/as que se desempean en gabinetes, consultoras, escuelas, clnicas y otras instituciones. La poblacin a la que los psiclogos/as prestamos nuestros servicios cree que empleamos los mejores y ms actuales mtodos e instrumentos para llevar a cabo nuestro trabajo con la mayor eficacia posible, desconociendo que la realidad es bien diferente: posiblemente ms del 75% de los recursos conceptuales, instrumentales y metodolgicos que se emplean en la evaluacin Psicopedaggica tienen ms de 30 aos de antigedad. Uno de los problemas ms acuciantes a los que se enfrentaban los psiclogos de pases castellano hablantes a principios de los aos 80, era la prctica ausencia de instrumentos de evaluacin psicomtrica elaborados en sus propios pases, o al menos, adaptados de manera adecuada y bien baremados o tipificados con la poblacin con la que empleaban: Bender, Boehm, McCarthy, Itpa, Wisc, Frostig, Caras, Percepcin de Diferencias, Binet-Simon, Kohs, Columbia, y otras decenas ms de test, todos ellos de una antigedad notable, desarrollados en los Estados Unidos de Amrica de acuerdo a planteamientos conceptuales de principio, o a lo sumo de mediados, del siglo pasado. Estos eran los instrumentos que nos ensearon, con los que practicamos y los que adquirimos para nuestro trabajo profesional. Cuestionamos alguna vez estos test? Cmo bamos a hacerlo si carecamos de criterios o bien stos entraban en colisin con los consejos aportados por nuestros profesores? Acaso ellos en su trabajo empleaban otros diferentes? No. Cules iban a aplicar si no haba otros? Ahora bien, qu sentido tiene que en la actualidad, segundo decenio del siglo XXI, sigamos empleando algunos instrumentos de escasa calidad psicomtrica, de base conceptual superada o falsada por la experiencia, sin validacin emprica alguna, con contenidos inadecuados para la realidad social actual, mal o escasamente baremados con nuestras poblaciones?

Grupo Psicologa Lgica 2011

6

Cmo valorar un test psicomtrico?

Sin embargo, a pesar de las deficiencias notorias de algunos de estos test, la mayor parte de los profesionales continan utilizndolos sin considerar la posibilidad de elegir otros con mayores ventajas psicomtricas y utilidad prctica; ahora ya s disponibles, gracias a que algunos profesionales siguieron las sugerencias de psiclogos tan experimentados e inquietos como el que referimos a continuacin:

"... desde aqu animamos a los investigadores espaoles a que generen sus propios instrumentos; y por otro lado, a la bsqueda de tradiciones de pensamiento ms propias de nuestra tradicin terica y cultural con el fin de ofrecer una psicologa mejor y de mejor aplicacin para resolver problemas que existen en nuestro entorno fsico y social. Esta especificacin no quiere decir que sea de menor calidad ni con menores garantas metodolgicas que las que se utilizan en otros entornos. Lo que pide es que sean relevantes y con la misma calidad metodolgica posible. Cuando hemos puesto en prctica estas ideas los resultados han sido mejores con instrumentos generados desde nuestro propio contexto que con otros importados. Y pensamos que los usuarios tienen derecho a recibir los mejores servicios posibles" (Pelechano, 1997, p. 34)

Esta Monografa se elabora para ayudarte a valorar los instrumentos que ests utilizando o que te preparas para empezar a utilizar en cuanto inicies tu andadura profesional. Deseamos que seas consciente de las deficiencias de algunos de ellos, lo que se denominan Errores Conceptuales y Metodolgicos, y que adquieras habilidades para seleccionar los ya existentes o los de futura aparicin, de acuerdo a criterios de la mxima calidad psicomtrica, de utilidad prctica y de eficacia para la elaboracin de informes, psicopedaggicos o periciales.

Los usuarios de los servicios psicolgicos esperan y se merecen recibir la mejor asistencia profesional posible, algo a lo que adems obliga el Cdigo Deontolgico del Psiclogo (www.cop.es/cop/codigo.htm)

Grupo Psicologa Lgica 2011

7

Cmo valorar un test psicomtrico?

Artculo 17 La autoridad profesional del Psiclogo/a se fundamenta en su capacitacin y cualificacin para las tareas que desempea. El/la Psiclogo/a ha de estar profesionalmente preparado y especializado en la utilizacin de mtodos, instrumentos, tcnicas y procedimientos que adopte en su trabajo. Forma parte de su trabajo el esfuerzo continuado de actualizacin de su competencia profesional. Debe reconocer los lmites de su competencia y las limitaciones de sus tcnicas. Uno de los principales problemas a los que se enfrenta un estudiante de Psicologa, un profesional novel o un profesional excesivamente ocupado para llevar a cabo el anlisis de los instrumentos que se le ofrecen en el mercado de los test, es el hecho de que, con frecuencia, los instrumentos psicomtricos se mencionan en artculos cientficos y semicientficos, en pginas bibliogrficas, en lugares de promocin comercial o en sitios web de diversos profesionales o entidades, sin hacer jams mencin al ao en que se publicaron. Este dato que podra alertar sobre su posible inadecuacin a los casos que trata, se evita de manera sistemtica en los lugares ms destacados de sus webs o de las publicaciones, tanto por parte de los editores como por quienes los emplean en sus investigaciones. Tales test, convenientemente "remozados" en las portadas de sus manuales o en sus cuadernillos de aplicacin (lo cual en algunos casos puede llegar a constituir una desvirtuacin del mismo) dan la impresin a los profesionales noveles de ser instrumentos de reciente creacin. En otras ocasiones, lo que aparece como novedad editorial, confundiendo al profesional que lo toma como un instrumento de reciente creacin, dado su formato moderno, es un instrumento de tal antigedad que sus planteamientos conceptuales o los metodolgicos resultaron superados hace tiempo. El Grupo de Psicologa Lgica propone descartar como criterio para seleccionar un test la amplitud de uso del mismo:es uno de los test ms empleados en todo el mundo y sustituirlo por un criterio de utilidad: es que resulta ms eficaz para conocer el valor de una variable o caracterstica del sujeto.

Grupo Psicologa Lgica 2011

8

Cmo valorar un test psicomtrico?

Se imaginan nuestras ciudades y carreteras llenas de vehculos de ms de 30 aos de antigedad? Tales vehculos representaban el mayor avance tecnolgico de la Humanidad en el campo de la locomocin, en los mismos aos en que Psiclogos y empresas editoras de test ponan a disposicin de los profesionales algunos test psicomtricos. Alguno de los Psiclogos/as actuales acudira a su trabajo en uno de estos vehculos si pudiera elegir hacerlo? Probablemente, NO. En tal caso, por qu en su moderno y tecnolgicamente adelantado coche sigue transportando el mismo test de hace 20, 30, 40 o ms aos de antigedad? Las personas que reciben ayuda de un profesional de la Psicologa o de la Educacin esperan siempre recibir la mejor respuesta posible. Elegir un instrumento psicomtrico con las mejores cualidades de validez (de contenido/constructo), fiabilidad y baremacin poblacional es una cuestin deontolgica y ms an "de conciencia". Las Facultades de Psicologa y los Colegios de Psiclogos tienen un elevado grado de responsabilidad en la difusin de este tipo de actitudes y valores en cada nueva promocin de profesionales, y en los veteranos ms ocupados. Esperamos que progresivamente la asuman. Por otra parte, el menosprecio al trabajo de desarrollo de un test lleva a muchos profesionales a la copia ilegal de los componentes esenciales del mismo, sin tener en cuenta, como frecuentemente avisan todos los editores, del riesgo que conlleva en trminos de reduccin o desaparicin de la investigacin para el desarrollo de nuevos y mejores instrumentos. Evidentemente, no nos estamos refiriendo a la copia de hojas de anotacin o incluso a parte de los manuales, como las instrucciones de aplicacin o correccin, sino a los elementos esenciales del test, como son los elementos estimulares que lo constituyen. Quizs la falta de rentabilidad econmica sea en parte la explicacin al retraso tecnolgico de que adolece la Psicologa de habla hispana. Frente al gran desarrollo de la psicometra en los Estados Unidos y Canad, Espaa, que podra liderar el desarrollo de los test adecuados a la poblacin hispano-hablante, sigue empleando instrumentos elaborados en otras pocas del conocimiento y en pases con diferencias culturales que se expresan en lenguas diferentes.

Grupo Psicologa Lgica 2011

9

Cmo valorar un test psicomtrico?

Una breve historia:La elaboracin de test psicomtricos se inicia en el siglo XIX, cuando sir Francis Galton, en el transcurso de sus investigaciones sobre el papel de la herencia, comprendi la necesidad de efectuar mediciones de algunas caractersticas humanas. En 1884 estableci un Laboratorio antropomtrico en la Exposicin Internacional sobre Salud en Londres. Las personas podan pagar 3 peniques y conocer la medida de algunos de sus rasgos fsicos y funciones sensoriales y motrices: agudeza visual y auditiva, energa muscular, tiempo de reaccin,.... Con ello, consigui medidas de un grupo suficientemente amplio y diversificado de la poblacin de cuyo anlisis pudo establecer las primeras conclusiones estadsticas. En 1890 James McKeen Cattell emple por primera vez en un artculo de la revista Mind la expresin test mental y el trmino medidas. En 1903, Alfred Binet public L'etude experimentale de l'intelligence (El Estudio Experimental de la Inteligencia), en el cual explicaba los problemas que presentaba establecer las diferencias entre los nios aventajados y los retrasados y los mtodos empleados para identificarlos y evaluar sus diferencias. La lnea central de investigacin de Binet fue la elaboracin de un test capaz de diferenciar aquellos escolares cuyas capacidades les permitiran adaptarse al sistema educativo normal, de aquellos que necesitaran un refuerzo extra, sealando adems las carencias de los mismos. En el ao 1905 comenz la aplicacin de test colectivos en las escuelas francesas. La Primera Guerra Mundial marc un hito importante en la historia de los test, al conllevar la introduccin por vez primera de test de aplicacin colectiva en la poblacin. Cuando los Estados Unidos entran en guerra, se ven necesitados de reclutar soldados y suboficiales de forma rpida.

Grupo Psicologa Lgica 2011

10

Cmo valorar un test psicomtrico?

En 1917 Arthur S. Otis recibe el encargo de preparar unos test que permitan clasificar a los reclutados: los test alfa y beta que fueron aplicados a cerca de dos millones de personas. Se trataba de dos test muy sencillos, de aplicacin colectiva; el test alfa era una prueba verbal, adecuada para sujetos con capacidad lectora y el test beta una prueba no verbal, apropiada para sujetos con dficit de alfabetizacin. Se iniciaba as la elaboracin de pruebas de uso individual o grupal para la obtencin de informacin de un sujeto sobre alguna de sus caractersticas (habilidades cognitivas, sensoriales o motrices) comparndola con un grupo social, cultural, etc., de referencia.

Grupo Psicologa Lgica 2011

11

Cmo valorar un test psicomtrico?

Qu es un test psicomtrico?

Un test psicomtrico constituye esencialmente una medida objetiva y tipificada de una muestra de comportamiento (Anastasi, 1978 pg. 21) Esta definicin implica rigurosamente lo siguiente: Una Medida Objetiva, lo que significa que el mtodo de medicin debe verse afectado lo menos posible por interpretaciones del sujeto o del evaluador. As, un buen test se presenta a quien lo tiene que resolver de una manera muy clara y concreta, sin generar dudas sobre la tarea que se le solicita. Igualmente, los criterios de valoracin de las respuestas no pueden dejar lugar a dudas por parte del evaluador sobre si la respuesta es acertada o errnea. Y, an ms, cuando una escala de un test se construye con preguntas que pueden responderse con una valoracin mltiple: 0, 1, 2, una misma puntuacin global en la escala puede obtenerse con pocas preguntas de respuesta 2 o con ms preguntas de respuesta 1, lo cual supone un incumplimiento del requisito de objetividad. Una Medida Tipificada, lo que significa que debe compararse con otras medidas de sujetos, que resulten suficientemente representativas de la poblacin. Para ello se tienen en cuenta las puntuaciones medias y la varianza de los resultados de una muestra de referencia. Obviamente, la comparacin entre puntuaciones de sujetos diferentes no debe realizarse con puntuaciones directas, sino con puntuaciones tipificadas. Lgicamente, los grupos de comparacin no pueden ser reducidos (30, 50, 80, sujetos), ni encontrarse todos ellos formando parte de un mismo grupo social (en el mismo colegio, la misma ciudad,)

Grupo Psicologa Lgica 2011

12

Cmo valorar un test psicomtrico?

Debe tenerse en cuenta que vamos a establecer una comparacin entre los resultados obtenidos por un individuo y los obtenidos por un gran grupo de poblacin de caractersticas similares. Por ello, resultara poco adecuado obtener grupos de baremacin (de los que se obtienen las puntuaciones tipificadas) de cuanta reducida o procedentes de un mismo colectivo. La Federacin Europa de Asociaciones de Psiclogos (E.F.P.A.) acord e hizo pblicos (www.efpa.eu/reports) unos criterios tcnicos para valorar la calidad de los test psicomtricos. Estos criterios consideran que los grupos de baremacin deben estar constituidos por un nmero de 150 a 200 sujetos para considerarlo de calidad suficiente. Evidentemente, cuanto menos diversificadas sean las muestras de baremacin, mayor debe ser el nmero de sujetos que las integren. Y al contrario, cuando se consiguen unas muestras de baremacin muy diversificadas y aleatorizadas, ms aceptable es un nmero reducido de las mismas.

Grupo Psicologa Lgica 2011

13

Cmo valorar un test psicomtrico?

Clases de test psicomtricosLos test pueden clasificarse de acuerdo con distintos y diferentes criterios. Una clasificacin til los divide en test de: a) Actitudes, Valores, Preferencias,... En este grupo se incluyen aquellos test en los que se trata de medir lo que piensa el sujeto sobre un tema o aspecto de su vida. Se incluiran aqu los test de Actitudes o Valores ante las relaciones sociales, como el ADCA; de Adaptacin, como el TAMAI o la EMA; de Autoconcepto, etc. b) Personalidad. Grupo en el que se incluyen aquellos test en los que se trata de medir lo que piensa, siente y cmo acta de manera habitual el sujeto. Se incluiran aqu test como los EPQ, EPQ-J, 16-PF, MMPI, CPQ, etc. Obviamente, cada uno de estos test solamente resulta adecuado para su empleo con el grupo de poblacin con el que se validaron y no con otros grupos. Un error frecuente de los evaluadores consiste en emplear test, como el MMPI, validado con poblacin psiquitrica, con personas mentalmente sanas, con el supuesto objetivo de detectar anomalas psicopatolgicas. c) Rendimiento o Aptitudes. Grupo que incluye a todos los test que pretenden medir el grado de habilidad o destreza que tiene el sujeto en un campo o rea de comportamiento. Dado que estos test realizan mediciones sobre muestras de comportamiento, todos ellos son test de Habilidades. El evaluador, no realiza una medida de la capacidad o aptitud del sujeto, sino que, a travs de la medida de su grado de habilidad, infiere la capacidad o aptitud del sujeto para realizar algo.

Grupo Psicologa Lgica 2011

14

Cmo valorar un test psicomtrico?

A su vez, los test de rendimiento pueden sub-clasificarse en otras mltiples categoras. Como pueden ser: Habilidades intelectuales (RAVEN, IGF, WISC, TONI-2, CERVANTES, EMIN-6) Habilidades atencionales (CARAS, TOULOUSE-PIRON, EMAV) Habilidades verbales (ITPA, PLON, TALE-2000, ELA-R) Habilidades lingsticas (TALE-2000) Habilidades mecnicas Habilidades artsticas (creatividad), Habilidades motrices Habilidades sensoriales Etc.

Grupo Psicologa Lgica 2011

15

Cmo valorar un test psicomtrico?

La valoracin de un test psicomtrico: cmo, por qu y para qu

Todo profesional que desempee tareas de evaluacin diagnstica se ve en la necesidad de valorar los test psicomtricos de que dispone en el mercado profesional con la finalidad de seleccionar aqullos que cumplan los mejores criterios para el uso al que les destina. Si el profesional se dedica a la intervencin psicoeducativa, la evaluacin previa de los escolares le resulta imprescindible y, por lo tanto, tambin necesita valorar los instrumentos de medida. En el campo de la psicologa forense, la gran responsabilidad que conlleva la evaluacin pericial de los casos en litigio, exige a los profesionales un cuidado esmerado en la eleccin de test como elemento de contraste y evidencia emprica de sus conclusiones. Ahora bien, como en todos los campos de la ciencia, la Psicometra se encuentra en desarrollo, siguiendo las pautas de los cambios de paradigmas conceptuales de la Psicologa. Este fenmeno es observable retrospectivamente, al constatar cmo en una poca de predominio de los postulados psicoanalticos, los test en uso eran todos ellos de naturaleza proyectiva (Fbulas de Duss, Figura Humana, H.T.P., Rorschach, CAT, TAT, test de Luscher, Wartegg,) mientras que en los ltimos 30 aos, el abandono progresivo del psicoanlisis ha llevado a los profesionales al mayor empleo de test psicomtricos. Asimismo, un anlisis de la realidad actual, transcultural, nos permite comprobar cmo en aquellos pases donde predominan todava los planteamientos psicodinmicos (Argentina, Chile,...) sigue predominando el empleo de test proyectivos frente a los psicomtricos. Por ello, tanto el profesional con experiencia, como el novel, necesitan disponer de conocimientos prcticos, sencillos y rpidos para valorar la mayor o menor adecuacin, a su desempeo profesional, de test clsicos y nuevos.

Grupo Psicologa Lgica 2011

16

Cmo valorar un test psicomtrico?

El objetivo de esta Monografa es proporcionar un resumen claro y preciso de los criterios de valoracin de test psicomtricos que puedan emplear Asesores, Orientadores y Consultores, en sus actividades de Evaluacin Psicoeducativa, aunque puede generalizarse a diversos campos de actuacin profesional de la Psicologa. Evidentemente, cualquier profesional ha cursado en sus estudios de graduacin, asignaturas de Estadstica, Psicometra, Psicologa Experimental, Diseo y Anlisis de Datos y/o similares, por lo cual, lo que aqu se expone no ser novedoso, ni les resultar de difcil comprensin; nicamente exponemos una visin aplicada, concreta y prctica de sus conocimientos. En el pasado, durante nuestra formacin como posgraduados, al asistir a un curso sobre Valoracin de Test Psicomtricos pudimos comprobar cmo todos los participantes agradecamos el resumen conceptual y metodolgico que supona la realizacin del mismo. Comprobamos que no habamos aprendido nada nuevo, pero que s habamos integrado nuestros conocimientos previos de un modo novedoso, sencillo y eficaz. Este es el objetivo que pretendemos con esta Monografa, planteada con una finalidad: proporcionar a los usuarios de los servicios de Evaluacin Psicolgica la posibilidad de recibir la mejor asistencia profesional en cuanto se refiere a la evaluacin diagnstica de las dificultades de nios y adolescentes. La mejor asistencia profesional favorece tanto al profesional, como al usuario de sus servicios, entendiendo por mejor la que resulta ms econmica en trminos de coste/beneficio; esto es: la evaluacin ms rpida, segura, cmoda y, sobre todo, ms fiable, aquella en cuyos resultados se puede confiar para tomar decisiones respecto a las ayudas que necesitan los escolares para mejorar su situacin de desarrollo.

Grupo Psicologa Lgica 2011

17

Cmo valorar un test psicomtrico?

Cmo valorar un test psicomtrico?La Valoracin de un test psicomtrico es un procedimiento, al que se ve enfrentado en diversas ocasiones todo profesional de la Psicologa, que puede llevarse a cabo con distintos criterios, dependiendo del contenido y la finalidad de uso del instrumento que se desea valorar. De manera general, los aspectos fundamentales a tener en cuenta son los siguientes: A. VALIDEZ B. FIABILIDAD C. TIPIFICACIN D. UTILIDAD

1

A. VALIDEZ:

Se denomina validez de un test al grado en que dicho test mide lo que

pretende medir. Esta es la primera condicin, indispensable, que debe reunir un test de calidad: poseer una validez ptima, dado que de no ser as el resto de criterios de valoracin posibles resultan insignificantes. Si un test pretende medir ansiedad, lo esperable es que mida indicadores de ansiedad. Si un test pretende medir autoestima, lo esperable es que mida indicadores de autoestima. La validez puede estudiarse desde diversas perspectivas: A.1. Validez de Contenido: un test posee validez de contenido cuando los elementos de cada escala corresponden fielmente a la definicin operativa de cada variable a medir. Lo deseable, aunque no siempre sucede as, es que los autores del test hagan explcita la definicin operativa de la variable o variables que mide su test. Si esta definicin no se encuentra de manera explcita en su manual tcnico, entonces debemos considerar si, a nuestro juicio profesional, los elementos del test corresponden realmente a manifestaciones de la variable que el profesional desea medir.

Grupo Psicologa Lgica 2011

18

Cmo valorar un test psicomtrico?

Por ejemplo: si un test se denomina de ansiedad pero incluye indicadores de depresin, no es un test vlido para medir ansiedad (vase como ejemplo el STAI, Spilberger, C.) Lamentablemente, algunos autores, con innegable buena fe, pero confundidos por la fantasa de la estadstica, construyen test o escalas siguiendo un procedimiento estadstico: el denominado anlisis factorial exploratorio. Este mtodo, que no es otra cosa que un estudio mltiple de correlaciones entre elementos, puede inducir a errores muy graves, ya que puede considerar que los elementos que correlacionan entre s constituyen una escala que mide una misma variable. Ese error es muy frecuente y se puede detectar rpidamente, si en el manual tcnico analizamos el apartado en el que se explica cmo se construy el test y encontramos que se llev a cabo mediante anlisis factorial. Este dato, aadido a la ausencia de una definicin operativa de cada variable (o factor) que mide el test nos permite saber que su construccin no es vlida. Un ejemplo que usamos habitualmente para explicar este error metodolgico: Si tomamos medidas sobre el desarrollo de un nio con indicadores de lenguaje (palabras que conoce), indicadores de conocimientos culturales o de la naturaleza, habilidades de clculo matemtico, e incluimos, por ejemplo, el tamao de sus pies y la longitud de sus orejas, Al estudiar a nios de edades entre 4 y 8 aos, veremos que existe una correlacin muy elevada entre: 1. tamao de los pies y tamao de las orejas (lo cual sera un indicador de desarrollo fsico) 2. amplitud de vocabulario, conocimientos culturales y clculo aritmtico (lo cual sera indicador de desarrollo curricular) Pero nuestra sorpresa sera enorme al ver que un posible anlisis factorial exploratorio podra muy bien indicar que todos los indicadores estn incluidos en un nico factor que podramos denominar ndice de desarrollo. Pues bien, a nadie se le oculta que no

Grupo Psicologa Lgica 2011

19

Cmo valorar un test psicomtrico?

podemos sumar la longitud del pie con la cantidad de palabras que conoce un nio, ya que el resultado sera una media estadstica que lejos de aportar informacin nicamente confunde y favorece conclusiones errneas. Pero tiene perfecto sentido constatar la correlacin entre un posible ndice de conocimientos curriculares de vocabulario y un ndice de desarrollo fsico, ya que entre los 4 y los 8 aos de edad el nio se desarrolla en ambas reas. A.2. Validez de Constructo: un test posee validez de constructo cuando las escalas que lo constituyen, corresponden fielmente al constructo que trata de medir, definido por los autores de test en base a los conocimientos aportados por la Psicologa o las disciplinas que corresponda. Por ejemplo: si un test trata de medir inteligencia, entendida sta como capacidad de razonamiento, no puede estar compuesto, como, por ejemplo, el K-BIT, de Kaufman por dos escalas independientes: una escala que mide vocabulario y otra que mide razonamiento. Por otra parte, si un test trata de medir ansiedad, que es una respuesta fisiolgica, no puede incluir una escala de pensamientos depresivos. Como puede comprobarse fcilmente, la ausencia de validez de contenido afecta gravemente a la validez de constructo. A.3. Validez Predictiva o Criterial: si el test desea realizar una prediccin de conducta o comportamiento, grado en que correlaciona con un criterio externo. No siempre se utiliza un test para efectuar predicciones, en cuyo caso, no corresponde estudiar su validez predictiva. Sin embargo, en los casos adecuados, esta validez predictiva debe indicarse en el manual y su valor debe ser notablemente superior al 50%.

Grupo Psicologa Lgica 2011

20

Cmo valorar un test psicomtrico?

Entindase que una validez predictiva del 50% equivale a lanzar una moneda al aire. El uso del test se justifica si su prediccin es notablemente superior a este 50%. A.4. Validez Concurrente o Convergente: constituye un modo de valorar la validez de constructo. La validez concurrente o convergente de un test hace referencia al grado en que la medida que realiza coincide con la medida proporcionada por otro test que evala la misma variable por un procedimiento diferente. Un ndice de validez de un nuevo test lo proporciona una alta correlacin con otro test de validez ya constatada anteriormente para la misma medida. De modo opuesto se puede analizar la Validez Divergente. Se podra cuestionar la necesidad de un nuevo test cuando se dispone ya de otro que satisface la necesidad de evaluacin. Las razones son varias: a) un test vlido y fiable puede haber quedado obsoleto por aspectos meramente formales (de forma: expresiones culturales, formato de presentacin,) lo cual justifica que se elabore otro nuevo, superando al anterior en estos aspectos y acumulando las bondades del anterior o anteriores. b) un nuevo test que evale lo mismo que otro anterior, vlido y fiable, puede justificarse por razones de economa, ser ms breve, resultar ms cmoda su administracin o correccin, En todo caso, cuando no se dispone de un test suficientemente vlido y fiable, resulta innecesaria, por imposible, establecer la validez convergente del nuevo test. En estos casos, a veces se informa de la escasa validez convergente del test nuevo con respecto a otro al que se pretende sustituir por su dficit de validez o de fiabilidad. En ocasiones, para asegurar la validez de un test para evaluar una variable y no otra u otras, se analiza la correlacin con otro/s test/s que miden otra/s variable/s y se establece una validez divergente, en trminos de muy escasa correlacin con ellos.

Grupo Psicologa Lgica 2011

21

Cmo valorar un test psicomtrico?

A5. Validez Discriminante: se refiere a la posibilidad de distinguir a los sujetos con respecto a la variable que mide el test. Por ejemplo: un test de eficacia atencional debe asegurar que los sujetos que sacan puntuaciones bajas tienen menos eficacia atencional que los que obtienen puntuaciones altas. Un test de inteligencia debe asegurar que las puntuaciones bajas corresponden a sujetos de nivel intelectual significativamente por debajo de la zona media y que las altas corresponden a los situados significativamente por encima de la zona media. La gran relevancia de esta validez se ha destacado en la X Conferencia de la Asociacin Europea de Evaluacin Psicolgica, en setiembre de 2009 (Mler Jrg Michael, Hospital Universitario de Mnster). B. FIABILIDAD: la fiabilidad es el grado en que un test realiza la medicin con exactitud. El estudio de la fiabilidad siempre debe realizarse con posterioridad al estudio de la validez, entendindose que si el test no es vlido para lo que afirma medir, qu sentido tiene asegurar que es ms o menos fiable? De anloga manera a la validez, la fiabilidad de un test se puede analizar de varias maneras. B.1. Fiabilidad Test-Retest: Grado de estabilidad temporal de la medida; un indicador de que siempre mide igual cuando el constructo es estable. Un test que proporciona una medida cuando se aplica en una ocasin y otra medida cuando se aplica en otra ocasin diferente, no tiene buena fiabilidad. B.2. Fiabilidad o Consistencia Interna: Grado en el que cada elemento de una escala del test contribuye a dar estabilidad a la medida de cada caracterstica. Obviamente, cada test est constituido por diversos elementos. Se da por supuesto que cada elemento contribuye a medir lo mismo que los dems y que su suma constituye una medida total.

Grupo Psicologa Lgica 2011

22

Cmo valorar un test psicomtrico?

Sin embargo, pudiera ser que algn elemento no contribuya de manera significativa a la misma medida que los otros, lo que debera llevar al autor a desestimarlo. En este aspecto conviene destacar que los valores de consistencia interna aumentan con el nmero de elementos del test. Por ello, para valorar la fiabilidad es fundamental estudiar los ndices de homogeneidad de cada elemento (correlacin de cada elemento con el total de la escala de la que forma parte). Cuando estos ndices son mayores de 0,3 podemos estar seguros de la consistencia interna del instrumento. Tambin se suelen considerar los ndices de correlacin entre elementos; sin embargo, se debe tener presente que un ndice de correlacin entre elementos (normalmente entre pares-impares) elevado no es una garanta de fiabilidad del test, ya que puede haber muchos elementos similares, formulados de manera diferente, convenientemente situados en lugares pares o impares para asegurar un elevado ndice de correlacin. Por otra parte, cuando se indican elementos cuyos coeficientes tem-total arrojan valores menores a 0,35 deben considerarse de baja consistencia. Entendida la fiabilidad de un test como la cualidad que permite confiar en sus resultados, sta tambin se ve afectada por otros factores; como pueden ser: 1. Una excesiva cantidad de elementos, lo que hace que se llegue a los ltimos con un estado de fatiga fsica o bien con un estado de desmotivacin. Las respuestas de los ltimos elementos pueden ser mucho menos fiables que los primeros, lo que afectara a la totalidad de la prueba. Este puede ser el caso de las Escalas BASC, bien elaboradas pero de dudosa fiabilidad (en su aspecto prctico) por la excesiva longitud de las mismas. Adems, un test con ms de 15 20 elementos puede aumentar la fiabilidad de forma errnea.

Grupo Psicologa Lgica 2011

23

Cmo valorar un test psicomtrico?

2. La presencia de elementos del test formulados en trminos negativos: No me gusta cambiar de planes ( ) Nunca ( ) A veces ( ) A menudo

Se ha comprobado en mltiples ocasiones que en castellano, la formulacin negativa afecta seriamente a la comprensin del sentido en el que deben darse las respuestas. De hecho, al revisar las respuestas con los sujetos, con frecuencia stos indican que lo entendieron en sentido contrario. 3. La inclusin en la formulacin de los elementos del test aspectos relacionados con la frecuencia o intensidad de la variable a medir:

Frecuentemente cambio de planes

( ) Nunca ( ) A veces ( ) A menudo

Muchas veces pienso en hacer un viaje ( ) Nunca ( ) A veces ( ) A menudo Tiene excesiva inquietud motora ( ) Nada ( ) Poco ( ) Bastante ( ) Mucho

Esto hace, en ocasiones, imposible responder adecuadamente a la pregunta formulada, afectado a la confiabilidad de la medida. Curiosamente, instrumentos de amplio uso entre los profesionales adolecen de esta deficiencia; tal es el caso de las Escalas de Conners y la EDAH para la deteccin de Dficit de Atencin con Hiperactividad. 4. La presencia de enunciados complejos, confusos, difciles de entender por todos los sujetos: Sus esfuerzos se frustran fcilmente, es inconstante... Su actitud es impropia y escasamente apreciable desde un punto de vista objetivo... Si el enunciado no es claro y concreto, unos sujetos lo contestarn entendindolo de una manera y otros de otra diferente, con lo que sus resultados no sern comparables entre s

Grupo Psicologa Lgica 2011

24

Cmo valorar un test psicomtrico?

C. TIPIFICACIN: la tipificacin de un test es el aspecto final de su valoracin psicomtrica, que va ligado a su fiabilidad. En la medida en que la tipificacin-baremacin es una caracterstica del test de todo punto fundamental, afecta seriamente a la calidad psicomtrica del mismo. Todo test que intenta situar a un sujeto con relacin a un grupo de referencia debe acreditar que ha sido aplicado a una muestra amplia y significativa de la poblacin con la cual se utilizar posteriormente. Obtener estas medidas es el proceso de baremacin del test. Las muestras de poblacin que participan en el estudio de baremacin deben cumplir los siguientes requisitos: a) ser suficientemente amplias, b) estar diversificadas y no proceder del mismo lugar, y c) representar adecuadamente al grupo al que pertenece la persona que ser evaluada con el test. Adems de que las muestras deben estar bien definidas y ser amplias, el proceso de tipificacin debe ser realizado con las mximas garantas; esto es, llevado a cabo por profesionales con experiencia en la administracin de test (evitando el empleo de estudiantes, sin experiencia previa) y siguiendo estrictamente las instrucciones de seleccin de sujetos y de aplicacin y valoracin del instrumento. Algunos test evalan caractersticas que se distribuyen normalmente en la poblacin, pero en otras ocasiones esto no es as. Por ejemplo, la distribucin de los niveles de ansiedad no suele ser normal, sino asimtrica, mientras que la de la inteligencia lgica es normal. Por ello, todo test debera proporcionar como informacin relevante para su valoracin las curvas de distribucin en la poblacin con la que se obtuvieron los baremos.

Grupo Psicologa Lgica 2011

25

Cmo valorar un test psicomtrico?

Adems, es muy importante conocer si el test tiene efecto techo. Es decir, si a partir de cierta puntuacin todos los sujetos tienen la misma. Resulta fundamental conocer con detalle las caractersticas de la muestra de tipificacin, ya que eso permitir al evaluador determinar la fiabilidad del test en unos u otros grupos de poblacin. Por ejemplo: no se puede utilizar un test de problemas emocionales, tipificado con muestra de poblacin general, con sujetos de poblacin clnica o al revs.

D. UTILIDAD PRCTICA:

Todo test se disea o desarrolla con cierta finalidad. Existen

test que se disean con fines exclusivamente de investigacin, mientras que otros se disean para su aplicacin en la elaboracin de programas de intervencin educativa o teraputica. Cada test puede considerarse de mayor o menor utilidad, en funcin de su finalidad. As, un test puede tener una calidad indiscutible pero, no servir al profesional para determinada finalidad, en cuyo caso, su empleo es, sencillamente, intil. Los test psicomtricos se pueden emplear para conocer datos sobre una poblacin o sobre un sujeto, siempre con una finalidad concreta: D.1. Descriptiva: lo que se desea es conocer la distribucin de puntuaciones en una o ms variables. Ejemplo: conocer los miedos o temores de los escolares de secundaria ante los exmenes D.2. Evaluativa: lo que se desea es integrar las medidas obtenidas con el test con otras informaciones, para elaborar hiptesis explicativas de un fenmeno conductual o bien, conocer la influencia de un proceso de intervencin en una o ms variables. Ejemplo: encontrar una posible explicacin al bajo rendimiento escolar

Grupo Psicologa Lgica 2011

26

Cmo valorar un test psicomtrico?

D.3. Teraputica: se desea conocer algunas caractersticas de un sujeto para disear una estrategia de tratamiento en funcin de las medidas obtenidas. Ejemplo: conocer el nivel de intensidad de un trastorno depresivo o conocer factores predisponentes de un sujeto para padecer un trastorno por estrs D.4. Investigadora: llevar adelante una investigacin bsica o emprica.

El investigador puede emplear los mismos test que el profesional, dependiendo de la finalidad de la investigacin.

Grupo Psicologa Lgica 2011

27

Cmo valorar un test psicomtrico?

EN RESUMEN

Si el lector desea un esquema-resumen de estos criterios para valorar de una manera rpida y sencilla un test psicomtrico, con vistas a su empleo profesional, puede utilizar los cuadros de las pginas siguientes.

Grupo Psicologa Lgica 2011

28

Cmo valorar un test psicomtrico?

VALORACIN DE UN TEST PSICOMTRICO VALIDEZ DE CONSTRUCTOSe describen operativamente las variables a medir? Se informa del modelo conceptual en el que est basado el test?

VALIDEZ DE CONTENIDOLos elementos de cada escala corresponden a la definicin operativa de cada variable?

FIABILIDADConsistencia interna alrededor de 0.80 (para test con menos de 10 elementos)? ndice de homogeneidad de cada elemento superior a 0.3, para todos, especialmente en los test de ms de 10 elementos? Test-retest superior a 0.80?

TIPIFICACINSe describe con detalle la procedencia de la muestra? Muestra superior a 150 sujetos por grupo de edad/sexo? Muestra aleatorizada? Muestra geogrficamente amplia? Muestra socio-culturalmente amplia y representativa? Se proporciona descripcin de la distribucin de las puntuaciones en la muestra de baremacin: normal/asimtrica?

Grupo Psicologa Lgica 2011

29

Cmo valorar un test psicomtrico?

Sirve para disear una estrategia de actuacin? Sirve para valorar la eficacia de una estrategia de actuacin? Comparte el test el modelo conceptual de algn Programa de Intervencin? Para los test de habilidad: incluye un registro de observacin de ejecucin que permite explicar resultados incongruentes con otras fuentes de informacin?

VALIDEZ PREDICTIVAEst documentada de manera fiable la correlacin entre la medida del test y un criterio externo?

VALIDEZ CONCURRENTE / DIVERGENTEEst documentada de manera fiable la correlacin entre la medida del test y otros test que midan la misma variable? Est documentada de manera fiable la independencia entre la medida del test y otros test que midan distintas variables conceptualmente prximas?

VALIDEZ DISCRIMINANTEEst documentada de manera fiable la capacidad del test para discriminar a los sujetos con altas y bajas puntuaciones?

Grupo Psicologa Lgica 2011

30

Cmo valorar un test psicomtrico?

3

UN EJEMPLO de valoracin de la Validez de Constructo y de Contenido2

Grupo Psicologa Lgica 2011

31

Cmo valorar un test psicomtrico?

Las Escalas Magallanes de Evaluacin de Hbitos Asertivos Las Escalas Magallanes de Hbitos Asertivos se han diseado para evaluar el grado de asertividad con el que se suele relacionar una persona a partir de los 12 aos de edad. Al tratar de evaluar comportamiento asertivo, inicialmente hay que definir el constructo asertividad y constatar la validez de constructo del instrumento. Este instrumento consta de tres versiones, una que corresponde a los padres de un adolescente, en la cual, se solicita que informen de la frecuencia de diversos comportamientos de su hijo en estudio. Otra escala, correspondiente al profesorado tutor, a quien se solicita que informe de diversos comportamientos de este escolar en estudio. La ltima escala es un auto-informe del escolar sobre la frecuencia de diversos comportamientos suyos. En los tres casos, al tratar de evaluar asertividad, como aquella clase de comportamientos que constituyen un acto de respeto a uno mismo y a los dems, se ha decidido elaborar dos escalas conceptualmente diferentes entre s: una escala auto-asertividad permite evaluar el grado en que el individuo acta con respeto a s mismo; otra escala heteroasertividad, permite evaluar el grado en que el individuo acta con respecto hacia los dems. Al disponer de dos escalas, es posible valorar el estilo de comportamiento del individuo, por comparacin entre las puntuaciones obtenidas en cada escala: Pasivo, Agresivo, Pasivo-Agresivo o Asertivo 2 . As diseado, el instrumento tiene acreditada su validez de constructo, ya que est construido con las dos escalas que permiten describir o identificar su estilo de conducta social, segn el constructo asertividad. Sin embargo, esta estructura no asegura su validez de contenido. Para asegurar la validez de contenido se debe proceder a analizar cada uno de los elementos que constituyen cada escala. En el caso de la escala de auto-asertividad, todos y cada uno de los elementos deben representar una interaccin que manifieste respeto a s mismo. De manera anloga, la escala de hetero-asertividad debe estar compuesta por elementos que representen interacciones de respeto a los dems. Una vez constatadas ambas condiciones, podemos asegurar la validez de contenido. Un posterior anlisis de fiabilidad de ambas escalas nos permitir constatar la consistencia interna de cada una de ellas y el ndice de homogeneidad de cada uno de los elementos, asegurando as que los elementos estn adecuadamente formulados y resultan comprensibles para las personas que respondern al instrumento. No se propone un ndice general porque el constructo tiene dos componentes independientes.

2

Para ms detalles puede consultarse el manual del test, EMHAS Grupo Psicologa Lgica 2011

32

Cmo valorar un test psicomtrico?

Escala de Auto-asertividad:Expone y defiende sus ideas de manera respetuosa con los dems Cuando se enfada, expresa su malestar de manera adecuada Expresa sus sentimientos sin reparos, pero de manera adecuada Se muestra enfadado/a o disgustado/a cuando no hace las tareas perfectamente Cuando quiere algo, lo pide educadamente, de manera clara y directa Le cuesta mucho cambiar de opinin Cuando le preguntan algo que no sabe, lo reconoce sin buscar excusas o justificaciones Felicita a sus compaeros/as cuando hacen algo que le gusta Cuando no entiende algo, se enfada bastante Cuando se equivoca busca excusas para justificarse Cuando tiene alguna duda pregunta de manera correcta Si necesita ayuda la pide con buenos modales Cuando hace algo que perjudica a algn/a compaero/a lo reconoce y pide disculpas Acta de manera independiente, sin dejarse llevar por lo que hagan o digan los dems Cuando cree que le critican injustamente, se defiende de manera adecuada Sabe negarse, cortsmente, cuando los/as compaeros/as le piden que haga algo que no quiere hacer

Escala de Hetero-asertividad:Suele criticar a los/as dems cuando se equivocan, olvidan algo o hacen algo mal Admite, sin enfadarse, que los dems le nieguen algo que les pide Protesta o se enfada cuando le critican Cuando dice algo que los dems no entienden, vuelve a explicarlo sin enfadarse Se enfada, cuando los dems le llevan la contraria Admite, sin enfadarse, que los dems cambien de opinin Cuando le piden cosas, responde con buenos modales Se molesta cuando se le hacen preguntas personales

Grupo Psicologa Lgica 2011

33

Cmo valorar un test psicomtrico?

Extracto de los criterios propuestos por la Comisin de Test:

UN MODELO PARA EVALUAR LA CALIDAD DE LOS TEST UTILIZADOS EN ESPAAGerardo Prieto* y Jos Muiz** * Universidad de Salamanca. ** Universidad de Oviedo Papeles del Psiclogo: Revista del Colegio Oficial de Psiclogos. Ao 2000. Nmero 77, pp. 65-75

0

Resumen

En el ejercicio de su profesin los psiclogos utilizan con frecuencia los test para la obtencin de datos. Para que los datos as obtenidos sean de calidad y puedan ayudar al psiclogo a tomar las decisiones adecuadas, los test utilizados han de reunir las propiedades tcnicas oportunas. Un medio eficaz para mejorar los test y su prctica es ofrecer a los usuarios toda la informacin posible acerca de su calidad y caractersticas. El Colegio Oficial de Psiclogos tiene la intencin de promover un proceso de evaluacin de los test ms utilizados en Espaa para proporcionar as una informacin tcnica precisa a los usuarios de las pruebas. En este artculo se describen las caractersticas del procedimiento de evaluacin y se presenta un modelo de cuestionario para llevar a cabo la evaluacin. Los test psicolgicos constituyen una de las herramientas ms importantes al servicio de la prctica profesional y de la investigacin de los psiclogos. Como ocurre con cualquier otra tecnologa cientfica, los test pueden utilizarse de forma correcta o incorrecta. La Comisin de Test se cre para promocionar y potenciar el uso adecuado de los test en nuestro pas. Para llevar a cabo esta tarea, la Comisin funciona de forma coordinada con otros grupos de trabajo internacionales con fines similares, tales como la Federacin Europea de Asociaciones de Psiclogos Profesionales (EFPPA), o la Comisin Internacional de Test (ITC). En nuestro pas las informaciones acerca de las caractersticas de los test no son exhaustivas, estn muy dispersas, no son fcilmente accesibles o, al ser facilitadas por el editor del test, no pueden ser consideradas independientes e imparciales. Por este motivo, los profesionales carecen en muchas ocasiones de orientaciones cientficas que les permitan seleccionar el instrumento ms apropiado para sus objetivos. Consciente de este problema, la Comisin de Test del COP ha diseado un modelo estandarizado de evaluacin de test (CET) con la finalidad de revisar los test empleados en nuestro pas, al objeto de informar a los usuarios sobre su calidad tcnica. Puesto que se dispone de datos recientes bastante fiables sobre los test ms usados en los distintos campos profesionales de la psicologa (Muiz y Fernndez-Hermida, 2000), es intencin de la Comisin de Test focalizar inicialmente en estas pruebas las revisiones, aunque tambin sera posible incluir otros test en la primera fase de evaluacin a instancias de editores y autores.

Grupo Psicologa Lgica 2011

34

Cmo valorar un test psicomtrico?

El objetivo de este artculo es la descripcin de un posible proceso de revisin a seguir, y la presentacin del modelo de cuestionario que se utilizara en las revisiones de los test. Consideramos que la publicacin del sistema de evaluacin y de los criterios de evaluacin generar un beneficio colateral aadido a la informacin tcnica facilitada, a saber, informar a los autores de test de los estndares de calidad que han de poseer las nuevas pruebas que aparezcan en el mercado. Tanto el sistema de evaluacin que se describe a continuacin, como el modelo de cuestionario presentado, se han inspirado principalmente en los modelos ingls y holands actualmente en funcionamiento. ./

Conclusiones La mayora de los expertos, as como las organizaciones profesionales nacionales e internacionales coinciden en sealar que una de las medidas ms eficaces para mejorar la utilizacin que se hace de los test es la de proporcionar una buena informacin y formacin a los usuarios. Un profesional con una buena informacin sobre las pruebas y una formacin adecuada difcilmente utilizar de forma incorrecta los test. Enmarcado en esa filosofa, en 1995 3 el Colegio Oficial de Psiclogos (COP) cre una Comisin de Test (http://www.cop.es/test/) con el fin de analizar los problemas implicados en el uso de los test.

./

3

En el mes de octubre de 2009 (14 aos ms tarde) est Comisin todava no ha valorado ni un solo test.Grupo Psicologa Lgica 2011

35

Cmo valorar un test psicomtrico?

CUESTIONARIO PARA LA EVALUACIN DE LOS TEST (CET) 1. Descripcin general del test 1.1. Nombre del test: 1.2. Nombre del test en su versin original (si la versin espaola es una adaptacin): 1.3. Autor/es del test original: 1.4. Autor/es de la adaptacin espaola: 1.5. Editor del test en su versin original: 1.6. Editor de la adaptacin espaola: 1.7. Fecha de publicacin del test original: 1.8. Fecha de publicacin del test en su adaptacin espaola: 1.9. Fecha de la ltima revisin del test en su adaptacin espaola: 1.10. Clasifique el rea general de la o las variables que pretende medir el test ( ( ( ( ( ( ( ( ( ( ( 1.11. 1.12. ) ) ) ) ) ) ) ) ) ) ) Inteligencia Aptitudes Habilidades y Rendimiento acadmico Psicomotricidad Alteraciones neuropsicolgicas Personalidad Motivacin Actitudes Intereses Valores Otros (Indique cul:............................................)

Breve descripcin de la variable o variables que pretende medir el test: rea de aplicacin ( ( ( ( ( ( ( ( ( ) ) ) ) ) ) ) ) ) Psicologa clnica Psicologa educativa Neuropsicologa Psicologa forense Psicologa del trabajo y las organizaciones Psicologa del deporte Servicios sociales Psicologa del Trfico Otros (Indique cul:............................................)

./ 1.17. Descripcin de las poblaciones a las que el test es aplicable (especifique el rango de edad, nivel educativo, etc., y si el test es aplicable en ciertas poblaciones especficas: minoras tnicas, discapacitados, grupos clnicos, etc.): 1.18. Indique si existen diferentes formas del test y sus caractersticas (formas paralelas, versiones abreviadas, versiones informatizadas o impresas, etc). En el caso de que existan versiones informatizadas, describa los requisitos mnimos del hardware y software.

Grupo Psicologa Lgica 2011

36

Cmo valorar un test psicomtrico?

2. Valoracin de las caractersticas del test 2.1. Calidad de los materiales del test (objetos, material impreso o software): * ** *** **** ***** ( ( ( ( ( ) ) ) ) ) Inadecuada Adecuada pero con algunas carencias Adecuada Buena Excelente (Impresin y presentacin de gran calidad, software muy atractivo y eficiente)

2.2. Calidad de la documentacin aportada 2.3. Fundamentacin terica 2.4. Adaptacin del test (si el test ha sido traducido y adaptado para su aplicacin en Espaa) 2.5. Calidad de las instrucciones 2.10. Validez 2.10.1. Validez de contenido: 2.10.1.1. Calidad de la representacin del contenido o dominio: 2.10.1.2. Consultas a expertos: 2.10.2. Validez de constructo: 2.10.2.2. Tamao de las muestras en la validacin de constructo: * ** *** **** ***** ( ( ( ( ( ( ) ) ) ) ) ) No se aporta informacin en la documentacin Un estudio con una muestra pequea (N