Consideraciones para la aplicación de instrumentos de ...

26
CONSIDERACIONES PARA LA APLICACIÓN DE INSTRUMENTOS DE EVALUACIÓN PSICOLÓGICA Clase 5: Elementos no tipificados del proceso de evaluación psicológica

Transcript of Consideraciones para la aplicación de instrumentos de ...

Page 1: Consideraciones para la aplicación de instrumentos de ...

CONSIDERACIONES PARA LA

APLICACIÓN DE INSTRUMENTOS

DE EVALUACIÓN PSICOLÓGICA

Clase 5: Elementos no tipificados del

proceso de evaluación psicológica

Page 2: Consideraciones para la aplicación de instrumentos de ...

COMPLEMENTANDO LA CLASE 4

Tenemos objetividad validez y confiabilidad tanto en la investigación cuantitativa con en

la cualitativa, la diferencia esta en la manera en que se los concibe y alcanza.

EN LO CUANTITATIVO:

OBJETIVIDAD: grado en que un instrumento es o no permeable a los sesgos de los

evaluadores que lo aplican. Guarda relación con la estandarización la cual refuerza esa

objetividad

CONFIABILIDAD: el grado en el cual la aplicación repetida de un instrumento a un mismo

individuo produce resultados similares o iguales. Es necesario en todas las pruebas

especialmente si mide constructos estables de la personalidad.

Una prueba es confiable si sus resultados son equivalentes, estables y consistentes

Se refiere a la consistencia de las puntuaciones obtenidas por los mismos individuos

cuando son examinados por la misma prueba en diferentes ocasiones, con conjuntos

distintos de elementos equivalentes o bajo condiciones variables de examen.

Page 3: Consideraciones para la aplicación de instrumentos de ...

CONFIABILIDAD

La confiabilidad se mide por medio de coeficientes que van de cero a 1 mientras mas cercanos a 1 mas confiabilidad.

Método de estabilidad test re- tets: si el instrumento y su variable son confiables luego de sucesivas administraciones deberían arrojar puntajes similares, estos se podrían medir mediante las correlaciones de Pearson

Método de mitades partidas: una única vez de aplicación, dividiendo las respuestas a la mitad debiera encontrarse que los puntajes aparecen relacionados entre sí. La correlación de los puntajes totales de ambas mitades debería ser alta. éstos se podrían medir mediante las correlaciones de Pearson

Medidas de consistencia interna: miden la correlación interna entre los ítems que componen la prueba. Podría medirse esta consistencia mediante el índice alfa de Crombach donde la confiabilidad estaría entre en 0.61 y 1; o también medirse con la varianza media extractada o fiabilidad compuesta, entre otros.

Page 4: Consideraciones para la aplicación de instrumentos de ...

VALIDEZ

Validez: grado en el que un instrumento mide la variable que pretende medir

Es un indicador de la cantidad de significados que se le pueden atribuir a un

conjunto de resultados de una prueba. Indica el grado de exactitud con la que se

mide el constructo teórico que se pretende medir

Para probar la validez el investigador debe verificar si se midieron los conceptos

claves del constructo en el estudio y así determinar lo que se está midiendo

Se puede medir por la evaluación de jueces expertos, por pruebas factoriales

(explican la varianza de las respuestas debiendo explicar por lo menos el 50% de la

varianza en dicho ítem o respuesta), pruebas de asociación con otras variables o

pruebas externas midiendo la correlación entre ellas.

Existen tres tipos de evidencia para medir la validez:

1- evidencia de validez de contenido

2- evidencia de validez de criterio

3- evidencia de validez de constructo

Page 5: Consideraciones para la aplicación de instrumentos de ...

TIPOS DE VALIDEZ:

VALIDEZ DE CONTENIDO: grado en que el instrumento representa todos los dominios del constructo que evalúa. Un instrumento de medición debe representar todos o la mayoría de los componentes de la variable que evalúa, sostenidos o determinados por la teoría en la que se sustenta y los estudios previos. Si faltan dimensiones no se estaría evaluado parte de la variable.

VALIDEZ DE CRITERIO: grado en el que las mediciones de un instrumento guardan relación con criterios externos, los cuales podrían ser una prueba diferente que mide el mismo constructo. Esta puede ser concurrente (lo ya explicado, como las respuestas de una prueba que miden un mismo constructo se relacionan), convergente (como una prueba que mide un constructo se relaciona con otra que mide una variable teóricamente relacionado con ese constructo debiendo estar muy asociados entre si) o predictiva (es similar a la convergente pero esta mas centrada en la predicción a futuro, mide que tanto una prueba que mide un constructo puede predecir el comportamiento de una variable de otra prueba con la que tiene relación teórica

VALIDEZ DE CONSTRUCTO: Es el grado en el que las mediciones de un instrumento reflejan los conceptos abstractos, teóricos, que se pretende evaluar. El instrumento debe guardar relación con la teoría que lo sostiene

Page 6: Consideraciones para la aplicación de instrumentos de ...

PUEDEN AFECTAR LA VALIDEZ Y CONFIABILIDAD

DE UNA PRUEBA:

Improvisar un instrumento

No considerar el contexto de creación y los baremos. Se debe evaluar si hay una adaptación. Una falta de adecuación a la población que se va a evaluar (educación, capacidades, etc)

Deseabilidad social

Condiciones de administración

Falta de estandarización

Page 7: Consideraciones para la aplicación de instrumentos de ...

EN LA INVESTIGACIÓN CUALITATIVA Rigor y calidad mas que lo desarrollado en lo cuantitativo

La confiabilidad en este campo se conoce como dependencia o auditabilidad. La validez como Credibilidad; y la generalización como transferibilidad

DEPENDENCIA: grado en que los distintos investigadores que recolectan datos similares en el campo y efectúan los mismos análisis, generan resultados equivalentes. Si los mismos datos son revisados por distintos investigadores, se espera que las interpretaciones a las que lleguen sean coherentes

Se determinan los hechos semejantes de las respuestas mediante diferentes preguntas, se demuestra la coincidencia en los datos a través de distintas fuentes y participantes, y se proporcionan detalles específicos sobre como se hizo la investigación para que otros repliquen esos resultados.

CREDIBILIDAD: grado en el que el investigador ha captado o no el significado profundo y completo de las experiencias de los participantes. Es el grado de correspondencia entre la forma de percibir el fenómeno de las partes y la manera en que el investigador las retrata.

Se debe evitar los sesgos en el investigador, las incidencias de nuestra presencia en el campo, y establecer estancias largas en el campo, también se precisa realizar triangulación de datos.

Page 8: Consideraciones para la aplicación de instrumentos de ...

TRANSFERENCIA

Los resultados no se generalizan pero pueden transferirse de un contexto a otro. Esto permite tener ideas generales del problema estudiado y aplicar resultados de otros ambientes al contexto actual

El investigador debe determinar la similitud de ambos contextos y deben estar descriptos siempre los datos de la investigación, como ser el ambiente, los materiales, el momento en que se realizo el estudio, etc. A mayor detalle mas útil serán mis resultados para futuras investigaciones.

Page 9: Consideraciones para la aplicación de instrumentos de ...

RECURRENCIAS Y CONVERGENCIAS Toda recurrencia es siempre una reiteración. En nuestra hermenéutica

proyectiva nos referimos a la reiteración de un mismo indicador en varias zonas de un mismo grafico o en gráficos diversos

Considerando que existen pautas formales y de contenido, la recurrencia podría darse por ejemplo:

En el tamaño y la ubicación de la figura, independientemente del contenido

Hay un mismo indicador que se repite (dibujar en el mismo sector de la hoja, no hacerles cara a ningún dibujo, ponerles una línea de base o hacerlos en el aire, etc,)

Convergencia: reiteración de un mismo concepto, de una secuencia dinámica, que se expresa a través de indicadores similares o disimiles y opuestos, dentro de un mismo dibujo o técnica o en técnicas diferentes, pero que expresan un mismo conflicto.

Por ejemplo que en una figura humana no se dibujen los ojos y las manos, ambos indicadores aunque diferentes dan cuenta de un mismo emergente como ser las dificultades en el contacto y la comunicación. También podrían aparecer en un aspecto del grafismo la ansiedad y en otro las defensas

Page 10: Consideraciones para la aplicación de instrumentos de ...

CLASE 5: ELEMENTOS NO TIPIFICADOS DE LA

EVALUACIÓN PSICOLÓGICA

Page 11: Consideraciones para la aplicación de instrumentos de ...

¿POR QUÉ NO TIPIFICADOS? Piacente (2009) va a decir que entre los instrumentos no tipificados de

evaluación psicológica se encuentran la observación, la entrevista y la encuesta. No tipificados en el sentido que si bien en ellas se siguen determinados procedimientos de obtención y registro de datos no se cuenta con normas o baremos para la comparación de los resultados con los de la población normativa, ni se especifican indicadores de validez y confiabilidad

La observación y la entrevista psicológica, sean formales o informales, se encuentran entre los instrumentos más antiguos de evaluación psicológica. Naturalmente la instauración del campo de la evaluación psicológica, a partir de las últimas décadas del Siglo XIX, ha sido el escenario del diseño de otros instrumentos de evaluación, no obstante, se ha retenido la importancia de la observación y la entrevista. Ambas si bien comparten elementos similares, revisten características distintivas. Asimismo, ha aumentado el uso de encuestas.

Las tres técnicas requieren una elaboración e interpretación de acuerdo a las manifestaciones de las unidades de análisis a ser evaluadas.

Page 12: Consideraciones para la aplicación de instrumentos de ...

OBSERVACIÓNComo parte del proceso de evaluación psicológica La observación puede ser definida como la técnica a partir de la cual se obtienen datos perceptibles de la unidad de análisis: características de los sujetos, tales como su forma de comportamientos verbales y no verbales en situaciones diversas; de las interacciones entre sujetos, sean estas gestuales o verbales; de los contextos, con referencia por ejemplo a las cualidades ambientales.

Existen criterios diferentes para la clasificación de la observación:

Según hayan sido planificadas o no: Controladas o No Controladas

Según se inscriban en el método científico: Observación científica (con un objetivo claro, definido y preciso) o en observación no Científica (sin intención, objetivo o preparación)

Según el grado de participación del observador: Observación no participante y Observación participante. Según cual sea habrá varianzas en lo que se busca observar o no.

Según se dirija a otros o a sí mismo: auto observación o la observación de otros.

Page 13: Consideraciones para la aplicación de instrumentos de ...

PASOS DE LA OBSERVACIÓN ELEGIDA COMO PARTE

DEL PROCESO DE EVALUACIÓN a) Determinar los objetivos y propósitos de la observación de acuerdo al marco teórico

que se adopte (qué y para qué se va a observar).

b) Identificar los fenómenos, características o variables a ser observadas (qué se va a observar)

c) Detallar la forma en la que se va a observar (cómo observar).

d) Seleccionar los procedimientos de registro de la observación (cómo se recogerán los datos de la observación, por ejemplo fichas de observación, registros de características de lo observado, grabaciones, listas de control, entre otros).

e) Realizar la observación propiamente dicha y registrarla (proceder a la obtención de datos).

f) Sistematizar los datos de la observación (cuáles son los resultados que se obtienen).

g) Analizar e interpretar los datos obtenidos (qué significado tienen los datos obtenidos).

h) Elaborar conclusiones acerca de la observación (alcance del significado de la observación).

i) Integrar los resultados de la observación con los resultados de otras fuentes de datos, a los fines de elaborar el informe correspondiente (dar cuenta de los objetivos que se propusieron).

Page 14: Consideraciones para la aplicación de instrumentos de ...

OBSERVACIÓN PSICOLÓGICA

González Llaneza (2007) menciona a la observación como parte de la conceptualización

de la evaluación psicológica y expresa que, la observación es una técnica muy utilizada

en Psicología, está presente en todo el proceso evaluativo y terapéutico. La observación

sobre un fenómeno o sujeto deben realizarse de forma continua y en repetidas ocasiones,

pues el resultado obtenido de un corte de observación puede no resultar significativo.

Piacente (2009) aclara que no hay observación ingenua que resulte válida. Para observar

se debe conocer cuál es el propósito de la observación y qué se debe observar, para

poder hacer un análisis e interpretación correctos de los datos obtenidos. Contrariamente

a una creencia generalizada los hechos no hablan por sí mismos, más aún, esos hechos son

delimitados a partir de una teoría que orienta la obtención e interpretación de los datos.

Einstein (citado por Cole, 1996, p. 33) describía el rol de la teoría en los siguientes términos:

“La observación puede ser muy útil, pero en principio, es erróneo tratar de fundar una

teoría sobre magnitudes observables aisladas. En realidad, ocurre todo lo contrario. Es la

teoría la que indica qué debemos observar. Por ello algunos autores ofrecen una guía para

la observación, la cual se encuentra enmarcada en la corriente teórica a la que adhieren

y sujeta a los objetivos que se persiguen.

Page 15: Consideraciones para la aplicación de instrumentos de ...

VENTAJAS DE LA OBSERVACIÓN:

Permite obtener información de los hechos en el momento en que ocurren.

El sujeto no sabe que su conducta, durante la ejecución en las pruebas, también es tenida en cuenta y no cuida su comportamiento.

Da acceso a información más objetiva acerca del sujeto en relación a la que el propio sujeto ofrece sobre sí.

Es capaz de descubrir aspectos hasta ahora desconocidos para el investigador e incluso, hasta para el propio sujeto.

Puede precisar, confirmar o poner en dudas resultados obtenidos por otros métodos.

Page 16: Consideraciones para la aplicación de instrumentos de ...

ENTREVISTA:

La Entrevista Psicológica, es sustancialmente distinta a la que hacen el periodista,

el sociólogo, el jefe de personal, etc. Como técnica se inscribe en el proceso de

Evaluación Psicológica y asume características y estrategias de realización

diferentes.

Las características dependen en primer lugar del marco teórico que se adopte,

que permite seleccionar los objetivos que se persiguen. Los objetivos a su vez se

relacionan con el campo de aplicación de la evaluación psicológica, de modo

tal que no serán iguales según se trate de entrevistas con fines diagnósticos,

terapéuticos, de orientación, de selección de personal, de sondeo de opinión,

entre otras.

Page 17: Consideraciones para la aplicación de instrumentos de ...

OBJETIVOS La entrevista tiene objetivos prefijados y conocidos, al menos por el entrevistador. En la

asignación de roles, el control de la situación o entrevista lo tiene el entrevistador. Implica

la manifestación de toda la gama de canales de comunicación humanos: verbal (oral),

auditivo, cinestésico, táctil, olfativo, no verbal (gestual y postural) y paralingüístico (tono,

volumen, intensidad y manejo del silencio).

Entre los objetivos de la entrevista psicológica están: evaluar, diagnosticar e investigar.

Estos aspectos permiten trazar una dirección de trabajo para sugerir estrategias de

intervención (Aragón, 2002. Citado en Morga Rodriguez, 2012)

Debe destacarse que los objetivos de la entrevista, lo mismo que el control de la

comunicación, están a cargo del entrevistador y que la distinción entre una entrevista y

una conversación común, o en un interrogatorio, se centra en el objetivo y la distinción

de los roles que cada uno sigue en estas relaciones humanas.

Dentro de la ciencia psicológica la entrevista se ha ido perfeccionando y

especializándose en función de sus objetivos y tiempos. Las áreas más desarrolladas y

que han construido características propias para la entrevista son: laboral, clínica, infantil,

familiar, educativa, psicopedagógica, deportiva y médica. Asimismo, la entrevista

desarrollada originalmente para trabajar con adultos fue diferenciándose en entrevistas

para parejas, grupos, familiares, infantiles, con adolescentes, psicopedagógicas.

Page 18: Consideraciones para la aplicación de instrumentos de ...

VENTAJAS Aragón (2002) Las principales ventajas de la entrevista sobre otros tipos de

instrumentos de evaluación psicológica son:

la relación interpersonal establecida entre el entrevistado y el entrevistador, con valor empático y emocional que esto conlleva y que puede facilitar posteriormente el proceso de intervención;

la flexibilidad para que el entrevistador se adapte a las peculiaridades del entrevistado, retrocediendo, avanzando, profundizando sobre la marcha, de acuerdo con las necesidades del caso;

la posibilidad de observar el comportamiento del entrevistado,

la factibilidad de obtener grandes cantidades de información de todo tipo, tanto objetiva como subjetiva;

evaluar a personas que difícilmente pueden ser examinadas por otros medios.

Entre los cuestionamientos a la entrevista encontramos las críticas en contra de su confiabilidad y validez, basada en los sesgos subjetivos del entrevistador y el entrevistado

Page 19: Consideraciones para la aplicación de instrumentos de ...

CLASIFICACIÓN O TIPOS DE ENTREVISTA

Según el objetivo: Según la estructura:

➢ Entrevista de investigación

➢ Entrevista psicopedagógica o

psicoeducativa.

➢ Entrevista de orientación

vocacional

➢ Entrevista clínica

➢ Entrevista laboral.

Entrevista estructurada o cerrada

Entrevista semi estructurada

Entrevista abierta o no estructurada

Entrevista tipo panel

A modo complementario a la clasificación de la entrevista, cabe señalar que esta también

posee diferentes momentos los cuales dependerán de los aspectos previamente mencionadas.

Albajari (1996) marca como momentos de la entrevista psicológica:

Pre entrevista

Apertura

Acontecer propiamente dicho

Cierre

Post entrevista

Page 20: Consideraciones para la aplicación de instrumentos de ...

ASPECTOS A CONTEMPLAR

Como eficaz método de recopilación de datos, al analiza la entrevista se deben

considerar dos aspectos:

1) Los aspectos fenomenológicos: son aquellos que nos son ofrecidos al estudio por

medio de la observación directa (pero a su vez lo más minuciosa y cuidadosa posible).

Consiste en descubrir el conjunto de síntomas que presenta el paciente a través de sus

manifestaciones verbales y corporales.

2) Aspectos psicodinámicos: incluye a los anteriores pero el objetivo es llegar a conocer

la relación existente entre la sintomatología y la manera peculiar de ser el individuo que

la padece. Esta relación procura seguir una causalidad en lo que la sintomatología

mantiene una relación directa con los dinamismos psicológicos.

Si bien este análisis está más ligado a los objetivos que la corriente psicoanalítica

persigue, esto solo quedaría enmarcado así, si se hace una descripción minuciosa de

ambos aspectos, en cuanto a lo que de ellos, el psicólogo contempla. No debemos

olvidar que las características de la entrevista quedan definidas en función del

ámbito, los objetivos, el momento y en cierto modo por las particularidades propias

del profesional.

Page 21: Consideraciones para la aplicación de instrumentos de ...

TÁCTICAS Y ERRORES EN EL DESARROLLO DE LA

ENTREVISTA 1. las condiciones variables de la situación de

entrevista:

a) identidad

b) condiciones variables inherentes al

entrevistador

c) condiciones variables inherentes a la

persona entrevistada

d) condiciones variables de la situación

e) condiciones variables relativas a la forma y

el contenido de la entrevista

2. disposiciones materiales

a) la iluminación

b) el mobiliario

c) el ruido

d) la vestimenta

3. Medios de grabación

4. Estado físico y psíquico del entrevistador

5. La situación de la entrevista

6. Nerviosidad, emotividad o timidez del sujeto

7. La mentira

8. Valor del testimonio del sujeto

9. Evaluación sistemática de los rasgos y

efecto Halo

10. La actitud del entrevistador

Nahoum (1981)

Page 22: Consideraciones para la aplicación de instrumentos de ...

ENCUESTAS

Piacente (2009) señala que es otra de las técnicas de evaluación, generalmente

destinada a obtener datos de personas que tienen alguna relación con el problema

del cual se pretende indagar. Supone siempre la utilización de un listado previo de

preguntas (denominado cuestionario), proporcionadas en forma oral o escrita, para

que los sujetos respondan. Puede o no ser anónimo, dependiendo de los objetivos que

se persiguen.

Las encuestas presentan diferentes tipos de items o preguntas. La selección y

formulación de los ítems de una encuesta dependen, en primer lugar, de la naturaleza

y objetivos de la indagación. En segundo lugar, de las características de los sujetos a los

que está dirigida, por ejemplo, obviamente no se puede aplicar una encuesta a ser

respondida por escrito cuando se trata de sujetos no alfabetizados o escasamente

alfabetizados.

Page 23: Consideraciones para la aplicación de instrumentos de ...

VENTAJAS Y LIMITACIONES

Entre sus ventajas se cuenta su posibilidad de aplicación colectiva, y por lo tanto más

económica que mediante otras técnicas, como por ejemplo las entrevistas.

Entre sus limitaciones se encuentran:

el sesgo de deseabilidad social que puede impregnar las respuestas, es decir el

deseo de causar una buena impresión o de disfrazar la realidad,

la insuficiencia de comprensión de las preguntas formuladas;

las dificultades en diferenciar matices en las respuestas que se proporcionan, como

por ejemplo cuando las preguntas se proporcionan con opciones múltiples de

acuerdo a una Escala Likert2;

la influencia del grado de acuerdo con el tema indagado;

la empatía o falta de empatía con el encuestador.

Page 24: Consideraciones para la aplicación de instrumentos de ...

CLASIFICACIÓNEstos pueden ser:

de preguntas abiertas (mínimas) o preguntas cerradas

dicotómicas

opciones de frecuencia

opciones de elección múltiple

y según el tipo de información solicitada los ítems pueden incluir:

Preguntas de hecho. Por ejemplo: “¿Cuál es su nacionalidad?”

Preguntas de acción. Por ejemplo: “¿Qué hace habitualmente para estudiar?”

Preguntas de intención. Por ejemplo: “¿Por qué ha elegido estudiar esta

carrera?”

Preguntas de opinión. Por ejemplo: “¿Cuál es su opinión sobre el libro X?”

Preguntas de información. Por ejemplo: “¿Qué quiere decir la palabra naranja?”

Pregunta de atribución de causa. Por ejemplo: “A su juicio, ¿Qué es lo que más influye más sobre el rendimiento escolar?

Cada una de ellas puede presentarse en un formato abierto o cerrado. En este último caso se predeterminan las opciones posibles.

Page 25: Consideraciones para la aplicación de instrumentos de ...

SELECCIÓN DE ESTAS TÉCNICAS EN LA

INVESTIGACIÓN

técnica método enfoque

encuesta Muestreo

probabilístico

Cuantitativo

Pretende medir la

realidad que

investiga

Cuestionarios

Preguntas cerradas y

opciones de

respuestas

preestablecidas

entrevista Muestreo selectivo

de informantes clave

Cualitativo

Pretende

comprender la

realidad que

investiga

Cedula de entrevista

Preguntas y

respuestas abiertas y

con posibilidad de

feedback

Massarik, 2019

Page 26: Consideraciones para la aplicación de instrumentos de ...

¡MUCHAS GRACIAS!

PARA CONSULTAS REFERIDAS A LA CLASE:

DESDE PLATAFORMA ACADEMICA MEDIANTE EL BOTÓN CONTACTAR CON EL PROFESOR

O AL MAIL [email protected]

PARA CONSULTAS REFERIDAS A LO TÉCNICO O ADMINISTRATIVO ESCRIBIR MAIL A:

[email protected]