FUENTE: WALTER IVÁN ABANTO VÉLEZhttp://www.investigacionpostgradoucv.bligoo.pe/

PROCESO DE CONFIABILIDAD

ÁREA DE INVESTIGACIÓN

ESCUELA DE POSTGRADO

1. Ingresar los datos obtenidos en la aplicación de 1. Ingresar los datos obtenidos en la aplicación de la pruebala prueba

2. Para la columna PAR2. Para la columna PAR

3. En la columna IMPAR3. En la columna IMPAR

4. Colocar el cursor en la celda libre4. Colocar el cursor en la celda libre

5. Click en Insertar5. Click en Insertar

6. Seleccionar Función (fx)6. Seleccionar Función (fx)

7. Seleccionar Estadística7. Seleccionar Estadística

8. Opción Pearson8. Opción Pearson

9. Ingresar datos en matrices9. Ingresar datos en matrices

10. Matriz 1: Columna PAR10. Matriz 1: Columna PAR

11. Matriz dos: Columna IMPAR11. Matriz dos: Columna IMPAR

12. Clic para obtener resultado12. Clic para obtener resultado

13. Fórmula de 13. Fórmula de Spearman-BrownSpearman-Brown

r11 =

2r ½ ½

1+ r ½ ½

Pearson r = -0. 1893885

14. Mayor a 0.80: Prueba confiable14. Mayor a 0.80: Prueba confiable

CONFIABILIDADCONFIABILIDAD

Es la cualidad, la que hace que una Es la cualidad, la que hace que una misma prueba aplicada dos veces a la misma prueba aplicada dos veces a la misma persona en circunstancias misma persona en circunstancias idénticas, proporcione similares idénticas, proporcione similares resultados.resultados.

Se refiere al grado en que su aplicación Se refiere al grado en que su aplicación repetida al mismo sujeto u objeto produce repetida al mismo sujeto u objeto produce iguales resultados. iguales resultados.

Una técnica de muestreo es confiable Una técnica de muestreo es confiable cuando varias muestras de una misma cuando varias muestras de una misma población arrojan datos similares.población arrojan datos similares.

Es la característica de Es la característica de precisión de los precisión de los instrumentos de medicióninstrumentos de medición , independiente de lo que , independiente de lo que quiera medir.quiera medir.

Es un indicador de calidad global de una prueba.Es un indicador de calidad global de una prueba.

Indica si los resultados que se obtienen con los Indica si los resultados que se obtienen con los instrumentos de medición son consistentes en el tiempo instrumentos de medición son consistentes en el tiempo y entre formas de la prueba. El concepto surge del y entre formas de la prueba. El concepto surge del hecho que las variables que se miden en Psicología hecho que las variables que se miden en Psicología conllevan una importante carga de error. conllevan una importante carga de error.

El puntaje que se obtiene para una persona a El puntaje que se obtiene para una persona a partir de la aplicación de una prueba está partir de la aplicación de una prueba está compuesto por el verdadero nivel de la compuesto por el verdadero nivel de la variable y por un componente error.variable y por un componente error.

Se define para la prueba global a partir del Se define para la prueba global a partir del concepto de varianza de puntajes, como la concepto de varianza de puntajes, como la proporción de varianza total de los resultados proporción de varianza total de los resultados de una prueba que se debe o que es de una prueba que se debe o que es varianza verdadera. varianza verdadera.

1. Obtención de la Confiabil idad.1. Obtención de la Confiabil idad.Puede computarse por medio de métodos Puede computarse por medio de métodos correlacionales, aunque también por métodos no correlacionales, aunque también por métodos no correlacionales.correlacionales.

Los resultados de los cálculos constituyen el valor Los resultados de los cálculos constituyen el valor numérico de la confiabilidad, y se denominan numérico de la confiabilidad, y se denominan Coeficientes de confiabilidad.Coeficientes de confiabilidad.

El cálculo de un El cálculo de un Coeficiente de confiabil idadCoeficiente de confiabil idad (simbolizado con la sigla (simbolizado con la sigla rttrtt ) es la manera precisa ) es la manera precisa de evaluar la confiabilidad del instrumento (lo que de evaluar la confiabilidad del instrumento (lo que implica determinar que nivel de error se está implica determinar que nivel de error se está cometiendo al estimar los puntajes). cometiendo al estimar los puntajes).

Este coeficiente entrega valores que Este coeficiente entrega valores que fluctúan entre 0 y 1. fluctúan entre 0 y 1.

Un coeficiente igual a 1 indicará Un coeficiente igual a 1 indicará confiabilidad perfecta, por el contrario, confiabilidad perfecta, por el contrario, un coeficiente igual a 0 señalará una un coeficiente igual a 0 señalará una total falta de confiabilidad. total falta de confiabilidad.

Los errores condicionan distintos tipos Los errores condicionan distintos tipos de estimaciones de la confiabilidad. de estimaciones de la confiabilidad.

Existen diversos factores que afectan Existen diversos factores que afectan el cálculo de un coeficiente de el cálculo de un coeficiente de confiabilidad; por ello, se han confiabilidad; por ello, se han determinado tres procedimientos determinado tres procedimientos diferentes para calcularlo: diferentes para calcularlo:

- Test–retestTest–retest- Formas paralelas Formas paralelas - Consistencia Interna.Consistencia Interna.

1.1.- 1.1.- CoeficienteCoeficiente Test–retest: Test–retest: Se basa en la aplicación del mismo instrumento, Se basa en la aplicación del mismo instrumento,

a un único grupo de personas, en 2 momentos a un único grupo de personas, en 2 momentos distintos, y sirve para determinar si un distintos, y sirve para determinar si un instrumento mide de forma consistente en instrumento mide de forma consistente en distintas ocasiones. distintas ocasiones.

Este procedimiento opera con la creencia de Este procedimiento opera con la creencia de que las características medidas son estables en que las características medidas son estables en el tiempo. el tiempo.

Es decir, el supuesto es que si efectivamente la Es decir, el supuesto es que si efectivamente la característica es estable en el tiempo, la característica es estable en el tiempo, la variación entre un momento y otro NO va a ser variación entre un momento y otro NO va a ser estadísticamente significativa. estadísticamente significativa.

Desde ésta perspectiva, la falta de Desde ésta perspectiva, la falta de confiabilidad se podría entender como el confiabilidad se podría entender como el resultado de los errores que se producen resultado de los errores que se producen por “por “Estados internos temporalesEstados internos temporales ” de ” de las personas que contestan o por las personas que contestan o por “Condiciones externas”“Condiciones externas” . .

De esta manera, al calcular la De esta manera, al calcular la confiabilidad Test-retest es importante que confiabilidad Test-retest es importante que las condiciones de aplicación sean las condiciones de aplicación sean equivalentes en ambos momentos (misma equivalentes en ambos momentos (misma hora, mismo lugar, mismo examinadores). hora, mismo lugar, mismo examinadores).

En casos como las En casos como las pruebas de pruebas de rendimiento o educacionales, Norendimiento o educacionales, No se se utiliza el procedimiento test-retest, ya que utiliza el procedimiento test-retest, ya que puede existir aprendizaje entre los puede existir aprendizaje entre los momentos de rendición del test.momentos de rendición del test.

La modalidad para establecer si han La modalidad para establecer si han

existido modificaciones en los puntajes existido modificaciones en los puntajes entre un momento y otro es un coeficiente entre un momento y otro es un coeficiente de correlación, que en éste caso se de correlación, que en éste caso se denomina denomina Coeficiente de Estabil idadCoeficiente de Estabil idad . .

El tiempo mínimo de aplicación para un El tiempo mínimo de aplicación para un Test – Retest son 15 días, ya que dicho Test – Retest son 15 días, ya que dicho período de tiempo sería el necesario para período de tiempo sería el necesario para que las personas olviden la mayor parte que las personas olviden la mayor parte de las respuestas que entregaron la de las respuestas que entregaron la primera vez.primera vez.

De hecho, la magnitud de un coeficiente De hecho, la magnitud de un coeficiente de estabilidad tiende a ser mayor cuando de estabilidad tiende a ser mayor cuando el intervalo entre la prueba inicial y la el intervalo entre la prueba inicial y la segunda es breve, en lugar de segunda es breve, en lugar de prolongado.prolongado.

1.2.- Pruebas Paralelas:1.2.- Pruebas Paralelas:• Cuando el intervalo de tiempo entre la prueba inicial y la Cuando el intervalo de tiempo entre la prueba inicial y la

segunda es breve, los sujetos pueden responder a la segunda es breve, los sujetos pueden responder a la segunda evaluación en función de lo que recuerdan segunda evaluación en función de lo que recuerdan hicieron previamente (y no según el nivel de la variable hicieron previamente (y no según el nivel de la variable es ese momento). es ese momento).

• Para superar este defecto se generó una segunda Para superar este defecto se generó una segunda forma de calcular confiabilidad: se puede administrar forma de calcular confiabilidad: se puede administrar una una Prueba ParalelaPrueba Paralela , es decir, una prueba que , es decir, una prueba que posee reactivos equivalentes a la prueba original pero posee reactivos equivalentes a la prueba original pero no iguales. no iguales.

Dos pruebas pueden ser consideradas paralelas Dos pruebas pueden ser consideradas paralelas cuando miden las mismas variables, bajo los mismos cuando miden las mismas variables, bajo los mismos principios y de la misma forma. principios y de la misma forma.

En la práctica, esto se determina cuando:En la práctica, esto se determina cuando:

1.1. El promedio y las varianzas de ambos tests no difieren El promedio y las varianzas de ambos tests no difieren significativamentesignificativamente

2.2. Los ítems presentan un similar grado de dificultad y Los ítems presentan un similar grado de dificultad y están distribuidos de manera similar.están distribuidos de manera similar.

3.3. Las correlaciones ítem – test son equivalentes.Las correlaciones ítem – test son equivalentes.

Es importante destacar que en psicología Es importante destacar que en psicología casi no existen pruebas que posean una casi no existen pruebas que posean una versión paralela, por la dificultad que versión paralela, por la dificultad que implica cumplir cada uno de los criterios implica cumplir cada uno de los criterios estadísticos recién descritos. estadísticos recién descritos.

El supuesto que opera a la base de este El supuesto que opera a la base de este procedimiento es el siguiente:procedimiento es el siguiente: Al aplicar Al aplicar una forma paralela después de un una forma paralela después de un tiempo, puede calcularse un tiempo, puede calcularse un Coeficiente de EquivalenciaCoeficiente de Equivalencia , que , que refleja los errores de medición debidos a refleja los errores de medición debidos a distintos reactivos y ocasiones diferentes distintos reactivos y ocasiones diferentes de aplicación. de aplicación.

Para obtener dicho coeficiente Para obtener dicho coeficiente simplemente se ocupa algún simplemente se ocupa algún procedimiento correlacional.procedimiento correlacional.

En algunos casos es posible combinar En algunos casos es posible combinar las modalidades test–retest y formas las modalidades test–retest y formas paralelas, a lo que se llama: paralelas, a lo que se llama: Formas Formas paralelas con intervalo de tiempoparalelas con intervalo de tiempo. El . El coeficiente que se obtiene pasa a coeficiente que se obtiene pasa a denominarse “de estabilidad y denominarse “de estabilidad y equivalencia”.equivalencia”.

3.3.- Consistencia 3.3.- Consistencia (Homogeneidad) Interna(Homogeneidad) Interna Como ya se señaló, la creación de pruebas paralelas es Como ya se señaló, la creación de pruebas paralelas es

costosa y difícil (especialmente en pruebas de costosa y difícil (especialmente en pruebas de capacidad). Por ello se desarrolla un método menos capacidad). Por ello se desarrolla un método menos directo que tome en cuenta los diversos fenómenos que directo que tome en cuenta los diversos fenómenos que afectan a la confiabilidadafectan a la confiabilidad

Este método se denomina Este método se denomina Consistencia Interna.Consistencia Interna.

Permite conocer si los resultados son consistentes entre Permite conocer si los resultados son consistentes entre dos mitades que comparo (de la misma prueba)dos mitades que comparo (de la misma prueba)

En otras palabras, responde a la pregunta :En otras palabras, responde a la pregunta :¿Son consistentes los resultados en el ¿Son consistentes los resultados en el tiempo entre dos mitades del mismo tiempo entre dos mitades del mismo instrumento?instrumento?

Existen Existen diversas formas de calcularlodiversas formas de calcularlo (y no todas son correlaciones): (y no todas son correlaciones):

1.1. Método de Método de Equivalencia Racional o bipartición del Equivalencia Racional o bipartición del test.test.    

2.2. Método Método Kuder – RichardsonKuder – Richardson (Fórmulas 20 y 21). (Fórmulas 20 y 21).3.3. Alfa de Cronbach.Alfa de Cronbach.

1) Método de Equivalencia racional de un 1) Método de Equivalencia racional de un test. test. (Bipartición o Split – half)(Bipartición o Split – half)

Consiste en un método para estimar Consiste en un método para estimar directamente un coeficiente de directamente un coeficiente de confiabilidad sin tener que calcular antes confiabilidad sin tener que calcular antes una correlación, a partir de la varianza de una correlación, a partir de la varianza de los puntajes de las mitades de prueba.los puntajes de las mitades de prueba.

Es un método fácil y expedito de cálculo.Es un método fácil y expedito de cálculo. Puede ser conveniente conceptualizar una Puede ser conveniente conceptualizar una

sola prueba como si consistiera en dos sola prueba como si consistiera en dos partes (“paralelas”), partes (“paralelas”), cada una de las cada una de las cuales mide lo mismo.cuales mide lo mismo.

• En otras palabras, se aplica el instrumento y se En otras palabras, se aplica el instrumento y se califican a cada sujeto con dos puntuaciones califican a cada sujeto con dos puntuaciones separadas, pero provenientes de aquella única separadas, pero provenientes de aquella única evaluación.evaluación.

• Se puede realizar la bipartición de diversas maneras:Se puede realizar la bipartición de diversas maneras:

1.1. Si el test evalúa sólo una variable, se puede dividir el Si el test evalúa sólo una variable, se puede dividir el test en reactivos pares e impares.test en reactivos pares e impares.

2.2. Por el número de variables que posee la prueba Por el número de variables que posee la prueba (Según Tabla de especificaciones)(Según Tabla de especificaciones)

El primer método fue desarrollado por El primer método fue desarrollado por Rulon (1939).Rulon (1939). Posteriormente, Posteriormente, GuttmanGuttman (quien fue colaborador de (quien fue colaborador de

Rulon) desarrolla una nueva fórmula para determinar la Rulon) desarrolla una nueva fórmula para determinar la confiabilidad.confiabilidad.

Una única prueba aplicada en una oportunidad se puede Una única prueba aplicada en una oportunidad se puede dividir en sus resultados, en al menos dos partes.dividir en sus resultados, en al menos dos partes.

Lo usual es usar Lo usual es usar bipart ición par – imparbipart ición par – impar , aunque , aunque pueden hacerse otros tipos de partición.pueden hacerse otros tipos de partición.

La fórmula se basa en el establecimiento de la varianza La fórmula se basa en el establecimiento de la varianza de cada una de las dos mitades del test, relacionándolas de cada una de las dos mitades del test, relacionándolas con la varianza total del test.con la varianza total del test.

Spearman – BrownSpearman – Brown trabajan con el trabajan con el método de bipartición par – impar.método de bipartición par – impar.

Se suponeSe supone que ambas mitades son que ambas mitades son equivalentes, con medias y varianzas equivalentes, con medias y varianzas iguales.iguales.

Es decir, los autores exigen que las dos Es decir, los autores exigen que las dos mitades resulten estrictamente mitades resulten estrictamente paralelas (lo cual no es enunciado por paralelas (lo cual no es enunciado por ninguno de los autores revisados hasta ninguno de los autores revisados hasta aquí).aquí).

2)2) Método derivado de los datos del Método derivado de los datos del análisis de análisis de ítems: Fórmulas de ítems: Fórmulas de Kuder – Richardson. Kuder – Richardson.

Se aprovechan los resultados del análisis de Se aprovechan los resultados del análisis de ítems, en que se intentaba calcular el grado de ítems, en que se intentaba calcular el grado de consistencia interna de cada reactivo, uniendo consistencia interna de cada reactivo, uniendo estos resultados para calcular el grado de estos resultados para calcular el grado de homogeneidad de todo el instrumento. homogeneidad de todo el instrumento.

Los métodos más usados son las deLos métodos más usados son las de Kuder – Kuder – Richardson 20 y 21.Richardson 20 y 21.

Suele aplicarse cuando los resultados a un ítem Suele aplicarse cuando los resultados a un ítem sólo pueden ser calificados con valores 0 y 1.sólo pueden ser calificados con valores 0 y 1.

3) Alfa de Cronbach3) Alfa de Cronbach Cronbach adapta la fórmula propuesta por Cronbach adapta la fórmula propuesta por

Guttman para establecer la confiabilidad Guttman para establecer la confiabilidad en test que tuvieran más de dos “partes”.en test que tuvieran más de dos “partes”.

Ejemplo: Instrumentos que evalúan dos o Ejemplo: Instrumentos que evalúan dos o más variables simultáneamente.más variables simultáneamente.

También es posible de obtener mediante También es posible de obtener mediante el uso de una Matriz de correlaciones. el uso de una Matriz de correlaciones.

ConfiabilidadConfiabilidad

Consistencia u obtención de los Consistencia u obtención de los mismos resultadosmismos resultados

Confiabilidad de la mediciónConfiabilidad de la medición

Medidas de confiabilidad y Medidas de confiabilidad y validezvalidez

Confiabilidad de un Utilizar el sistema desistema de evaluación 2 o más evaluadores

Correlación Alta = sistema confiable

“Si una prueba es confiable, un sujeto recibirá aproximadamente la misma puntuación cada vez que resuelva dicha prueba o una equivalente de ésta”

Puntuación alcanzada Correlaciona con medidas posteriores de conducta

Efectos de la dispersión sobre la confiabilidad

ConfiabilidadConfiabilidadVaría según dispersión de los puntajes Varía según dispersión de los puntajes

No altera el significado directo del coeficiente de Confiabilidad

Proporción entre la varianza de los puntajes verdaderos y puntajes obtenidos

Proporción pequeña

Atenuará la correlación con otras variables