Ps. WALTER IVÁN ABANTO VÉLEZ

PROCESO DE CONFIABILIDAD

ÁREA DE INVESTIGACIÓN

ESCUELA DE POSTGRADO

1. Ingresar los datos obtenidos en la 1. Ingresar los datos obtenidos en la aplicación de la pruebaaplicación de la prueba

2. Para la columna PAR2. Para la columna PAR

3. En la columna IMPAR3. En la columna IMPAR

4. Colocar el cursor en la celda libre4. Colocar el cursor en la celda libre

5. Click en Insertar5. Click en Insertar

6. Seleccionar Función (fx)6. Seleccionar Función (fx)

7. Seleccionar Estadística7. Seleccionar Estadística

8. Opción Pearson8. Opción Pearson

9. Ingresar datos en matrices9. Ingresar datos en matrices

10. Matriz 1: Columna PAR10. Matriz 1: Columna PAR

11. Matriz dos: Columna IMPAR11. Matriz dos: Columna IMPAR

12. Clic para obtener resultado12. Clic para obtener resultado

13. Fórmula de 13. Fórmula de Spearman-BrownSpearman-Brown

r11 =

2r ½ ½

1+ r ½ ½

Pearson r = -0. 1893885

14. Mayor a 0.80: Prueba confiable14. Mayor a 0.80: Prueba confiable

CONFIABILIDADCONFIABILIDAD

Es la cualidad, la que hace que una Es la cualidad, la que hace que una misma prueba aplicada dos veces a la misma prueba aplicada dos veces a la misma persona en circunstancias misma persona en circunstancias idénticas, proporcione similares idénticas, proporcione similares resultados.resultados.

Se refiere al grado en que su Se refiere al grado en que su aplicación repetida al mismo sujeto u aplicación repetida al mismo sujeto u objeto produce iguales resultados. objeto produce iguales resultados.

Una técnica de muestreo es confiable Una técnica de muestreo es confiable cuando varias muestras de una misma cuando varias muestras de una misma población arrojan datos similares.población arrojan datos similares.

Es la característica de Es la característica de precisión de los precisión de los instrumentos de medicióninstrumentos de medición, independiente de , independiente de lo que quiera medir.lo que quiera medir.

Es un indicador de calidad global de una prueba.Es un indicador de calidad global de una prueba.

Indica si los resultados que se obtienen con los Indica si los resultados que se obtienen con los instrumentos de medición son consistentes en el instrumentos de medición son consistentes en el tiempo y entre formas de la prueba. El concepto tiempo y entre formas de la prueba. El concepto surge del hecho que las variables que se miden surge del hecho que las variables que se miden en Psicología conllevan una importante carga en Psicología conllevan una importante carga de error. de error.

El puntaje que se obtiene para una El puntaje que se obtiene para una persona a partir de la aplicación de una persona a partir de la aplicación de una prueba está compuesto por el prueba está compuesto por el verdadero nivel de la variable y por un verdadero nivel de la variable y por un componente error.componente error.

Se define para la prueba global a partir Se define para la prueba global a partir del concepto de varianza de puntajes, del concepto de varianza de puntajes, como la proporción de varianza total de como la proporción de varianza total de los resultados de una prueba que se los resultados de una prueba que se debe o que es varianza verdadera. debe o que es varianza verdadera.

1. Obtención de la 1. Obtención de la Confiabilidad.Confiabilidad.Puede computarse por medio de métodos Puede computarse por medio de métodos correlacionales, aunque también por correlacionales, aunque también por métodos no correlacionales.métodos no correlacionales.

Los resultados de los cálculos constituyen el Los resultados de los cálculos constituyen el valor numérico de la confiabilidad, y se valor numérico de la confiabilidad, y se denominan denominan Coeficientes de confiabilidad.Coeficientes de confiabilidad.

El cálculo de un El cálculo de un Coeficiente de Coeficiente de confiabilidadconfiabilidad (simbolizado con la sigla (simbolizado con la sigla rttrtt) ) es la manera precisa de evaluar la es la manera precisa de evaluar la confiabilidad del instrumento (lo que implica confiabilidad del instrumento (lo que implica determinar que nivel de error se está determinar que nivel de error se está cometiendo al estimar los puntajes). cometiendo al estimar los puntajes).

Este coeficiente entrega valores Este coeficiente entrega valores que fluctúan entre 0 y 1. que fluctúan entre 0 y 1.

Un coeficiente igual a 1 indicará Un coeficiente igual a 1 indicará confiabilidad perfecta, por el confiabilidad perfecta, por el contrario, un coeficiente igual a 0 contrario, un coeficiente igual a 0 señalará una total falta de señalará una total falta de confiabilidad. confiabilidad.

Los errores condicionan distintos Los errores condicionan distintos tipos de estimaciones de la tipos de estimaciones de la confiabilidad. confiabilidad.

Existen diversos factores que Existen diversos factores que afectan el cálculo de un afectan el cálculo de un coeficiente de confiabilidad; por coeficiente de confiabilidad; por ello, se han determinado tres ello, se han determinado tres procedimientos diferentes para procedimientos diferentes para calcularlo: calcularlo:

- Test–retestTest–retest- Formas paralelas Formas paralelas - Consistencia Interna.Consistencia Interna.

1.1.- 1.1.- CoeficienteCoeficiente Test– Test–retest:retest: Se basa en la aplicación del mismo Se basa en la aplicación del mismo

instrumento, a un único grupo de instrumento, a un único grupo de personas, en 2 momentos distintos, y sirve personas, en 2 momentos distintos, y sirve para determinar si un instrumento mide de para determinar si un instrumento mide de forma consistente en distintas ocasiones. forma consistente en distintas ocasiones.

Este procedimiento opera con la creencia Este procedimiento opera con la creencia de que las características medidas son de que las características medidas son estables en el tiempo. estables en el tiempo.

Es decir, el supuesto es que si Es decir, el supuesto es que si efectivamente la característica es estable efectivamente la característica es estable en el tiempo, la variación entre un en el tiempo, la variación entre un momento y otro NO va a ser momento y otro NO va a ser estadísticamente significativa. estadísticamente significativa.

Desde ésta perspectiva, la falta de Desde ésta perspectiva, la falta de confiabilidad se podría entender como confiabilidad se podría entender como el resultado de los errores que se el resultado de los errores que se producen por “producen por “Estados internos Estados internos temporalestemporales” de las personas que ” de las personas que contestan o por contestan o por “Condiciones “Condiciones externas”externas”. .

De esta manera, al calcular la De esta manera, al calcular la confiabilidad Test-retest es confiabilidad Test-retest es importante que las condiciones de importante que las condiciones de aplicación sean equivalentes en aplicación sean equivalentes en ambos momentos (misma hora, ambos momentos (misma hora, mismo lugar, mismo examinadores). mismo lugar, mismo examinadores).

En casos como las En casos como las pruebas de pruebas de rendimiento o educacionales, Norendimiento o educacionales, No se se utiliza el procedimiento test-retest, ya utiliza el procedimiento test-retest, ya que puede existir aprendizaje entre los que puede existir aprendizaje entre los momentos de rendición del test.momentos de rendición del test.

La modalidad para establecer si han La modalidad para establecer si han

existido modificaciones en los puntajes existido modificaciones en los puntajes entre un momento y otro es un entre un momento y otro es un coeficiente de correlación, que en éste coeficiente de correlación, que en éste caso se denomina caso se denomina Coeficiente de Coeficiente de EstabilidadEstabilidad. .

El tiempo mínimo de aplicación para El tiempo mínimo de aplicación para un Test – Retest son 15 días, ya que un Test – Retest son 15 días, ya que dicho período de tiempo sería el dicho período de tiempo sería el necesario para que las personas necesario para que las personas olviden la mayor parte de las olviden la mayor parte de las respuestas que entregaron la primera respuestas que entregaron la primera vez.vez.

De hecho, la magnitud de un De hecho, la magnitud de un coeficiente de estabilidad tiende a ser coeficiente de estabilidad tiende a ser mayor cuando el intervalo entre la mayor cuando el intervalo entre la prueba inicial y la segunda es breve, prueba inicial y la segunda es breve, en lugar de prolongado.en lugar de prolongado.

1.2.- Pruebas Paralelas:1.2.- Pruebas Paralelas:• Cuando el intervalo de tiempo entre la prueba Cuando el intervalo de tiempo entre la prueba

inicial y la segunda es breve, los sujetos pueden inicial y la segunda es breve, los sujetos pueden responder a la segunda evaluación en función de responder a la segunda evaluación en función de lo que recuerdan hicieron previamente (y no lo que recuerdan hicieron previamente (y no según el nivel de la variable es ese momento). según el nivel de la variable es ese momento).

• Para superar este defecto se generó una Para superar este defecto se generó una segunda forma de calcular confiabilidad: se segunda forma de calcular confiabilidad: se puede administrar una puede administrar una Prueba ParalelaPrueba Paralela, es , es decir, una prueba que posee reactivos decir, una prueba que posee reactivos equivalentes a la prueba original pero no iguales. equivalentes a la prueba original pero no iguales.

Dos pruebas pueden ser consideradas paralelas Dos pruebas pueden ser consideradas paralelas cuando miden las mismas variables, bajo los cuando miden las mismas variables, bajo los mismos principios y de la misma forma. mismos principios y de la misma forma.

En la práctica, esto se determina cuando:En la práctica, esto se determina cuando:

1.1. El promedio y las varianzas de ambos tests no El promedio y las varianzas de ambos tests no difieren significativamentedifieren significativamente

2.2. Los ítems presentan un similar grado de Los ítems presentan un similar grado de dificultad y están distribuidos de manera similar.dificultad y están distribuidos de manera similar.

3.3. Las correlaciones ítem – test son equivalentes.Las correlaciones ítem – test son equivalentes.

Es importante destacar que en Es importante destacar que en psicología casi no existen pruebas que psicología casi no existen pruebas que posean una versión paralela, por la posean una versión paralela, por la dificultad que implica cumplir cada uno dificultad que implica cumplir cada uno de los criterios estadísticos recién de los criterios estadísticos recién descritos. descritos.

El supuesto que opera a la base de este El supuesto que opera a la base de este procedimiento es el siguiente:procedimiento es el siguiente: Al aplicar Al aplicar una forma paralela después de un una forma paralela después de un tiempo, puede calcularse un tiempo, puede calcularse un Coeficiente de EquivalenciaCoeficiente de Equivalencia, que , que refleja los errores de medición debidos refleja los errores de medición debidos a distintos reactivos y ocasiones a distintos reactivos y ocasiones diferentes de aplicación. diferentes de aplicación.

Para obtener dicho coeficiente Para obtener dicho coeficiente simplemente se ocupa algún simplemente se ocupa algún procedimiento correlacional.procedimiento correlacional.

En algunos casos es posible En algunos casos es posible combinar las modalidades test–combinar las modalidades test–retest y formas paralelas, a lo que retest y formas paralelas, a lo que se llama: se llama: Formas paralelas con Formas paralelas con intervalo de tiempointervalo de tiempo. El coeficiente . El coeficiente que se obtiene pasa a denominarse que se obtiene pasa a denominarse “de estabilidad y equivalencia”.“de estabilidad y equivalencia”.

3.3.- Consistencia 3.3.- Consistencia (Homogeneidad) Interna(Homogeneidad) Interna Como ya se señaló, la creación de pruebas Como ya se señaló, la creación de pruebas

paralelas es costosa y difícil (especialmente en paralelas es costosa y difícil (especialmente en pruebas de capacidad). Por ello se desarrolla un pruebas de capacidad). Por ello se desarrolla un método menos directo que tome en cuenta los método menos directo que tome en cuenta los diversos fenómenos que afectan a la confiabilidaddiversos fenómenos que afectan a la confiabilidad

Este método se denomina Este método se denomina Consistencia Consistencia Interna.Interna.

Permite conocer si los resultados son Permite conocer si los resultados son consistentes entre dos mitades que comparo (de consistentes entre dos mitades que comparo (de la misma prueba)la misma prueba)

En otras palabras, responde a la En otras palabras, responde a la pregunta :¿Son consistentes los pregunta :¿Son consistentes los resultados en el tiempo entre dos resultados en el tiempo entre dos mitades del mismo instrumento?mitades del mismo instrumento?

Existen Existen diversas formas de calcularlodiversas formas de calcularlo (y no todas son correlaciones): (y no todas son correlaciones):

1.1. Método de Método de Equivalencia Racional o bipartición Equivalencia Racional o bipartición del test.del test.    

2.2. Método Método Kuder – RichardsonKuder – Richardson (Fórmulas 20 y 21). (Fórmulas 20 y 21).

3.3. Alfa de Cronbach.Alfa de Cronbach.

1) Método de Equivalencia racional de 1) Método de Equivalencia racional de un test. un test. (Bipartición o Split – half)(Bipartición o Split – half)

Consiste en un método para estimar Consiste en un método para estimar directamente un coeficiente de directamente un coeficiente de confiabilidad sin tener que calcular confiabilidad sin tener que calcular antes una correlación, a partir de la antes una correlación, a partir de la varianza de los puntajes de las mitades varianza de los puntajes de las mitades de prueba.de prueba.

Es un método fácil y expedito de cálculo.Es un método fácil y expedito de cálculo. Puede ser conveniente conceptualizar Puede ser conveniente conceptualizar

una sola prueba como si consistiera en una sola prueba como si consistiera en dos partes (“paralelas”), dos partes (“paralelas”), cada una de cada una de las cuales mide lo mismo.las cuales mide lo mismo.

• En otras palabras, se aplica el instrumento y se En otras palabras, se aplica el instrumento y se califican a cada sujeto con dos puntuaciones califican a cada sujeto con dos puntuaciones separadas, pero provenientes de aquella única separadas, pero provenientes de aquella única evaluación.evaluación.

• Se puede realizar la bipartición de diversas Se puede realizar la bipartición de diversas maneras:maneras:

1.1. Si el test evalúa sólo una variable, se puede Si el test evalúa sólo una variable, se puede dividir el test en reactivos pares e impares.dividir el test en reactivos pares e impares.

2.2. Por el número de variables que posee la prueba Por el número de variables que posee la prueba (Según Tabla de especificaciones)(Según Tabla de especificaciones)

El primer método fue desarrollado por El primer método fue desarrollado por Rulon Rulon (1939).(1939).

Posteriormente, Posteriormente, GuttmanGuttman (quien fue colaborador (quien fue colaborador de Rulon) desarrolla una nueva fórmula para de Rulon) desarrolla una nueva fórmula para determinar la confiabilidad.determinar la confiabilidad.

Una única prueba aplicada en una oportunidad se Una única prueba aplicada en una oportunidad se puede dividir en sus resultados, en al menos dos puede dividir en sus resultados, en al menos dos partes.partes.

Lo usual es usar Lo usual es usar bipartición par – imparbipartición par – impar, aunque , aunque pueden hacerse otros tipos de partición.pueden hacerse otros tipos de partición.

La fórmula se basa en el establecimiento de la La fórmula se basa en el establecimiento de la varianza de cada una de las dos mitades del test, varianza de cada una de las dos mitades del test, relacionándolas con la varianza total del test.relacionándolas con la varianza total del test.

Spearman – BrownSpearman – Brown trabajan con el trabajan con el método de bipartición par – impar.método de bipartición par – impar.

Se suponeSe supone que ambas mitades son que ambas mitades son equivalentes, con medias y equivalentes, con medias y varianzas iguales.varianzas iguales.

Es decir, los autores exigen que las Es decir, los autores exigen que las dos mitades resulten estrictamente dos mitades resulten estrictamente paralelas (lo cual no es enunciado paralelas (lo cual no es enunciado por ninguno de los autores por ninguno de los autores revisados hasta aquí).revisados hasta aquí).

2)2) Método derivado de los datos Método derivado de los datos del análisis de del análisis de ítems: Fórmulas ítems: Fórmulas de Kuder – Richardson. de Kuder – Richardson.

Se aprovechan los resultados del análisis de Se aprovechan los resultados del análisis de ítems, en que se intentaba calcular el grado de ítems, en que se intentaba calcular el grado de consistencia interna de cada reactivo, uniendo consistencia interna de cada reactivo, uniendo estos resultados para calcular el grado de estos resultados para calcular el grado de homogeneidad de todo el instrumento. homogeneidad de todo el instrumento.

Los métodos más usados son las deLos métodos más usados son las de Kuder – Kuder – Richardson 20 y 21.Richardson 20 y 21.

Suele aplicarse cuando los resultados a un Suele aplicarse cuando los resultados a un ítem sólo pueden ser calificados con valores 0 ítem sólo pueden ser calificados con valores 0 y 1.y 1.

3) Alfa de Cronbach3) Alfa de Cronbach Cronbach adapta la fórmula propuesta por Cronbach adapta la fórmula propuesta por

Guttman para establecer la confiabilidad Guttman para establecer la confiabilidad en test que tuvieran más de dos “partes”.en test que tuvieran más de dos “partes”.

Ejemplo: Instrumentos que evalúan dos o Ejemplo: Instrumentos que evalúan dos o más variables simultáneamente.más variables simultáneamente.

También es posible de obtener mediante También es posible de obtener mediante el uso de una Matriz de correlaciones. el uso de una Matriz de correlaciones.

ConfiabilidadConfiabilidad

Consistencia u obtención de Consistencia u obtención de los mismos resultadoslos mismos resultados

Confiabilidad de la mediciónConfiabilidad de la medición

Medidas de confiabilidad y Medidas de confiabilidad y validezvalidez

Confiabilidad de un Utilizar el sistema desistema de evaluación 2 o más evaluadores

Correlación Alta = sistema confiable

“Si una prueba es confiable, un sujeto recibirá aproximadamente la misma puntuación cada vez que resuelva dicha prueba o una equivalente de ésta”

Puntuación alcanzada Correlaciona con medidas posteriores de conducta

Efectos de la dispersión sobre la confiabilidad

ConfiabilidadConfiabilidadVaría según dispersión de los puntajes Varía según dispersión de los puntajes

No altera el significado directo del coeficiente de Confiabilidad

Proporción entre la varianza de los puntajes verdaderos y puntajes obtenidos

Proporción pequeña

Atenuará la correlación con otras variables