CURSO INTRODUCCIÓN A LA METODOLOGÍA DE LA … · •La validez de constructo está relacionada...

26
Validación de Escalas CURSO INTRODUCCIÓN A LA METODOLOGÍA DE LA INVESTIGACIÓN CLÍNICA Y EPIDEMIOLÓGICA APLICADA A LA PSIQUIATRÍA 14 de Julio de 2012 Prof. Adj. Roberto Daniel Cáceres Bauer Unidad de Evaluación. Departamento de Educación Médica, UDELAR.

Transcript of CURSO INTRODUCCIÓN A LA METODOLOGÍA DE LA … · •La validez de constructo está relacionada...

Page 1: CURSO INTRODUCCIÓN A LA METODOLOGÍA DE LA … · •La validez de constructo está relacionada con la validez de la hipótesis que define el constructo y sus implicaciones teóricas.

Validación de Escalas

CURSO INTRODUCCIÓN A LA METODOLOGÍA DE LA INVESTIGACIÓN CLÍNICA Y EPIDEMIOLÓGICA APLICADA A LA PSIQUIATRÍA

14 de Julio de 2012

Prof. Adj. Roberto Daniel Cáceres Bauer

Unidad de Evaluación. Departamento de Educación Médica, UDELAR.

Page 2: CURSO INTRODUCCIÓN A LA METODOLOGÍA DE LA … · •La validez de constructo está relacionada con la validez de la hipótesis que define el constructo y sus implicaciones teóricas.

Validez

•Cuando se desarrolla un instrumento de medición es necesario investigar en que medida dicho instrumento es útil desde el punto de vista científico.

•Es necesario estudiar en que medida el puntaje obtenido con un instrumento sirve para medir un constructo

que se desea medir.

Page 3: CURSO INTRODUCCIÓN A LA METODOLOGÍA DE LA … · •La validez de constructo está relacionada con la validez de la hipótesis que define el constructo y sus implicaciones teóricas.

Validez Predictiva

•En que medida el puntaje obtenido puede ser utilizado para predecir un criterio.

•Un criterio es alguna forma de comportamiento que es externa al instrumento en si.

Page 4: CURSO INTRODUCCIÓN A LA METODOLOGÍA DE LA … · •La validez de constructo está relacionada con la validez de la hipótesis que define el constructo y sus implicaciones teóricas.

Validez de Contenido

La validez de contenido está relacionada con cuan adecuadamente se

ha muestreado un dominio específico de contenidos.

Page 5: CURSO INTRODUCCIÓN A LA METODOLOGÍA DE LA … · •La validez de constructo está relacionada con la validez de la hipótesis que define el constructo y sus implicaciones teóricas.

Validez de Contenido

Para lograr un buen nivel adecuado de validez de contenido lo que se debe asegurar es un buen plan y procedimiento de construcción.

Page 6: CURSO INTRODUCCIÓN A LA METODOLOGÍA DE LA … · •La validez de constructo está relacionada con la validez de la hipótesis que define el constructo y sus implicaciones teóricas.

Validez de Constructo

•Un constructo

es una variable abstracta que no es una dimensión observable del comportamiento.

•Un constructo

representa una hipótesis que implica que un cierto dominio de comportamientos correlacionan entre sí

en

estudios de diferencias individuales o bien son afectados en forma similar por tratamientos experimentales.

Page 7: CURSO INTRODUCCIÓN A LA METODOLOGÍA DE LA … · •La validez de constructo está relacionada con la validez de la hipótesis que define el constructo y sus implicaciones teóricas.

Validez de Constructo

•La validez de constructo

está

relacionada con la validez de la hipótesis que define el constructo

y sus implicaciones teóricas.

Otra aproximación relacionada con la validez de constructo

es la explicación de

un constructo, lo que significa el proceso de hacer a un concepto abstracto explícito en términos de variables observables.

Page 8: CURSO INTRODUCCIÓN A LA METODOLOGÍA DE LA … · •La validez de constructo está relacionada con la validez de la hipótesis que define el constructo y sus implicaciones teóricas.

Confiabilidad

•Una medida es confiable

en la medida que sea reproducible, a pesar de que existen influencias aleatorias que tienden a hacer a las medidas diferentes de una ocasión a otra, o de circunstancia en circunstancia, lo que constituye una fuente de error de medición.

Page 9: CURSO INTRODUCCIÓN A LA METODOLOGÍA DE LA … · •La validez de constructo está relacionada con la validez de la hipótesis que define el constructo y sus implicaciones teóricas.

Confiabilidad

Razón de la varianza verdadera de un test

y la varianza del puntaje observado.

El cuadrado de la correlación entre puntajes verdaderos y puntajes observados.

Page 10: CURSO INTRODUCCIÓN A LA METODOLOGÍA DE LA … · •La validez de constructo está relacionada con la validez de la hipótesis que define el constructo y sus implicaciones teóricas.

Confiabilidad

Una fuente de error es debido al muestreo de contenido.

•Esto está

relacionado con variaciones en el desempeño de un ítem a otro dentro de un test.

Page 11: CURSO INTRODUCCIÓN A LA METODOLOGÍA DE LA … · •La validez de constructo está relacionada con la validez de la hipótesis que define el constructo y sus implicaciones teóricas.

Confiabilidad

•También pueden haber variaciones que se manifiestan solo en el desempeño de diferentes formas de un test

al mismo o

diferentes momentos.

Page 12: CURSO INTRODUCCIÓN A LA METODOLOGÍA DE LA … · •La validez de constructo está relacionada con la validez de la hipótesis que define el constructo y sus implicaciones teóricas.

Consistencia Interna

Las estimaciones de confiabilidad basadas en la correlación promedio entre ítems dentro de un test

se dice que

están relacionadas con la “consistencia interna”

del test.

Page 13: CURSO INTRODUCCIÓN A LA METODOLOGÍA DE LA … · •La validez de constructo está relacionada con la validez de la hipótesis que define el constructo y sus implicaciones teóricas.

Coeficiente Alfa.

•El coeficiente alfa establece una cota superior para la confiabilidad de un test.

•En general ofrece una buena estimación de la confiabiliad

de un test.

Page 14: CURSO INTRODUCCIÓN A LA METODOLOGÍA DE LA … · •La validez de constructo está relacionada con la validez de la hipótesis que define el constructo y sus implicaciones teóricas.

Formas Alternativa de un test

La correlación entre formas alternativas de un test

es otra aproximación a la

medición de la confiabilidad.

Page 15: CURSO INTRODUCCIÓN A LA METODOLOGÍA DE LA … · •La validez de constructo está relacionada con la validez de la hipótesis que define el constructo y sus implicaciones teóricas.

Implicaciones de la confiabilidad.

• Corrección de Atenuación.

• Error estándar de medición.

Page 16: CURSO INTRODUCCIÓN A LA METODOLOGÍA DE LA … · •La validez de constructo está relacionada con la validez de la hipótesis que define el constructo y sus implicaciones teóricas.

Medidas de Concordancia

Las medidas de concordancia expresan en que grado diferentes evaluadores concuerdan entre sí.

Page 17: CURSO INTRODUCCIÓN A LA METODOLOGÍA DE LA … · •La validez de constructo está relacionada con la validez de la hipótesis que define el constructo y sus implicaciones teóricas.

Po-Pe

Kappa

= ---------------

1-Pe

Page 18: CURSO INTRODUCCIÓN A LA METODOLOGÍA DE LA … · •La validez de constructo está relacionada con la validez de la hipótesis que define el constructo y sus implicaciones teóricas.

ICC: Coeficiente de correlación intraclase

“varianza entre grupos”

ICC = --------------------------------

“total de la varianza”.

Page 19: CURSO INTRODUCCIÓN A LA METODOLOGÍA DE LA … · •La validez de constructo está relacionada con la validez de la hipótesis que define el constructo y sus implicaciones teóricas.

Evaluación de la Validez de Constructo

Una forma de aproximarse al estudio de la validez de constructo

es investigar si se

pueden encontrar una serie de variables no observables o latentes que explican el patrón de correlaciones observados entre puntajes de instrumentos de medición.

Page 20: CURSO INTRODUCCIÓN A LA METODOLOGÍA DE LA … · •La validez de constructo está relacionada con la validez de la hipótesis que define el constructo y sus implicaciones teóricas.

Análisis de Componentes Principales

A partir de las variables observadas se generan un número menor de variables latentes, no correlacionadas entre sí.

•El conjunto de variables latentes generadas se denominan componentes principales.

Page 21: CURSO INTRODUCCIÓN A LA METODOLOGÍA DE LA … · •La validez de constructo está relacionada con la validez de la hipótesis que define el constructo y sus implicaciones teóricas.

Análisis de Componentes Principales

•Cada componente principal sintetiza la máxima variabilidad residual contenida en los datos.

•El número de componentes principales se puede seleccionar considerando cómo se incrementa la proporción de la variación explicada por los primeros componentes. Donde se produce una inflexión se puede considerar cómo un punto de referencia.

Page 22: CURSO INTRODUCCIÓN A LA METODOLOGÍA DE LA … · •La validez de constructo está relacionada con la validez de la hipótesis que define el constructo y sus implicaciones teóricas.

Análisis de Componentes Principales

•Una vez obtenidos los componentes principales, se pueden aplicar algunos métodos para hacer más fácil la interpretación de las variables latentes encontradas. Métodos de rotación.

Page 23: CURSO INTRODUCCIÓN A LA METODOLOGÍA DE LA … · •La validez de constructo está relacionada con la validez de la hipótesis que define el constructo y sus implicaciones teóricas.
Page 24: CURSO INTRODUCCIÓN A LA METODOLOGÍA DE LA … · •La validez de constructo está relacionada con la validez de la hipótesis que define el constructo y sus implicaciones teóricas.
Page 25: CURSO INTRODUCCIÓN A LA METODOLOGÍA DE LA … · •La validez de constructo está relacionada con la validez de la hipótesis que define el constructo y sus implicaciones teóricas.

Referencias.

1. Nunnally. Psychometric

Theory, McGraw-Hill, 1978.

2. R. P. McDonald. Test

Theory: A unified

Treatment,2008.

3. S. E. Embretson

et al. Item

response theory

for

psychologist, LEA, 2000.

Page 26: CURSO INTRODUCCIÓN A LA METODOLOGÍA DE LA … · •La validez de constructo está relacionada con la validez de la hipótesis que define el constructo y sus implicaciones teóricas.

¿PREGUNTAS?