RECOLECCION DE DATOS CUANTITATIVOSDR. MG. CD. HERBERT COSIO DUEÑAS

RECOLECCIÓN DE LOS DATOSImplica elaborar un plan detallado de procedimientos que nos conduzcan a reunir datos con un propósito específico. Este plan incluye determinar: ¿Cuáles son las fuentes de donde se

obtendrán los datos? ¿En dónde se localizan tales fuentes? ¿A través de qué medio o método vamos

a recolectar los datos? ¿de qué forma vamos a prepararlos para

que puedan analizarse y respondamos al planteamiento del problema?

EL PLAN SE NUTRE DE DIVERSOS ELEMENTOS:

Las variables

Las definiciones operacionales

La muestra

Los recursos disponibles

CONCEPTOS ESENCIALES PARA RECOLECTAR DATOS

Medir ConfiabilidadValidez Objetividad

¿QUÉ SIGNIFICA MEDIR?Significa “asignar números, símbolos o valores a las propiedades de objetos o eventos de acuerdo con reglas” (Stevens, 1951).

MEDICIÓNProceso que vincula conceptos abstractos con

indicadores empíricos.

La medición se realiza mediante un plan explicito y organizado para clasificar los datos disponibles, en términos del concepto que el

investigador tiene en mente.

INSTRUMENTO DE MEDICIÓN representan valores visibles de conceptos abstractos.

INSTRUMENTO DE MEDICIÓN Bostwick y Kyte (2005) lo señalan de la

siguiente forma: “La función de la medición es establecer una correspondencia entre el “mundo real” y el “mundo conceptual”. El primero provee evidencia empírica, el segundo proporciona modelos teóricos para encontrar sentido a ese segmento del mundo real que estamos tratando de describir.

Toda medición o instrumento de recolección de datos debe de reunir:

- Confiabilidad

- Validez

- Objetividad

CONFIABILIDAD Grado en que un instrumento produce resultados consistentes y coherentes.

CONFIABILIDAD La confiabilidad de un instrumento de medición se refiere al grado en que su aplicación repetida al mismo individuo u objeto produce resultados iguales.

MEDIDAS DE CONFIABILIDAD

Medida de estabilidad:

(confiabilidad test – retest).

Método de formas

paralelas o alternativas.

Método de las mitades partidas.

Coeficiente de Cronbach

MEDIDAS DE CONFIABILIDAD Medida de estabilidad: (confiabilidad test – retest).- un mismo instrumento es administrado a un mismo grupo de personas después de un período de tiempo. Se mide la confiabilidad a través de la correlación entre ambos puntajes.Método de formas paralelas o alternativas.- Se Administran dos formas equivalentes, por tanto no es el mismo instrumento. Se mide la confiabilidad a través de la correlación entre ambos puntajes.

MEDIDAS DE CONFIABILIDAD Método de las mitades partidas.- Requiere una sola medición en un mismo grupo de sujetos. Se divide la prueba en dos mitades y se comparan los resultados en correlaciones.Coeficiente de Cronbach.- Este coeficiente requiere una sola medición y mide la consistencia interna de los ítems en cada escala y el instrumento como conjunto. Es decir entrega un valor estadístico que nos indica en que medida un conjunto de ítems apuntan en la misma dirección

LA VALIDEZ Grado en que un instrumento en verdad mide la variable que se busca medir

Por ejemplo, un instrumento válido para medir la inteligencia debe medir la inteligencia y no la memoria.

LA VALIDEZ PUEDE TENER DIFERENTES TIPOS DE EVIDENCIA

• Dominio de contenido de lo que se mide.

Evidencia relacionada con el contenido

• Comparándolo con algún criterio externo

Evidencia relacionada con el criterio

• Grado en que una medición se relaciona consistentemente con otras mediciones

Evidencia relacionada con el constructo

1. EVIDENCIA RELACIONADA CON EL CONTENIDOSe refiere al grado en que un instrumento refleja un dominio específico de contenido de lo que se mide.

Ejemplo: una prueba de conocimientos sobre las canciones de Los Beatles no deberá basarse solamente en sus álbumes Let it Be y Abbey Road, sino que debe incluir canciones de todos sus discos.

1. EVIDENCIA RELACIONADA CON EL CONTENIDOUn instrumento de medición requiere tener representados prácticamente a todos o la mayoría de los componentes del dominio de contenido de las variables a medir..

Ejemplo: una prueba de conocimientos de líderes históricos de América Latina que omita a Simón Bolívar, Salvador Allende o Benito Juárez,.

El dominio de contenido de una variable normalmente está definido o establecido por la

literatura (teoría y estudios antecedentes).

2. EVIDENCIA RELACIONADA CON EL CRITERIOLa validez de criterio establece la validez de un instrumento de medición al comparar sus resultados con los de algún criterio externo que pretende medir lo mismo.

para asegurarse que la medición es válida, se decide utilizar otra forma de medición adicional,

3. EVIDENCIA RELACIONADA CON EL CONSTRUCTOes probablemente la más importante, sobre todo desde una perspectiva científica, y se refiere a qué tan exitosamente un instrumento representa y mide un concepto teórico (Grinnell, Williams y Unrau, 2009).

Validez de expertos Se refiere al grado en que aparentemente un instrumento de medición mide la variable en cuestión, de acuerdo con expertos en el tema.

CALCULO DE LA VALIDEZ

• Consulta a expertos

Validez de contenido

• Correlaciona su medición con el criterio

Validez de criterio

• Análisis factorial

Validez de constructo

LA VALIDEZ TOTALLa validez de un instrumento de medición se evalúa sobre la base de todos los tipos de evidencia. Cuanta mayor evidencia de validez de contenido, de validez de criterio y de validez de constructo tenga un instrumento de medición, éste se acercará más a representar la(s) variable(s) que pretende medir.

RELACIÓN ENTRE LA CONFIABILIDAD Y LA VALIDEZ

Un instrumento de medición puede ser confiable, pero no necesariamente válido

Por ello es requisito que el instrumento de medición demuestre ser confiable y válido

Para ampliar este comentario, recurriremos a una analogía de Bostwick y Kyte (2005, pp. 108-109)

FACTORES QUE PUEDEN AFECTAR LA CONFIABILIDAD Y LA VALIDEZ El primero de ellos es la improvisación. El segundo factor es que a veces se utilizan

instrumentos desarrollados en el extranjero que no han sido validados en nuestro contexto: cultura y tiempo.

Un tercer factor es que en ocasiones el instrumento resulta inadecuado para las personas a quienes se les aplica: no es empático.

FACTORES QUE PUEDEN AFECTAR LA CONFIABILIDAD Y LA VALIDEZ El cuarto factor agrupa diversas cuestiones

vinculadas con los estilos personales de los participantes.

Un quinto factor que puede influir está constituido por las condiciones en las que se aplica el instrumento de medición.

El sexto elemento es la falta de estandarización Aspectos mecánicos tales como que si el

instrumento es escrito, que no sean legibles las instrucciones, falten páginas, no haya espacio adecuado para contestar o no se comprendan las instrucciones, también influyen de manera desfavorable.

LA OBJETIVIDADse refiere al grado en que éste es permeable a la influencia de los sesgos y tendencias del investigador o investigadores que lo administran, califican e interpretan (Mertens, 2005).

La objetividad se refuerza mediante la estandarización en la aplicación del instrumento (mismas instrucciones y condiciones para todos los participantes) y en la evaluación de los resultados; así como al emplear personal capacitado y experimentado en el instrumento.

CALCULO DE LA CONFIABILIDAD O FIABILIDAD

la medida de consistencia interna denominada “coeficiente alfa Cronbach”, que tal vez es la más utilizada.

ALFA DE CRONBACHSi su valor supera el 0.8 hablamos de fiabilidad.

Si su valor es menor a 0,8 hablamos de un instrumento inconsistente

ALFA DE CRONBACHSi su valor supera el 0.8 hablamos de fiabilidad.

Si su valor es menor a 0,8 hablamos de un instrumento inconsistente

La confiabilidad varía de acuerdo con el número de ítems que incluya el instrumento de medición. Cuantos más ítems haya, mayor será ésta.

PROCEDIMIENTO SE SIGUE PARA CONSTRUIRUN INSTRUMENTO DE MEDICIÓN

Responde a la pregunta ¿a través de qué método vamos a recolectar los datos?

V

OPERACIONALIZAR LA VARIABLES variable Definición

conceptualDefinición operacional

dimensiones

Indicadores

Items

OPERACIONALIZACION DE LA VARIABLES

¿ que medir y con que?

INSTRUMENTO INSTRUMENTO

OPERACIONALIZACION DE LA VARIABLESVariable.- Es la característica, propiedad o atributo de personas o cosas y que varían de un sujeto a otro y en un mismo sujeto en diferentes momentos

OPERACIONALIZACION DE LA VARIABLESClasificación de las Variables Por su Relación de Dependencia

• Variable Independiente • Variable Dependiente • Variable Interviniente

OPERACIONALIZACION DE LA VARIABLESVARIABLE INDEPENDIENTE: • Explica, condiciona, o determina el cambio en los valores de la variable dependiente . • Actúa como factor condicionante de la variable dependiente • Se le llama también causal o experimental porque es manipulada por el investigador.

OPERACIONALIZACION DE LA VARIABLESVARIABLE DEPENDIENTE Es el fenómeno o situación explicado Es la variable que es afectada por la

presencia o acción de la variable independiente.

Se llama también de efecto o acción condicionada

OPERACIONALIZACION DE LA VARIABLESVARIABLE INTERVINIENTE Es aquella que se interpone entre la variable

independiente y la variable dependiente. No es objeto de estudio pero que la

presentarse y no ser controlada puede distorsionar los resultados de la investigación.

OPERACIONALIZACION DE LA VARIABLESClasificación de las Variables Por su naturaleza

• Variable Cuantitativas • Variable Cualitativas

OPERACIONALIZACION DE LA VARIABLES

OPERACIONALIZACION DE LA VARIABLESVARIABLE CUALITATIVA Sus elementos de variación tienen

motivación cualitativa. No pueden ser medidas en términos de

cantidad de la propiedad presente Ejemplo: motivación de los alumnos en el

proceso de aprendizaje, sexo, estado civil, jerarquía del empleado.

OPERACIONALIZACION DE LA VARIABLESVARIABLES CUANTITATIVAS Sus elementos de variación tienen un carácter

cuantitativo y numérico • Estas pueden ser a su vez:

• Variables continuas: • La unidad de medición que puede ser fraccionada

• Ejemplo: talla( metro, cm , mm) • Variables discontinuas:

• La unidad de medición no puede ser fraccionada

• Ejemplo: números de hijos , de embarazos

OPERACIONALIZACION DE LA VARIABLESClasificación de las Variables Por su valor de medición

• Variable Nominal • Variable Ordinal • Variable de Intervalo • Variable de Razón

OPERACIONALIZACION DE LA VARIABLESVariable Nominal Referidas a una clasificación o

ubicación en una sola categoría o lugar determinado.

Ej. sexo (masculino y femenino) Estado civil ( solteros, casados, viudos, divorciados)

Esta puede ser dicotómica o politómica.

OPERACIONALIZACION DE LA VARIABLESVARIABLE ORDINAL Presentan un orden en sus categorías, pero

no implican grados de distancias iguales entre ellas.

Se utiliza para clasificar, sujetos, hechos o fenómenos en forma jerárquica Ejemplo:

• Excelente, bueno, malo • Primaria, Secundaria, Superior

OPERACIONALIZACION DE LA VARIABLESVARIABLE DE INTERVALO Es una variable númerica. Pueden presentarse en grados, magnitudes. Estas variables además de clasificar y

ordenar las categorías, indican los grados de distancia que existe entre ellas. Ejemplo Temperatura, coeficiente intelectual.

OPERACIONALIZACION DE LA VARIABLESVARIABLE DE RAZON Poseen cero absoluto Las distancias entre dos puntos son siempre

iguales. Además de tener las características de las

variables descritas anteriormente. Ejemplo: Edad, peso, talla, etc.

OPERACIONALIZACION DE LA VARIABLES

OPERACIONALIZACION DE LA VARIABLES Es el proceso de llevar una variable del nivel

abstracto a un plano concreto. Operacionalizar una variable es hacerla

medible.

OPERACIONALIZACION DE LA VARIABLESPOR QUÉ DEBEN DEFINIRSE LAS VARIABLES? Para que otro investigador les dé el mismo

significado a los términos de una Hipótesis. Para comparar nuestra investigación con

otras similares Para evaluar adecuadamente los resultados

de nuestra investigación.

OPERACIONALIZACION DE LA VARIABLESPASOS:a. Definición de la variable. b. Determinar las dimensiones de la variable. c. Establecer los indicadores y sub indicadores

necesarios. d. Elaboración de las escalas de medición.

OPERACIONALIZACION DE LA VARIABLESINDICADORES En investigación realmente se trabajan con indicadores mas que con las variables por lo que es importante escoger el indicador que más nos refleja la variable respectiva.EJM. La variable “nivel socio económico” puede tener los siguientes indicadores: nivel de ingreso, nivel de estudios, lugar de residencia, actividad laboral, etc.

OPERACIONALIZACION DE LA VARIABLESIMPORTANCIA DE LA OPERACIONALIZACI ÓN DE VARIABLES Tiene su importancia en la posibilidad que un investigador poco experimentado pueda tener la seguridad de no perderse o cometer errores que son frecuentes en un proceso investigativo, cuando no existe relación entre la variable y la forma en que se decidió medirla, perdiendo así LA VALIDEZ (grado en que la medición empírica representa la medición conceptual).

OPERACIONALIZACION DE LA VARIABLESAlgunas variables son tan concretas, o de igual

significado en el ámbito mundial, que no requieren operacionalización, por ejemplo: el

sexo de los individuos, los colores del semáforo como señal de tránsito, la ubicación o

estructura de órganos en el cuerpo humano, entre otros.

OPERACIONALIZACION DE LA VARIABLES

OPERACIONALIZACION DE LA VARIABLES Una variable es una característica que se va

a medir. Es una propiedad, un atributo que puede darse o no en ciertos sujetos o fenómenos en estudio.

OPERACIONALIZACION DE LA VARIABLESTIPO DE VARIABLE Hace referencia a conceptos clasificatorios

de las variables que puede ser de distinto orden: Dependiente, Independiente, interviniente, etc.

OPERACIONALIZACION DE LA VARIABLESDEFINICIÓN OPERACIONAL Explica como se define el concepto

específicamente en el estudio planteado, que puede diferir de su definición etimológica.

Equivale a hacer que la variable sea mensurable a través de la concreción de su significado, y está muy relacionada con una adecuada revisión de la literatura.

Puede omitirse cuando la definición es obvia y compartida.

OPERACIONALIZACION DE LA VARIABLESCATEGORIZACIÓN O DIMENSIÓNCuando el concepto tiene varias dimensiones o clasificaciones o categorías, éstas deben especificarse en el estudio; tal es el caso de la variable “recursos», que puede hacer referencia a “recursos técnicos, financieros, ambientales, humanos entre otros».

OPERACIONALIZACION DE LA VARIABLESDEFINICIÓN DE LAS CATEGORÍAS Cada una de las dimensiones, categorías o clasificaciones debe ser definida conceptual y etimológicamente

OPERACIONALIZACION DE LA VARIABLESINDICADORSe expresa en razones, proporciones, tasas e índices. Permite hacer “medible” la variable. Son ejemplos de indicadores: indicadores económicos (la UVR, el dólar, la libra de café, el gramo de oro). Indicadores de pobreza (las migraciones, los desplazados, el desempleo, los asentamientos suburbanos).

OPERACIONALIZACION DE LA VARIABLESNIVEL DE MEDICIÓNLa medición de una variable se refiere a su posibilidad de cuantificación o cualificación, y éstas se clasifican según el nivel o capacidad en que permite ser medido el objeto en estudio. Pueden ser: Nominal, ordinal, intervalo, de razón.

OPERACIONALIZACION DE LA VARIABLESUNIDAD DE MEDIDA Se refiere a la respuesta que se espera en la

medición planeada. Puede ser cuantitativa: en Kilos, en metros,

en litros, en porcentajes, en proporciones, en tasas. •

Puede ser cualitativa: en grados de satisfacción (mucho, regular, poco), en calificaciones (excelente, regular, insuficiente), en grado de acuerdo (si y no) o (muy de acuerdo, en acuerdo, en desacuerdo) etc

OPERACIONALIZACION DE LA VARIABLESÍNDICE Es la expresión del indicador por ejemplo: Índice ocupacional: porcentaje de camas ocupadas.

OPERACIONALIZACION DE LA VARIABLESVALOREs el resultado o número de resultados posibles que se obtiene de una variable.

OPERACIONALIZAR LA VARIABLES

PASOS PARA LA CONSTRUCCION DE UN INSTRUMENTO1. Listar las variables que se pretende medir u

observar. 2. Revisar su definición conceptual y comprender su

significado. Por ejemplo, comprender bien qué es la motivación intrínseca y qué dimensiones la integran.

3. Revisar cómo han sido definidas operacionalmente las variables , esto es, cómo se ha medido cada variable. Ello implica comparar los distintos instrumentos o maneras utilizadas para medir las variables (comparar su confiabilidad, validez, sujetos a los cuales se les aplicó, facilidad de administración, veces que las mediciones han resultado exitosas y posibilidad de uso en el contexto de la investigación).

PASOS PARA LA CONSTRUCCION DE UN INSTRUMENTO4.- Elegir el instrumento o los instrumentos (ya desarrollados) que hayan sido favorecidos por la comparación y adaptarlos al contexto de la investigación. En este caso sólo deben seleccionarse instrumentos cuya confiabilidad y validez se reporte. No se puede uno fiar de una manera de medir que carezca de evidencia clara y precisa de confiabilidad y validez. 5.- Indicar el nivel de medición de cada ítem y, por ende, el de las variables. Existen cuatro niveles de medición ampliamente conocidos: -Nivel de medición nominal. -Nivel de medición ordinal -Nivel de medición por intervalos -Nivel de medición de razón

PASOS PARA LA CONSTRUCCION DE UN INSTRUMENTO8.- Indicar la manera como se habrán de codificar los datos en cada ítem y variable. codificar los datos significa asignarles un valor numérico que los represente 9.- Una vez que se indica el nivel de medición de cada variable e ítem y que se determina su codificación, se procede a aplicar una “prueba piloto” del instrumento de medición. 10.- Sobre la base de la prueba piloto, el instrumento de medición preliminar se modifica, ajusta y se mejora , los indicadores de confiabilidad y validez son una buena ayuda. y estaremos en condiciones de aplicarlo.

TRES CUESTIONES BÁSICAS A CONSIDERAR AL MOMENTO DE CONSTRUIR UN INSTRUMENTO

El tránsito de la variable al ítem

Codificación

Niveles de medición

EL TRANSITO DE LA VARIABLE AL ITEM

Cuando se construye un instrumento, el proceso más lógico para hacerlo es transitar de la variable a sus dimensiones o componentes, luego a los indicadores y finalmente a los ítems o reactivosvariable dimensión indicadores items

CODIFICACIÓNCodificar los datos significa asignarles un valor numérico o símbolo que los represente.

Es decir, a las categorías (opciones de respuesta o valores) de cada ítem y variable se les asignan valores numéricos o signos que tienen un significado.

NIVELES DE MEDICIÓNExisten cuatro niveles de medición ampliamente conocidos.1. Nivel de medición nominal.2. Nivel de medición ordinal.3. Nivel de medición por intervalos4. Nivel de medición de razón

1. NIVEL DE MEDICIÓN NOMINAL.Las categorías no tienen orden ni jerarquía

Las categorías únicamente reflejan diferencias en la variable. Ejm. El sexo.

1. NIVEL DE MEDICIÓN NOMINAL.Las variables nominales pueden incluir categorías Dicotomica Politomica

2. NIVEL DE MEDICIÓN ORDINAL.En este nivel hay varias categorías, pero además mantienen un orden de mayor a menor

Ejemplo sería la posición jerárquica en la empresa o la jerarquización de valores (en primer lugar, en segundo lugar, en tercero).

3. NIVEL DE MEDICIÓN POR INTERVALOS.Además del orden o la jerarquía entre categorías, se establecen intervalos iguales en la medición

el cero (0) en la medición es un cero arbitrario, no es real, ya que se asigna arbitrariamente a una categoría el valor de cero y a partir de ésta se construye la escala. Un ejemplo clásico en ciencias naturales es la temperatura, que puede medirse en grados centígrados y Fahrenheit:

4. NIVEL DE MEDICIÓN DE RAZÓN. el cero es real y es absoluto (no es arbitrario). Cero absoluto implica que hay un punto en la escala donde está ausente o no existe la propiedad medida.Ejm. Numero de hijos.

TIPOS DE INSTRUMENTOS DE MEDICIÓN O RECOLECCIÓN DE DATOS CUANTITATIVOS

1. Cuestionarios2. Escala para medir las actitudes3. Observación

1.- CUESTIONARIOS Consiste en un conjunto de preguntas respecto de una o mas variables a medir.

Debe ser congruente con el planteamiento del problema e hipótesis (Brace, 2008).

1.-CUESTIONARIOS

Preguntas cerradas• Son aquellas que contienen

opciones de respuesta previamente delimitadas. Son más fáciles de codificar y analizar.Preguntas abiertas

• No delimitan las alternativas de respuesta. Son útiles cuando no hay suficiente información sobre las posibles respuestas de las personas.

CONSIDERACIONES DE LAS PREGUNTAS CERRADAS Y ABIERTAS Las preguntas cerradas son más fáciles de

codifi car y preparar para su análisis. La principal desventaja de las preguntas

cerradas reside en que limitan las respuestas de la muestra

Para formular preguntas cerradas es necesario anticipar las posibles alternativas de respuesta.

Las preguntas abiertas proporcionan una información más amplia

1.- CUESTIONARIOSRecuerda que son obligatorias las preguntas llamadas demográficas o de ubicación del participante encuestado.

CONTEXTOS EN LOS QUE PUEDE ADMINISTRARSE O APLICARSE UN CUESTIONARIO

AUTOADMINISTRADO POR ENTREVISTA

2.- ESCALAS PARA MEDIR LAS ACTITUDESUna actitud es una predisposición aprendida para responder coherentemente de una manera favorable o desfavorable ante un objeto, ser vivo, actividad, concepto, persona o sus símbolos

2.- ESCALAS PARA MEDIR LAS ACTITUDESDesde luego, las actitudes sólo son un indicador de la conducta, pero no la conducta en sí. Por ello, las mediciones de actitudes deben interpretarse como “síntomas” y no como “hechos” (Padua, 2000).

La actitud es como una “semilla” que bajo ciertas condiciones suele “germinar en comportamiento”.

2.- ESCALAS PARA MEDIR LAS ACTITUDES

Los métodos más conocidos para medir por escalas las variables que constituyen actitudes son el método de

escalamiento Likert,

ESCALAMIENTO TIPO LIKERTConjunto de Items que se presentan en forma de afirmaciones para

medir la reacción del sujeto en tres, cinco o siete categorías.

A cada punto se le asigna un valor numérico. Así, el participante obtiene una puntuación respecto de la afirmación y al final su puntuación total, sumando las puntuaciones obtenidas en relación con todas las afirmaciones.

ESCALAMIENTO TIPO LIKERTLas opciones de respuesta o categorías pueden colocarse de manera horizontal: ( ) Muy de acuerdo ( ) De acuerdo ( ) Ni de acuerdo ni en desacuerdo ( ) En desacuerdo ( ) Muy en desacuerdo

ESCALAMIENTO TIPO LIKERTEs indispensable señalar que el número de categorías de respuesta debe ser igual para todas las afirmaciones. Pero siempre respetando el mismo orden o jerarquía de presentación de las opciones para todas las frases

DIRECCIÓN DE LAS AFIRMACIONESLas afi rmaciones pueden tener dirección: favorable o positiva y desfavorable o negativa. Y esta dirección es muy importante para saber cómo se codifican las alternativas de respuesta.

Si la afirmación es positiva, significa que califica favorablemente al objeto de actitud; de este modo, cuanto más de acuerdo con la frase estén los participantes, su actitud será igualmente más favorable.

Cuando las afirmaciones son positivas se califican comúnmente de la siguiente manera: (5) Muy de acuerdo (4) De acuerdo (3) Ni de acuerdo ni en desacuerdo (2) En desacuerdo (1) Muy en desacuerdoPero si la afirmación es negativa, significa que califica desfavorablemente al objeto de actitud

Cuando las afirmaciones son negativas se califican al contrario de las positivas. (1) Totalmente de acuerdo (2) De acuerdo (3) Ni de acuerdo ni en desacuerdo (4) En desacuerdo (5) Totalmente en desacuerdo

EJEMPLO DE UNA ESCALA LIKERT

FORMA DE OBTENER LAS PUNTUACIONES

3.- OBSERVACIÓN Método de recolección de información

basado en Contemplar una situación o fenómeno en forma directa.