DISEÑO DE CUESTIONARIOS

‘Indice

1. Investigación social y técnicas de observación 2. La encuesta por cuestionario 3. Concebir el cuestionario 4. Anatomía del cuestionario 5. Redacción de preguntas 6. Recogida y trato de datos 7. Calidad de la encuesta 8. Límites de las encuestas

1. Investigación social y técnicas de observación • Investigar es hacer preguntas a la

realidad y responderlas observándola de forma metódica. El método consiste en explicitar las preguntas, las respuestas o datos esperados, y la forma de obtenerlos.

• En el proceso de investigar, las

preguntas son fundamentales. Los datos sólo tienen sentido en relación con el problema. La historia del pensamiento social es la de esas preguntas.

• La sociedad es cambio; cambian las

preguntas sobre ella, las categorías con las que se la percibe, y las unidades de su medida.

Ejemplo Las categorias evolucionan

1. ¿Cuál es su estado civil? (Elegir sólo una respuesta) Soltero/a (1) Casado/a (2) Separado/a (3) Divorciado/a (4) Viudo/a (5) No sabe, no contesta (9) 1. ¿Cuál es su estado civil? (Elegir sólo una respuesta) Soltero/a (1) Casado/a por primera vez (2) Casado/a después de un divorcio (3) Casado/a después de enviudar (4) Separado/a (5) Divorciado/a (6) Viudo/a (7) No sabe, no contesta (9)

(Benoît Riandey)

Técnicas de observación Técnica

Aportaciones y límites

Observación

participante

Permite analizar ambientes naturales

No rompe las redes sociales de los actores

Mejor acceso a información oculta o delicada

Poca ingerencia del observador

Se acerca al espacio simbólico del actor

El control de la observación es difícil

El observador está condicionado por su rol

El observador se implica emocionalmente

El proceso de integración suele ser largo

Entrevista en profundidad

Más profundidad en los contenidos

Libertad de expresión del entrevistado/a

Entrevistador/a y entrevistado/a se influyen

Difícil control y estandarización

El análisis es difícil

Requiere entrevistadores/as cualificados/as

Historia de vida

Permite una visión evolutiva

El sujeto utiliza sus propias categorías

La subjetividad del sujeto es total

El control de veracidad de los datos es difícil

El análisis es difícil

Grupo discusión Focus group

Permite el contrate de discursos

La selección de los sujetos es crucial

Requiere un/a moderador/a especializado/a

2. La encuesta por cuestionario Aportaciones Permite explicar lo que hacen, dicen, o creen los actores por sus determinantes sociales (Bourdieu, Passeron, y de Singly).

Hechos - Cuestionario - Datos • Facilita la objetivación y la observación

sistemática • Facilita explicitar el comportamiento más

allá de la visión de los propios actores. • Facilita la comparación entre individuos y

comportamientos • Permite cuantificar y generalizar los

resultados a la población

La encuesta como comunicación

Toda comunicación entre individuos sigue principios comunes:

• Principio de pertinencia • Principio de coherencia • Principio de reciprocidad • Principio de influencia • Principio de cooperación

Los encuestados aceptan un contrato que se apoya en el principio de cooperación que opera en las situaciones de comunicación. El acuerdo inicial encuestador-encuestado, abre la cooperación de éste. Las respuestas resultan de ese acuerdo.

Modos de administración Cara a cara Por correo Por teléfono

3. Concebir el cuestionario El cuestionario está determinado por el objetivo de investigación, el tipo de administración, y la explotación de los datos. Documentación • Situar el estudio en un marco teórico que permita ver

las aportaciones que realiza. • Estudiar la literatura publicada sobre el tema, las

encuestas, los resultados obtenidos, y los cuestionarios utilizados.

• Conocer lo que dicen los actores sociales, qué

significados dan a las nociones estudiadas. Realizar entrevistas previas abiertas o discusiones de grupo.

• Conocer las opiniones de los expertos y

patrocinadores. Realizar entrevistas abiertas, discusiones de grupo, y lectura de publicaciones.

• Documentarse sobre las fuentes disponibles como

marcos muestrales

Ejemplo 2 Actitud hacia las matemáticas (C. Baudelot "¡Allez les filles!")

Explicar porqué al final de sus estudios secundarios, los chicos se encuentran aventajados en relación con las chicas.

Esta ventaja adquirida se explicaría por: 1) a igualdad de notas los chicos se perciben

mejores que las chicas y tienen más ambición; 2) están más preparados a la lógica de la

competencia en los últimos cursos; 3) manifiestan más preferencia por las matemáticas

y las ciencias. • Indicador “directo”

- sentimiento personal hacia las matemáticas • Indicadores indirectos

- Sobre las asignaturas escolares preferidas - Sobre la posesión de libros de matemáticas - Sobre el hecho de programar su calculadora - Sobre la lectura de revistas científicas - Sobre el uso de un micro-ordenador en casa - Sobre el amor a juegos y “rompe-cabezas”

Los chicos no se distinguían de las chicas por por un solo indicador.

Del concepto a la realidad Es necesario delimitar el objeto de la encuesta, qué parte de la realidad, y bajo qué conceptos significativos va a observarse. También cómo se va a realizar el tratamiento y análisis de los datos. En el proceso de la encuesta, la aproximación a la realidad sufre cinco grandes transformaciones: Definición del objeto Elaboración de conceptos Colecta de datos Codificación y recodificación Interpretación de los datos

Del indicador al dato Los indicadores son intermediarios entre las variables y los conceptos. Facilitan obtener datos orientados y significativos. • Las preguntas son soluciones de

equilibrio entre la necesidad social de comunicación y la técnica de captar información.

• Las variables son las características

observables susceptibles de adoptar distintos valores o de ser expresadas en varias categorías.

• Los indicadores son expresiones

aproximadas de variables complejas. • El concepto es el resultado de la

actividad cognitiva

Una descripción social de los individuos es fundamental

Para comparar lo comparable, es necesario considerar el "contexto" geográfico, social, familiar, de relaciones inter-personales.

Los indicadores relativos a las nociones objeto de la encuesta. La elección de buenos indicadores es fundamental; se necesita reflexión teórica, experiencia, y estudio del proceder de otros.

4. Anatomía del cuestionario Partes La encuesta por cuestionario permite poner de relieve los determinantes sociales de las actitudes, opiniones y prácticas • Descriptores socioeconómicos

• Descriptores contextuales

• Descriptores de prácticas y opiniones

Determinantes sociales Género Edad Educación Posición social Movilidad social Posición profesional Residencia Estructura familiar Nivel de renta Patrimonio Determinantes contextuales Según las nociones estudiadas en la encuesta: Actitudes religiosas Actitudes políticas Posiciones ideológicas Posiciones culturales Asociaciones de pertenencia Colectivos de referencia

Determinantes de: • Comportamiento. Miden hechos

contrastables por un observador • Conocimiento. Miden la información

que posee una persona sobre un hecho.

• Actitudes y creencias. Las actitudes

miden los sentimientos negativos o positivos hacia algo. Las creencias miden el convencimiento de que algo es verdadero o falso.

Preguntas cerradas y abiertas Ventajas de las preguntas abiertas: Condicionan menos al encuestado Permiten explorar significados Desventajas de las abiertas: Mayor influencia del encuestador Más dificultad al codificar Mayor coste de tratamiento Más respuestas inapropiadas

Ejemplo 4: Preguntas cerradas y abiertas Las preguntas abiertas y las preguntas cerradas aportan dos tipos de información irreductibles el uno al otro: • "Cuál es el problemas más grave que debe afrontar Estados-Unidos de América?" Pregunta abierta 16% Pregunta cerrada 32% (Schuman, y Presser) • ¿Qué revistas leyó Vd. la semana pasada? Las preguntas abiertas agudizan los problemas de memorización (Ludovic Lebart, “Les questions ouvertes outils de controle, d’évaluation, de valorisation” Mots 23 (1990): p. 77) • "¿Cuáles son las categorías para las cuales el gobierno más gasta?" 1983 1984 1985 1986 1987 abierta abierta cerrada cerrada abierta Inmigrados: 4% 5% 28% 30% 8% (Encuesta CREDOC, L. Lebart)

Orden de las preguntas La estructura del cuestionario varía según su contenido. Debe ser coherente y facilitar la "situación de encuesta". El orden general y de las preguntas influyen en su calidad. Algunos criterios son: • Ir de lo general a lo particular • Ir de menos a más comprometido • Las delicadas van en el medio • Las socio-económicas van al final • Usar frases de transición: En los cambios de temática Para romper la monotonía • Las primeras preguntas son estratégicas:

marcan el tono y estilo de la encuesta. Deben ser neutras, amenas y fáciles

Ejemplo Efectos de orden en las preguntas

Se debe evitar que una pregunta (o grupos de preguntas) condicione las respuestas a las preguntas siguientes

1. ¿Cree Vd. que los Estado Unidos deben aceptar periodistas comunistas que vienen aquí y envían sus artículos con lo que han visto?

2. ¿Cree Vd. que un país comunista como la Unión

Soviética debe aceptar periodistas norteamericanos que van allá y envían sus artículos con lo que han visto?

Preguntas filtro Es necesario prever preguntas-filtro, para no frustrar las personas que no tienen ciertos requisitos, y/o para evitar condicionamientos.

La no respuesta En una encuesta socio-económica (en particular, cuando se abordan temas de política), la no respuesta tiende a aumentar con:

La edad del encuestado El género femenino Las posición socioprofesional inferior El menor nivel escolar

El menor tamaño de la ciudad

Efectos del entrevistador ¿Le importaría a Vd. que un familiar próximo se casara con un/a negro/a? Entrevistador negro: 26% sí Entrevistador blanco: 72% sí

Formato y extensión El principio general de formato es la claridad y orden en los elementos y tipografía. Algunos consejos son: • Usar un formato tipo cuadernillo • Dejar una portada • Diferenciar tipográficamente preguntas y

frases de transisción; respuestas; notas al entrevistador; y marcas de codificación

Un cuestionario eficaz es breve. La extensión varía según: Tema Modalidad de administración Población estudiada

5. Redacción de preguntas "El universo profesional de los sociólogos y estadísticos les lleva a olvidar a menudo que los intereses científicos no son del interés general y que sus intereses pueden molestar a otros" (F. de Singly) "La encuesta impone una problemática en la interrogación. Si ésta es inexistente fuera de ésta, las respuestas obtenidas no son sino puros artefactos" (P. Bourdieu) Para luchar contra la "imposición de problemática", es necesario

•afinar la redacción de preguntas •asegurar una situación de encuesta lo

mas normal posible •comparar el resultado obtenido con las

informaciones disponibles

Principios de redacción 1. Emplear un vocabulario simple y adaptado al tipo de

población estudiada 2. Evitar formular una pregunta de manera que la

respuesta suponga reunir ciertos requisitos 3. Verificar la estructura lógica de las preguntas. En

frases interrogativas, las negaciones y sobre todo las dobles negaciones, pueden producir ambigüedades, incomprensión de la pregunta y finalmente errores de observación.

4. Es necesario evitar de introducir dos ideas diferentes

en una misma pregunta. Evitar las “dobles preguntas” 5. Es necesario evitar los términos cargados de

afectividad, juicios de valor, o frases de connotaciones diversas en función del contexto puesto que se modifica el sentido de la pregunta y en consecuencia el de las respuestas.

6. Estar atento a las palabras introductorias. 7. Evitar ambigüedades. Evitar que, para una misma

pregunta, pueda ser dada una misma respuesta pero por razones muy diferentes.

8. Autorizar dobles respuestas.

9. Cuando se solicita que los sujetos elijan la respuesta a una pregunta en una lista, ésta debe cubrir todas las situaciones posibles.

10. Valorar la Inclusión de las no-respuestas y

alternativas intermedias o neutrales. Si se ofrece el “Ns/nc”puede evadir respuesta; si no, fuerza a opinar a los “sin opinión”. Las segundas disminuyen los “no sabe o no contesta”. La eligen personas menos convencidas y menos afectadas por el problema. La decisión se toma en base al pretest

11. Establecer un equilibrio en modalidades “positivas” y

modalidades “negativas”. 12. Satisfacer la exigencia de coherencia expresiva. 13. Prestar atención a las modalidades de respuestas

propuestas 14. En preguntas delicadas: Aumentar los intervalos de respuesta Convertir las actitudes en creencias Crear un contexto tranquilizador Combinarlas con preguntas anodinas

Preguntas socialmente sesgadas 5. El Presidente del Gobierno reclama de los

ciudadanos/as... ¿Está Vd. de acuerdo o en desacuerdo?

6. Muchos expertos creen que... ¿Cuál es su

opinión?

Efecto de las palabras

• ¿Cree Vd. que debería prohibirse fumar en los

aviones? • Cree Vd. que debería permitirse fumar en los

aviones? • Cree Vd. que fumar en los aviones debería estar: Prohibido Permitido Croyez vous en Dieu? 81% Oui Est-ce que vous croyez en Dieu? 66% Oui 13. Para los enfermos terminales ¿Es Vd.

partidario de la eutanasia? 13. Para los enfermos terminales ¿Es Vd.

partidario de la ayuda activa a morir?

El “sí” admite posturas medias

3. ¿Cree Vd. que el Estado se orienta hacia una

política de ahorro de energía? 66% de “sí” en pregunta cerrada 23% de “sí” en pregunta abierta

Modalizadores verbales a) ¿Son privilegiados los funcionarios? b) ¿Piensa Vd. que los funcionarios son

privilegiados? c) ¿Encuentra usted que los funcionarios son

privilegiados? d) Estima Vd. que los funcionarios son

privilegiados? e) ¿Diría usted que los funcionarios son

privilegiados? Ninguna de las preguntas es igual a la otra ni obtienen el mismo porcentaje de respuesta. (Jeannine Richard-Zapella, “Variations interrogatives dans la question de sondage”, Mots 23 (1990):31)

Modalizadores verbales En caso de alternancia de poder, ¿cree Vd. que será necesario privatizar empresas públicas? ¿Cree Vd. que se podrá probar la existencia o inexistencia de Dios? El verbo “creer” está lleno de ambigüedad, puede siginificar “pensar” o “querer” (Jeannine Richard-Zapella, “Variations interrogatives dans la question de sondage”, Mots 23

(1990):31 y 32)

Falsos sinónimos

• Partidarios de prohibir los discursos contra la democracia en 1941 en Estados Unidos: 54%

• Partidarios de no autorizar los discursos contra la

democracia en 1941 en Estados Unidos: 75%

Escalas Muy buena-buena-mala-muy mala Aprueba-desaprueba De acuerdo-en desacuerdo Mejor-igual-peor Demasiado-lo necesario-poco Siempre-muchas veces-pocas veces-nunca Muy probable-probable-poco probable

Opción no sabe/no contesta 20. ¿Tiene Vd. una opinión formada sobre la

conveniencia o no de legalizar el aborto?

No (1) Sí (2) ¿Cuál es su opinión?

Respuestas dobles o triples

22. ¿Cuáles de estos paises le gustaría visitar? Elija dos como máximo.

Grecia (1) Portugal (2) Canada (3) Estados Unidos (4) Austria (5) Suiza (6) Bélgica (7) Ninguno de ellos (8) NS/NC (9)

6. Recoger y tratar datos Planificación Calidad de los datos, tiempo, y recursos están relacionados entre sí. El plan operativo detalla: Los recursos disponibles y costes previstos El calendario El tamaño y composición de la muestra Las responsabilidades de las personas Las rutas e itinerarios Las formas de supervisión Con el pretest se mejora el plan operativo Costes de una encuesta: Planificación Obtención de la muestra Prestest Selección y training de encuestadores Viajes y dietas de encuestadores Sueldos de encuestadores Codificación Introducción de datos Supervisión de la calidad Depuración de datos Análisis de datos Preparación del informe Teléfono, papelería, reproducción

Traininig de encuestadores/as Programa de entrenamiento: Presentación de la investigación Presentación del proceso de la encuesta Prácticas bajo el rol de entrevistador Prácticas bajo el rol de entrevistado Distinguir los tipos de preguntas Aprender los códigos de respuesta Leer preguntas Registrar respuestas Responder a las dudas del encuestado Aprender procedimientos de muestreo Revisión de su trabajo Estos puntos aparecen detallados en el manual del encuestador.

Control y tratamiento de datos Control de calidad de las entrevistas Revisión de cuestionarios Comprobación de la entrevista y datos Control de la muestra Imputación de datos ante la no respuesta Control de costes Codificación de preguntas abiertas Técnica de postcodificación manual Técnicas estadísticas de tratamiento Análisis lexicométricos Creación de un archivo de datos brutos Depuración de archivos Imputación determinista Imputación a partir de un “donador” Imputación de un valor por defecto Recodificación Tratamiento de la no respuesta Resumen de la información estadística

7. Calidad de la encuesta Calidad es la exactitud con la que los datos reflejan al objeto observado. Exactitud es la falta de error en la observación. La calidad se controla en todas las etapas de la encuesta • Error de muestreo. Determinados miembros

de la población se excluyen deliberadamente de la muestra.

• Error de (no) cobertura. Determinados

miembros de la población no están cubiertos por el marco de la muestra y no tienen posibilidad de ser seleccionados.

• Error de (no) respuesta. Determinados

miembros de la muestra no responden a una/s pregunta/s, o se producen pérdidas de información por otras causas.

• Error de medición. Error en el proceso de

observación a causa del observado, del observador, o del instrumento.

Errores de medición Errores y efectos del observador Efectos al preguntar Estatus, raza, o clase social Percepción o comunicación Errores y efectos del observado/a Deliberados (deseabilidad social) Involuntarios (memoria, ánimo) Interpretación o comunicación Rechazo a responder Errores y efectos del instrumento Modo de administración Sesgos en la pregunta Falta de claridad Orden en preguntas y respuestas Vocabulario empleado No presentar todas las respuestas Presentar respuestas no excluyentes

8. Límites de las encuestas • Parten del presupuesto de que todo el mundo

tiene una opinión • Parten del presupuesto de que todas las

opiniones valen igual • Parten del presupuesto de que la opinión pública

es la suma de las individuales • Favorece una visión sincrónica de la realidad

(actual), no su evolución • Imponen problemáticas. Plantean preguntas que

no se hacen los encuestados. • Las respuestas de los encuestados se interpretan

con categorías ajenas a ellos • Aíslan al individuo de su entorno • No miden comportamientos, sino declaraciones

de comportamientos • La lógica social y estadística difieren