TÉCNICAS E INSTRUMENTOS PARA LA RECOGIDA DE INFORMACIÓN (Tema 5: Técnicas de Encuesta) Asignatura Obligatoria (OB) de 2º curso Grado en Pedagogía Objetivos Valorar la utilidad de las encuestas en las investigaciones sociales. Conocer las distintas variantes de encuesta y sus limitaciones. Saber elegir el modelo de encuesta más apropiado a un contexto concreto. Diseñar un cuestionario. Realizar los controles técnicos apropiados para controlar la calidad de la encuesta. Saber implementar una encuesta. Recoger y analizar los datos emanados de una encuesta. Tema 5 – Técnicas de Encuesta 1. Introducción Algunos definen la investigación mediante encuestas como: “técnica cuantitativa que consiste en una investigación realizada sobre una muestra de sujetos, representativa de un colectivo más amplio, que se lleva a cabo en el contexto de la vida cotidiana, utilizando procedimientos estandarizados de interrogación con el fin de conseguir mediciones cuantitativas sobre una gran cantidad de características objetivas y subjetivas de la población” Tema 5 – Técnicas de Encuesta 1. Introducción El “Cuestionario” es el principal ‘instrumento’ de recogida de datos, dentro de las ‘técnicas’ de “Encuesta” Tema 5 – Técnicas de Encuesta 1. Introducción Ventajas e Inconvenientes de las Técnicas de Encuesta… VENTAJAS • Información de (casi) cualquier población. • Información sobre hechos pasados. • Gran capacidad para estandarizar datos. • Relativamente barata. INCONVENIENTES • No analiza en profundidad temas complejos (se suele complementar con la técnica de entrevista). Tema 5 – Técnicas de Encuesta Tipo de Encuestas Por la forma de realizarse Por su contenido Por su naturaleza temporal Por sus fines científicos Por su finalidad Cara a Cara Hechos Transversales Exploratorias Político-sociales Postal Opiniones Longitudinales Descriptivas Comerciales Telefónica Actitudes Explicativas Fines específicos Ordenador Predictivas On-line Evaluativas 2.1. La encuesta personal La ‘encuesta personal’ consiste en una ‘entrevista personal (estructurada)’ que se establece entre dos personas, a iniciativa del entrevistador, para obtener información sobre unos objetivos determinados. Tema 5 – Técnicas de Encuesta 2.1. La encuesta personal Ventajas e Inconvenientes de la ‘encuesta personal’… VENTAJAS • Mayor índice de respuesta. • Son fiables, evitan influencias de terceras personas. • Respuestas menos evasivas e inconcretas. • Permiten la utilización de materiales auxiliares. • Pueden obtenerse datos secundarios del entrevistado. INCONVENIENTES • Coste elevado en dinero y tiempo. • Posible influencia del entrevistador. • Se deben controlar los datos de los entrevistadores para evitar falseamiento. Tema 5 – Técnicas de Encuesta 2.2. La encuesta telefónica La ‘encuesta telefónica’ es un método cuya utilización ha ido en aumento a medida que se ha incrementado el número de hogares y sujetos con teléfono, y por tanto se ha incrementado su representatividad. Se utiliza a menudo en ‘investigación de mercados’. Tema 5 – Técnicas de Encuesta 2.2. La encuesta telefónica Ventajas e Inconvenientes de la ‘encuesta telefónica’… VENTAJAS • Se puede obtener información con mayor rapidez. • Coste más reducido que la ‘encuesta personal’ • Permite acceder a personas más ocupadas. • El índice de respuesta suele ser bastante elevado (aunque en los últimos años ha descendido por la presión del telemarketing) INCONVENIENTES • Falta de representatividad muestral, pues deben tener teléfono. • Brevedad obligada de la encuesta (máximo15 minutos). • No se puede utilizar material auxiliar (fotografías, bocetos…) Tema 5 – Técnicas de Encuesta 2.3. La encuesta postal La ‘encuesta postal’ consiste en el envío por correo de un cuestionario a las personas que constituyen la muestra con la esperanza de que por la misma vía lo devuelvan cumplimentado. Tema 5 – Técnicas de Encuesta 2.3. La encuesta postal Ventajas e Inconvenientes de la ‘encuesta postal’… VENTAJAS • Coste aún más reducido que la ‘encuesta telefónica’. • Sistema flexible para el encuestado, que elige en qué momento responder (respuestas más meditadas). • Se evitan sesgos procedentes del entrevistador. INCONVENIENTES • Baja tasa de respuesta (10-20%). Conviene incentivarla con premios. • La identidad del encuestado es una variable incontrolada. • Debe contarse con un directorio postal completo. • Se obtiene poca cantidad de información. • Problemas con la representatividad de la muestra respondiente. Tema 5 – Técnicas de Encuesta 2.4. Las encuestas por ordenador y on-line Las ‘encuestas por ordenador’ tienen una variante que está mostrando un crecimiento vertiginoso: las ‘encuestas on-line’ o ‘encuestas por internet’. Estas ‘encuestas on-line’ tienen tres fases bien definidas. Tema 5 – Técnicas de Encuesta 2.4. Las encuestas por ordenador y on-line 1ª Fase: La creación del cuestionario… El cuestionario ‘on-line’ presenta algunas características propias… • Presentarlo de forma atractiva y amigable. • Compatibilidad con distintos navegadores de Internet. • Debe permitir preguntas filtro, de salto y aleatorización del orden de las preguntas. • Primeras pantallas con invitación a contestar. • Visibilidad completa de las categorías de respuesta. • Es recomendable incluir una ‘barra de progreso’ • Posibilidad de avanzar sin contestar alguna pregunta. • Empleo de imágenes, gráficos o vídeos. Tema 5 – Técnicas de Encuesta 2.4. Las encuestas por ordenador y on-line 2ª Fase: La publicación del cuestionario… Alojamiento del cuestionario en un servidor de Internet, al cual el encuestado tiene acceso a través de algún ‘link’ (que se le puede enviar por e-mail). Es recomendable que el ‘link’ incluya algún tipo de autenticación o contraseña de acceso para garantizar la unicidad de la respuesta. Se ha comprobado que más del 75% de encuestados on-line que contestan, lo hacen en las primeras 48 horas tras la recepción del ‘link’. Tema 5 – Técnicas de Encuesta 2.4. Las encuestas por ordenador y on-line 3ª Fase: La administración del cuestionario… Es la gestión del cuestionario, gestión de los usuarios, y la recogida y tratamiento estadístico de los datos. En las encuestas ‘on-line’, como en el resto de encuestas, deben tenerse en cuenta las 4 posibles fuentes de error: • Error de medida derivado de que las respuestas no sean fiables este error se reduce en las encuestas on-line por la ausencia del sesgo del entrevistador. • Error de no-cobertura en este caso, derivado de que no toda la población tiene acceso a Internet. • Error de muestreo derivado de no enviar el cuestionario on-line a una muestra suficiente y representativa de la población que se desea encuestar. • Error de no-respuesta derivado de que haya un sesgo sistemático del tipo de sujetos que no llegan a contestar el cuestionario on-line. Tema 5 – Técnicas de Encuesta 3. Criterios en la selección del tipo de encuesta A la hora de elegir entre una ‘encuesta personal’, una ‘encuesta telefónica’, o una ‘encuesta postal’; se pueden valorar los siguientes 5 criterios. VERSATILIDAD • La ‘encuesta personal’ es la más versátil. TIEMPO • La ‘encuesta telefónica’ es la más rápida. COSTE • La ‘encuesta postal’ es la más económica. PRECISIÓN • La ‘encuesta personal’ es la más precisa porque es la que permite ejercer mayor control sobre la identidad del entrevistado y asegurar su cooperación. FLEXIBILIDAD PARA EL ENCUESTADO • La ‘encuesta postal’ es la más flexible para el encuestado, que puede elegir cuando responderla. Tema 5 – Técnicas de Encuesta 4. Proceso de una encuesta Definición del estudio (fines y objetivos) Selección y definición de las variables Diseño del cuestionario Validación y prueba del cuestionario Selección de la muestra Aplicación el cuestionario Tratamiento de los datos Elaboración del informe Tema 5 – Técnicas de Encuesta 4.1. Diseño de cuestionarios Un cuestionario es más que una simple lista de preguntas Su diseño es más complicado de lo que parece a primera vista. Debe estar cuidadosamente elaborado en forma y contenido, y han de valorarse toda una serie de elementos que lo doten de rigurosidad y sistematicidad. Tema 5 – Técnicas de Encuesta 4.1.1. Reglas para la formulación de preguntas La calidad de una investigación mediante encuesta viene determinada en gran medida por lo acertado que sea el diseño de las preguntas del cuestionario Reglas básicas para la formulación de preguntas (pp. 171-173) Si se quieren respuestas concretas, las preguntas deben ser concretas. No debe haber preguntas que contengan o induzcan a la respuesta. Debe controlarse el ‘efecto halo’ entre preguntas. Las preguntas deben tener un lenguaje sencillo (sin tecnicismos), y no exigir que el encuestado las memorice. Las preguntas deben ser neutrales (no deben contener juicios de valor ni términos connotativos). El cuestionario en su conjunto no debe ser excesivamente largo (+100 preguntas), pues disminuye el % de respuestas. … Tema 5 – Técnicas de Encuesta 4.1.1. Reglas para la formulación de preguntas Hay preguntas referidas a temas delicados o sensibles que pueden poner al encuestado en una situación embarazosa; o preguntas con un fuerte elemento de adhesión a normas socialmente aceptadas. ¿qué estrategias podemos poner en marcha para paliar este sesgo deseabilidad social? Tema 5 – Técnicas de Encuesta 4.1.1. Reglas para la formulación de preguntas ¿qué estrategias podemos poner en marcha para paliar este sesgo deseabilidad social? A través de enunciados contrarrestados • “Mucha gente sufre de ansiedad en algún momento de su vida, ¿usted ha tenido episodios de ansiedad?” Por medio de enunciados indirectos • “¿Qué opinaría si un amigo suyo decidiera realizarse una operación de cirugía estética?” Con preguntas tipo “tarjeta” • El encuestado sólo tiene que hacer referencia al número de la tarjeta en el que aparece la respuesta (incómoda) que quiere dar Baterías progresivas de preguntas • Que permitan una aproximación sucesiva al tema espinoso Redacción amable y natural de las preguntas • Que el encuestado no tenga la sensación de estar siendo examinado Tema 5 – Técnicas de Encuesta 4.1.2. Tipos de preguntas Según la contestación que admitan Por tanto, el elemento básico del cuestionario son las preguntas. Es por ello que la bondad de un cuestionario depende de la clase de preguntas empleadas en él y de su adecuada formulación. Preguntas abiertas Preguntas semiabiertas Preguntas cerradas Dicotómicas De respuesta espontánea De respuesta categorizada De respuesta sugerida De valoración Tema 5 – Técnicas de Encuesta 4.1.2. Tipos de preguntas De introducción o de contacto De filtro De control Baterías o “embudo de preguntas” Amortiguadoras Identificación Según su contenido Según su función en el cuestionario Por tanto, el elemento básico del cuestionario son las preguntas. Es por ello que la bondad de un cuestionario depende de la clase de preguntas empleadas en él y de su adecuada formulación. Acción Intención Opinión Información Motivos Tema 5 – Técnicas de Encuesta 4.1.3. Estructura del cuestionario Hay que tener también especial cuidado en el orden en que se incluyen las preguntas en el cuestionario, ya que el modo en el que se secuencian las preguntas puede influir en la naturaleza de las respuestas del encuestado y, por consiguiente, sesgarlas. Pautas generales de estructuración del cuestionario Al inicio presentación solicitando cooperación al encuestado, informándole sobre los objetivos de la encuesta, y garantizándole el anonimato Primera pregunta de carácter general, sencilla y potenciadora del interés del encuestado. De lo general a lo específico. De lo fácil (y poco comprometido) a lo difícil (y comprometido). Flujo lógico; sin saltos abruptos; preguntas agrupadas según temática. Los datos de identificación del encuestado (p.e., datos sociodemográficos) se preguntan al final para evitar que condicionen sus respuestas posteriores. Tema 5 – Técnicas de Encuesta 4.1.4. La codificación en el cuestionario La finalidad de la codificación es facilitar la operación de contar y analizar las respuestas dadas por la muestra que ha sido encuestada. Un cuestionario bien codificado debe contener la información exacta con respecto a las variables. Por tanto, la codificación permite saber, una vez recogidos los datos, el número total de variables a analizar y su ubicación exacta en la matriz de datos. La matriz de datos viene determinada por N sujetos (filas) * P variables (columnas) Si las preguntas son cerradas • Hemos de asignar un valor a cada posible categoría de respuesta. Si las preguntas son abiertas • Hay que hacer la codificación después del trabajo de campo a través de un análisis de contenido. Tema 5 – Técnicas de Encuesta 4.1.5. Estudio de las características técnicas Validez (ausencia de error sistemático) Fiabilidad (ausencia de error aleatorio) De contenido Longitud De criterio Factorial Muestra Tema 5 – Técnicas de Encuesta 4.1.6. Comprobación y prueba del cuestionario (Pretest) Antes de iniciar el trabajo de campo (≈ el proceso de recogida de información sobre la muestra seleccionada), es imprescindible probar el cuestionario sobre un pequeño grupo de la población (25-50 personas). La misión de la prueba piloto radica en contrastar hasta qué punto funciona el cuestionario como se pretendía en su diseño, y verificar si las preguntas provocan el tipo de reacción deseada. Si en la prueba piloto hay una alta proporción (+10%) de respuestas en blanco y ‘no sabe / no contesta’, entonces habrá que revisar su redacción. Tema 5 – Técnicas de Encuesta 4.2. Diseños muestrales Para seleccionar a los individuos que formarán parte de la muestra encuestada, podemos considerar básicamente dos técnicas de muestreo… Muestreo aleatorio • Se basa en el principio de la elección de los individuos al azar. • Cada elemento de la población tiene probabilidad de ser elegido como parte de la muestra. • Garantiza mejor la representatividad de la muestra respecto de la población Muestreo empírico • La selección de la muestra se realiza a partir de los criterios o necesidades fijados por el propio encuestador. • Tiene riesgo de que no haya representatividad de la muestra respecto de la población. Una vez elegido el tipo de muestreo, es necesario determinar el tamaño de la muestra necesario para que nuestras estimaciones sobre la población sean suficientemente precisas. Tema 5 – Técnicas de Encuesta 4. 2. I. Selección y Tamaño de la muestra Ejemplo 1 La población total de alumnos matriculados en la asignatura de ‘Técnicas e Instrumentos’ es de N = 1.200 alumnos. Se quiere saber qué porcentaje del alumnado está a favor de cambiar el modelo de examen a un tipo test, para lo cual se va a encuestar-entrevistar a una muestra de dicha población. ¿Qué tamaño (n) debe tener la muestra para que el resultado de la encuesta tenga un error máximo de estimación (E) del ±5% con un nivel de confianza del 99%? Tamaño de la muestra para poblaciones finitas Tema 6 – La Entrevista Tamaño de la muestra para poblaciones finitas Tema 6 – La Entrevista 4. 2. I. Selección y Tamaño de la muestra Ejemplo 2 La población total de alumnos matriculados en la asignatura de ‘Técnicas e Instrumentos’ es de N = 1.200 alumnos. Se quiere saber qué porcentaje del alumnado está a favor de cambiar el modelo de examen a un tipo test, para lo cual se va a encuestar-entrevistar a una muestra de dicha población. ¿Qué tamaño (n) debe tener la muestra para que el resultado de la encuesta tenga un error máximo de estimación (E) del ±5% con un nivel de confianza del 95%? Tamaño de la muestra para poblaciones finitas Tema 6 – La Entrevista Tamaño de la muestra para poblaciones finitas Tema 6 – La Entrevista 4. 2. I. Selección y Tamaño de la muestra Ejemplo 3 La población total de alumnos matriculados en la asignatura de ‘Técnicas e Instrumentos’ es de N = 1.200 alumnos. Se quiere saber qué porcentaje del alumnado está a favor de cambiar el modelo de examen a un tipo test, para lo cual se va a encuestar a una muestra de dicha población. ¿Qué tamaño (n) debe tener la muestra para que el resultado de la encuesta tenga un error máximo de estimación (E) del ±5% con un nivel de confianza de 2s? (Tema 5, p. 194) Tamaño de la muestra para poblaciones finitas Tema 6 – La Entrevista Tamaño de la muestra para poblaciones finitas Tema 6 – La Entrevista 4. 2. I. Selección y Tamaño de la muestra Ejemplo 4 Se quiere realizar una encuesta-entrevista a la población de Cataluña (tamaño de la población indeterminado) sobre si está a favor o en contra de la Independencia. ¿A cuántos sujetos habría que encuestar para que el error máximo de estimación (E) fuera del ±3%, con un nivel de confianza del 95%? Tamaño de la muestra para población infinita Tema 6 – La Entrevista 4.3. El trabajo de campo El trabajo de campo es aquella etapa del proyecto de investigación durante la cual los encuestadores se ponen en contacto con los encuestados, administran los cuestionarios para recoger información, registran los datos, y devuelven los cuestionarios para su posterior control y procesamiento. Tema 5 – Técnicas de Encuesta 4.3. El trabajo de campo Errores habituales en el trabajo de campo [Encuestas personales y telefónicas] • Falta de armonía entre el encuestador y el encuestado. • Formulación incorrecta de las preguntas • SOLUCIÓN: El encuestador debe estar previamente familiarizado con el cuestionario; formular todas y cada una de las preguntas exacta y ordenadamente; y utilizar técnicas de indagación. • Errores en el registro de las respuestas • Falseamiento de las encuestas • SOLUCIÓN: Se pueden utilizar sistemas de control directo e indirecto. Tema 5 – Técnicas de Encuesta 4.4. El análisis estadístico Una vez recogida la información en el trabajo de campo, entonces es necesario analizar toda esa información, generalmente abundante, para convertirla en conclusiones y respuestas a tus preguntas iniciales de investigación Etapas del análisis Revisión de los cuestionarios para detectar y depurar errores de registro. Codificación y tabulación de los cuestionarios hasta llegar a una matriz de datos sólida. Análisis estadísticos propiamente dichos. Seguimiento y evolución a través de aplicaciones sucesivas del cuestionario. Anticipación y predicción a través del cuestionario Tema 5 – Técnicas de Encuesta 4.5. El informe de resultados La última etapa de una investigación la constituye la redacción final del ‘informe de investigación’ o ‘informe de resultados’, que es un documento escrito, organizado y coherente, que incluye las diferentes etapas cubiertas durante el proceso de la investigación, los resultados obtenidos, y las conclusiones extraídas. La información que se incluye en el informe ha de ser muy clara, incluyéndose únicamente aquella que sea relevante para la audiencia destinataria del mismo, y para las decisiones que haya que tomar posteriormente. Tema 5 – Técnicas de Encuesta 4.5. El informe de resultados Algunas recomendaciones para la redacción del ‘informe de investigación’ (p. 189) Diferenciar claramente resultados de interpretaciones. Lenguaje sencillo y claro. No dar información redundante. Siempre que sea posible, dar los resultados en forma gráfica. En caso de dar resultados numéricos, aportar sólo los estrictamente necesarios y con no más de un decimal. Seguir el esquema-índice básico IMRyD (ver diapositiva siguiente) INFORMES TÉCNICOS vs. INFORMES DIVULGATIVOS Tema 5 – Técnicas de Encuesta 4.5. El informe de resultados Tema 5 – Técnicas de Encuesta Formato IMRyD desarrollado Portada Índice de contenidos Introducción • Fundamentación teórica • Antecedentes • Pregunta de Investigación Metodología • Participantes • Materiales e Instrumentos • Procedimiento Resultados Discusión Conclusiones Implicaciones y Recomendaciones Limitaciones y Amenazas a la Validez del Estudio Referencias Anexos Tema 5 – Técnicas de Encuesta 4.6. Ayudas informáticas para el tratamiento de encuestas https://www.google.com/forms/about/ https://es.surveymonkey.com/ https://surveyplanet.com/ Tema 5 – Técnicas de Encuesta 4.7. Conclusiones Conclusiones y Síntesis de Repaso en las páginas 192 y 193 Tema 5 – Técnicas de Encuesta 5. Un ejemplo de encuesta Un ejemplo de encuesta en las páginas 194-200 Tema 6 – La Entrevista