MÓDULO V.1 Técnicas de valoración sociológica aplicadas a la temática ambiental Tema 3. La encuesta estadística y el Método Delphi PERSPECTIVA CUANTITATIVA: LA ENCUESTA ESTADÍSTICA. 1. Naturaleza general de la encuesta 2. Criterios generales de elaboración de cuestionarios Tipos de preguntas La encuesta: definición, tipos y diseño 3.1- Encuesta personal 3.2- Encuesta postal 3.3- Encuesta telefónica 3.4- Encuesta Panel. 3.5. El MÉTODO DELPHI 3. Caso práctico: Opinión pública y problemas ambientales: el caso de las instalaciones para el tratamiento de residuos en la Comunidad de Madrid Naturaleza general de la encuesta Criterios generales de elaboración de cuestionario ? ? ? ? ? ? ? ? ? ? Utilizar un lenguaje sencillo Claridad en las preguntas. Emplear los términos adecuados Facilitar la memoria con preguntas del pasado más inmediato. Evitar la realización de cálculos. Evitar preguntas que puedan implicar respuestas condicionadas Preguntas lo más cortas posibles. Evitar preguntas implícitas en otras ( salvo preguntas de control). El orden de las preguntas no debe condicionar las respuestas. Emplear un orden lógico en las preguntas Naturaleza general de la encuesta TIPOS DE PREGUNTAS: ? ? ? ? ? ? ? ? ? ? ? Abiertas: Cerradas: Semicerradas o semiabiertas Introductivas En batería Filtro De evaluación De recuerdo De tarjetas De control De relajación La encuesta: definición, tipos y diseño ENCUESTA PERSONAL 1- Organización: ? Introducción: clara y precisa para lograr colaboración ? Inicio: preguntas generales, sencillas y fáciles de responder. ? Núcleo central: preguntas relacionadas con el objetivo central del trabajo ? Conclusión: preguntas delicadas y características sociodemográficas. 2- Ventajas e inconvenientes: Ventajas Elevado índice de respuestas. ? La presencia del entrevistador permite resolver dudas y evitar influencia de otras personas. ? Posibilita la realización de entrevistas largas ? Pueden mostrarse materiales. ? Pueden obtenerse datos secundarios . ? Inconvenientes Es caro y lento ? El entrevistador puede ejercer influencia ? Necesidad de controlar a los entrevistadores ? Difícil acceso a ciertas poblaciones. ? La encuesta: definición, tipos y diseño ENCUESTA POSTAL 1. La ejecución del trabajo: ? Carta de presentación de una cara máximo: • Explicando la utilidad del estudio • Que su respuesta es importante • Prometer confidencialidad y agradecer la colaboración ? Un correcto seguimiento ? Aplicar incentivos ? Notificación previa. ? Especial cuidado con las preguntas inculpadoras y de tipo filtro 2. Ventajas ?Económico ?Precisa poco personal. ?Accesibilidad ?Flexibilidad de tiempo ?Favorece el anonimato Inconvenientes Bajos índices de respuesta. ? Errores en la cumplimentación ?-Impersonal ?-Pueden influir otras persona ?-Poco útil para respuestas inmediatas. ?-Ciertos grupos quedan excluidos ? La encuesta: definición, tipos y diseño ENCUESTA TELEFÓNICA 1. Cuestionario Formato cómodo para ser oído con facilidad. Podrá ser grabada. Se trata de mantener “una conversación” y no un interrogatorio Predominio de preguntas cerradas y preguntas de elección forzada Usar para evitar respuestas neutrales. 2. Realización de la encuesta: Hacer un pretest para valorar que el diseño, la duración y orden. Problemas: Seleccionar entrevistadores adecuados. Requisitos: gran fluidez verbal, memoria a corto plazo, buena dicción y conocimientos adecuados para resolver dudas. La propia llamada. El 80 % de los rechazos se dan en el momento inicial por lo que una buena presentación es fundamental. El tono conversacional. Evitar brusquedades e improperios. La encuesta: definición, tipos y diseño ENCUESTA TELEFÓNICA 3. Ventajas e inconvenientes: Ventajas ?Económico con reservas ?Rapidez. ?Permite entrevistar a colectivos inaccesibles. Inconvenientes ?-Existe un nivel de no respuesta por el hecho de marcar números telefónicos al azar. ?-No pueden exhibirse materiales ?-Brevedad inclinación a responder por teléfono. de la entrevista. ?Mejor ?Se necesitan menos entrevistadores ?-No es apropiado para tratar temas delicados ni preguntas complejas. La encuesta: definición, tipos y diseño ENCUESTA PANEL 1. Concepto: Técnica cuantitativa de estudios de mercado que se realiza de manera periódica a una misma muestra representativa de un universo determinado. Tipos de paneles: ? Postal: el más barato, pero que exige mayor control ? Sistema de visita personal o Home Audit con un posible control de cesto de basura o Dustbin check. ? Sistema mecánico o set-meters aplicable para mediciones de audiencia Requisitos básicos: ? La rotación tiene que ser baja ? Mantener contactos asiduos con los panelistas y ofrecerles estímulos 2. 3. 4. Ventajas ?Elevada datos precisión de los Inconvenientes Compleja y costosa estructura ? Sólo recoge información cuantitativa y para productos de gran consumo y de compra frecuente. ? No registra las compras de aquellos productos consumidos fuera del hogar ? EL MÉTODO DELPHI. Definición y características básicas DEFINICIÓN: proceso de comunicación grupal para tratar un tema complejo CARACTERÍSTICAS: 1. PROCESO ITERATIVO: poder emitir la opinión en más de una ocasión hasta que las opiniones se estabilizan. 2. ANONIMATO: ningún miembro del grupo debe conocer las respuestas particulares de cada uno de los otros participantes. 3. FEEDBACK O RETROALIMENTACIÓN CONTROLADA: en cada ronda se transmite la posición general del grupo frente al problema analizado y algunas aportaciones o sugerencias significativas de algún experto. 4. RESPUESTA ESTADÍSTICA DE GRUPO: se busca el consenso. Habitualmente la mediana y el rango intercuartílico (RQ = Q3 - Q1; diferencia entre el tercer cuartil y el primero: Primer cuartil (Q1) como la mediana de la primera mitad de valores; Tercer cuartil (Q3) como la mediana de la segunda mitad de valores . EL MÉTODO DELPHI: METODOLOGÍA INDICE I. PROCESO HABITUAL II. GRUPO COORDINADOR III. GRUPO DE EXPERTOS I. II. III. IV. OBTENCIÓN Y TRANSMISIÓN DE LA INFORMACIÓN I. II. III. V. III.1 ¿QUIÉN ES EXPERTO Y CÓMO SELECCIONARLOS? III.2. ¿CUÁL ES SU NÚMERO ID ÓNEO? III.3. ¿CÓMO CONTACTAR CON LOS EXPERTOS? IV. 1. FORMULACIÓN DE PREGUNTAS IV.2. PRESENTACIÓN DE LAS OPINIONES INDIVIDUALES IV.3. FEEDBACK FIN DEL PROCESO EL MÉTODO DELPHI: METODOLOGÍA I. PROCESO HABITUAL (esquema global método Delphi) • Lo habitual es proporcionar una relación de ítems para que los expertos los jerarquicen o valoren. • También se puede empezar el proceso con una pregunta abierta para que los propios expertos ayuden a proporcionar los ítems sobre los que se trabajará después previa clasificación por el grupo coordinador. • Agregación de estimaciones y remisión de respuestas (normalmente mediana y rango intercuantílico) a expertos . A veces acompañadas de su propia respuesta • Iteraciones continuas hasta que haya pocas oscilaciones (normalmente un máximo de tres rondas). El Método Delphi: Esquema Global EL MÉTODO DELPHI: METODOLOGÍA II. GRUPO COORDINADOR FUNCIONES: 1. Estudiar y aprobar el protocolo de trabajo (criterios de selección de los participantes; calendario previsto, medios humanos y técnicos a utilizar) 2. Estudiar y aprobar la lista de expertos participantes 3. Confeccionar los cuestionarios. 4. Analizar las respuestas, preparar cuestionarios y facilitar el feedback 5. Interpretar los resultados 6. Supervisar la correcta marcha de la investigación los siguientes EL MÉTODO DELPHI: METODOLOGÍA III. GRUPO DE EXPERTOS III.1 ¿QUIÉN ES EXPERTO Y C ÓMO SELECCIONARLOS? • Experto: individuo cuya situación y recursos personales le posibiliten contribuir positivamente a la consecución del fin que motiva el trabajo Delphi. • Tipos de expertos: (según el problema a analizar la composición del grupo será distinta; ejemplos): • Especialistas (conocimientos, experiencia y objetividad): preponderantes cuando se necesita información sobre cómo actuar o sobre la evolución futura de hechos • Afectados: proponderante cuando hay conflicto de intereses sobre la dirección que deben tomar las acciones • Facilitadores (con capacidad para sintetizar, clarificar y organizar). Preponderante cuando los hechos o las relaciones no están claros. • Criterios de selección: 1.Nivel de conocimientos y capacidad predictiva 2.Grado de afectación por las consecuencias del proyecto 3.Capacidad facilitadora y grado de motivación 4.Otros: coste, proximidad, coste…. EL MÉTODO DELPHI: METODOLOGÍA III.2. ¿CUÁL ES SU NÚMERO IDÓNEO? • Entre 7 y 30 expertos. Depende de áreas de conocimiento, alcance geográfico, colectivos, tiempo disponible, limitaciones presupuestarias III.3. ¿CÓMO CONTACTAR Informarles sobre: 1. 2. 3. 4. 5. 6. CON LOS EXPERTOS? Los objetivos del estudio Criterios para su selección Nº de cuestionarios, Duración aprox. del proceso Potencial uso de la información Beneficios que conseguirán con su participación EL MÉTODO DELPHI: METODOLOGÍA IV. OBTENCIÓN Y TRANSMISIÓN DE LA INFORMACIÓN IV. 1. FORMULACIÓN DE PREGUNTAS • ACONSEJABLES LOS PRETEST • SE PUEDE EMPEZAR CON PREGUNTAS ABIERTAS FORMULADAS PARA PODER SER PROCESADAS Y EVITANDO NARRACIONES DE OPINIONES (PREGUNTAR POR VENTAJAS, RAZONES, ENUMERAR-IDENTIFICAR IMPACTOS…) (EJ. PÁG 69). SON ÚTILES PARA DEFINIR LOS ITEMS. • PREGUNTAS PROPIAS DEL PROCESO DELPHI: • JERARQUIZADAS: pedir una ordenación de las posiciones de cada ítem (ej. Pag 71) • VALORATIVAS: dando puntuaciones con arreglo a una escala definida • COMPARATIVAS de ítems en forma de pares (alternativas). • PREGUNTAS DE ESTIMACIONES CUANTITATIVAS • • PUNTUALES ABSOLUTAS O PROBABILÍSTICAS (EJ. PÁG. 73) NO PUNTUALES EN INTERVALOS DE CONFIANZA O EN TRIPLETAS DE CONFIANZA (EJ. PÁG 74) EL MÉTODO DELPHI: METODOLOGÍA IV.2. INTEGRACIÓN –PRESENTACIÓN OPINIONES INDIVIDUALES DE LAS ? PREGUNTAS JERARQUIZADAS: se reordenan los items según la mediana de las respuestas de cada uno de los expertos (EJ. PAG 77) ? PREGUNTAS VALORATIVAS: se reordenan las respuestas según la media y la mediana de los valores o puntuaciones de cada ítem (EJ. PAG 78) ? PREGUNTAS COMPARATIVAS: se reordenan según las comparaciones favorables de todos los expertos para cada alternativa (EJ. PAG 79) ? PREGUNTAS DE ESTIMACIONES CUANTITATIVAS: se calcula la mediana de las estimaciones. Además de la mediana se suele presentar el rango intercuantílico: (primer cuartil; mediana; tercer cuartil) (EJ. PAG 80) EL MÉTODO DELPHI: METODOLOGÍA IV.3. FEEDBACK 1. UTILIDAD: 1. 2. 2. FACILITA LA CONVERGENCIA DE OPINIONES AYUDA A ANTICIPAR REACCIONES DE LOS AFECTADOS FORMA DEL FEEDBACK: ¿QUÉ REALIMENTAR? 1. LA INFORMACIÓN Y OPINIONES ARGUMENTADAS ORIGINADAS POR EL PROPIO PANEL DE EXPERTOS. 2. INFORMACIÓN OBJETIVA (HECHOS, DATOS, INFORMES, …) PROCEDENTE DEL EQUIPO COORDINADOR SIEMPRE QUE SEA UTIL PARA EL PROCESO. 3. MEDIDAS DE TENDENCIA CENTRAL Y DE DISPERSIÓN DE LAS RESUESTAS DE GRUPO EN LA RONDA ANTERIOR. ES OPCIONAL ENVIARLAS JUNTO A LAS PROPIAS RESPUESTAS DEL EXPERTO EN ESA RONDA. EL MÉTODO DELPHI: METODOLOGÍA V. FIN DEL PROCESO V.1 CRITERIOS PARA FINALIZAR EL PROCESO 1. CRITERIO CLÁSICO: Cuando las respuestas se aproximan. Técnicas: • CUANDO EL RANGO INTERCUANTÍLICO RELATIVO ES MENOR A UN VALOR PREDETERMINADO • • 2. RIR= (Q3 – Q1) / Q2 (mediana) % DE RESPUESTAS EN EL INTERVALO DE LA MEDIANA +/- 1 SUPERIOR AL 80%. CRITERIO RECOMENDABLE: la no variación significativa de las opiniones de los expertos en las sucesivas rondas. Algunas técnicas: • VARIACIÓN RELATIVA DE LA MEDIANA ENTRE DOS RONDAS CONTIGUAS: VRM= (Mediana Ronda 2- Mediana Ronda1)/ Mediana Ronda 1 • PROPORCIÓN DE EXPERTOS QUE MODIFICAN SUS ESTIMACIÓN : Estabilidad con un % de modificación inferior al 10% 3. CRITERIO PRÁCTICO: prefijar el nº de rondas. Lo más habitual 2 o tres rondas. Depende del presupuesto, fecha de entrega, riesgo de dejar de contar con colaboración de expertos. Rara vez se llega a la tercera ronda EL MÉTODO DELPHI: METODOLOGÍA V.2. ANÁLISIS DE RESULTADOS a) ANÁLISIS CUANTITATIVO DE LA DISTRIBUCIÓN FRECUENCIAS (Mediana, media, rango intercuantílico). DE b) ANÁLISIS GLOBAL: interpretar los resultados con las informaciones cualitativas obtenidas de los expertos y con las propias percepciones de los investigadores. EL MÉTODO DELPHI: METODOLOGÍA V.3. INFORMACIÓN Y COMUNICACIÓN DE RESULTADOS. INFORME FINAL. RELACIÓN DE CONTENIDOS 1. DESCRIPCIÓN DE LA SITUACIÓN EN LA QUE SE PLANTEA EL ESTUDIO, OBJETIVOS Y METODOLOGÍA 2. ESPECIFICACIÓN DE DATOS TÉCNICOS SOBRE LOS PARTICIPANTES • COMPOSICIÓN DEL EQUIPO COORDINADOR • FORMACIÓN DEL PANEL DE EXPERTOS: criterios de selección, nº, bajas y reposiciones 3. EVOLUCIÓN DE LAS OPINIONES EN LAS DISTINTAS RONDAS 4. RESULTADOS FINALES. Opiniones mayoritarias y su nivel de consenso, otras posiciones no mayoritarias 5. ANALISIS POR SUBGRUPOS 6. ESCENARIOS O REALIDADES NEGOCIADAS Y COMPARTIDAS EJEMPLO PRÁCTICO 1. Opinión pública y problemas ambientales: el caso de las instalaciones para el tratamiento de residuos en la Comunidad de Madrid Ejemplo práctico: Opinión pública y problemas ambientales: el caso de las instalaciones para el tratamiento de residuos en la Comunidad de Madrid (Díaz M. A., Rodríguez, A.E. y Salado, M.J. (1999). Revista Internacional de Sociología nº 85, pp 251-275.) OBJETIVOS 1. ANALIZAR EL NIVEL DE CONOCIMIENTO Y PERCEPCIÓN DEL RIESGO GENERADO POR LOS RESIDUOS 2. CONTRASTAR EL EFECTO NIMBY (“Not In My Back Yard”). 3. OPINIÓN SOBRE ACTUACIONES DE LAS ADMINISTRACIONES EN LA MATERIA METODOLOGÍA • Realizada en junio de 1995. Muestra de 300 individuos • Lugar: Comunidad de Madrid: radio de 5 km alrededor de la incineradora de Valdemingómez, el depósito de seguridad de Residuos tóxicos de San Fernando y la planta de tratamiento de residuos tóxicos de Valdedebas • Duración media de la entrevista: 15 minutos • CUESTIONARIO: 4 bloques ? Preguntas introductivas (opinión sobre calidad y problemática ambiental a escala local, nivel de conocimiento sobre programas ambientales en su entorno) ? Preguntas centrales: (conocimiento de las plantas de tratamiento, orden de proximidad deseado, criterios de ubicación, tipo de riesgo percibido...) ? Pregunta de relajación. ? Características socioeconómicas. Ejemplos prácticos: Opinión pública y problemas ambientales: el caso de las instalaciones para el tratamiento de residuos en la Comunidad de Madrid – VARIABLES: Y= f (X1, X2, X3) • Y= Percepción y opinión del riesgo generado por los residuos • X1 = Experiencia: construida a partir de la pregunta sobre el lugar de residencia (zona conflictiva, zona no conflictiva). • X2= Conocimiento: construida a partir del conocimiento de las instalaciones de residuos (nivel de conocimiento alto: conocen más de tres tipos de instalaciones; nivel de conocimiento bajo: conocen tres o menos) • X3= Instrucción: según nivel de estudios (nivel de instrucción alto: universitarios; nivel medio: secundaria; nivel bajo: primaria y sin estudios). Ejemplos prácticos: Opinión pública y problemas ambientales: el caso de las instalaciones para el tratamiento de residuos en la Comunidad de Madrid RESULTADOS 1. EXISTE UNA MAYORITARIA IGNORANCIA SOBRE LA GESTIÓN DE RESIDUOS. 2. RACIONALIDAD POPULAR QUE PRIORIZA LA CALIDAD DE VIDA Y LA SALUD POR ENCIMA DE VALORES “ECOLOGISTAS”. 3. EL ALMACÉN NUCLEAR Y LA INCINERADORA SON LAS INSTALACIONES MÁS RECHAZADAS.LA VARIABLE EXPLICATIVA MÁS INFLUYENTE EN LA PERCEPCIÓN Y OPINIÓN DEL RIESGO GENERADO POR LOS RESIDUOS ES LA EXPERIENCIA. 4. EL CONTEXTO EN EL QUE SE UBICAN LOS ENCUESTADOS ES MÁS INFLUYENTE QUE SUS CARACTERÍSTICAS SOCIOECONÓMICAS.