ANEXO VII Evaluación de la implementación de los indicadores estándar de la calidad del Mercosur Grado de avance en la implementación piloto de los indicadores INDEC – Argentina Se pensó aplicar los indicadores de la calidad en la Encuesta Permanente de Hogares y en la Encuesta Nacional de Grandes Empresas. Sin embargo, la prueba piloto de los Indicadores ha sido demorada y recién podrá disponerse de los resultados en el mes de marzo de 2011, debido a que se ha realizado el Censo Nacional de Población, Hogares y Viviendas el día 27 de octubre del 2010. La organización e implementación de este relevamiento censal motivó que toda la estructura del Instituto estuviera al servicio del mismo, por lo que fue necesario afectar al personal de otros programas de trabajo a efectos de garantizar el normal desarrollo del operativo. IBGE – Brasil Se han implementado los indicadores de la calidad en la Encuesta de Presupuestos Familiares 2002-2003 y 2008-2009. DGEEC – Paraguay Se tiene pensado aplicar los indicadores de la calidad en la Encuesta Permanente de Hogares 2009. INE – Uruguay En la primera etapa de la experiencia piloto se han implementado los indicadores de la calidad en el Índice de Costo de la Construcción 2007 y 2008 y la Encuesta Anual de Actividad Económica 2007 y posteriormente se continuó con la aplicación de los indicadores en otras operaciones y hasta el momento ya se han implementado en una encuesta de hogares y en siete encuestas económicas. Problemas detectados durante la implementación En base a las experiencias de los tres países se actualizó el cuadro de análisis de problemas y acciones a tomar para la implementación sistemática de los indicadores. Descripción del problema Se percibe que los responsables de las encuestas tienen como objetivo exclusivo el cumplimiento de plazos de entrega de los datos, pero no toman en cuenta la medición de la calidad de los mismos (indicadores de precisión y Causa del problema Falta de una Política Institucional de medición de la calidad de los productos estadísticos que incluya como mínimo el cálculo de los indicadores de la calidad Presión sobre el responsable para cumplir con el calendario previsto. Página 1 de 3 Acciones a tomar Diseño e implementación de un plan de trabajo para la aplicación de los indicadores de la calidad. Incluir en el plan de trabajo: etapas, fechas y responsabilidades. Establecer instancias de análisis conjunto (alta dirección y responsables de encuestas) de Descripción del problema exactitud), especialmente para las encuestas coyunturales. En encuestas a hogares no existen archivos preparados para realizar el cálculo de algunos indicadores de precisión. En los marcos y muestras no se registran sistemáticamente los cambios en clasificaciones (altas, bajas y modificaciones) de unidades informantes (condición de ocupación, clases de actividad). No se señalan sistemáticamente los registros editados/imputados. No se registra sistemáticamente la falta de respuesta por pregunta. No siempre se comprende la utilidad e importancia del cálculo de la “Proporción imputada de la estimación de las principales variables” No siempre se dispone de acceso a los microdatos para calcular los Coeficientes de Variación Dificultades (CV). para el En algunos cálculo del casos los coeficiente de sistemas variación informáticos no disponen de módulos para el cálculo automático de CV. Causa del problema Falta de comprensión de la utilidad de los indicadores de la calidad. Falta de compromiso para la implementación de estos indicadores. Acciones a tomar los resultados obtenidos. Durante la planificación (diseño de instrumentos de recogida de datos, edición y procesamiento) no se toman en cuenta estos problemas. Incluir la información necesaria para el cálculo de los indicadores de la calidad, desde el inicio de la planificación de la encuesta. Falta de conciencia del impacto que tiene el hecho de no registrar estos elementos. Capacitación para la toma de conciencia e importancia de registrar estos elementos. Falta de conocimientos relativos a los conceptos que componen los indicadores de la calidad. Capacitación sobre los conceptos en los que se basan los indicadores de la calidad y el cálculo de los mismos. Falta de una Política Institucional de medición de la calidad de los productos estadísticos que incluya como mínimo el cálculo de los indicadores de la calidad. Ídem problema 1) Falta de una Política Institucional de medición de la calidad de los productos estadísticos que incluya como mínimo el cálculo de los indicadores de la calidad. Ídem problema 1) No existen requerimientos por escrito sobre el cálculo de estos indicadores a incluir en los sistemas informáticos. Elaborar especificación de requerimientos para el Dpto. de Informática. Página 2 de 3 Elaborar y difundir una norma interna sobre el acceso a los microdatos para la unidad responsable del cálculo de los indicadores. Aspectos positivos detectados durante la implementación Este proyecto ha contribuido al inicio de la implementación de estos indicadores de la calidad en los INE. A través de las reuniones de trabajo, talleres con expertos internacionales, pasantías en otros INE fuera del Mercosur e intercambio de experiencias entre los países integrantes del proyecto, se ha logrado generar el conocimiento y experiencia necesarios para alcanzar exitosamente los objetivos planteados. En la última reunión del GT 1 del año 2009 se logró la aprobación de estos indicadores estándar de la calidad y su implementación en los INE. El hecho de implementar un sistema de gestión de la calidad en una encuesta facilita el cálculo de los indicadores de la calidad, debido a que se ha generado la cultura de la calidad dentro del área. Como ejemplo de esto se destaca el caso del Índice del Costo de la Construcción del INE de Uruguay. En el proceso de implementación de los indicadores, a pesar de los problemas mencionados anteriormente, se ha encontrado la colaboración de técnicos y directivos pertenecientes a las áreas de apoyo. Página 3 de 3