PASO 1. VALIDEZ DE CONTENIDO MEDIANTE LA EVALUACIÓN DE JUECES O EXPERTOS Cálculo de validez de contenido mediante el juicio de expertos . ¡¡CUIDADO EN EL CONSENSO O ACUERDO DE EXPERTOS!! ¡¡¡Cuidado con el falso acuerdo entre expertos!!! se produce cuando la correlación y la fiabilidad coinciden pero divergen con la concordancia. Correlación y fiabilidad tienen que converger con concordancia, ese sería el verdadero acuerdo. Uso CCI porque entiendo que los 4 expertos lo han valorado de 1 a 5, de 1 a 4 (que es lo normal), aunque puede valorarse de 1 a 10. La escala se la pones tú al experto y puede ser, como ya hemos dicho pueden ser de 1 a 4, de 1 a 5, de 1 a 10... Ya tienes que ver como es la tuya. Si son más abiertas suelen dar más fiabilidad. Si se hace por dimensiones, más completo es. Las dimensiones suelen ser: contenido, redacción, comprensión y relevancia. ¿Cómo se hace con SPSS? Analizar/escala/ análisis de fiabilidad. Incluyo los 4 expertos o el número de expertos que sea Pincho en “estadística” Pincho en “Coeficiente de relación intraclase” y lo demás dejarlo por defecto. Aceptar y se genera el documento. El documento incluirá una tabla como esta: Valorarla teniendo en cuenta la siguiente tabla: Evaluación criterial: para ver qué ítems superan la validación Transformar/agrupación visual Añadir los 4 expertos y pulsar continuar Pinchar en crear puntos de corte Seleccionar los percentiles y poner como número de corte: 1 Pinchar en Aplicar. En el apartado etiquetas añadir: que el valor 1 son los que no superan (1-5) que el valor 2 son los que superan (6-10) y le damos a Aceptar. Para comprobar la concordancia entre ítems: Transformar/ recodificar en distintas variables Añadir los 4 expertos Escribir en “nombre”: valoración criterial Pinchar en valores antiguos y nuevos. Añadir el rango de los que superan y los que no superan Rango 1: no superan (1-5). Rango 2: superan (6-10). AHORA USAMOS LA MATRIZ JUICIO DE EXPERTOS EN LA QUE LOS DATOS ESTÁ INTRODUCIDOS DE LA SIGUIENTE FORMA: Para saber si están bien valorados y si hay acuerdo entre expertos: Analizar/ Escala/ Análisis de fiabilidad Añadir los elementos siendo ordenados (contenidos con contenidos, relevancia con relevancia...) Dar a aceptar y se genera el documento que permiten comprobar si están bien valorados y si hay buena evidencia empírica (a partir de 0,41 es moderado) **Hay que valorar primero en el promedio global de cada uno de los ítems, que significan que lo han valorado bien y que hay acuerdo entre ellos. **Hay que fijarse en la medida promedio, esa es la verdadera correlación intraclase.. ¿cómo generar la tabla de los valores de cada ítem para saber si lo dejo, lo reformulo o lo elimino? Analizar/ estadística descriptiva/ frecuencias Pasamos las variables siendo ordenados (contenido con contenido, relevancia con relevancia...) Pinchamos en estadísticos Pinchamos en Cuartiles Seleccionamos : media, mediana y desviación ¿CÓMO SABER SI DEJO UN ITEM, LO REFORMULO O LO ELIMINO? PASO 2. VALIDEZ CRITERIAL: cuando la expertos le hayan dado el visto bueno se tiene que comprobar la validez criterial (con SPSS) 1. Pasos con SPSS para calcular la validez criterial concurrente: Analizar/ Escala/ Análisis de fiabilidad. Botón derecho: pinchar en mostrar datos de variables y aparecerá la escala FLCAS (seleccionamos todos los ítems que sean FLCAS y los añadimos con la flechita a la parte derecha de “elementos”) Pinchamos estadísticos y seleccionamos en la parte de descriptivos: elemento, escala y escala si se elimina elemento. Le damos a aceptar y se genera un documento. Entonces, para calcular la validez criterial concurrente nos fijamos en la tabla denominada “Estadísticas total del elemento”. Dentro de esta tabla nos fijamos en la columna “correlación total de los elementos corregidos”. Los resultados tienen que estar en torno a 0,25 o 0,30-0,35) Una vez hecho esto, añadir en mi tesis que: Dominan las correlaciones de ítems total corregido (y citar a algún autor que lo apoye) *Hacer lo mismo con los ítems (escala) QTP 2. Pasos con SPSS para calcular la validez cirterial productiva: para comprobar si es un buen predictor de las calificaciones del total. Analizar/ regresión/ lineales Elegir la variable dependiente: grados Elegir las variables independientes: total de lo que queremos medir. Generar documento y mirar en la tabla de “Resumen del modelo” si en la columna “R” la regresión es positiva o negativa. Después de esto, para comprobar si la regresión es positiva o negativa: Analizar/ correlaciones/Bivariadas. y generar documento. Si es positivo se interpreta de la siguiente forma: 3. Para calcular la variable residual en SPSS Analizar/ Regresión /Lineales Pinchar en gráficos y seleccionar: Histograma y Gráfico de prob. normal. En el apartado Y: seleccionamos la dependiente y en el apartado X: lo que queramos medir. Pinchamos continuar/aceptar y generamos documento. ****-2 o +2 desviaciones típicas en el modelo de confianza: que se demuestra en el diagrama de dispersión que genera SPSS.