Análisis comparativo de las puntuaciones en las pruebas de entrada y salida de los cursos de español e inglés con laboratorios abiertos, término académico 200330. 1. Introducción 1.1. Trasfondo del Centro de Recursos Académicos de Apoyo al Aprendizaje (CRA3) A partir de agosto de 2001, el área académica destinada al Centro de Assessment Estudiantil, los Laboratorios de Idiomas, y el CREMC pasó a convertirse en lo que actualmente se conoce como el Centro de Recursos Académicos de Apoyo al Aprendizaje (CRA3). Este cambio ocurre en respuesta al otorgamiento de fondos federales del Programa Título V del Departamento de Educación de los Estados Unidos, para el desarrollo y fortalecimiento de los estudiantes, de la facultad y del Recinto. En el caso de los estudiantes, el CRA3 les provee y coordina servicios de apoyo académico presencial y en línea. El objetivo principal es que los estudiantes mejoren sus destrezas de comunicación oral y escrita tanto en inglés como en español, las destrezas básicas en matemáticas y contabilidad, y las destrezas de búsqueda de información. En cuanto a la facultad, el CRA3 le da apoyo en su esfuerzo por mejorar el proceso de enseñanza y aprendizaje. Igualmente, en el CRA3 se realizan estudios que permiten, a la facultad y al Recinto, evaluar y revisar el currículo para hacer el mismo uno actualizado, que responda a las necesidades particulares de nuestros estudiantes. 1.2. Justificación Como parte de los requisitos de los cursos de inglés de los niveles básico e intermedio, y de los cursos de español, los estudiantes tienen que completar una serie de actividades y evaluaciones que forman parte de lo que se ha denominado el laboratorio abierto. Estas actividades y evaluaciones son realizadas en el Laboratorio de Destrezas del CRA3, bajo la supervisión de tutores y asistentes de laboratorio, debidamente adiestrados y preparados para ello. Entre estas actividades, los estudiantes toman un examen de entrada y el mismo a la salida. En este momento, este análisis es importante para conocer si hay diferencias estadísticas significativas entre las puntuaciones de los exámenes de entrada y salida que tomaron los estudiantes que asistieron al laboratorio abierto para español e inglés. Esta información dará paso a otros estudios con los cuales se pueda investigar más a fondo la posible efectividad de las tareas de los cursos y del laboratorio abierto, en el aprendizaje de los estudiantes que toman los cursos de español e inglés. Los hallazgos de este análisis servirán de ayuda para persuadir y convencer, a la administración, a la facultad y a los estudiantes, sobre esa efectividad. Prof. Héctor Wm. Colón Rosa, Director de Actividad, Título V Mayo, 2003 PÁGINA 1 2. Metodología 2.1. Objetivos 2.1.1. Objetivo general El objetivo general de este estudio es analizar y comparar estadísticamente las puntuaciones de los estudiantes del Recinto de Ponce que tomaron los exámenes de entrada y de salida, correspondientes a los laboratorios abiertos de los cursos de español e inglés, durante el término académico 200330. Los laboratorios abiertos corresponden a los cursos de inglés de los niveles básico e intermedio, y a los cursos de español, y los mismos se ofrecen en el Laboratorio de Destrezas del CRA3. 2.1.2. Objetivos específicos Los objetivos específicos de este análisis son los siguientes: 1. Describir la distribución de las calificaciones de los estudiantes del Recinto de Ponce para los exámenes de entrada y salida correspondientes a los laboratorios abiertos de los cursos de inglés de los niveles básico e intermedio, y de los cursos de español, durante el término académico 200330. Para llevar a cabo este objetivo se realizan distribuciones de frecuencia de las calificaciones para cada examen, por curso. 2. Comparar las puntuaciones de los estudiantes del Recinto de Ponce para los exámenes de entrada y salida correspondientes a los laboratorios abiertos de los cursos de inglés de los niveles básico e intermedio, y de los cursos de español, durante el término académico 200330. Para llevar a cabo este objetivo se utiliza la prueba t pareada. 2.2. Hipótesis del estudio Las hipótesis de este estudio son las siguientes: H0: Las puntuaciones del examen de salida del laboratorio abierto de los estudiantes del Recinto de Ponce matriculados en los cursos de inglés de los niveles básico e intermedio, y de los cursos de español, durante el término académico 200330, son menores o iguales a las puntuaciones del examen de entrada de esos mismos estudiantes. Ha: Las puntuaciones del examen de salida del laboratorio abierto de los estudiantes del Recinto de Ponce matriculados en los cursos de inglés de los niveles básico e intermedio, y de los cursos de español, durante el término académico 200330, son mayores a las puntuaciones del examen de entrada de esos mismos estudiantes. Prof. Héctor Wm. Colón Rosa, Director de Actividad, Título V Mayo, 2003 PÁGINA 2 2.3. Población y muestra Las muestras utilizadas para este análisis estuvieron compuestas por los estudiantes que contestaron ambos exámenes de entrada y salida del laboratorio abierto, y quienes tomaron los cursos GEEN 1101, 1102, 1103, 1201 y 1202, GESP 1101, 1102 y 2203, en el término académico 200330. Para el curso GEEN 1203 no pudo realizarse este análisis debido a que no existen los exámenes de entrada y salida como parte de las tareas que realizan los estudiantes en el laboratorio abierto. La Tabla 1 muestra la distribución de estudiantes para cada curso y el porcentaje que tomó ambos exámenes de entrada y salida, correspondientes al laboratorio abierto. La cantidad de estudiantes fue obtenida de los expedientes en MSExcel para los laboratorios abiertos, los cuales fueron creados por el Sr. Orlando González a petición del Director del CRA3, para reportar las puntuaciones y calificaciones de los estudiantes correspondientes a las tareas de los laboratorios abiertos. Estos expedientes son custodiados en el CRA3. Tabla 1 Distribución de estudiantes matriculados en los cursos de inglésa y español del Recinto de Ponce que requieren al menos una hora de laboratorio abierto, y el porcentaje de éstos que tomó los exámenes de entrada y salida del laboratorio abierto. Término académico 200330. Curso Español GESP 1101 GESP 1102 GESP 2203 Inglés, nivel básico GEEN 1101 GEEN 1102 GEEN 1103 Inglés, nivel intermedio GEEN 1201 GEEN 1202 a = Estudiantes % tomó exámenes entrada / salida 491 813 350 5% 7% 5% 332 653 393 22% 19% 24% 41 79 17% 33% El curso GEEN 1203 no fue incluido en este análisis. 2.4. Procedimiento Las preguntas de ambos exámenes fueron contestadas en las computadoras del Laboratorio de Destrezas del CRA3, utilizando la aplicación computadorizada WebCT. Las puntuaciones de los estudiantes en estos exámenes fueron obtenidas a través de la base de datos de WebCT. Los datos recopilados se analizaron utilizando la aplicación computadorizada para análisis estadístico SPSS for Windows 11.5 y la calculadora gráfica TI-83. Prof. Héctor Wm. Colón Rosa, Director de Actividad, Título V Mayo, 2003 PÁGINA 3 3. Resultados 3.1. Distribución de las calificaciones de los estudiantes en los exámenes de entrada y salida del laboratorio abierto. Gráfica 1 Distribución de las calificaciones de los estudiantes del Recinto de Ponce que tomaron los exámenes de entrada y salida del laboratorio abierto correspondientes al curso GESP 1101 (n = 25). Término académico 200330. 10 Estudiantes 8 6 A = 100.0 – 90.0 B = 89.9 – 80.0 C = 79.9 – 70.0 D = 69.9 – 60.0 F = 59.9 – 0.0 4 2 0 A B C D F Calificación Entrada Salida Gráfica 2 Distribución de las calificaciones de los estudiantes del Recinto de Ponce que tomaron los exámenes de entrada y salida del laboratorio abierto correspondientes al curso GESP 1102 (n = 56). Término académico 200330. Estudiantes 20 15 10 A = 100.0 – 90.0 B = 89.9 – 80.0 C = 79.9 – 70.0 D = 69.9 – 60.0 F = 59.9 – 0.0 5 0 A B C D F Calificación Entrada Prof. Héctor Wm. Colón Rosa, Director de Actividad, Título V Mayo, 2003 Salida PÁGINA 4 Estudiantes Gráfica 3 Distribución de las calificaciones de los estudiantes del Recinto de Ponce que tomaron los exámenes de entrada y salida del laboratorio abierto correspondientes al curso GESP 2203 (n = 18). Término académico 200330. 7 6 5 4 3 2 1 0 A = 100.0 – 90.0 B = 89.9 – 80.0 C = 79.9 – 70.0 D = 69.9 – 60.0 F = 59.9 – 0.0 A B C D F Calificación Entrada Salida Gráfica 4 Distribución de las calificaciones de los estudiantes del Recinto de Ponce que tomaron los exámenes de entrada y salida del laboratorio abierto correspondientes al curso GEEN 1101 (n = 73). Término académico 200330. Estudiantes 40 30 A = 100.0 – 90.0 B = 89.9 – 80.0 C = 79.9 – 70.0 D = 69.9 – 60.0 F = 59.9 – 0.0 20 10 0 A B C D F Calificación Entrada Prof. Héctor Wm. Colón Rosa, Director de Actividad, Título V Mayo, 2003 Salida PÁGINA 5 Gráfica 5 Distribución de las calificaciones de los estudiantes del Recinto de Ponce que tomaron los exámenes de entrada y salida del laboratorio abierto correspondientes al curso GEEN 1102 (n = 123). Término académico 200330. 100 Estudiantes 80 60 A = 100.0 – 90.0 B = 89.9 – 80.0 C = 79.9 – 70.0 D = 69.9 – 60.0 F = 59.9 – 0.0 40 20 0 A B C D F Calificación Entrada Salida Gráfica 6 Distribución de las calificaciones de los estudiantes del Recinto de Ponce que tomaron los exámenes de entrada y salida del laboratorio abierto correspondientes al curso GEEN 1103 (n = 93). Término académico 200330. Estudiantes 40 30 20 A = 100.0 – 90.0 B = 89.9 – 80.0 C = 79.9 – 70.0 D = 69.9 – 60.0 F = 59.9 – 0.0 10 0 A B C D F Calificación Entrada Prof. Héctor Wm. Colón Rosa, Director de Actividad, Título V Mayo, 2003 Salida PÁGINA 6 Estudiantes Gráfica 7 Distribución de las calificaciones de los estudiantes del Recinto de Ponce que tomaron los exámenes de entrada y salida del laboratorio abierto correspondientes al curso GEEN 1201 (n = 7). Término académico 200330. 3.5 3 2.5 2 1.5 1 0.5 0 A = 100.0 – 90.0 B = 89.9 – 80.0 C = 79.9 – 70.0 D = 69.9 – 60.0 F = 59.9 – 0.0 A B C D F Calificación Entrada Salida Gráfica 8 Distribución de las calificaciones de los estudiantes del Recinto de Ponce que tomaron los exámenes de entrada y salida del laboratorio abierto correspondientes al curso GEEN 1202 (n = 26). Término académico 200330. 10 Estudiantes 8 6 A = 100.0 – 90.0 B = 89.9 – 80.0 C = 79.9 – 70.0 D = 69.9 – 60.0 F = 59.9 – 0.0 4 2 0 A B C D F Calificación Entrada Prof. Héctor Wm. Colón Rosa, Director de Actividad, Título V Mayo, 2003 Salida PÁGINA 7 3.2. Comparación por curso de las puntuaciones de los estudiantes en los exámenes de entrada y salida del laboratorio abierto. A continuación se presentan las comparaciones por curso de las puntuaciones de los estudiantes en los exámenes de entrada y salida del laboratorio abierto. Las comparaciones se realizaron utilizando la prueba t pareada. En la Tabla 2 se puede observar que para todos los cursos, el promedio de la puntuación del examen de salida es mayor al correspondiente al examen de entrada. Las diferencias encontradas entre las puntuaciones de los exámenes de entrada y salida fueron estadísticamente significativas para todos los cursos de inglés del nivel básico, un curso de inglés del nivel intermedio y un curso de español. Sin embargo, con excepción de los cursos GEEN 1103, 1202 y GESP 1102, la puntuación promedio de los estudiantes en ambos exámenes equivale a una calificación de D o menos. Por otro lado, para los cursos que no hubo diferencias estadísticas significativas, la puntuación promedio de los estudiantes en ambos exámenes equivale a una calificación de D o más. 3.3. Discusión De acuerdo con el análisis comparativo por curso de las puntuaciones obtenidas por los estudiantes en los exámenes de entrada y salida del laboratorio para los cursos de español e inglés que requieren realizar actividades de laboratorio abierto, se encontró en todos los cursos que la puntuación promedio del examen de salida era mayor a la correspondiente para el examen de entrada. La mayor parte de las diferencias entre las puntuaciones del examen de entrada versus aquéllas del examen de salida fueron estadísticamente significativas. 4. Recomendaciones y conclusiones Aunque la información encontrada no puede interpretarse como que las tareas de los cursos, del laboratorio, o ambas contribuyen directamente a que los estudiantes que las realizan tendrán una puntuación más alta al final comparado con el comienzo, la misma sugiere que debe realizarse un análisis más profundo y controlado para ver la efectividad directa de estas tareas en la puntuación de los estudiantes en el examen de salida del laboratorio, al compararlo con el examen de entrada. Es sumamente importante observar que para 5 de los 8 cursos los promedios de las puntuaciones obtenidas por los estudiantes en el examen de salida, eran equivalentes a una calificación máxima de C. Esto podría ser indicativo de que los exámenes no están midiendo el contenido de los cursos. Por lo tanto, se recomienda que la facultad revise los exámenes a la par con el contenido de los cursos. Por el momento, solamente se puede concluir que durante el término académico 200330 el promedio obtenido por los estudiantes en el examen de salida de laboratorio para los cursos de español e inglés que requieren asistir a un centro de recursos para realizar actividades de laboratorio abierto, fue mayor que el promedio obtenido por los mismos estudiantes en el examen de entrada de laboratorio. Las diferencias fueron estadísticamente significativas para los exámenes de laboratorio correspondientes a 5 de los 8 cursos estudiados. Prof. Héctor Wm. Colón Rosa, Director de Actividad, Título V Mayo, 2003 PÁGINA 8 Tabla 2 Comparación de las puntuaciones de los estudiantes del Recinto de Ponce que tomaron los exámenes de entrada y salida del laboratorio abierto. Término académico 200330. CURSO ENTRADA a NOTA SALIDA a NOTA CORRELACIÓN (VALOR DE P) t (VALOR DE P) 0.626 (0.001) 0.685 (0.000) 0.430 (0.075) -1.322 (0.099) -1.938 (0.029) -0.804 (0.216) 0.827 (0.000) 0.770 (0.000) 0.568 (0.000) -4.609 (8.545 x 10-6) -6.365 (1.787 x 10-9) -5.866 (3.476 x 10-8) 0.643 (0.119) 0.526 (0.006) -1.541 (0.087) -1.813 (0.041) Español GESP 1101 (n = 25) GESP 1102 (n = 56) GESP 2203 (n = 18) 63.96 (10.795) 68.04 (11.460) 67.67 (16.501) D D D 66.56 (11.839) 70.39 (11.438) 70.67 (12.424) D C C Inglés, nivel básico GEEN 1101 (n = 73) GEEN 1102 (n = 123) GEEN 1103 (n = 93) 59.88 (23.141) 51.51 (19.650) 63.61 (15.011) F F D 67.03 (21.747) 59.60 (21.585) 71.53 (12.595) D F C Inglés, nivel intermedio GEEN 1201 (n = 7) GEEN 1202 (n = 26) a = 62.57 (21.188) 69.27 (16.910) D D 72.57 (19.243) 74.38 (9.117) C C Media (desviación estándar) 5. Bibliografía Daniel WW. Biostatistics: A Foundation for Analysis in the Health Sciences, 6th edition. New York: John Wiley & Sons, Inc.; 1995. Chapter 7, 7.4: 235-241. Johnson RR, Kuby P. Estadística elemental: lo esencial. México: International Thomson Editores S.A. de C.V.; 1999. Capítulo 10, 10.2: 383-393. Texas Instruments Incorporated. TI-83 Graphing Calculator Guidebook. Instruments Incorporated; 1996. Chapter 13: 1-36 . USA: Texas Triola MF. Estadística Elemental, 7ma edición. México, Pearson Educación; 2000. Capítulo 8, 8.2: 414-424. Zar JH. Biostatistical Analysis, 4th edition. New Jersey: Prentice Hall; 1999. Chapter 9: 161176. Prof. Héctor Wm. Colón Rosa, Director de Actividad, Título V Mayo, 2003 PÁGINA 9