XI Jornadas Internacionales de Innovación Universitaria Educar para transformar CUESTIONARIOS AUTOGESTIONADOS POR LOS ALUMNOS COMO HERRAMIENTA DE APRENDIZAJE A TRAVÉS DE LA EXPERIENCIA Blanco Fernández de Valderrama, Maria José, Novillo, Apolonia, Llorente, Ricardo y Cid, María Antonia Departamento de Ciencias Biomédicas Básicas Facultad de Ciencias Biomédicas Universidad Europea de Madrid C/ Tajo s/n Urbanización El Bosque Villaviciosa de Odón, Madrid e-mail: [email protected] Resumen. El uso de tecnologías de la información y comunicación (TIC) y en particular de la plataforma Moodle, ofrece la posibilidad de realizar cuestionarios on line como herramienta docente, que puede resultar muy útil como actividad complementaria a la realización de pruebas objetivas. Por otra parte, la elaboración de preguntas por los alumnos, se ha mostrado como una herramienta de gran potencialidad para el aprendizaje significativo. Nuestra experiencia previa, así como las observaciones de otros autores, indican que este instrumento favorece la adquisición de competencias generales y específicas por parte del alumno. En esta experiencia hemos querido analizar específicamente el potencial de los cuestionarios autogestionados y on line de repaso como metodología de aprendizaje, su valor como indicador del grado de conocimiento adquirido por el alumno y su nivel de aceptación entre los estudiantes.Nuestros resultados revelan que los cuestionarios autogestionados y de repaso on line son actividades motivantes para el alumno, que percibe que mejora en sus calificaciones y que le ayuda en su estudio y autoevaluación. Esto se refleja en una participación elevada en estas actividades. El profesorado valora positivamente la experiencia y se propone aplicar y optimizar esta herramienta para mejorar el proceso de enseñanza-aprendizaje en los próximos cursos. Palabras clave: cuestionarios autogestionados, TIC, cuestionarios online, aprendizaje significativo, motivación, autoevaluación. 1. INTRODUCCIÓN Las tecnologías de la información y comunicación (TIC) se han implantado como una herramienta clave en la enseñanza superior, por su protagonismo en la sociedad actual y sus posibilidades como instrumentos de comunicación. La plataforma virtual Moodle fue diseñada con una filosofía pedagógica constructivista, para que fomentara la interactividad entre alumno y profesor fuera de las horas presenciales (Hart y Rush, 2007). Dentro de las actividades que brinda esta herramienta destacan los cuestionarios. La modalidad de cuestionarios tipo on line para el apoyo de la docencia presencial presenta ventajas de aplicación como: calificación automática del cuestionario, los datos se exportan a un documento Excel, las preguntas pueden tener diferentes opciones predeterminadas, el profesor puede establecer una base de datos con diferentes preguntas que pueden exponerse al alumno al azar, se puede realizar varias veces y XI Jornadas Internacionales de Innovación Universitaria Educar para transformar puede establecerse un límite de tiempo si se considera oportuno. Esta herramienta docente de trabajo y autoevaluación se ha mostrado como una de las más útiles como actividad complementaria a la realización de pruebas objetivas puntuales (Crews y Curtis, 2011; Cuesta-Segura y Alegre-Calderón, 2012). Éste tipo de cuestionarios han sido ampliamente utilizados por docentes de diferentes áreas (Esquivel 2008; Blanco y Ginovart 2011; Pintor et al., 2012; Valdivia et al., 2012 Cid et al., 2013). En estos trabajos se concluye que el uso de este instrumento favorece la adquisición de competencias generales por parte del alumno (cumpliendo con las directrices marcadas en el EEES) y fomenta la percepción de que el estudiante es el que lleva el control del aprendizaje. Por otra parte, la participación de los estudiantes en su propio aprendizaje es esencial para que éste sea significativo. Algunos autores han sugerido la necesidad de reforzar dicha participación para lo que proponen la elaboración de cuestionarios generados por los propios alumnos (Sánchez-Elez et al., 2014), que llamaremos “autogestionados”. La versatilidad de la elaboración de preguntas por parte del alumno como herramienta docente ha sido destacada por distintos autores (revisión: Chin y Osborne, 2008). El valor de este tipo de cuestionarios, para la consecución de un aprendizaje significativo, se fundamenta en: 1)- Integración de los conocimientos adquiridos; 2)- Reflexión sobre la eficacia de su aprendizaje; 3)- Adquisición del de conocimiento que necesita para tener éxito en evaluaciones realizadas mediante pruebas tipo test, en las que reconoce tener dificultades; 4)- Obtención de feedback positivo mediante rúbrica, pudiendo resolver dudas y corregir posibles errores de concepto; 5)Aumento de la motivación a través de la consecución de objetivos, ya que el alumno es recompensado en su nota por ser el autor de una pregunta seleccionada para el cuestionario evaluable y 6)-Desarrollo de competencias tales como la capacidad de expresión oral y escrita, el pensamiento crítico, el análisis objetivo, el intercambio de conocimiento y la capacidad de trabajar en equipo. El presente trabajo se ha desarrollado a partir de un estudio iniciado en el anterior curso académico por el equipo docente de Bioquímica y Biología Celular para alumnos de primer año de Grado en Odontología de la Universidad Europea de Madrid, (UEM), dirigido a la optimización de metodologías activas para reforzar el aprendizaje en asignaturas del ámbito biomédico. En el presente estudio hemos querido implementar la potencialidad de los cuestionarios on line, lanzados a través de la plataforma Moodle, haciendo partícipes a los alumnos en la elaboración de cuestionarios autogestionados, que son posteriormente propuestos a todo el grupo como tarea on line. Este tipo de herramienta ha sido empleada por otros autores (Bottomley y Denny, 2011; Papinczak et al., 2012; Sánchez-Elez et al., 2014) y se reveló como una herramienta de aprendizaje potencialmente muy útil en nuestros resultados preliminares (Cid et al., 2013). Utilizando los cuestionarios como herramienta docente, los objetivos en la presente fase del estudio han sido: 1) estudiar su impacto como herramienta de autoevaluación para el estudiante, 2) comprobar si son un indicador adecuado para conocer el grado de conocimiento a través de la experiencia; 3) conocer si la realización de cuestionarios es una actividad motivadora; 4) analizar el grado de aceptación entre los estudiantes de este tipo de actividad. 2. MATERIALES Y MÉTODOS El presente estudio es una continuación de un estudio piloto planteado por el equipo de profesores en el curso 2012-2013, en la asignatura de Biología Celular y Genética XI Jornadas Internacionales de Innovación Universitaria Educar para transformar Humana en el Grado de Odontología (Cid et al., 2013). 2.1. Características y elaboración de los cuestionarios autogestionados y on line de repaso En primer término, se acordó entre los profesores la elaboración a lo largo del curso de una base de datos de preguntas generadas por los estudiantes, bien en clase o como actividad fuera del aula, correspondientes a siete temas del temario oficial de la asignatura, que ha llegado a contener un total de 220 cuestiones en español y 278 en inglés. Los alumnos, en grupos de 3-5, subieron cada cuestionario realizado a Moodle, como una actividad en línea, en la asignatura de Bioquímica en 1º de Odontología de la UEM durante el curso 2013-2014. Cada grupo de alumnos elaboró tres preguntas tipo test de respuesta múltiple, para cada tema, similares a los de las pruebas objetivas de la asignatura. Esta actividad se pensó como alternativa a los cuestionarios en papel, dentro de las actividades que se realizan durante el curso. Los alumnos recibieron una retroalimentación positiva diferida, ya que se les devolvieron las preguntas corregidas a través del campus virtual para que las incorporaran en la carpeta de aprendizaje. Utilizando una rúbrica (Tabla 1) que se adjunta a continuación, los alumnos recibieron una calificación que constituye una más de la carpeta de aprendizaje. Con el fin de recompensar el trabajo realizado por los alumnos, un total de 10 preguntas proveniente de estos cuestionarios se incluyeron en las pruebas teóricas, las cuáles constaban de 50 preguntas. CUESTIONARIO TEMA:---PREGUNTAS PARTICIPANTES CRITERIOS Q1 Q2 Q3 GANTES Nivel de dificultad: Bajo=1; Medio=2; Alto=3 AMAR Errores conceptuales: Si=0; No=1 ALMENA Errores de planteamiento: Si=0; No=1 ROMERO Plagio: Si= anula la pregunta CARRIÓN Puntuación TOTAL: ----puntos Puntuación máxima por pregunta: 5 puntos puntuación máxima por cuestionario: 15 puntos Tabla 1. Ejemplo de rúbrica para la evaluación de las preguntas elaboradas por los alumnos. Teniendo como base los datos generados por los estudiantes, el equipo de profesores evaluó las propuestas corrigiendo errores y eligió las mejores como base para confeccionar un cuestionario de repaso on line accesible a todos los alumnos. Los cuestionarios de repaso fueron de cumplimentación voluntaria, con intentos ilimitados y cuya calificación no pasó a formar parte de la evaluación final de la asignatura. El tiempo que los alumnos tuvieron para realizar cada uno fue ilimitado, y la disponibilidad (visibilidad y cumplimentación) del mismo en el campus virtual también. La retroalimentación en este caso fue inmediata, ya que las respuestas correctas se mostraban tras la ejecución de la actividad. En todos los casos, las preguntas seleccionadas por el profesor fueron de un contenido y formato similar a las planteadas en las pruebas objetivas, referidas al temario oficial de la asignatura. Se ha aprovechado la opción de poder exportar los datos a una hoja Excel XI Jornadas Internacionales de Innovación Universitaria Educar para transformar para analizar el nº de alumnos que utilizaron los cuestionarios, el número de veces que los realizaron y la nota obtenida cada vez. Los datos que se analizan en este artículo son referidos a un total de 196 alumnos. 2.2. Muestra La población estudiada está constituida por alumnos de primer año del Grado de Odontología que cursan la asignatura de Bioquímica durante el período académico 2013-2014 (9 grupos, 328 alumnos) en la UEM. En un total de 7 grupos se imparte la docencia totalmente en español y en 2 grupos se imparte en inglés. Los contenidos de la asignatura de Bioquímica han sido establecidos por los profesores de forma coordinada, siendo muy similares en todos los grupos. Como herramienta de Innovación docente se han mantenido la Carpeta de Aprendizaje y el uso de cuestionarios on line (Blanco et al., 2012; Cid et al., 2013). Ante la buena respuesta obtenida por los estudiantes en años anteriores en la asignatura de Biología Celular y Genética Humana, y como novedad, se ha implementado en la asignatura de Bioquímica una modalidad de cuestionarios autogestionados por los alumnos que se describen en este trabajo. Se mantiene el mismo perfil del estudiante que ya fue descrito en estudios previos (Blanco et al., 2012), que se enmarca dentro de la orientación Internacional de la UEM. Más de la mitad de nuestros alumnos son extranjeros, mayoritariamente procedentes de Italia. La mayoría de alumnos italianos reciben clases en español. Cabe destacar que dos de los grupos están compuestos por estudiantes extranjeros, procedentes de Asia y otros países como Francia, Noruega, Alemania, Inglaterra, Suecia, o Libia, en los que la docencia se imparte íntegramente en inglés. Estos grupos también realizaron esta actividad. 2.3 Indicadores de satisfacción de los cuestionarios autogestionados y on line de repaso Con el fin de analizar el impacto de los cuestionarios online de repaso se han recogido, analizado y discutido una serie de indicadores: número total de accesos a los cuestionarios, el número y porcentaje de alumnos que acceden, el número y porcentaje de alumnos que no acceden, calificaciones medias obtenidas en estos cuestionarios y calificaciones medias obtenidas en las pruebas teóricas de la asignatura. El grado de satisfacción de los alumnos tanto para los cuestionarios autogestionados como para los cuestionarios online de repaso se ha basado en la metodología de encuesta. Las etapas seguidas han sido: 1) elaboración de las preguntas de la encuesta teniendo en cuenta los objetivos planteados, 2) administración de cuestionarios vía online, 3) análisis estadístico de las respuestas y elaboración de los informes con los resultados. Las preguntas de la encuesta fueron realizadas de forma consensuada por todos los miembros del equipo de profesores. Se pidió al alumno que evaluara cada pregunta en una escala del 1-5, siendo el 1 el valor más bajo y el 5 el más alto de acuerdo con el enunciado. Los alumnos fueron debidamente informados del carácter anónimo de la realización de la encuesta. XI Jornadas Internacionales de Innovación Universitaria Educar para transformar 2.4. Análisis de los datos Para el análisis de los cuestionarios online de repaso se han incluido los resultados de 6 grupos correspondientes al curso académico 2013-2014. Se excluyen del análisis aquellos individuos que no han asistido ni a clases teóricas ni prácticas ni se han presentado a las pruebas teóricas a lo largo del curso. Los datos se han analizado utilizando estadística descriptiva y un test de normalidad, seguido del análisis de correlación de Pearson. El tratamiento estadístico se ha realizado mediante el programa Excel (Microsoft Office 2010). Las calificaciones académicas obtenidas por los alumnos han sido utilizadas de forma confidencial. 3. RESULTADOS Y DISCUSIÓN El análisis de los resultados se ha llevado a cabo tanto en el conjunto de todos los estudiantes, como por grupos: ESPAÑOL e INGLÉS, con objeto de analizar el comportamiento de ambos grupos. El total de alumnos estudiados es de 196. 3.1. Participación en los cuestionarios on line de repaso De un total de 196 alumnos analizados, el 75% de ellos accedieron a la realización de los cuestionarios on line de repaso al menos una vez. Los resultados obtenidos en forma de calificación por los alumnos que accedieron a los cuestionarios (147 alumnos) revelan un número de aprobados (nota mayor o igual a 5) moderadamente elevado (70%). De ese 70%, un 30% de los alumnos obtuvieron una nota mayor o igual a 7 sobre 10, mientras que el 40 % obtuvo una nota entre 5 y 7 y el 30% restante obtuvieron calificaciones por debajo de 5. La calificación media obtenida es 5,8±2 (Tabla 2). Con respecto a los dos grupos: ESPAÑOL e INGLES, un hecho evidente es que el número de alumnos en el primer grupo es casi tres veces superior (144) al de los alumnos cuyas clases se impartieron en inglés (52). Sin embargo, el porcentaje de alumnos que acceden a los cuestionarios de repaso es inferior en el grupo ESPAÑOL (71,5%) que en el INGLES (84,6%). De forma correlativa, el porcentaje de alumnos que no acceden en el grupo ESPAÑOL es mayor (28%), casi el doble, al del grupo INGLES (15%). Estos datos parecen revelar algunas diferencias en la actitud entre ambos grupos, siendo el grupo INGLES el que mayoritariamente utiliza la herramienta. En cualquier caso, nuestros resultados indican una alta participación en la realización de los cuestionarios on line, como también han observado otros autores (Pintor y Arriaga, 2012). No obstante, los datos obtenidos son insuficientes para determinar la causa de la mayor participación de los alumnos del grupo de INGLES, ya que se trata de una primera experiencia y que al ser un número menor de alumnos no se puede descartar un sesgo estadístico. Para obtener más información al respecto, se requiere realizar un estudio con un enfoque específicamente dirigido a evaluar el impacto de la docencia en inglés. 3.2. Influencia de los cuestionarios on line de repaso sobre las pruebas teóricas Con el objetivo de analizar la aportación de los cuestionarios en la adquisición de los contenidos de la asignatura, hemos comparado las medias de las calificaciones de las pruebas objetivas teóricas y las medias correspondientes a los cuestionarios (Tabla 2). Se XI Jornadas Internacionales de Innovación Universitaria Educar para transformar observa que la nota media obtenida en los cuestionarios en todos los grupos es superior a la calificación obtenida en las pruebas teóricas (5,8±2 versus 4,7±1,7). Esta diferencia podría deberse a que el alumno tenía acceso ilimitado a los cuestionarios y la posibilidad de realizarlo las veces que quisiera, a la vez que no se penalizaban los errores. Por el contrario en las pruebas teóricas se penalizaban los errores. Por otro lado, se observan diferencias entre la nota media de las pruebas teóricas de los alumnos que han accedido, en comparación a los que no lo han hecho (media de 4,7 versus 2,8, respectivamente). Este dato nos hace pensar que la realización de los cuestionarios puede tener un efecto positivo en el aprendizaje de los conocimientos teóricos de la asignatura o bien que a través de la experiencia pueden superar las dificultades que una prueba de tipo test les plantea. Nº ALUMNOS QUE ACCEDEN % NOTA MEDIA CUESTIONARIOS NOTA MEDIA TEORIA ESPAÑOL 103 71,5 6,0 ± 2,1 4,6 ± 1,7 INGLÉS 44 84,6 4,7 ± 1,8 4,8 ± 1,9 TODOS 147 75 5,8 ± 2,0 4,7 ± 1,7 Nº ALUMNOS NO QUE ACCEDEN % NOTA MEDIA CUESTIONARIOS NOTA MEDIA TEORIA ESPAÑOL 41 28,5 --- 2,7 ± 1,9 INGLÉS 8 15,4 --- 2,5 ± 1,8 GRUPOS GRUPOS TODOS 49 25 --2,8 ± 1,8 Tabla 2. Datos sobre acceso a cuestionarios de repaso y calificaciones por grupos: ESPAÑOL e INGLÉS. Se incluyen las notas medias de las pruebas teóricas. Medias ± desviación estándar. El análisis de correlación de Pearson, entre las calificaciones de las pruebas teóricas y las de los cuestionarios on line de repaso muestra una correlación estadísticamente significativa (r= 0,5, p< 0,01). Las calificaciones son cercanas a la nota corte (5), presentando una disminución muy similar entre los grupos. El impacto que realiza los cuestionarios sobre la nota teórica es menor de la esperada, ya que la nota media teórica no se aleja de la note de corte. Este hecho puede estar relacionado con la manera que tienen los alumnos de utilizar este tipo de cuestionarios. Nosotros, al igual que otros autores (Papinczak et al., 2012), hemos observado que en ocasiones los alumnos imprimen los cuestionarios, en lugar de utilizarlos como herramienta de autoevaluación. Para incentivar el uso adecuado a los objetivos docentes para los que se diseñaron, algunos autores han considerado las calificaciones obtenidas en los cuestionarios como parte de la calificación de la asignatura, observando que los estudiantes realizan un estudio previo de la asignatura con el objetivo de mejorar su calificación, lo que según estos autores parece que se refleja en un aumento en la nota media del aprobado por curso (Orta Rial y González Cárceles, 2012). Es posible que el hecho de incluir 10 preguntas en la prueba teórica de evaluación de la asignatura estimule el uso inadecuado de los cuestionarios. 3.2. Valoración de los estudiantes (encuesta de satisfacción) Con objeto de conocer el grado de satisfacción que obtienen los estudiantes al realizar los cuestionarios autogestionados y su opinión sobre los cuestionarios online de repaso, se XI Jornadas Internacionales de Innovación Universitaria Educar para transformar confeccionó una encuesta con escala de valoración Linkert del 1-5 donde 1 muestra el grado más bajo de acuerdo con la pregunta formulada y 5 el más alto. Las preguntas realizadas en la encuesta se pueden ver en la Tabla 3. Las 4 primeras preguntas están dirigidas a conocer cómo valoran los alumnos la evaluación de la asignatura mediante preguntas tipo test con respuesta múltiple que conlleva una penalización por error cometido. Con las preguntas 5-10 se ha tratado de averiguar la impresión de los alumnos sobre la actividad de elaborar ellos mismos cuestionarios de tipo test (autogestionados). Las preguntas 11-13 han sido dirigidas a evaluar los cuestionarios de repaso on line. Nº Pregunta 1 ¿Conocías la existencia de cuestionarios tipo test con respuesta múltiple como herramienta para la evaluación académica? ¿Has realizado previamente evaluaciones mediante este tipo de cuestionarios? Las evaluaciones mediante preguntas tipo test son habituales en tu entorno académico actual. ¿Encuentras dificultades para realizar los tests? Si en la pregunta anterior has respondido con un 4 o un 5, por favor indica brevemente cuál/cuáles son las dificultades: ¿Cómo valoras la opción de elaborar tú mismo los cuestionarios tipo test? ¿Te parecieron suficientemente claras las explicaciones del profesor para la correcta realización de los cuestionarios que has tenido que elaborar? ¿Crees que generar los cuestionarios ha sido una herramienta útil para fomentar un aprendizaje significativo? ¿Te ha motivado la realización de esta actividad? ¿Crees que realizar los cuestionarios on line ha contribuido a mejorar tus calificaciones? ¿Has encontrado útil la rúbrica para evaluar los cuestionarios? ¿Te ha servido la realización de los cuestionarios on line de repaso como herramienta de estudio? ¿Te ha ayudado la realización del cuestionario on line de repaso como herramienta de autoevaluación? ¿Cuál es tu valoración global de disponer de cuestionarios de repaso elaborados por ti mismo? Indica tres debilidades que encuentras en la aplicación de esta herramienta Indica tres fortalezas que resaltarías de esta herramienta 2 3 4 5 6 7 8 9 10 11 12 13 14 15 Media ± DS 3,8±1,4 4±1 3,1±1,3 ----3,8±1,1 ±1 3,8±1,2 3,5±1,2 4,0±1,4 3,7±1,3 4,2±1,0 4,2±1,5 3,9±1,1 Tabla 3. Preguntas de la encuesta de satisfacción. Escala Linkert 1-5 y Valoración de la encuesta sobre las actividades: cuestionarios autogestionados y cuestionarios de repaso on line. Se muestran los datos medios y la desviación estándar (DS). A la encuesta respondieron un total de 53 alumnos. Los resultados obtenidos (Tabla 3) ponen de manifiesto que el grado de satisfacción con ambas actividades es alto. Son de destacar algunos puntos: 1) los alumnos se han sentido motivados por la realización de cuestionarios autogestionados (pregunta 8); 2) creen que los cuestionarios online de repaso ha contribuido a mejorar sus calificaciones (pregunta 9); 3) la rúbrica ha sido una herramienta adecuada (pregunta 10); 4) han valorado positivamente los cuestionarios de repaso como herramienta de estudio y autoevaluación (preguntas 11 y 12). Estos resultados son importantes ya que revelan que la motivación del alumno aumenta y les hace partícipes de su propio aprendizaje, lo que es esencial para que este sea significativo. La realización de cuestionarios autogestionados y de repaso on line cumple con estos objetivos y se están implantando, con diversas variaciones, en el entorno docente (Sánchez-Elez et al., 2014). La buena aceptación de estas actividades alienta al profesorado a potenciar el uso de esta herramienta para la mejora del proceso de enseñanza-aprendizaje en los próximos cursos. 4. CONCLUSIONES x La participación de los estudiantes en la realización de cuestionarios de repaso on line es bastante alta, especialmente en el grupo de INGLES. XI Jornadas Internacionales de Innovación Universitaria Educar para transformar x x Los cuestionarios autogestionados y de repaso on line son actividades motivantes para el alumno, que además percibe que mejora en sus calificaciones y le ayuda en su estudio y autoevaluación. Los alumnos que han hecho uso de estas herramientas han obtenido mejores calificaciones en las pruebas teóricas de la asignatura. Áreas de mejora x Mejora en el planteamiento de la actividad de los cuestionarios para optimizar su uso por parte del alumno. x Evaluación de los cuestionarios autogestionados por sus compañeros a través de un foro para aumentar la motivación e influir en el proceso de aprendizaje. Promover el análisis crítico. 5. REFERENCIAS Blanco Fernández de Valderrama, M. J., Novillo, A., Cid, M A., Borcel, E. y Rodes, B. (2012). La carpeta de aprendizaje como herramienta de innovación docente: Experiencia piloto en la asignatura de Bioquímica. IX Jornadas Internacionales de Innovación Universitaria. Universidad Europea de Madrid. Villaviciosa de Odón. Blanco, M. y Ginovart, M. (2012). Los cuestionarios en el entorno Moodle: su contribución a la evaluación virtual formativa de los alumnos de matemáticas de primer año de las titulaciones de Ingeniería. En: Aprendizaje virtual de la matemáticas (monográfico on line). Revista de Universidad y Sociedad del Conocimiento (RUSC), 9, 166-183. Bottomley, S. y Denny, P. (2011). A Participatory Learning Approach to Biochemistry Using Student Authored and Evaluated Multiple-choice Questions. Biochemistry and Molecular Biology Education, 39, 352-361. Chin, C. y Osborne, J. (2008). Student-generated questions: A meaningful aspect of learning in science. Studies in Science education, 44, 1-39. Cid, M. A., Novillo, A. y Blanco Fernández de Valderrama, M. J. (2013). Cuestionarios en Moodle: versatilidad de las TIC como herramientas de apoyo docente. X Jornadas Internacionales de Innovación Universitaria. Universidad Europea de Madrid. Villaviciosa de Odón. Crews, T. B. y Curtis, D. F. (2011). Online course evaluations: faculty perspective and strategies for improved response rates. Assessment & Evaluation in Higher Education, 36, 865-878. Cuesta-Segura, I. I. y Alegre-Calderón, J. M., (2012). Uso de la plataforma Moodle como herramienta para la evaluación continua de estudiantes en el Espacio Europeo de Educación Superior. Revista de Comunicación Vivat Academia, XIV, 417-428. Esquivel, I. (2008). Experiencias en el uso de moodle como instrumento de mejora en la relación docente-alumno. En Actas, VI Congreso Internacional en Innovación y Desarrollo Tecnológico. CIINDET 2008: 69-77. México. XI Jornadas Internacionales de Innovación Universitaria Educar para transformar Gómez-Ruano, M.A, López de Subijana, C., Campos-Izquierdo, A. y Barriopedro, M. (2012). Competencias percibidas en alumnos de ciencias del deporte en el trabajo de grupo a través de un cuestionario on-line. En Actas, VII Jornadas de Innovación Pedagógica “Experiencias de evaluación en e-learning”. Disponible en http://moodle.upm.es/adamadrid/file.php/1/web_VII_jornadas_ADA/comunicaciones/0 1_Lopez.pdf. Madrid: ADA. Hart M y Rush D. (2007). Open source VLEs (MOODLE) and student engagement in a blended learning environment. 2ndInternational Conference on 2-Learnin (ICEL 2007), Columbia University, Teachers Coll, New York, NY. Masaló I., Kallas Z., Almirall A., Ornat C. y Achaerandio I. (2012). Congreso Internacional Docencia Universitaria e Innovación. Barcelona. Disponible en: www.cidui.org Orta Rial, B. y González Cárceles, J. A. (2012). Moodle como complemento a la enseñanza presencial de dimensionado de estructuras. Proyecto de Innovación Educativa coordinado por la ETSAM (UPM). Disponible en la revista electrónica de ADA-Madrid: http://polired.upm.es/index.php/relada/search/titles?searchPage=7 Papinczak, T., Peterson, R. F., Babri, A. S., Ward, K., Kippers, V. y Wilkinson, D. (2012). Using student-generated questions for student-centred assessment. Assessment and Evaluation in Higher Education, 34, 439-452. Pintor Holguín, E. y Arriaga Arrizabalaga, A. (2008). Utilidad de los cuestionarios de autoevaluación del campus virtual en alumnos de ciencias de la salud. V Jornadas de Innovación Universitaria. Universidad Europea de Madrid. Villaviciosa de Odón. Pintor Holguín E., Valencia Orgáz, P., Herrero Ruiz-Valdepeñas, B. y Gargantilla Madera, P. (2012). Cuestionarios de autoevaluación online en grado presencial: ¿en casa o en clase? IX Jornadas Internacionales de Innovación Universitaria. Universidad Europea de Madrid. Villaviciosa de Odón. Sanchez-Elez, M., Pardines, I., Garcia, P., Miñana, G., Roman, S., Sanchez, M. y Risco, J. L. (2014). Enhancing Students’ Learning Process Through Self-Generated Tests. Journal of Science Education and Technology, 231, 15-25. Valdivia, P.A., Quesada, J. y López-López, M. (2013). Aplicación de cuestionarios mediante la plataforma Moodle. Trances, 5, 79-94.