viernes, 6 de mayo de 2022

Buenas prácticas de diseño de los sistemas de evaluación de una asignatura utilizando cuestionarios

1. Aplicar un proceso de diseño iterativo e incremental en el diseño de preguntas y cuestionarios

Los cuestionarios es una de las actividades de Moodle más complicada de configurar y necesita mucho tiempo de configuración por parte del profesor. Generar un buen banco de preguntas validado y correcto es un proceso iterativo e incremental durante varios cursos. Al menos dos cursos pueden ser necesarios para tener un buen banco de preguntas validado para evaluaciones sumativas de acreditación de conocimientos. 


2. Crear ambientes de entrenamiento para la evaluación con cuestionarios

Los cuestionarios sumativos pueden ser muy estresantes para los estudiantes. El entrenamiento con cuestionarios de prueba no sumativos o de autoevaluación puede ayudar a los estudiantes a resolver problemas técnicos antes de las pruebas de evaluación sumativa, siempre que su diseño sea equivalente al de evaluación .
 

3. Documentar bien los cuestionarios

 El docente debería informar con precisión de cómo va a utilizar los cuestionarios en su proceso de enseñanza. Debería describir claramente, en los ajustes del cuestionario, cómo los estudiantes tienen que utilizar esa actividad para su aprendizaje o evaluación: objetivos, competencias, material de estudio, materiales permitidos, condiciones ambientales, supervisión y códigos de honor, dinámica para la realización de cuestionario, estrategia de evaluación, fechas, duración, ambientes de realización.
 

4. Diseñar el control de acceso a los contenidos

Moodle es muy rico en el control de acceso a los cuestionarios: contraseña, fechas de apertura y cierre, tiempo, configuración de direcciones ips… Además, una vez que el estudiante ha realizado el intento permite configurar opciones de revisión, donde se puede dar acceso libremente a las pregunta y sus correcciones. Las relaciones de confianza entre los estudiantes y el profesor o el tamaño de del grupo pueden ayudar a relajar los controles. Grupos grandes exigen mayor nivel de control de acceso. Estudiantes con mayor madurez y compromiso pueden requerir menos control.
 

5. Diseñar estrategias de cuestionarios para evaluación formativa y creativa

 La creación en este mundo de la enseñanza y aprendizaje no tiene límite. Se pueden definir estrategias de motivación del esfuerzo del estudiante diseñando cuestionarios con múltiples intentos, o con múltiples intentos basados en el anterior, donde el estudiante pueda ver reflejado la relación del esfuerzo con la calificación. Otra estrategia puede ser diseñar sistemas de gamificación basados en el ranking de calificaciones automáticas. También se pueden diseñar cuestionarios de repaso al final de cada semana, de cada clase o al final de tema. Se pueden definir comportamientos de las preguntas adaptativos o puntuación basada en certeza (CBM). 
 

6. Integrar los cuestionarios en los sistema de evaluación de las asignaturas

 Los cuestionarios no son la única actividad de evaluación, los sistemas de evaluación deberían estar completados con más tipos de actividades de aprendizaje: porfolios de prácticas, trabajos colaborativos, trabajos coevaluados… El tamaño del grupo, la madurez de los estudiantes y las destrezas tecnológicas (tanto de los estudiantes como profesores), son factores a tener en cuenta.
 

7. Supervisión de los cuestionarios para garantizar igualdad de condiciones de evaluación

La supervisión depende del diseño del cuestionario y no siempre es necesaria como sistema de garantía. Se pueden diseñar cuestionarios abiertos, acotados en tiempo y en fecha, con disponibilidad de cualquier material . Los sistemas de supervisión intrusivos son variados y tienen una carga de trabajo de control y planificación para los docentes y para los estudiantes. Algunos sistemas de supervisión, de menos a más costoso, son los siguientes: (i) uso de supervisión tecnológica (smowl, navegador seguro), (ii) supervisión presencialmente por el profesor con herramientas de Webmeeting, (iii) supervisión por el profesor presencialmente en un aula en fecha y hora. 
 

8. Diseñar criterios de puntuación de las preguntas y la validación estadística de la calificación aleatoria

 El cuestionario puede contener un solo tipo de preguntas o múltiples tipos de preguntas. Ambas propuestas son válidas siempre que las preguntas sirvan para validar un nivel conocimiento (taxonomía de Bloom) acorde a las competencias del curso. Si las preguntas tienen distinto nivel de esfuerzo o conocimiento tienen que tener un puntuación proporcional al criterio de nivel elegido. Las preguntas utilizadas en cuestionarios de evaluación sumativa deberían tener una calificación aleatoria igual 0. Además, es importante decidir, si se quiere acarreo de la puntuación negativa. En Moodle las preguntas que acarrean puntuación negativa a la puntuación global son las preguntas de selección única y las cloze.

9. Diseñar un análisis del aprendizaje e informar a los estudiantes de los resultados

El docente tiene las responsabilidades de definir dinámicas de enseñanza y de definir un sistema de evaluación. En estas dinámicas el docente puede establecer su propias expectativas del aprendizaje deseado por el grupo de estudiantes. Nadie mejor que el docente para establecerse unas expectativas iniciales sobre las distribución de calificaciones de los intentos de un cuestionario, sobre el grado de dificultad de una pregunta, sobre su índice de discriminación o sobre el tiempo necesario para resolver un cuestionario. La distribución de calificaciones de un cuestionario puede servir como base de comparación de las distribución de calificaciones de otras actividades de evaluación. Informar de los resultados de los análisis de aprendizaje a los estudiantes puede ayudar a los estudiantes a ubicarse dentro del grupo y a identificar problemas en el proceso de enseñanza y aprendizaje global e individual.
 

10. Documentar una buena retroalimentación de las preguntas para mejorar los procesos de revisión

Los procesos de revisión de las respuestas de un estudiantes son escenarios muy efectivos de aprendizaje donde el estudiante con su respuesta ha proporcionado un resultado de su aprendizaje. Las revisiones pueden ser grupales o individuales, supervisadas por el profesor o autogestionadas por el estudiante. En todos los casos, el disponer de comentarios de retroalimentación en el diseño de preguntas son clave para poder madurar el aprendizaje. Si los comentarios de revisión son autocontenidos facilitan la comprensión. Antes de ajustar la configuración de las opciones de revisión debemos decidir el control de accesos a contenidos.

No hay comentarios:

Publicar un comentario