Evaluaciones para el aprendizaje en línea

El diseño de la evaluación puede ser complicado ya que existen una serie de principios básicos a los que hay que adherirse cuando se desarrollan evaluaciones para los estudiantes con el fin de garantizar la calidad de la evaluación desde una perspectiva institucional y académica, y la experiencia individual y colectiva de los estudiantes para completar la evaluación. Esto puede ser un acto difícil de equilibrar, pero se debe prestar atención a cada principio durante el diseño y/o la aplicación de cada evaluación para poder lograr un resultado de alta calidad (Ver Figura 6.1).

Evaluación de un acto de equilibrio. Esta imagen muestra una escala de pesaje con preocupaciones de diseño en el lado izquierdo y preocupaciones de buenas prácticas en la derecha. Cada lado de la escala tiene cuatro cajas con una palabra en cada una. Estas palabras son los títulos de cada sección del texto a continuación

Figura 6.1. El balance en el diseño de la evaluación

Consideraciones en el diseño

Medir o facilitar el aprendizaje

Hay dos objetivos principales que evaluar, el primero es desde una perspectiva institucional para evaluar si, o en qué medida, un estudiante puede demostrar que ha aprendido algo específico, o ha alcanzado un nivel de comprensión y dominio que se espera para la concesión de un determinado tipo de calificación. Por ejemplo, un título universitario o de posgrado.

El segundo es facilitar el aprendizaje propio de los estudiantes, permitiéndoles realizar pruebas y/o obtener retroalimentación sobre su rendimiento en un formato que no dé crédito o "cuente" hacia su marca final para una asignación, módulo u otorgamiento de títulos.

En el Reino Unido, estos dos tipos de evaluación suelen denominarse Evaluación Sumativa y Formativa, o Evaluación Alternativa del Aprendizaje y Evaluación para el Aprendizaje. La Evaluación Sumativa es un requisito para que las instituciones educativas y los organismos reguladores certifiquen que un estudiante ha alcanzado los requisitos esperados de un grado educativo. Por otro lado, la Evaluación Formativa es una de las herramientas que utilizan los catedráticos, profesores, tutores o instructores para facilitar el aprendizaje de los estudiantes, permitiéndoles alcanzar estos requisitos.

Factible

Tanto las evaluaciones formativas como las sumativas, ya sean escritas o prácticas, deben ser realizables tanto por la institución como por los estudiantes. Si la institución no cuenta con la infraestructura, los instrumentos, los conocimientos especializados del personal o los recursos necesarios para realizar un determinado tipo de evaluación, no tiene mucho sentido considerar la posibilidad de establecer ese tipo de evaluación, a menos que la institución esté dispuesta a invertir en herramientas, capacitación y personal.

Desde la perspectiva de los estudiantes, ellos deben saber qué tipo de equipo y herramientas pueden necesitar antes de iniciar un curso para que puedan juzgar si son capaces financiera o físicamente de completar el curso. Puede ser razonable establecer una especificación mínima para equipos como ordenadores portátiles, computadores, dispositivos móviles y acceso a Internet como condición para entrar a en un curso. Sin embargo, no sería razonable si se necesitan programas o equipos adicionales además de estos requerimientos para llevar a cabo la evaluación.

Por lo tanto, el personal sólo debe establecer evaluaciones que se puedan lograr utilizando la especificación mínima en equipos solicitada para los estudiantes o que la institución ofrezca acceso a esos equipos para los estudiantes. El hecho de que los estudiantes puedan proveerse a sí mismos de un equipo específico es una expectativa razonable que dependerá del contexto geográfico y socioeconómico local.

Aceptable y comparable

Cuando hablamos de aceptabilidad de la evaluación nos referimos a si nuestros métodos de evaluación y la calidad de nuestras evaluaciones se consideran comparables con otros tipos similares de instituciones que aplican tipos similares de cursos. Por ejemplo, si un título universitario en Química es evaluado por la Universidad A en Perú a través de un examen del 100%, con un gran examen al final de cada año de estudio y la Universidad B ofrece plazas de experiencia laboral para estudiantes de Química y utiliza comentarios de colocación de colegas de la industria como el 100% de la evaluación del curso, con 3 colocaciones a lo largo de la duración del curso podríamos decir con precisión que:

¿los estudiantes de ambas universidades tendrían un nivel similar de conocimiento ? y

¿se abarcó el mismo tipo de temas en la medida en que ambos se equiparan al nivel, cantidad y profundidad de conocimientos y habilidades requeridas para una clasificación de nivel de grado?

Esencialmente se trata de tener cierta normalización en el sector de la educación superior, en Europa El proceso de Bolonia (Enlaces a un sitio externo.)se desarrolló para crear un espacio europeo de educación superior esto incluye a 48 países. Este proceso ofrece un marco de normalización en todos estos países, de modo que los estudiantes que completen un título en un país del Espacio Europeo de Educación Superior puedan estar seguros de que si se mudan a otro país dentro de esta área para trabajar o estudiar más a fondo, su calificación actual se considerará comparable a la de sus calificaciones en su nuevo país de residencia.

En el Reino Unido, las áreas disciplinarias (por ejemplo, Geografía o Matemáticas) también tienen que abarcar contenidos particulares, decididos por un grupo de expertos en este campo, como parte de determinados tipos de calificación, por ejemplo, un título universitario en filosofía. Esto está regulado por la Agencia de Garantía de la Calidad (QAA) (Enlaces a un sitio externo.). En los cursos profesionales, como el de Medicina y Derecho, la evaluación aceptable no sólo debe ser comparable en todo el sector y la disciplina de la educación superior, sino también a los organismos reguladores profesionales y, a su vez, al público. Un ejemplo de esto es que si un estudiante de medicina pudo pasar su grado sin realmente examinar físicamente a un paciente, el Consejo Médico General (Enlaces a un sitio externo.) (el organismo regulador de la medicina en el Reino Unido) no aceptaría ese grado por no cumplir con sus estándares, ya que los miembros del público estarían en riesgo.

Válido y fiable

Validez y confiabilidad son términos utilizados para medir la calidad de la evaluación.

La validez en este caso se refiere a la medida en que una evaluación prueba adecuadamente el conocimiento, la habilidad o el atributo que desea que pruebe. Esta es la parte de la alineación constructiva (ver módulo 2) donde los académicos deberían diseñar evaluaciones que demuestren hasta qué punto los estudiantes han alcanzado los resultados de aprendizaje de un curso o parte de un curso.

Un ejemplo de esto podría ser que un resultado de aprendizaje es que un estudiante pueda hacer una taza de café al final del módulo del curso. Se podrían utilizar varias evaluaciones para determinar la capacidad de los estudiantes para hacer una taza de café. Por ejemplo, podríamos pedir al estudiante que escriba una lista de instrucciones paso a paso sobre cómo hacer una taza de café, o podríamos pedirles que escriban un breve ensayo reflexivo sobre su experiencia de hacer una taza de café, pero la manera más apropiada, y por lo tanto VÁLIDA de probar si el estudiante puede hacer una taza de café es pedirles que hagan una taza de café que luego podamos beber. Así pues, la validez de la evaluación se refiere a la elección de la forma más apropiada de evaluación para demostrar el logro del resultado del aprendizaje.

La fiabilidad en la evaluación se refiere a la forma en que la propia evaluación se lleva a cabo. Al evaluar a los estudiantes queremos asegurarnos de que una tarea de evaluación permita a los estudiantes más capaces demostrar la amplitud de sus habilidades y conocimientos, e identificar a aquellos estudiantes cuyos conocimientos y habilidades pueden ser inconsistentes o inexistentes.

Además, queremos asegurarnos de que cuando el trabajo estudiantil esté marcado, los marcadores estén buscando los mismos criterios a la hora de decidir si una tarea es buena o mala y qué es lo que hace una tarea buena. Los exámenes tradicionales que contienen preguntas de elección múltiple o preguntas de respuesta corta se consideran fiables, ya que es posible probar una amplia gama de conocimientos en un período de tiempo comparativamente corto, sin embargo, también es posible garantizar la fiabilidad de la evaluación considerando el enfoque de la evaluación a nivel de programa/ curso y asegurando que cada conjunto de evaluaciones se relaciona con un conjunto específico de resultados de aprendizaje considerados esenciales para que los estudiantes puedan completar con éxito su programa de estudio.

En cuanto a la fiabilidad en la marcación, el uso de criterios de evaluación o rúbricas junto con la capacitación en la estandarización de los marcadores puede mejorar la coherencia de la marcación en varios cohoertes de estudiantes, lo que lo convierte en un proceso más justo (Bloxham & Boyd, 2007, Van der Vleuten, 1996).

Consideraciones sobre buenas prácticas

Transparente

Cuando nos referimos a la transparencia en la evaluación, nos referimos a cuán abierto y claro es el personal con los estudiantes respecto al proceso de evaluación y cómo se marca. Se debe informar a los estudiantes

cómo se marca la tarea de evaluación
cuánto vale la evaluación dentro de un módulo (10, 20, 50%) y cuánto contribuye un módulo a su clasificación general de categorías
si pueden solicitar cualquier ajuste de tareas que tengan necesidades de salud específicas o discapacidades de los estudiantes
si existe la oportunidad de retomar una evaluación y, en caso afirmativo, cuándo y qué repercusiones tendrá en su marca general
si es posible presentar una solicitud para que se considere su desempeño a la luz de circunstancias atenuantes, por ejemplo, si un estudiante tiene un pariente cercano fallecido en el período previo a una evaluación importante que afecte a su capacidad de prepararse para la evaluación.

En las universidades del Reino Unido se desarrollan políticas en torno a estos temas para que los académicos y/o administradores puedan hacer ajustes razonables o circunstancias atenuantes de manera justa en todo el cuerpo estudiantil(Barker y otros, 2018, Orr & Blythman, 2005).

Inclusivo y equitativo

Es importante que todos los estudiantes puedan participar en una evaluación sin estar en desventaja. Esto incluye a los estudiantes con problemas de salud física o mental, discapacidades y discapacidades de aprendizaje. En la medida de lo posible, las evaluaciones deben concebirse de manera que sean inclusivas en primera instancia. Sin embargo, también es importante que el personal que elabora las evaluaciones considere qué ajustes a las evaluaciones se considerarían razonables en el caso de que un estudiante no pueda completar el conjunto de tareas. Es habitual tener una política de ajustes razonables para asegurar que los ajustes en la evaluación se hagan de manera justa y coherente para los estudiantes afectados.

Mejorar las habilidades de los estudiantes

Si bien el conocimiento y la habilidad en un campo disciplinario o área de estudio en particular es un resultado esperado del estudio en la Universidad, también existe la oportunidad de ofrecer a los estudiantes habilidades adicionales que les permitan sacar el máximo provecho de su experiencia estudiantil.

Establecer tareas de evaluación que requieran que los estudiantes demuestren habilidades transferibles como desarrollo de: posters acádemicos y presentaciones de conferencias académicas, blogs o videos, propuestas de becas simuladas, trabajos en equipos para entregar proyectos o trabajo en la comunidad. Todo esto añade valor a la experiencia de los estudiantes de la Universidad y les proporciona las habilidades adicionales que los empleadores están buscando.

Auténtico

Cuando identificamos una evaluación como "auténtica", queremos decir que la evaluación no es sólo probar si los estudiantes han adquirido conocimiento y habilidades, sino que está probando esto de una manera que refleja una tarea emprendida en su área de estudio en el mundo profesional. En otras palabras, es una evaluación del "mundo real" más que un examen o ensayo tradicional.

Las evaluaciones auténticas integran los conocimientos, las aptitudes y la comprensión, y exigen que los estudiantes trabajen de la manera que lo harían en el empleo profesional . Ejemplos de una evaluación auténtica son los estudiantes que estudian para convertirse en profesores evaluando su capacidad para enseñar una pequeña clase de sus compañeros, o los estudiantes de arquitectura que elaboran un proyecto para un edificio, los químicos que realizan un experimento o los estudiantes de historia que desarrollan información representan una exposición en un museo (Wiggins, 1990).