02 Analíticas del aprendizaje (learning analytics)

Dispositivos

Descripción

En el contexto educativo actual, las experiencias de enseñanza y aprendizaje se llevan a cabo empleando recursos TIC de una manera constante. No importa si la enseñanza se desarrolla presencialmente o a distancia. Los recursos tecnológicos suelen estar de una forma o de otra.

Centrándonos en la utilización de los recursos en línea, uno de los mayores retos que tienen los docentes actualmente es el de evaluar el aprendizaje de sus estudiantes cuando desarrollan actividades de aprendizaje en el entorno virtual. Por lo tanto, los docentes suelen seleccionar herramientas digitales que les permitan tener evidencias del trabajo llevado a cabo, y así poder hacer una evaluación justa y equitativa, sobre todo cuando estas actividades requieren un trabajo colaborativo.

Cuando los estudiantes interaccionan en el entorno virtual mediante las aplicaciones en línea (redes sociales, foros, entornos virtuales de enseñanza y aprendizaje, etc.), toda la actividad permanece registrada en los servidores, en los denominados «logs del sistema». Algunos entornos nos permiten, posteriormente, obtener estadísticas más o menos elaboradas sobre el rendimiento del usuario y el grado de interacción con el resto de los miembros (número de conexiones, número de mensajes enviados, etc.), pero existe otra información que se pierde y que no puede ser utilizada por falta de registro.

Las analíticas de aprendizaje son técnicas de análisis de datos que provienen del área de conocimiento informática llamada minería de datos, desde donde se obtiene conocimiento partiendo de los datos grabados por los sistemas de computación, ya sea de manera automática o manual por parte del usuario.

Por lo tanto, las analíticas de aprendizaje son un conjunto de técnicas (informáticas y metodológicas) que nos permiten seleccionar, capturar, resumir y presentar toda la actividad que el usuario genera en un entorno en línea en el contexto educativo. Gracias a los indicadores y métricas analizados, se puede tener información sobre la actividad de un estudiante durante una determinada tarea y ayudarlo, de manera preventiva, a lograr los objetivos de aprendizaje si uno de los indicadores muestra una desviación en relación con el resto.

Los entornos virtuales de enseñanza y aprendizaje, como Moodle, incorporan complementos de analíticas de aprendizaje para presentar información muy útil sobre la actividad que los estudiantes desarrollan en la plataforma.

Aun así, no todos los aprendizajes se producen en un entorno cerrado y formal. Muchos de ellos se desarrollan en multitud de contextos y de una manera informal. Esta segunda situación dificulta que este aprendizaje quede registrado y pueda ser validado por el docente. Por ejemplo, ¿cómo puede saber un profesor si un grupo de alumnos ha negociado unos acuerdos de trabajo mediante una aplicación de mensajería móvil? ¿Y la lectura de un libro o la visita a una página web temática? Como se puede observar, hay cierta parte del aprendizaje que queda fuera del control de la evaluación solo por el hecho de producirse fuera del entorno cerrado donde la institución educativa lleva a cabo la enseñanza formal (Moodle, EdModo, Chamilo, etc.).

Para dar respuesta a esta necesidad, ha surgido un nuevo estándar llamado Experience API (xAPI), que permite registrar toda la actividad que se lleva a cabo en multitud de entornos, gracias al hecho de que se emplea el mismo lenguaje informático. El número de aplicaciones que utilizan este estándar es cada vez mayor. Moodle, por ejemplo, tiene una versión disponible: https://moodle.org/plugins/view/mod_tincanlaunch

Logo del estándar xAPI

Vídeo sobre la utilidad de xAPI: https://www.youtube.com/watch?v=U5rVBLbCDVM
Fuente: YouTube.

Ejemplos

La UOC es una universidad que ofrece un conjunto de enseñanzas 100 % en línea. Muchas de las asignaturas que imparte la universidad en sus grados requieren competencias vinculadas al trabajo colaborativo por parte del estudiante. Aun así, los docentes encargados del seguimiento y evaluación de los estudiantes tienen que hacer un seguimiento de las actividades grupales para conocer de cerca el nivel de rendimiento individual de cada estudiante. Solo así se consigue una evaluación personalizada. A pesar de todo, el seguimiento de las actividades grupales es complejo cuando el número de estudiantes por aula es elevado, sobre todo para aquellas actividades relacionadas con la interacción comunicativa asíncrona (foros, debates, etc.).

En este caso, el profesorado de la Universidad (Cerro y otros, 2016) emplea herramientas de analíticas del aprendizaje para medir el grado de interacción comunicativa de sus estudiantes e, incluso, para comprender la estructura del diálogo y de los mensajes intercambiados, al margen del análisis del contenido que se hace posteriormente.

Para el docente, es importante conocer el contenido de los mensajes publicados por cada estudiante, y así saber si ha participado regularmente, si ha seguido las pautas de la actividad, etc. Sin embargo, antes de entrar a valorar el contenido, es necesario conocer la estructura del espacio de comunicación y su desarrollo, por ejemplo:

  • ¿Cuál es el índice de popularidad de cada estudiante? (número de respuestas recibidas a sus mensajes, dividido entre el número de respuestas totales del espacio de comunicación).
  • ¿Cuántos hilos de conversación diferentes se han generado en el espacio de comunicación?
  • ¿Qué grado de dispersión comunicativa hay en el espacio de comunicación? (pocos hilos con muchas respuestas, o muchos hilos con pocas respuestas).

Este tipo de preguntas ayudan a comprender mejor cómo se desarrolló la actividad antes de entrar a valorar uno a uno el contenido de los mensajes y, para su comprensión, los profesores pueden emplear una técnica llamada análisis de red social, para generar una representación visual mediante una grafía de nodos en la que cada nodo corresponde a un mensaje de un estudiante, y las flechas que los unen representan los vínculos de respuesta.

Representación visual de los mensajes intercambiados en un debate en línea

Gracias a estas representaciones visuales, los profesores de la universidad pueden conocer el desarrollo del debate antes de finalizar, lo cual da la oportunidad de dinamizar los espacios de comunicación para conseguir la implicación de todos los miembros del grupo y fomentar el diálogo y la reflexión en torno a diferentes temas de interés.

Recursos

Definición de analíticas del aprendizaje: https://es.wikipedia.org/wiki/learning_analytics

Vídeo introductorio sobre learning analytics (por Linda Castañeda): https://www.youtube.com/watch?v=IheR_1txGo0

Cerro, J. P.; Guitert, M.; Romeu, T. ( 2016). «Uso de las analíticas del aprendizaje en entornos colaborativos en línea». Revista del Congrés Internacional de Docència Universitaria Internacional [documento en línea] https://www.cidui.org/revistacidui/index.php/cidui/article/view/861/819

D’Aquin, M.; Jay, N.(2013, abril). Interpreting data mining results with linked data for learning analytics: motivation, case study and directions. In Proceedings of the Third International Conference on Learning Analytics and Knowledge (págs. 155-164). ACM [documento en línea]. http://oro.open.ac.uk/36660/1/lak2013.pdf