evidoria

← Back to browse

Good practice

OU Analyse — el sistema de alerta temprana de analítica predictiva de aprendizaje de la Open University

United Kingdom · Milton Keynes · See the United Kingdom profile

La Open University del Reino Unido opera OU Analyse, un sistema de aprendizaje automático que señala semanalmente a estudiantes a distancia en riesgo, en producción desde 2014 —pasando de 2 cursos piloto a decenas— con más de una década de publicaciones revisadas por pares sobre metodología, equidad y uso por tutores, aunque sin prueba causal mediante ensayo aleatorizado de mejora en la retención.

~1,500 and ~3,000 students
Estudiantes en los cursos piloto iniciales de 2014 (spring 2014)
18 courses
Cursos que utilizan el sistema (autumn 2014-spring 2015)
22 courses, 32,593 students, 10.6M+ VLE interaction records
Cobertura del conjunto de datos OULAD (published 2017)
OU Analyse — el sistema de alerta temprana de analítica predictiva de aprendizaje de la Open University

Details

Maturity
Established
Promoter
The Open University (Knowledge Media Institute)
Period
2014–ongoing
Keywords
learning analytics, predictive modelling, student retention, early-warning system, distance education

Context

OU Analyse es un sistema de alerta temprana basado en aprendizaje automático, desarrollado por el Knowledge Media Institute de la Open University (Reino Unido), que genera predicciones semanales sobre qué estudiantes de educación a distancia corren el riesgo de suspender una próxima evaluación, a partir de datos demográficos e interacciones de clickstream con el Virtual Learning Environment de la universidad. Las predicciones se comparten con los tutores de los cursos y con los Student Support Teams para priorizar el contacto.

Objectives

El sistema tiene como objetivo permitir un apoyo oportuno y específico a los estudiantes identificados como en riesgo, y la universidad describe la intervención oportuna como el objetivo que posibilitan las predicciones, más que como un resultado causal cuantificado de forma independiente.

Activities

El sistema ha funcionado en producción continua desde la primavera de 2014, cuando se puso a prueba en dos cursos introductorios (aproximadamente 1500 y 3000 estudiantes, respectivamente); se amplió a 18 cursos en el otoño de 2014/primavera de 2015 y ha continuado operando a nivel institucional durante más de una década.

Results

La metodología subyacente y el conjunto de datos (OULAD) se publicaron en 2017 en Scientific Data, la revista revisada por pares de Nature, que abarca 22 cursos, 32 593 estudiantes y más de 10,6 millones de registros de interacción con el VLE, uno de los mayores conjuntos de datos de learning analytics publicados abiertamente, ampliamente reutilizado por otros investigadores. Investigaciones posteriores revisadas por pares han examinado las compensaciones en la precisión de las predicciones (la precisión aumenta pero la exhaustividad (recall) disminuye a medida que se acumulan más datos dentro de cada curso), cómo los tutores utilizan y confían en los paneles (dashboards), y la equidad algorítmica entre los distintos grupos demográficos de estudiantes.

Conclusions

El material de origen es explícito al señalar que lo que se ha demostrado es la exactitud de las predicciones y su uso operativo sostenido a lo largo de muchos cursos y años, y no una estimación causal aleatorizada o cuasiexperimental de en qué medida las propias predicciones aumentan las tasas de aprobación o retención en comparación con un grupo de control.

Implementation

Implementation detail (cost, timeline, staffing, conditions for success) is not yet available for this practice.

Data sources

Where this practice's information was retrieved from, and when.

Attachments

Similar practices you may find useful