evidoria

← Back to browse

Good practice

Studiosity+ en la University of Bedfordshire — Una Evaluación Publicada de Retroalimentación de Escritura Aumentada por IA

United Kingdom · Luton · See the United Kingdom profile

La University of Bedfordshire realizó una evaluación publicada comparando su servicio de escritura Studiosity, con tutores humanos, con una nueva versión aumentada por IA. El ensayo de IA de 2024 redujo el tiempo medio de respuesta de 5 horas a 2 minutos y registró mejoras de nota del 11-21,5% en una comparación de una sola institución.

2,907
Estudiantes que utilizaron el servicio clásico (2022/23)
8,182
Interacciones, servicio clásico (2022/23)
96%
Satisfacción con la retroalimentación escrita, servicio clásico (2022/23)
~5 hours
Tiempo medio de respuesta, servicio clásico (2022/23)
2,913
Estudiantes en la prueba de IA (19 Feb-3 Sep 2024)
10,152
Interacciones, prueba de IA (19 Feb-3 Sep 2024)
~2 minutes
Tiempo medio de respuesta, prueba de IA (2024)
11.1%
Mejora de notas, estudiantes de 1.º/3.º año (2024)
21.5%
Mejora de notas, estudiantes de 2.º año (2024)
Studiosity+ en la University of Bedfordshire — Una Evaluación Publicada de Retroalimentación de Escritura Aumentada por IA

Details

Maturity
Established
Promoter
University of Bedfordshire / Studiosity
Period
2020/21 pilot; 2021/22 institution-wide; AI trial 19 Feb–3 Sep 2024; peer-reviewed evaluation published 2024
Keywords
higher education, writing feedback, student support services, retention

Context

La Universidad de Bedfordshire probó Studiosity, un servicio de retroalimentación de escritura corregido por personas y disponible las 24 horas, en 2020/21, y lo adoptó a nivel institucional a partir de 2021/22; entre el 19 de febrero y el 3 de septiembre de 2024, puso a prueba Studiosity+, una versión potenciada por IA, en paralelo con el servicio clásico de corrección humana.

Results

En 2022/23, 2907 estudiantes registraron 8182 interacciones con el servicio clásico, con un 96% de satisfacción con la retroalimentación escrita, un 74% de satisfacción con la ayuda en directo, un tiempo de respuesta medio de unas 5 horas y un 77% de uso fuera del horario laboral. En la prueba de IA de 2024, 2913 estudiantes registraron 10 152 interacciones, el tiempo de respuesta medio se redujo a unos 2 minutos, la satisfacción se mantuvo alta (94%/70%), la participación aumentó alrededor de un 50% y los momentos de búsqueda de ayuda aumentaron alrededor de un 124% respecto al servicio anterior; la evaluación publicada registró mejoras de notas del 11,1% para estudiantes de primer y tercer año y del 21,5% para estudiantes de segundo año, en comparación con grupos de referencia.

Conclusions

La fuente advierte de que las cifras de mejora de notas proceden de una comparación interna antes/después realizada por una sola institución, y no de un ensayo aleatorizado, y que Studiosity copublica las mismas estadísticas en su propio sitio, lo que limita la independencia total, aunque el estudio fue revisado por pares; señala que las cifras de uso y satisfacción son la parte más sólida de la base de evidencia.

Implementation

Implementation detail (cost, timeline, staffing, conditions for success) is not yet available for this practice.

Data sources

Where this practice's information was retrieved from, and when.

Attachments

Similar practices you may find useful