Evaluación 'two-lane' de la Universidad de Sídney para la era de la IA
Australia
En lugar de una carrera armamentista de detección de IA imposible de ganar, Sídney rediseñó la evaluación en dos carriles …
Reino Unido · Luton · Ver el perfil de Reino Unido
La University of Bedfordshire realizó una evaluación publicada comparando su servicio de escritura Studiosity, con tutores humanos, con una nueva versión aumentada por IA. El ensayo de IA de 2024 redujo el tiempo medio de respuesta de 5 horas a 2 minutos y registró mejoras de nota del 11-21,5% en una comparación de una sola institución.
La Universidad de Bedfordshire probó Studiosity, un servicio de retroalimentación de escritura corregido por personas y disponible las 24 horas, en 2020/21, y lo adoptó a nivel institucional a partir de 2021/22; entre el 19 de febrero y el 3 de septiembre de 2024, puso a prueba Studiosity+, una versión potenciada por IA, en paralelo con el servicio clásico de corrección humana.
En 2022/23, 2907 estudiantes registraron 8182 interacciones con el servicio clásico, con un 96% de satisfacción con la retroalimentación escrita, un 74% de satisfacción con la ayuda en directo, un tiempo de respuesta medio de unas 5 horas y un 77% de uso fuera del horario laboral. En la prueba de IA de 2024, 2913 estudiantes registraron 10 152 interacciones, el tiempo de respuesta medio se redujo a unos 2 minutos, la satisfacción se mantuvo alta (94%/70%), la participación aumentó alrededor de un 50% y los momentos de búsqueda de ayuda aumentaron alrededor de un 124% respecto al servicio anterior; la evaluación publicada registró mejoras de notas del 11,1% para estudiantes de primer y tercer año y del 21,5% para estudiantes de segundo año, en comparación con grupos de referencia.
La fuente advierte de que las cifras de mejora de notas proceden de una comparación interna antes/después realizada por una sola institución, y no de un ensayo aleatorizado, y que Studiosity copublica las mismas estadísticas en su propio sitio, lo que limita la independencia total, aunque el estudio fue revisado por pares; señala que las cifras de uso y satisfacción son la parte más sólida de la base de evidencia.
Los detalles de implementación (coste, plazo, personal, condiciones para el éxito) aún no están disponibles para esta práctica.
De dónde se obtuvo la información de esta práctica, y cuándo.
Australia
En lugar de una carrera armamentista de detección de IA imposible de ganar, Sídney rediseñó la evaluación en dos carriles …
Hong Kong
En junio de 2023, el Senado de la HKU nombró a la IA generativa "quinta alfabetizacion" y dio a todos …
Estados Unidos
Plataforma de IA que agrupa respuestas similares para corrección en lote; 3,2 M de estudiantes en 2 600+ universidades. Estudio …
México
Ecosistema IA del Tec de Monterrey (2023, 33 campus): CogBooks adaptativo (Springer 2024, +15% calificaciones >90), Módulos de Nivelación (10.350 …
Abrir el copiloto completo Basado en prácticas citadas: comprueba siempre las fuentes.