Studiosity+ à l'Université de Bedfordshire — Une évaluation publiée du retour d'écriture augmenté par IA

L'université de Bedfordshire a testé Studiosity, un service de retour d'écriture corrigé par des humains et disponible 24h/24, en 2020/21, et l'a adopté à l'échelle de l'établissement à partir de 2021/22 ; du 19 février au 3 septembre 2024, elle a expérimenté Studiosity+, une version augmentée par l'IA, en parallèle du service classique corrigé par des humains.

En 2022/23, 2 907 étudiants ont enregistré 8 182 interactions avec le service classique, avec 96 % de satisfaction pour les retours écrits, 74 % de satisfaction pour l'aide en direct, un délai de réponse moyen d'environ 5 heures et 77 % d'utilisation en dehors des heures ouvrées. Lors de l'essai IA de 2024, 2 913 étudiants ont enregistré 10 152 interactions, le délai de réponse moyen est tombé à environ 2 minutes, la satisfaction est restée élevée (94 %/70 %), l'engagement a augmenté d'environ 50 % et les moments de recherche d'aide ont augmenté d'environ 124 % par rapport au service précédent ; l'évaluation publiée a enregistré des améliorations de notes de 11,1 % pour les étudiants de première et troisième année et de 21,5 % pour les étudiants de deuxième année, par rapport aux groupes de comparaison.

La source avertit que les chiffres d'amélioration des notes proviennent d'une comparaison interne avant/après réalisée par un seul établissement, et non d'un essai randomisé, et que Studiosity copublie les mêmes statistiques sur son propre site, ce qui limite l'indépendance totale, même si l'étude a fait l'objet d'une évaluation par les pairs ; elle note que les chiffres d'utilisation et de satisfaction constituent la partie la plus solide de la base de preuves.