Studiosity+ na University of Bedfordshire — Uma Avaliação Publicada de Feedback de Escrita Aumentado por IA

A Universidade de Bedfordshire testou o Studiosity, um serviço de feedback escrito com correção humana disponível 24 horas por dia, em 2020/21, e adotou-o a nível institucional a partir de 2021/22; entre 19 de fevereiro e 3 de setembro de 2024, testou o Studiosity+, uma versão aumentada com IA, em paralelo com o serviço clássico de correção humana.

Em 2022/23, 2907 estudantes registaram 8182 interações com o serviço clássico, com 96% de satisfação com o feedback escrito, 74% de satisfação com a ajuda em direto, um tempo médio de resposta de cerca de 5 horas e 77% da utilização fora do horário laboral. No ensaio de IA de 2024, 2913 estudantes registaram 10 152 interações, o tempo médio de resposta caiu para cerca de 2 minutos, a satisfação manteve-se elevada (94%/70%), o envolvimento aumentou cerca de 50% e os momentos de procura de ajuda aumentaram cerca de 124% face ao serviço anterior; a avaliação publicada registou melhorias de notas de 11,1% para estudantes do 1.º e 3.º anos e de 21,5% para estudantes do 2.º ano, em comparação com grupos de referência.

A fonte adverte que os dados de melhoria das notas provêm de uma comparação interna antes/depois numa única instituição, e não de um ensaio aleatorizado, e que a Studiosity copublica as mesmas estatísticas no seu próprio sítio, o que limita a independência total, ainda que o estudo tenha sido revisto por pares; assinala que os dados de utilização e satisfação constituem a parte mais robusta da base de evidência.