ChatTutor — Test en deux expériences, par l'Université de Copenhague, d'un tuteur IA fondé sur la théorie de l'apprentissage face à ChatGPT

Des chercheurs de l'Université de Copenhague ont testé ChatTutor, un chatbot qui invite les élèves à expliquer les concepts et donne un retour sur leurs lacunes au lieu de fournir des réponses, dans deux expériences (175 étudiants et 234 lycéens) face à ChatGPT et à un groupe témoin.
L'étude 1, préenregistrée, s'est déroulée dans un vrai cours de psychologie cognitive ; l'étude 2 l'a répliquée au lycée. ChatTutor a dépassé ChatGPT en connaissances conceptuelles immédiates dans les deux études, ainsi qu'en confiance et en plaisir ; au suivi à 4 semaines, il a dépassé le témoin d'enseignement habituel dans l'étude 1 (M=7,26 contre 5,93, p=0,001) mais pas ChatGPT.
Réserves : l'intervention était une activité d'environ 15 minutes, l'attrition au suivi était importante (124 sur 175 dans l'étude 1), les différences d'auto-efficacité n'étaient pas significatives, la différence immédiate avec le témoin n'était pas significative dans l'étude 1 et un auteur a un intérêt commercial dans ChatTutor. L'étude n'a reçu aucun financement externe.