ASSISTments — Deux essais randomisés d'un outil en ligne de devoirs de mathématiques avec retour instantané pour la classe de 7e année

ASSISTments est un outil en ligne gratuit, à but non lucratif, développé au Worcester Polytechnic Institute. Les enseignants attribuent des devoirs de mathématiques ; les élèves reçoivent un retour immédiat sur l'exactitude de leurs réponses et des indices ou étayages facultatifs, et les enseignants consultent des rapports par item sur les notions qui posent problème à la classe afin d'adapter la leçon suivante. Il s'agit d'un retour adaptatif fondé sur des règles, et non d'une IA générative ; il figure ici comme référence de preuve rigoureuse de ce que le retour soutenu par la technologie peut apporter.
Preuves : un essai randomisé en mathématiques de 7e année dans le Maine (environ 43 à 46 écoles selon le rapport) a mesuré un gain d'environ 0,18 écart-type (g de Hedges = 0,22 dans une analyse), soit environ un demi-année d'apprentissage supplémentaire. Une réplication en Caroline du Nord (63 écoles ; perturbée par la fermeture des écoles liée à la COVID-19) a mesuré les résultats un an après la mise en œuvre à l'examen d'État de 8e année et trouvé un effet de +0,10. En moyenne sur les deux études, l'effet est d'environ +0,13. ASSISTments répond aux normes du What Works Clearinghouse sans réserve et porte une évaluation de niveau 1 (solide) selon l'ESSA.
Limites : les effets sont modestes et l'essai de Caroline du Nord a perdu les données de fin d'année prévues à cause de la pandémie, la réplication mesure donc un résultat différé. Les résultats concernent les mathématiques de 7e année aux États-Unis et dépendent de l'utilisation effective de l'outil par les enseignants. L'outil n'est pas une IA générative ; sa valeur ici est celle d'une référence de preuve de haute qualité.