Cognitive Tutor Algebra I — L'essai randomisé de la RAND révèle un gain tardif d'environ 0,2 écart-type dans les lycées américains

Cognitive Tutor Algebra I associe un système de tutorat intelligent fondé sur l'IA à un programme hybride en classe. L'essai d'efficacité de la RAND (Pane et al., 2014, Educational Evaluation and Policy Analysis) a affecté au hasard des établissements à l'utilisation du tutoriel ou à la poursuite de leur programme d'algèbre habituel.
La première année de mise en œuvre, les écarts au post-test n'étaient pas statistiquement significatifs. La deuxième année, les lycées utilisant le tuteur ont devancé les établissements témoins d'environ 0,2 écart-type, ce que les auteurs décrivent comme le passage d'un élève type du 50e au 58e centile. L'estimation de deuxième année au collège était de taille similaire mais non significative.
Réserves : les établissements traités avaient des scores au pré-test légèrement inférieurs, la moyenne pondérée de trois études de lycée admissibles sur Evidence for ESSA est bien plus faible (+0,03) et des analyses ultérieures suggèrent que le gain pourrait ne pas provenir de l'apprentissage par maîtrise. Ce cas montre que les logiciels de tutorat peuvent demander du temps et une adaptation des enseignants avant de porter leurs fruits.