Newark Public Schools × Khanmigo — D'un projet pilote dans une école à 66 écoles, sur la base de preuves produites par le fournisseur

Le district de Newark (New Jersey) a commencé à tester le tuteur et assistant pédagogique IA Khanmigo, de Khan Academy, à la First Avenue School en 2023, gratuitement, de la 5e à la 8e année, en mathématiques, lecture, écriture et sciences. Newark était l'un des 53 districts pilotes. Chalkbeat a rapporté que les districts paient à partir de 35 dollars par élève et par an, que le conseil a approuvé en mars 2024 un accord de partage de données pour étudier l'efficacité, et que le district n'avait publié aucune donnée d'usage ou de résultats.
L'étude de cas de Khan Academy indique que le partenariat est passé de 14 écoles du North Ward à 66 écoles, soit environ 29 000 des 43 000 élèves du district. Elle décrit une étude longitudinale de trois ans portant sur environ 8 000 élèves de la 3e à la 8e année, dans laquelle les « Yearly Proficient Learners » (ayant acquis 60 compétences supplémentaires) ont gagné en moyenne 6 points au NJSLA de mathématiques contre 2 pour la moyenne de l'État.
Les preuves sont faibles pour des affirmations causales : la comparaison se fait avec la moyenne de l'État et non avec des élèves appariés, les élèves les plus actifs peuvent s'être autosélectionnés, aucune taille d'effet ni aucun intervalle de confiance n'est fourni, et les résultats combinent la pratique sur Khan Academy et Khanmigo, de sorte que l'effet propre du tuteur IA ne peut être isolé. Des problèmes initiaux ont aussi été signalés : Khanmigo a commis des erreurs sur des problèmes de base, a parfois trop aidé et était disponible pendant les évaluations ; Khan Academy a modifié les consignes et l'a désactivé pendant les tests. Des experts indépendants cités par Chalkbeat ont demandé davantage de recherche avant l'extension.
Enseignement pour la réplication : le cas montre la rapidité avec laquelle les districts généralisent le tutorat par IA et pourquoi une évaluation indépendante avec groupe apparié et des données publiées doivent être convenues avant l'extension.