Pigai — La Plateforme Chinoise de Retour d'Écriture par IA à Grande Échelle : Portée Réelle, Preuves Mitigées

Pigai est une plateforme chinoise d'évaluation automatisée de l'écriture (AWE) destinée aux étudiants d'anglais langue étrangère, en activité depuis 2011 et gérée par Beijing Word Network Technology Co.

Fournir un retour automatisé et rapide sur des rédactions en anglais portant sur le vocabulaire, la structure des phrases, l'organisation et le contenu, afin de soutenir à grande échelle l'enseignement de l'écriture en anglais langue étrangère.

Les rédactions sont notées selon une grille en quatre parties (vocabulaire 43 %, structure des phrases 28 %, organisation 22 %, contenu 7 %) combinant des algorithmes de détection d'erreurs et des modèles de langage, fournissant un retour en quelques secondes ; la plateforme est utilisée dans des milliers d'écoles et d'universités.

Pigai touche entre 6 000 et plus de 13 000 écoles et universités estimées et 13 à 20 millions d'étudiants, avec plus de 200 millions de rédactions corrigées au total ; des recherches évaluées par des pairs montrent des améliorations fiables de la précision grammaticale et une fréquence de révision accrue, mais le retour reste largement limité aux mécanismes au niveau de la phrase et ne détecte pas les erreurs liées au sens, et l'ajout de Pigai au retour par les pairs n'a pas amélioré la qualité de révision au-delà du retour par les pairs seul.

Pigai a atteint une portée considérable et démontré des bénéfices au niveau grammatical, mais des recherches indépendantes ne montrent aucune valeur ajoutée par rapport au retour par les pairs pour la qualité de la révision, ni de preuve d'amélioration de l'écriture au niveau du sens.