Pigai — Plataforma Chinesa de Feedback de Redação por IA em Grande Escala: Alcance Real, Evidências Mistas

O Pigai (comercializado internacionalmente como Jukuu English Essay Assessor) é uma plataforma de avaliação automatizada de escrita (AWE) lançada em 2011 por uma empresa de tecnologia educacional sediada em Pequim (identificada em fontes acadêmicas como Beijing Word Network Technology Co., Ltd.). Ela pontua redações em inglês segundo uma rubrica de quatro partes — vocabulário (43%), estrutura das frases (28%), organização (22%) e conteúdo (7%) — combinando algoritmos de detecção de erros com modelos estatísticos de linguagem, devolvendo feedback em segundos para que os estudantes revisem antes mesmo de o professor ver o rascunho.

Os números de adoção relatados de forma independente em fontes acadêmicas variam, mas convergem para uma escala muito grande: o próprio site do Pigai afirma ser usado por mais de 1.000 escolas, enquanto a literatura revisada por pares cita números que vão de aproximadamente 6.000 a mais de 13.000 escolas e universidades e mais de 13-20 milhões de estudantes, com um total acumulado superior a 200 milhões de redações corrigidas.

Avaliações independentes revisadas por pares mostram um quadro misto, e não um sucesso uniforme. Estudos com aprendizes chineses de inglês como língua estrangeira constataram que o Pigai melhora de forma confiável a precisão gramatical e aumenta a frequência de revisão, e um estudo quase-experimental relatou uma melhora estatisticamente significativa na nota de gramática no grupo Pigai em comparação a um grupo controle apenas com feedback do professor. No entanto, uma revisão metodológica de 2022 (publicada na Frontiers in Psychology) constatou que o feedback do Pigai se limita majoritariamente a aspectos mecânicos no nível da frase e não identifica erros dependentes de significado — por exemplo, não sinaliza de forma confiável um verbo modal gramaticalmente correto, mas semanticamente errado. Um estudo de sala de aula separado constatou que acrescentar o feedback do Pigai ao feedback entre colegas não produziu revisões de qualidade superior às do feedback entre colegas isoladamente, e apenas a gramática mostrou diferença significativa entre grupos, ao contrário de organização e conteúdo. Isso torna o Pigai uma boa ilustração de uma ferramenta de avaliação por IA amplamente adotada cujo benefício real em sala de aula é mais estreito do que sua escala de adoção sugeriria.