AAEE — Avaliador Automático de Redações em Árabe da King Saud University para Alunos Sauditas

Pesquisadores do Departamento de Ciência da Computação, da Faculdade de Ciências da Computação e Informação da King Saud University, em Riade, desenvolveram o AAEE (Avaliação Automatizada de Redações de Estudantes em Árabe), um dos primeiros sistemas a pontuar automaticamente e dar feedback sobre redações em língua árabe escritas por estudantes sauditas do ensino fundamental II e médio. A morfologia rica do árabe e a falta de ferramentas de PLN convencionais fizeram com que a maior parte da pesquisa em avaliação automática de redações (AES) se concentrasse no inglês, deixando estudantes de língua árabe sem ferramentas equivalentes de avaliação por IA.

O AAEE foi deliberadamente modelado segundo o esquema de pontuação já utilizado por professores sauditas, avaliando redações com base em três critérios oficiais: proficiência linguística, estrutura da redação e relevância do conteúdo em relação ao tema proposto. Tecnicamente, o sistema combina Análise Semântica Latente (LSA) com a Teoria da Estrutura Retórica (RST) para avaliar tanto a qualidade lexical/gramatical quanto a coerência da estrutura argumentativa da redação.

Os pesquisadores avaliaram o AAEE em um corpus construído especificamente para o estudo, com 350 redações cobrindo oito temas diferentes, escritas por estudantes reais do ensino fundamental II e médio e pontuadas de forma independente por professores como referência. O sistema atingiu 90% de precisão e uma correlação de 0,756 com as notas de corretores humanos (contando tanto acertos 'exatos' quanto notas 'dentro da faixa', com diferença de até 2,5 pontos). Um estudo comparativo posterior (Alsaif et al., 2023, Computers, Materials & Continua) citou diretamente os números do AAEE (precisão de 0,9, correlação de 0,76 no mesmo corpus de 350 redações) e constatou que abordagens mais recentes de aprendizado de máquina, incluindo modelos Random Forest, conseguiram elevar a correlação para 0,913 — evidência de que o AAEE foi um importante marco inicial para a AES em árabe, mas já foi superado em precisão bruta. O AAEE permanece um sistema em estágio de pesquisa: as fontes analisadas descrevem sua validação em um corpus de redações compilado, e não uma implantação real em salas de aula ou exames nacionais sauditas.