evidoria

← Voltar à navegação

Boa prática Importada

AAEE — Avaliador Automático de Redações em Árabe da King Saud University para Alunos Sauditas

Arábia Saudita · Riyadh · Ver o perfil de Arábia Saudita · Ver o perfil de Riyadh

Evidência: Observacional / pré-pós Top 80% 33/100 · Pergunte a Evidence Copilot sobre esta prática

Pesquisadores da King Saud University criaram o AAEE, um dos primeiros corretores automáticos de redação em árabe, modelado na rubrica oficial das escolas sauditas. Testado em 350 redações reais de estudantes em oito temas, alcançou 90% de precisão e correlação de 0,756 com corretores humanos.

350 essays
Essay corpus size
8 topics
Essay topics covered
90 %
Scoring accuracy
0,756
Correlation with human graders
0,913
Correlation achieved by later Random Forest model (Alsaif et al. 2023)

Detalhes

Promotor
King Saud University, Department of Computer Science, College of Computer & Information Sciences
Período
2019 (published study; research-stage system)
Palavras-chave
natural language processing, Arabic-language assessment, academic research, K-12 education

Contexto

Investigadores do Departamento de Ciência da Computação, Faculdade de Ciências da Computação e Informação da Universidade King Saud, desenvolveram o AAEE, um dos primeiros sistemas para pontuar automaticamente ensaios em língua árabe, colmatando uma lacuna deixada pela investigação em pontuação automática de ensaios (AES), maioritariamente focada no inglês.

Objetivos

Pontuar automaticamente e dar retorno sobre ensaios em língua árabe escritos por estudantes sauditas do ensino intermédio e secundário, com base nos critérios oficiais da grelha escolar: proficiência linguística, estrutura do ensaio e relevância do conteúdo.

Atividades

O AAEE combina Análise Semântica Latente com a Teoria da Estrutura Retórica para avaliar tanto a qualidade lexical/gramatical como a coerência da estrutura argumentativa do ensaio; foi avaliado num corpus construído propositadamente com 350 ensaios em oito temas, pontuados de forma independente por instrutores humanos como referência.

Resultados

O AAEE alcançou 90% de precisão e uma correlação de 0,756 com os avaliadores humanos; um estudo posterior de 2023, usando o mesmo corpus, verificou que abordagens de aprendizagem automática mais recentes, incluindo modelos Random Forest, podiam atingir uma correlação de 0,913, superando o parâmetro de referência do AAEE.

Conclusões

O AAEE continua a ser um sistema em fase de investigação, validado num corpus de ensaios compilado, e não implementado em salas de aula sauditas reais ou em exames nacionais, mas estabeleceu um importante parâmetro de referência inicial para a pontuação automática de ensaios em árabe.

Implementação

Custo indicativo
Baixo (< 50 mil €)
Tempo até resultados
Curto (< 1 ano)
Equipa e competências
Researchers in the Department of Computer Science, College of Computer & Information Sciences, King Saud University

Condições de sucesso

  • A purpose-built corpus of real student essays independently scored by human instructors as ground truth
  • Alignment of automated criteria with the official school grading rubric (language, structure, content relevance)
  • Combination of complementary NLP techniques (LSA plus Rhetorical Structure Theory) to capture both lexical and coherence quality

Modos de falha comuns

  • Validated only on a compiled research corpus, not a live classroom or exam deployment
  • Newer machine-learning approaches have already surpassed its accuracy (per Alsaif et al., 2023)

Onde se enquadra

Tipo de governação
university research project
Escala
research-stage, single-institution study (350-essay corpus)
Nível de rendimento
high-income (Saudi Arabia)

Habitualmente financiado por

National / regional programmes

Vias de financiamento indicativas para práticas deste tipo — verifique sempre os avisos abertos e as regras de elegibilidade de cada programa.

Implementa esta prática? Reivindique-a — implementadores verificados obtêm um contacto público na página e podem propor correções.

Fontes de dados

De onde foi obtida a informação desta prática, e quando.

Práticas semelhantes que podem ser úteis