AKM Online — Avaliação Informatizada com IA para Literacia e Numeracia em Escolas Secundárias da Indonésia

A Avaliação Nacional de Competências Mínimas (AKM) da Indonésia é o instrumento padrão do governo para medir competências fundamentais de literacia e numeracia, mas as versões em papel e computorizadas genéricas têm dificuldade em fornecer diagnósticos fiáveis e em tempo real à escala. Investigadores da Universitas Kuningan desenvolveram e validaram o AKM Online, um sistema de Avaliação Baseada em Computador melhorado por IA.

O AKM Online integra os algoritmos Fisher-Yates Shuffle e Expressões Regulares para permitir a aleatorização segura de testes, validação automática de respostas e retroalimentação diagnóstica em tempo real. Foi testado em três escolas escolhidas por contextos socioeconómicos contrastantes.

O ensaio gerou 552 estudantes participantes e 17.049 respostas individuais. O motor de classificação por IA atingiu 94,35% de exatidão face à classificação por especialistas humanos, e painéis de peritos independentes classificaram a qualidade do sistema em 81% no desenho da avaliação educativa e 82% no desempenho informático. Os diagnósticos mostraram que 95,8-100% dos estudantes precisavam de intervenção em numeracia, 53,9-78,46% precisavam de intervenção em literacia consoante o contexto, e a proficiência em raciocínio matemático foi de 0% em toda a amostra.

O estudo é uma validação única, avaliada por pares, feita pela própria equipa de desenvolvimento do sistema, ainda não uma replicação independente ou uma implementação nacional, e não aborda a proteção de dados dos estudantes nem salvaguardas de governação para os dados de avaliação recolhidos.