A NZQA (Nova Zelândia) treinou um modelo de IA com dezenas de milhares de provas já corrigidas para classificar o exame nacional de escrita do NCEA, atingindo 80% de concordância com os corretores humanos e reduzindo o prazo de resultados em 3,5 semanas para mais de 55 000 alunos em 2025.
Detalhes
Promotor
New Zealand Qualifications Authority (NZQA)
Período
2024–present
Palavras-chave
government agency, national qualifications authority, secondary education, assessment
Descrição
A Autoridade de Qualificações da Nova Zelândia (NZQA) construiu uma ferramenta de Classificação Automática de Texto, treinando um modelo de aprendizagem automática com milhares de provas previamente corrigidas por humanos para classificar a norma de escrita co-requisito do NCEA — uma avaliação nacional de literacia que a maioria dos alunos do ensino secundário tem de passar para obter qualificações NCEA. A IA realiza a correção principal; os corretores humanos são mantidos apenas para verificar as provas mais próximas da fronteira de aprovação/reprovação. Num teste realizado em 2024, com 36 000 amostras de escrita, a NZQA relatou que a ferramenta era "tão fiável como os corretores humanos". O diretor executivo Grant Klinkum afirmou que o modelo atingiu uma taxa de concordância de 80% com os corretores humanos. A ferramenta foi implementada a nível nacional no exame de escrita co-requisito realizado em maio de 2025 por mais de 55 000 alunos. Cerca de 20 000 provas (aproximadamente 40%, concentradas perto da fronteira de aprovação/reprovação) continuaram a ser verificadas por um corretor humano e, sempre que a IA e o humano discordavam, prevalecia a classificação humana. As escolas receberam os resultados 3,5 semanas mais cedo do que no ano anterior. A base de evidência cobre a exatidão da classificação e o tempo de resposta, não os resultados de aprendizagem dos alunos. A taxa de discordância de 20% observada no teste não é negligenciável para uma avaliação de alto risco, razão pela qual a NZQA manteve a revisão humana obrigatória para os casos-limite, em vez de automatizar totalmente o exame.
Implementação
Os detalhes de implementação (custo, prazo, equipa, condições de sucesso) ainda não estão disponíveis para esta prática.
Implementa esta prática?
Reivindique-a —
implementadores verificados obtêm um contacto público na página e podem propor correções.
Fontes de dados
De onde foi obtida a informação desta prática, e quando.