Quando a COVID-19 cancelou os exames, o regulador inglês Ofqual usou um modelo estatístico para uniformizar as notas de A-level e GCSE; desceu 39% das notas previstas pelos professores, penalizou mais os alunos desfavorecidos, e foi abandonado em quatro dias.
39%
Notas previstas pelos professores reduzidas em, pelo menos, um nível (2020)
4 days
Dias entre a divulgação dos resultados e o abandono do algoritmo (13–17 August 2020)
15 students
Dimensão mínima de turma excluída do modelo de moderação
Detalhes
Maturidade
Descontinuada
Promotor
Ofqual (Office of Qualifications and Examinations Regulation)
Quando a pandemia de COVID-19 cancelou os exames de A-level e GCSE em Inglaterra em 2020, o regulador de exames Ofqual precisou de encontrar uma forma de atribuir notas sem a realização de provas. As escolas submeteram Centre Assessment Grades (notas previstas pelos professores) e uma ordenação dos estudantes dentro de cada nota; a Ofqual aplicou depois um modelo estatístico que ajustava estas previsões com base na distribuição histórica de notas de cada escola nos três anos anteriores e nos resultados de GCSE por disciplina, para evitar uma inflação generalizada das notas a nível nacional.
Resultados
Quando os resultados foram divulgados a 13 de agosto de 2020, o modelo tinha reduzido em, pelo menos, um nível 39% das notas previstas pelos professores. A própria diretora-adjunta da Ofqual confirmou que os alunos de meios desfavorecidos tinham maior probabilidade de sofrer descidas mais acentuadas, enquanto o modelo não era aplicado a turmas com menos de 15 estudantes — uma categoria que incluía muitas escolas privadas. Seguiram-se indignação pública e críticas transpartidárias; a 17 de agosto, quatro dias depois do dia dos resultados, a Ofqual recuou e atribuiu aos estudantes as notas previstas pelos professores. O diretor-geral da Ofqual demitiu-se a 25 de agosto, e o secretário-geral permanente do Departamento de Educação demitiu-se a 28 de agosto.
Implementação
Custo indicativo
Baixo (< 50 mil €)
Tempo até resultados
Curto (< 1 ano)
Equipa e competências
Ofqual statisticians/analysts, school teachers producing Centre Assessment Grades
Condições de sucesso
pre-release public scrutiny and consultation with affected students
transparency about how the model treats small and disadvantaged cohorts
an approach that does not trade individual fairness for population-level target-matching
Modos de falha comuns
optimised for matching historical national grade distributions at the expense of individual fairness
no pre-release scrutiny or affected-student consultation
undisclosed treatment of small/fee-paying cohorts
disproportionate downgrades for disadvantaged pupils
Habitualmente financiado por
National / regional programmes
Vias de financiamento indicativas para práticas deste tipo — verifique sempre os avisos abertos e as regras de elegibilidade de cada programa.
Implementa esta prática?
Reivindique-a —
implementadores verificados obtêm um contacto público na página e podem propor correções.
Fontes de dados
De onde foi obtida a informação desta prática, e quando.