Um ensaio aleatorizado com quase 1.000 alunos turcos do secundário mostrou que o acesso irrestrito ao GPT-4 ('GPT Base') aumentou 48% as notas em prática, mas reduziu 17% os resultados em exame sem apoio; um 'GPT Tutor' com salvaguardas pedagógicas aumentou 127% a prática sem prejudicar o exame.
+48%
Melhoria das notas durante a prática assistida, GPT Base (Fall 2023-2024)
+127%
Melhoria das notas durante a prática assistida, GPT Tutor (Fall 2023-2024)
-17%
Resultado do exame sem assistência, GPT Base vs. controlo (Fall 2023-2024)
Detalhes
Promotor
Wharton School, University of Pennsylvania (Bastani et al. research team)
Numa grande escola secundária turca, cerca de 1.000 estudantes dos 9.º aos 11.º anos foram distribuídos aleatoriamente por três grupos ao longo de quatro sessões de 90 minutos durante o semestre de outono de 2023-2024: um grupo de controlo sem IA, o 'GPT Base' (acesso irrestrito ao estilo ChatGPT) e o 'GPT Tutor' (o mesmo modelo com instruções concebidas para proteger a aprendizagem, como a retenção de respostas diretas e o incentivo ao raciocínio).
Resultados
Durante a prática assistida, o GPT Base melhorou as notas em 48% e o GPT Tutor em 127%, em comparação com o grupo de controlo. Contudo, num exame posterior sem assistência, os estudantes do GPT Base obtiveram resultados 17% piores do que os do grupo de controlo, enquanto os estudantes do GPT Tutor, que nunca tinham podido apoiar-se em respostas diretas, não revelaram qualquer prejuízo significativo.
Conclusões
Revisto por pares e publicado na PNAS em 2025, o estudo está entre os primeiros ensaios aleatorizados em larga escala a demonstrar que a IA generativa pode substituir a aprendizagem em vez de a apoiar quando é utilizada sem salvaguardas pedagógicas — e que simples salvaguardas ao nível das instruções (prompts) podem evitar esse dano sem sacrificar os ganhos de desempenho imediato.
Implementação
Custo indicativo
Baixo (< 50 mil €) — Classroom-based research trial; no separate implementation budget is published.
Tempo até resultados
Curto (< 1 ano) — Four 90-minute sessions delivered during the Fall 2023-2024 semester.
Equipa e competências
Wharton School, University of Pennsylvania (Bastani et al. research team)
Condições de sucesso
Prompt-level safeguards (withholding direct answers, prompting reasoning) prevent the AI from substituting for learning
Modos de falha comuns
Unrestricted chatbot access improved practice performance but harmed unassisted exam scores
Onde se enquadra
Tipo de governação
university research study
Escala
~1,000 students, one school
Nível de rendimento
upper-middle income
Implementa esta prática?
Reivindique-a —
implementadores verificados obtêm um contacto público na página e podem propor correções.
Fontes de dados
De onde foi obtida a informação desta prática, e quando.