evidoria

← Voltar à navegação

Boa prática Importada

A Um Clique de Distância — Ensaio Aleatorizado de Dois Anos Mostra que o Acesso ao Khanmigo, Por Si Só, Não Muda o Jogo no Tennessee

Estados Unidos da América · Chattanooga · Ver o perfil de Estados Unidos da América · Ver o perfil de Chattanooga

Evidência: Ensaio controlado aleatorizado Top 56% 47/100 · Pergunte a Evidence Copilot sobre esta prática

Um ensaio controlado aleatorizado por conglomerados, com duração de dois anos, em 18 escolas do Condado de Hamilton, Tennessee, mostrou que o acesso ao Khanmigo elevou as notas de matemática em 0,06–0,08 DP, mas o aluno mediano praticou com a ferramenta em apenas um terço dos dias — o acesso, por si só, não garantiu uso.

0.06–0.08 SD
Ganho no desempenho em matemática com o acesso ao Khanmigo (over a school year)
about 1.3 national percentile ranks per term
Ganho no desempenho em matemática, em termos de percentil
about 0.14 SD
Efeito implícito com participação ativa total
96 %
Alunos que experimentaram o Khanmigo pelo menos uma vez
17 %
Sessões de exercícios com erro em que o aluno interagiu com o Khanmigo
18 schools
Escolas do 2.º/3.º ciclo no ensaio aleatorizado por clusters
A Um Clique de Distância — Ensaio Aleatorizado de Dois Anos Mostra que o Acesso ao Khanmigo, Por Si Só, Não Muda o Jogo no Tennessee

Detalhes

Promotor
Hamilton County Schools with Philip Oreopoulos & Nina Low (Annenberg Institute at Brown University / NBER)
Período
2024–2026 (published August 2026)
Palavras-chave
K-12 education, mathematics, AI tutoring, education research

Contexto

Os economistas Philip Oreopoulos e Nina Low realizaram um ensaio controlado aleatorizado por clusters, com duração de dois anos, em 18 escolas do 2.º e 3.º ciclos no condado de Hamilton, Tennessee, atribuindo a alunos com baixo desempenho o uso do tutor de IA Khanmigo, da Khan Academy — configurado para orientar em vez de fornecer respostas diretas — durante as sessões diárias de recuperação em matemática já existentes.

Objetivos

Testar se o acesso a um tutor de IA durante as sessões de recuperação em matemática melhora o desempenho matemático, e compreender o que impulsiona, ou limita, esse impacto.

Atividades

O documento de trabalho 'One Click Away: AI Tutoring with Khanmigo in a Two-Year School Experiment' foi publicado como NBER Working Paper 35620 e EdWorkingPaper ai26-1551 em agosto de 2026, baseado no desenho aleatorizado por clusters de dois anos nas 18 escolas.

Resultados

A atribuição à condição Khanmigo aumentou o desempenho em matemática em cerca de 1,3 percentis nacionais por período, ou aproximadamente 0,06 a 0,08 desvios-padrão ao longo de um ano letivo; extrapolando para uma participação ativa total, o efeito implícito atingiria cerca de 0,14 desvios-padrão, comparável aos ganhos da prática na Khan Academy sem assistência de IA. A restrição determinante foi o envolvimento, não o acesso: 96% dos alunos experimentaram o Khanmigo pelo menos uma vez, mas o aluno mediano interagiu com ele em apenas um terço dos dias de prática, e em apenas 17% das sessões de exercícios em que cometeu um erro.

Conclusões

Os autores concluem que concretizar a promessa da tutoria com IA exige que os alunos utilizem efetivamente a ferramenta, e não apenas lhes seja concedido acesso a ela — uma conclusão de alerta contra assumir que a mera implementação gera resultados.

Implementação
Custo indicativo
Médio (50 mil–500 mil €) — Not disclosed; a research-grade cluster RCT across 18 schools over two years using the commercially available Khanmigo tool within Khan Academy's existing remedial-math sessions.
Tempo até resultados
Médio (1–3 anos) — Two-year cluster-randomized experiment; working paper released August 2026.
Equipa e competências
Hamilton County Schools, Philip Oreopoulos and Nina Low (Annenberg Institute at Brown University / NBER)

Condições de sucesso

  • Configuring Khanmigo to coach rather than hand out direct answers
  • Embedding tutor access inside existing daily remedial mathematics sessions rather than as a stand-alone add-on

Modos de falha comuns

  • Engagement, not access, was the binding constraint: the median student messaged Khanmigo on only about a third of practice days and in just 17% of sessions where they erred
  • The measured effect (0.06–0.08 SD) is modest even under a strong causal design

Habitualmente financiado por

National / regional programmes

Vias de financiamento indicativas para práticas deste tipo — verifique sempre os avisos abertos e as regras de elegibilidade de cada programa.

Kit de replicação

Artefactos reutilizáveis desta prática — tal como publicados pelas suas fontes.

Implementa esta prática? Reivindique-a — implementadores verificados obtêm um contacto público na página e podem propor correções.

Fontes de dados

De onde foi obtida a informação desta prática, e quando.

Anexos

Práticas semelhantes que podem ser úteis