evidoria

← Voltar à navegação

Boa prática Importada

Exames Orais com IA do Classmoji para Avaliação de Código — Dartmouth College

Estados Unidos da América · Hanover · Ver o perfil de Estados Unidos da América · Ver o perfil de Hanover

Evidência: Descritivo / autorreportado Top 63% 47/100 · Pergunte a Evidence Copilot sobre esta prática

A plataforma de código aberto Classmoji, de Dartmouth, acrescenta exames orais com IA que questionam os alunos sobre o seu próprio código, testando a compreensão real versus código gerado por IA não compreendido; apresentado na conferência ACM SIGCSE TS 2026.

Exames Orais com IA do Classmoji para Avaliação de Código — Dartmouth College

Detalhes

Maturidade
Piloto
Promotor
Dartmouth College — Classmoji (open-source GitHub-native CS education platform)
Período
2025–2026 (presented at ACM SIGCSE TS 2026, Feb 2026)
Palavras-chave
higher education, computer science, academic integrity, open-source

Contexto

O Classmoji é uma plataforma de gestão de aprendizagem de código aberto, nativa do GitHub, criada por educadores e estudantes, inicialmente no Dartmouth College, que trata as organizações do GitHub como turmas e os 'issues' como trabalhos, com um sistema de feedback baseado em emojis. Investigadores do Dartmouth acrescentaram uma funcionalidade de exame oral orientada por IA que interroga os alunos, de forma conversacional, sobre o código que submetem, questionando escolhas de design e casos-limite para distinguir a compreensão genuína de código gerado por IA que os alunos não conseguem explicar.

Atividades

A abordagem está documentada no artigo revisto por pares 'AI-Driven Oral Examinations for Code Assessment: Evaluating Understanding Beyond the Commit', apresentado no 57.º ACM Technical Symposium on Computer Science Education (SIGCSE TS 2026, fevereiro de 2026).

Conclusões

A evidência disponível consiste numa descrição revista por pares da conceção e da lógica do sistema, e não em estatísticas de resultados publicadas — não foram encontrados dados de precisão, correlação com a avaliação ou pontuações de satisfação dos alunos; a força da prática reside na transparência de código aberto e na revisão académica formal por pares, ainda não num impacto de aprendizagem medido.

Implementação

Custo indicativo
Baixo (< 50 mil €)
Tempo até resultados
Curto (< 1 ano)
Equipa e competências
Dartmouth College researchers and educators (Classmoji project team), Student contributors to the open-source GitHub-native platform

Condições de sucesso

  • Built on an already-adopted open-source LMS (Classmoji) rather than a standalone tool
  • Adaptive follow-up questioning tied directly to each student's own submitted code
  • Public, peer-reviewed documentation of the methodology (ACM SIGCSE TS 2026)

Modos de falha comuns

  • No published accuracy, grading-correlation or student-sentiment data yet
  • No evidence found of adoption or oral-exam feature use outside the originating Dartmouth team

Onde se enquadra

Tipo de governação
higher-education institution (single university)
Escala
single-institution pilot within an open-source platform
Nível de rendimento
high-income

Habitualmente financiado por

Own resources / municipal budget

Vias de financiamento indicativas para práticas deste tipo — verifique sempre os avisos abertos e as regras de elegibilidade de cada programa.

Kit de replicação

Artefactos reutilizáveis desta prática — tal como publicados pelas suas fontes.

Implementa esta prática? Reivindique-a — implementadores verificados obtêm um contacto público na página e podem propor correções.

Fontes de dados

De onde foi obtida a informação desta prática, e quando.

Anexos

Práticas semelhantes que podem ser úteis