evidoria

← Voltar à navegação

Boa prática Importada

PAIbot — o Chatbot de IA da UNAM para Apoio às Admissões a Distância

México · Mexico City · Ver o perfil de México · Ver o perfil de Mexico City

Evidência: Observacional / pré-pós Top 89% 27/100 · Pergunte a Evidence Copilot sobre esta prática

O chatbot Dialogflow da UNAM responde a perguntas sobre admissões do seu curso a distância. Um estudo revisto por pares registou +52% de conversas e respostas corretas a subir de 0,4% para 47,1%, mas as incorretas também aumentaram.

52.3 %
Aumento nas conversas do chatbot, PAIbot 2.0 vs 1.0
0.4 % (4 of 998 questions)
Taxa de respostas corretas, PAIbot 1.0
47.1 % (378 of 802 questions)
Taxa de respostas corretas, PAIbot 2.0
23.4 %
Taxa de respostas incorretas, PAIbot 1.0
37.5 %
Taxa de respostas incorretas, PAIbot 2.0
4 cycles
Ciclos de admissão em que o PAIbot já funcionou
PAIbot — o Chatbot de IA da UNAM para Apoio às Admissões a Distância

Detalhes

Maturidade
Consolidada
Promotor
Universidad Nacional Autónoma de México (UNAM) — CUAIEED
Período
2021–ongoing
Palavras-chave
higher education, admissions, chatbot, distance learning

Contexto

A Coordenação de Universidade Aberta, Inovação Educativa e Educação a Distância (CUAIEED) da UNAM criou o PAIbot, um chatbot baseado no Dialogflow ES que responde às perguntas administrativas dos candidatos — prazos, procedimentos, requisitos — do programa de admissão à licenciatura a distância e aberta (PAI) da universidade.

Objetivos

Fornecer respostas precisas e sempre disponíveis às perguntas administrativas dos candidatos durante o processo de admissão, reduzindo a dependência da equipa para questões de rotina.

Atividades

Um projeto-piloto em 2021 (PAIbot 1.0) foi seguido por um PAIbot 2.0 redesenhado, que acrescentou uma interface personalizada, respostas multimédia e um mecanismo de feedback dos utilizadores. Um estudo revisto por pares comparou o volume de conversas e a exatidão das respostas entre as duas versões.

Resultados

As conversas aumentaram 52,3% apesar de uma janela de funcionamento 25% mais curta, e a taxa de respostas corretas subiu de 0,4% (4 de 998 perguntas) para 47,1% (378 de 802). A taxa de respostas incorretas também subiu, de 23,4% para 37,5%. O PAIbot já funciona ao longo de quatro ciclos de admissão.

Conclusões

O aumento das respostas incorretas a par das corretas é uma limitação real, atribuída em parte pelos autores do estudo a uma alteração no mecanismo de feedback — este registo reporta esse compromisso em vez de o dissimular.

Implementação
Custo indicativo
Baixo (< 50 mil €)
Tempo até resultados
Longo (> 3 anos) — 2021 pilot (PAIbot 1.0), redesigned to PAIbot 2.0, now run across four admission cycles.
Equipa e competências
UNAM CUAIEED (Coordinación de Universidad Abierta, Innovación Educativa y Educación a Distancia) development team

Condições de sucesso

  • Built on the Google Dialogflow ES platform, avoiding custom NLP infrastructure
  • Iterative redesign (1.0 → 2.0) adding a custom interface, multimedia responses and a user feedback mechanism
  • Scoped narrowly to administrative admissions queries for a specific programme (PAI) rather than general-purpose Q&A

Modos de falha comuns

  • Incorrect-response rate rose alongside the correct-response rate (23.4% → 37.5%), partly attributed by the study authors to the changed feedback mechanism

Onde se enquadra

Tipo de governação
university-led
Escala
institutional (single university admissions programme)

Habitualmente financiado por

National / regional programmes

Vias de financiamento indicativas para práticas deste tipo — verifique sempre os avisos abertos e as regras de elegibilidade de cada programa.

Kit de replicação

Artefactos reutilizáveis desta prática — tal como publicados pelas suas fontes.

Implementa esta prática? Reivindique-a — implementadores verificados obtêm um contacto público na página e podem propor correções.

Fontes de dados

De onde foi obtida a informação desta prática, e quando.

Anexos

Práticas semelhantes que podem ser úteis