evidoria

← Voltar à navegação

Boa prática Importada

Chatbot de IA Construído com Botsify Responde a Perguntas de Admissão com 91% de Precisão — Universidade Princess Nourah Bint Abdulrahman

Arábia Saudita · Riyadh · Ver o perfil de Arábia Saudita · Ver o perfil de Riyadh

Evidência: Observacional / pré-pós Top 95% 20/100 · Pergunte a Evidence Copilot sobre esta prática

Investigadores da Universidade Princess Nourah Bint Abdulrahman construíram um chatbot baseado no Botsify para responder, a qualquer hora, a perguntas de admissão de futuros estudantes, atingindo 91% de precisão num teste de matriz de confusão e uma pontuação de usabilidade de 76,6 entre 22 estudantes testadores.

91%
Exatidão das respostas do chatbot (matriz de confusão)
76.6
Pontuação no Questionário de Usabilidade do Chatbot (CUQ) (2023)
22 of 42 users completed the CUQ
Respondentes ao inquérito / utilizadores iniciais

Detalhes

Maturidade
Piloto
Promotor
Princess Nourah Bint Abdulrahman University
Período
2023
Palavras-chave
higher education admissions, AI chatbot, student services

Contexto

As perguntas de potenciais estudantes sobre admissões, propinas e programas nas universidades sauditas têm dependido tradicionalmente de aconselhamento telefónico e presencial, disponível apenas durante o horário de expediente, criando estrangulamentos à medida que o volume de visitantes aumenta.

Objetivos

Investigadores da Faculdade de Ciências da Computação e da Informação da Princess Nourah Bint Abdulrahman University propuseram-se construir um chatbot inteligente na plataforma Botsify, capaz de responder automaticamente, 24 horas por dia, às perguntas mais frequentes sobre admissões colocadas por potenciais estudantes.

Atividades

Dos 42 estudantes de pós-graduação que acederam ao chatbot, 22 preencheram o Questionário de Usabilidade do Chatbot (CUQ), e os investigadores realizaram uma análise por Matriz de Confusão às respostas do chatbot para avaliar a sua exatidão.

Resultados

O chatbot alcançou 91% de exatidão na análise por Matriz de Confusão, e os 22 respondentes do CUQ obtiveram uma pontuação média de usabilidade de 76,6, indicando um nível razoável de satisfação dos utilizadores.

Conclusões

O estudo, publicado no International Journal of Information and Education Technology em setembro de 2023, baseia-se numa pequena coorte-piloto de 42 utilizadores iniciais e 22 respondentes ao inquérito, pelo que os resultados devem ser lidos como uma prova de conceito numa fase inicial, e não como evidência de impacto à escala.

Implementação
Custo indicativo
Baixo (< 50 mil €)
Tempo até resultados
Curto (< 1 ano)
Equipa e competências
Researchers/developers at the College of Computer and Information Sciences building and configuring the Botsify-based chatbot, Student testers completing the Chatbot Usability Questionnaire

Condições de sucesso

  • A structured FAQ knowledge base covering admissions, fees and programme questions for the chatbot to draw on
  • Usability testing with real prospective/postgraduate students (CUQ) alongside technical accuracy testing (Confusion Matrix)

Modos de falha comuns

  • The small pilot cohort (42 users, 22 survey respondents) limits confidence that results generalise at scale
  • No comparison against existing phone/in-person admissions counselling was reported

Habitualmente financiado por

National / regional programmes Own resources / municipal budget

Vias de financiamento indicativas para práticas deste tipo — verifique sempre os avisos abertos e as regras de elegibilidade de cada programa.

Implementa esta prática? Reivindique-a — implementadores verificados obtêm um contacto público na página e podem propor correções.

Fontes de dados

De onde foi obtida a informação desta prática, e quando.

Práticas semelhantes que podem ser úteis