evidoria

← Back to browse

Good practice

Ensino de Programação com IA Adaptativa para Estudantes Socialmente Desfavorecidos — Um Estudo de 13 Semanas em Quatro Universidades Húngaras

Hungary · Dunaújváros · See the Hungary profile

Uma quase-experiência de 13 semanas em quatro universidades húngaras deu a estudantes socialmente desfavorecidos um tutor de programação com IA adaptativa baseado em ChatGPT e Bayesian Knowledge Tracing. Os ganhos nos testes (d=1,40, n=61) mais do que duplicaram os do grupo de controlo (d=0,74, n=61), p<0,001, segundo um estudo revisto por pares.

1.4 Cohen's d
Dimensão do efeito na pontuação dos testes, grupo experimental (tutor adaptativo de IA) (13-week study, 2024–2025)
0.74 Cohen's d
Dimensão do efeito na pontuação dos testes, grupo de controlo (ensino tradicional) (13-week study, 2024–2025)
5.1 mean score
Pontuação média do teste do grupo experimental, pré-teste (13-week study, 2024–2025)
7.1 mean score
Pontuação média do teste do grupo experimental, pós-teste (13-week study, 2024–2025)
5.0 mean score
Pontuação média do teste do grupo de controlo, pré-teste (13-week study, 2024–2025)
6.0 mean score
Pontuação média do teste do grupo de controlo, pós-teste (13-week study, 2024–2025)
1.1 Cohen's d
Dimensão do efeito no envolvimento comportamental (13-week study, 2024–2025)
1.0 Cohen's d
Dimensão do efeito no envolvimento emocional (13-week study, 2024–2025)
1.4 Cohen's d
Dimensão do efeito no envolvimento cognitivo (13-week study, 2024–2025)
0.89 Cronbach's alpha
Fiabilidade da escala de envolvimento (α de Cronbach) (13-week study, 2024–2025)
61 students
Dimensão da amostra do grupo experimental (13-week study, 2024–2025)
61 students
Dimensão da amostra do grupo de controlo (13-week study, 2024–2025)
122 students
Total de participantes no estudo (13-week study, 2024–2025)
Ensino de Programação com IA Adaptativa para Estudantes Socialmente Desfavorecidos — Um Estudo de 13 Semanas em Quatro Universidades Húngaras

Details

Maturity
Pilot
Promoter
University of Dunaújváros / Óbuda University / John von Neumann University / Budapest University of Economics and Business
Period
13-week study, 2024–2025; published in TechTrends, 2025
Keywords
AI adaptive learning, programming education, higher education, digital divide, Bayesian Knowledge Tracing

Context

Uma equipa de investigação da Universidade de Dunaújváros, da Universidade Óbuda, da Universidade John von Neumann e da Universidade de Economia e Negócios de Budapeste realizou um estudo quasi-experimental para testar se um sistema de aprendizagem adaptativa com IA poderia reduzir as lacunas de competências de programação em estudantes socialmente desfavorecidos. Participaram 122 estudantes com idades entre os 18 e os 21 anos, provenientes de quatro universidades húngaras, divididos num grupo experimental de 61 estudantes e num grupo de controlo de 61 estudantes. O estudo decorreu ao longo de 13 semanas durante 2024-2025 e foi publicado na revista TechTrends (Springer) em 2025.

Activities

O grupo experimental utilizou um tutor adaptativo baseado no ChatGPT, que recorria ao Rastreamento Bayesiano de Conhecimento (Bayesian Knowledge Tracing) para modelar o estado de conhecimento de cada aluno e ajustar a dificuldade das tarefas em tempo real. O grupo de controlo recebeu o mesmo currículo de 13 semanas, abrangendo estruturas de controlo, funções, ciclos e algoritmos, através de ensino tradicional. Ambos os grupos foram lecionados pelo mesmo docente, com laboratórios, equipamento e acesso à internet idênticos, isolando o tutor de IA como a variável de interesse.

Results

As pontuações nos testes subiram de uma média de 5,1 para 7,1 no grupo experimental (d=1,40), face a uma subida de 5,0 para 6,0 no grupo de controlo (d=0,74), ambas com p<0,001. O envolvimento (engagement) também aumentou nas subescalas comportamental (d=1,10), emocional (d=1,00) e cognitiva (d=1,40) (α de Cronbach=0,89), todas com p<0,001. Os ganhos do grupo experimental foram substancialmente superiores aos do grupo de controlo em todos os resultados medidos.

Conclusions

Os autores referem que a duração de 13 semanas «limita qualquer conclusão sobre a retenção a longo prazo» e que os participantes foram recrutados através de resposta a um inquérito, em vez de amostragem totalmente aleatória, o que gera um risco de viés de seleção. O estudo abrange uma única disciplina, programação introdutória, e ainda não foi replicado nem alargado além destas quatro universidades.

Implementation

Indicative cost
Low (< €50k)
Time to results
Short (< 1 year)

Data sources

Where this practice's information was retrieved from, and when.

Attachments

Similar practices you may find useful