Aplicativo Móvel Adaptativo Ensina Língua de Sinais Mexicana — Pesquisadores do TecNM/UABC Relatam 95,7% de Precisão em Gestos e Ganhos de Aprendizagem Sólidos

A Língua Gestual Mexicana (LSM) é a língua principal da comunidade surda do México, mas o seu lugar no ensino formal tem sido há muito limitado pela escassez de intérpretes qualificados e pela falta de tecnologia de apoio ao ensino personalizado. Uma equipa de investigação do Tecnológico Nacional de México (TecNM), sediada no Instituto Tecnológico de Tijuana, começou a colmatar esta lacuna em 2023, ao abrigo de uma bolsa de investigação aprovada pelo TecNM, em conjunto com a Universidad Autónoma de Baja California (UABC).

O projeto visava desenvolver uma aplicação móvel que combinasse o reconhecimento de gestos por visão computacional com a dificuldade adaptativa das lições para ensinar a LSM, seguindo um processo de conceção em Scrum com contributos de educadores, linguistas e membros da comunidade surda.

A equipa construiu um modelo de reconhecimento de gestos usando redes neuronais convolucionais e estimativa de pose, comprimido para utilização no próprio dispositivo, e realizou uma comparação controlada da aplicação adaptativa com um grupo de controlo não adaptativo, publicada em testes revistos por pares na revista Future Internet (MDPI) em setembro de 2026.

O modelo de reconhecimento de gestos atingiu 95,7% de precisão top-1 (98,61% top-3) após compressão de 38MB para 10,4MB, funcionando a cerca de 112ms por fotograma. Os alunos que utilizaram a versão adaptativa alcançaram um ganho de aprendizagem normalizado de 0,78 (precisão de reconhecimento de gestos de 48,2% para 88,7%), 84,3% de retenção num pós-teste diferido, e 73,5% de precisão em tarefas de transferência, contra 57,2% no grupo de controlo não adaptativo; a usabilidade obteve 89,1/100 (System Usability Scale), com um Net Promoter Score de +72, e a carga cognitiva autorreportada (NASA-TLX) desceu de 62 para 44.

Estes resultados provêm de um único estudo revisto por pares, realizado pela própria equipa de desenvolvimento, e não de uma implementação replicada de forma independente em múltiplos locais; além disso, a publicação não indica o número de alunos surdos que participaram nem qualquer expansão à escala da sala de aula para além do projeto-piloto.