Audemy est une plateforme d'apprentissage par IA basée sur l'audio, conçue spécifiquement pour les élèves aveugles et malvoyants du primaire et du secondaire. Elle a été développée par Crystal Yang, alors lycéenne, avec le soutien de matériel AI-PC et d'un traitement d'IA local fourni par Intel.
La plateforme a été co-conçue pendant environ un an à travers des entretiens structurés avec 20 enseignants spécialisés en accessibilité, issus de 8 écoles accueillant des élèves aveugles et malvoyants ; les chercheurs ont codé les transcriptions des entretiens en thèmes qui ont directement façonné trois fonctionnalités adaptatives — la difficulté des questions ajustée à la précision de l'élève, le rythme du contenu ajusté à la fréquence à laquelle un élève a besoin de répétition, et la présentation du contenu sous plusieurs formats (questions directes ou mise en situation dans le monde réel).
Un choix de conception délibéré en matière de confidentialité fait fonctionner les fonctions d'IA localement sur du matériel Intel plutôt que d'envoyer l'audio des élèves vers le cloud — un point notable étant donné la sensibilité de faire transiter les données vocales d'une population vulnérable par des serveurs tiers.
Audemy revendique aujourd'hui plus de 2 000 élèves aveugles ou malvoyants utilisateurs. Cependant, l'article évalué par les pairs décrivant sa conception ne présente aucune étude contrôlée des résultats : le seul chiffre de performance disponible (l'amélioration de 28 % de la note de mathématiques d'un élève en un mois) est une anecdote isolée, non un résultat d'étude, et les auteurs de l'article eux-mêmes précisent que le système ne peut pas encore interpréter des états émotionnels complexes, prendre des décisions sensibles au contexte à partir d'indices audio, ni fournir de retour tactile.
D'où proviennent les informations de cette pratique, et quand.