Évaluation 'two-lane' de l'Université de Sydney pour l'ère de l'IA
Australie
Au lieu d'une course aux armements IA-détection qu'on ne peut pas gagner, Sydney a restructuré l'évaluation en deux voies — …
Afrique du Sud · Cape Town · Voir le profil de Afrique du Sud · Voir le profil de Cape Town
Preuves: Observationnel / avant-après Top 40% 53/100 · Demandez à Evidence Copilot à propos de cette pratique
Une équipe dirigée par l'université du Cap a affiné des modèles de reconnaissance vocale open source pour noter automatiquement la fluidité de lecture orale des petites classes en xhosa, à partir de 14 971 enregistrements d'élèves de la 1re à la 4e année en Afrique du Sud, atteignant environ 91 % d'efficacité diagnostique par rapport aux données annotées par des humains.
Les évaluations de la lecture en début de scolarité (EGRA) sont des tests de lecture orale individuels utilisés pour repérer les enfants en difficulté de littératie, et constituent l'outil standard dans les pays à revenu faible et intermédiaire, mais elles nécessitent des évaluateurs humains formés et sont rarement disponibles dans les langues africaines au-delà des quelques-unes disposant déjà d'un support de reconnaissance vocale.
Une équipe de recherche dirigée par l'Université du Cap, avec l'Université de Pretoria, la Western Sydney University, l'Universidade Federal de Pernambuco et la Macquarie University, s'est fixé pour objectif d'automatiser la notation EGRA pour l'isiXhosa, l'une des langues officielles d'Afrique du Sud.
Au cours d'un effort de collecte de données de 8 mois, soutenu par une subvention Grand Challenges de la Fondation Gates, l'équipe a rassemblé 14 971 enregistrements EGRA, soit plus de 19 heures de parole d'enfants, dans des écoles sud-africaines de la 1re à la 4e année ; trois évaluateurs humains indépendants ont d'abord validé l'approche de notation par rapport à un expert EGRA, puis les modèles de reconnaissance vocale affinés ont été comparés à ces données étiquetées par des humains.
Les évaluateurs humains ont atteint 85 % d'accord avec l'expert EGRA, et les modèles de reconnaissance vocale affinés ont atteint environ 91 % d'efficacité diagnostique par rapport aux données étiquetées par des humains.
L'évaluation publiée note qu'aucune configuration de modèle n'a minimisé simultanément les taux d'erreurs de faux positifs et de faux négatifs, ce qui signifie qu'un déploiement précoce impliquerait de troquer un type de classification erronée contre un autre, et que les travaux demeurent une validation au stade de la recherche plutôt qu'un système national d'évaluation opérationnel.
Philanthropic / foundation funding
Pistes de financement indicatives pour des pratiques de ce type — vérifiez toujours les appels en cours et les règles d'éligibilité de chaque programme.
Vous portez cette pratique ? Revendiquez-la — les porteurs vérifiés obtiennent un contact public sur la page et peuvent proposer des corrections.
D'où proviennent les informations de cette pratique, et quand.
Australie
Au lieu d'une course aux armements IA-détection qu'on ne peut pas gagner, Sydney a restructuré l'évaluation en deux voies — …
Croatie
Le projet BrAIn de CARNET, financé par le FSE+, a testé le premier programme d'IA de Croatie dans les écoles …
Royaume-Uni
Outil gratuit de Cambridge UP&A (sept. 2016) attribuant des niveaux CECRL A1–C2 aux textes d'apprenants et signalant les erreurs ; …
Brésil
Les écoles publiques de l'Espírito Santo ont utilisé la plateforme d'IA Letrus pour donner un retour rapide aux élèves préparant …
Ouvrir le copilote complet Fondé sur des pratiques citées — vérifiez toujours les sources.