evidoria

← Retour à la liste

Bonne pratique Importée

Notation automatique des rédactions STAAR au Texas — la TEA confie toutes les réponses écrites à un moteur de TAL, avec 25 % de double correction humaine

États-Unis d'Amérique · Austin · Voir le profil de États-Unis d'Amérique · Voir le profil de Austin

Top 80% 33/100 · Demandez à Evidence Copilot à propos de cette pratique

Depuis le printemps 2024, la Texas Education Agency note les réponses ouvertes du STAAR avec un moteur de TAL et fait recorriger environ 25 % par des humains, pour 15 à 20 M$ d'économies par an. La hausse des zéros et les doutes d'équité en font un cas d'alerte.

Notation automatique des rédactions STAAR au Texas — la TEA confie toutes les réponses écrites à un moteur de TAL, avec 25 % de double correction humaine

Détails

Promoteur
Texas Education Agency (TEA)
Période
2023–2025
Mots-clés
K-12 assessment, automated scoring, natural language processing, state testing

Description

La Texas Education Agency a utilisé un moteur de notation automatique de façon limitée en décembre 2023, puis l'a appliqué aux questions à réponse construite (ouvertes) du test STAAR en lecture, écriture, sciences et sciences sociales à partir du printemps 2024. Le moteur repose sur le traitement automatique du langage : les ordinateurs notent d'abord toutes les réponses, puis environ 25 % sont recorrigées par des humains. Les réponses pour lesquelles le moteur manque de confiance, ou au contenu inhabituel (argot, texte dans une autre langue), sont automatiquement orientées vers des correcteurs humains ; les administrateurs examinent les résultats chaque jour et envoient des échantillons aléatoires à une vérification humaine.
La TEA fait état de 15 à 20 millions de dollars d'économies annuelles ; le nombre de correcteurs temporaires est passé d'environ 6 000 en 2023 à moins de 2 000 en 2024. Les familles peuvent demander une recorrection pour 50 dollars, remboursés si la note augmente.
Le déploiement est contesté. Des articles sur l'examen d'English II de l'automne 2023 relèvent que près de 80 % des réponses écrites ont reçu zéro, contre environ 25 % au printemps 2023, quand des humains notaient. La TEA a attribué l'écart à la variation saisonnière des candidats (plus de redoublants à l'automne), tandis que des surintendants et enseignants se demandent si le moteur récompense l'originalité et traite équitablement l'écriture créative ; la presse sur le test remanié signale aussi que les élèves noirs ont la plus forte proportion de zéros. Les preuves sont descriptives et surtout fournies par l'agence ; les sources citées ne mentionnent aucun audit indépendant de la précision ou des biais du moteur, d'où une note faible en équité et en transparence malgré l'échelle et l'effet sur les coûts.

Mise en œuvre

Les détails de mise en œuvre (coût, calendrier, personnel, conditions de réussite) ne sont pas encore disponibles pour cette pratique.

Vous portez cette pratique ? Revendiquez-la — les porteurs vérifiés obtiennent un contact public sur la page et peuvent proposer des corrections.

Sources de données

D'où proviennent les informations de cette pratique, et quand.

Pièces jointes

Pratiques similaires qui pourraient vous être utiles