evidoria

← Retour à la liste

Bonne pratique Importée

Le retour du GPT-3.5 améliore la révision de texte et la motivation — Un essai randomisé avec des lycéens allemands

Allemagne · Kiel · Voir le profil de Allemagne

Preuves: Essai contrôlé randomisé Top 89% 27/100 · Demandez à Evidence Copilot à propos de cette pratique

Un essai randomisé mené auprès de 459 élèves allemands de seconde a montré qu'un retour d'écriture généré par GPT-3.5-turbo améliorait modestement la révision des rédactions (d=0,19), la motivation (d=0,36) et l'émotion positive (d=0,34) par rapport à l'absence de retour par IA — des effets réels mais modestes, dans un seul établissement.

459 students
Taille de l'echantillon d'eleves (2023)
0.19
Effet sur la performance de revision textuelle (d de Cohen)
0.36
Effet sur la motivation pour la tache (d de Cohen)
0.34
Effet sur l'emotion positive (d de Cohen)

Détails

Promoteur
IPN – Leibniz Institute for Science and Mathematics Education, Kiel
Période
2023
Région (NUTS)
DEF0
Mots-clés
assessment & feedback, natural language processing, secondary education, EFL writing instruction

Contexte

Des chercheurs de l'IPN - Institut Leibniz pour l'enseignement des sciences et des mathematiques, a Kiel, en Allemagne, ont mene un essai controle randomise pour tester si un retour genere par un grand modele de langage aide les eleves du secondaire a reviser leur ecriture.

Objectifs

L'essai a teste si le retour de GPT-3.5-turbo, calibre sur des principes de feedback fondes sur des donnees probantes, ameliore la qualite de la revision des redactions, la motivation et l'emotion par rapport a l'absence de retour par IA.

Activités

459 eleves de la 10e annee dans des etablissements de la filiere academique, etudiant l'anglais langue etrangere, ont redige des essais argumentatifs ; le groupe experimental a revise ses textes a l'aide du retour de GPT-3.5-turbo, tandis que le groupe temoin a revise sans ce retour. La qualite de la revision a ete notee par correction automatisee des redactions, ainsi que par des mesures autodeclarees de motivation et d'emotion.

Résultats

Le groupe beneficiant du retour par IA a obtenu de meilleures performances de revision textuelle (d de Cohen = 0,19), une motivation pour la tache plus elevee (d = 0,36) et des emotions positives plus marquees (d = 0,34) que le groupe temoin sans retour.

Conclusions

Il s'agit d'effets de taille modeste a faible issus d'un essai controle randomise mene dans une seule ecole et une seule matiere -- une preuve reelle mais limitee, a lire comme une preuve de concept initiale plutot que comme un systeme deja deploye a grande echelle.

Mise en œuvre
Coût indicatif
Faible (< 50 k€)
Délai jusqu’aux résultats
Court (< 1 an)
Personnel et compétences
IPN - Leibniz Institute for Science and Mathematics Education research team (Kiel)

Conditions de réussite

  • AI feedback tuned to evidence-based feedback principles rather than generic LLM output
  • Single subject/grade focus enabling a controlled comparison

Habituellement financé par

National / regional programmes

Pistes de financement indicatives pour des pratiques de ce type — vérifiez toujours les appels en cours et les règles d'éligibilité de chaque programme.

Kit de réplication

Artefacts réutilisables de cette pratique — tels que publiés par leurs sources.

Vous portez cette pratique ? Revendiquez-la — les porteurs vérifiés obtiennent un contact public sur la page et peuvent proposer des corrections.

Sources de données

D'où proviennent les informations de cette pratique, et quand.

Pratiques similaires qui pourraient vous être utiles