ECA del Banco Mundial con Tutoría GPT-4 — Dos Años de Aprendizaje en Seis Semanas, Estado de Edo, Nigeria

Un ensayo controlado aleatorizado del Banco Mundial (Education Global Department, con el apoyo de la Mastercard Foundation) evaluó un sistema de tutoría de inglés basado en GPT-4 (a través de Microsoft Copilot) en nueve escuelas secundarias públicas de Benin City, estado de Edo, Nigeria, entre junio y julio de 2024. Ochocientos estudiantes de primer año de secundaria superior asistieron a sesiones extraescolares bisemanales que combinaban temas planteados por el profesorado con práctica asistida por IA.

Comprobar si el apoyo extraescolar de corta duración, asistido por IA, puede mejorar el dominio del idioma inglés entre estudiantes de escuelas secundarias públicas con pocos recursos, y evaluar los efectos de transferencia a otras asignaturas y la relación coste-eficacia frente a la tutoría impartida por personas.

Asignación aleatoria de los estudiantes a un grupo de tratamiento (tutoría con IA) y a un grupo de control; sesiones extraescolares bisemanales durante seis semanas, en las que el profesorado planteaba un tema antes de que el alumnado practicara inglés con Microsoft Copilot (GPT-4); durante la práctica con IA, el profesorado actuaba como facilitador ('director de orquesta') en lugar de instructor directo.

El alumnado del grupo de tratamiento superó de forma significativa al del grupo de control en el dominio del inglés (el resultado principal) y en conocimientos de IA/competencias digitales. La intervención de seis semanas produjo ganancias de aprendizaje de inglés equivalentes a dos años académicos completos de enseñanza convencional. Las ganancias se trasladaron al rendimiento en los exámenes de fin de curso en asignaturas no cubiertas por el programa. Un análisis de coste-eficacia determinó que el enfoque resulta considerablemente más barato por unidad de aprendizaje que intervenciones comparables con tutores humanos.

El Banco Mundial publicó un informe con siete lecciones, en el que recomienda una ampliación de escala condicionada al fortalecimiento de las capacidades docentes, a garantías de privacidad de datos y a un acceso fiable a la electricidad y a los dispositivos.