Course Signals — El sistema predictivo de alerta temprana de Purdue y su alegación de retención desmentida

Course Signals fue un sistema predictivo de alerta temprana creado en la Universidad de Purdue a partir de 2007, liderado por John Campbell, Kimberly Arnold y Matthew Pistilli. Combinaba datos demográficos del alumnado, el historial académico previo y el rendimiento actual en el curso (notas y participación registradas en el sistema de gestión del aprendizaje) en un único indicador tipo semáforo —rojo, amarillo o verde— mostrado al estudiante y al profesorado, que podía entonces iniciar un contacto personalizado, como correos electrónicos o derivación a servicios de apoyo.

En un artículo de 2012 presentado en la conferencia ACM Learning Analytics and Knowledge, Arnold y Pistilli informaron que el alumnado que cursó dos asignaturas con Course Signals tuvo un aumento de 21,48 puntos porcentuales en la tasa de graduación a seis años, en comparación con quienes no cursaron ninguna. Con base en esta afirmación, Course Signals pasó de asignaturas piloto a una implementación en toda la institución y fue ampliamente citado en la educación superior estadounidense como un ejemplo emblemático de la analítica del aprendizaje mejorando la retención.

En 2013, análisis independientes de Michael Caulfield (Washington State University Vancouver) y Alfred Essa (McGraw-Hill Education) cuestionaron el hallazgo. Caulfield demostró que, al expandirse Signals más allá del piloto original, la ventaja de retención desaparecía: el alumnado cursaba más asignaturas con Signals porque ya persistía, no persistía por causa de Signals. Essa construyó una simulación sustituyendo la participación en Signals por una asignación aleatoria de 'chocolate' y reprodujo el mismo patrón estadístico, demostrando que la correlación original era muy probablemente un artefacto del comportamiento de matrícula y no un efecto causal de la intervención. Purdue siguió operando Course Signals durante varios años más, pero el sistema fue finalmente descontinuado por el proveedor, y el acceso institucional terminó el 16 de diciembre de 2017.