evidoria

← Back to browse

Good practice

Santa by Riiid — Plataforma adaptativa de evaluación TOEIC y predicción de puntaje mediante IA

South Korea · Seoul · See the South Korea profile

Riiid Inc. (Seúl) aplica aprendizaje por refuerzo profundo al TOEIC: puntaje predicho en 6–10 preguntas; 2,5 millones de usuarios (TechCrunch 2021); estudio piloto 2014–17 (n=1.500) mostró +56 puntos; cohortes posteriores promediaron +165 puntos tras 20 h de estudio.

56 points
Mejora media de la puntuación del TOEIC (estudio beta) (2014-2017, mean 7.4 hours of study, n≈1,500)
165 points
Mejora media de la puntuación del TOEIC (cohortes posteriores, reportado por el CEO) (after 20 hours of study, cited May 2021)
2.5 million users
Usuarios confirmados (Corea y Japón) (as of May 2021)
0.7914 AUC
Precisión de predicción del modelo de seguimiento del conocimiento SAINT+ (LAK21, 2021)

Details

Maturity
Established
Promoter
Riiid Inc.
Period
2017–present
Keywords
edtech, standardised testing, adaptive assessment, AI

Context

Riiid Inc. se fundó en Seúl en 2014 y lanzó Santa en 2017 como una plataforma de preparación para el TOEIC (Test of English for International Communication) impulsada por IA, el examen de competencia en inglés más realizado en Corea del Sur y Japón. La plataforma utiliza aprendizaje por refuerzo profundo y algoritmos de seguimiento del conocimiento para modelar el perfil de competencia de cada alumno, predecir su puntuación actual en el TOEIC a partir de tan solo seis a diez preguntas respondidas, y generar un plan de estudio diario personalizado dirigido a las debilidades identificadas.

Activities

En 2020, Riiid se expandió internacionalmente con Riiid Labs (EE. UU.) y se asoció con Kaplan para la preparación del GMAT. La empresa pasó a llamarse Socra.ai en septiembre de 2025, mientras que la aplicación de consumo Santa sigue funcionando; la prueba de nivel básica y el plan de estudio son gratuitos, con funciones premium diarias por suscripción.

Results

Un estudio beta patrocinado por la empresa (2014-2017, n≈1.500) registró una mejora media de 56 puntos en la puntuación del TOEIC tras una media de 7,4 horas de estudio. El CEO Young-jun Choi citó ganancias medias de 165 puntos tras 20 horas en una entrevista con Korea Herald (mayo de 2021), basándose en más de 300 millones de interacciones de aprendizaje del TOEIC. TechCrunch confirmó de forma independiente 2,5 millones de usuarios en Corea y Japón, en torno a la ronda de financiación Serie D de 175 millones de dólares liderada por SoftBank (mayo de 2021). El conjunto de datos EdNet publicado por Riiid, que abarca 784.309 usuarios únicos, respalda el artículo revisado por pares sobre el modelo de seguimiento del conocimiento SAINT+ (LAK21, 2021), que reporta un AUC de 0,7914 para la tecnología de predicción central de la plataforma.

Conclusions

Santa es una plataforma comercial de larga trayectoria en expansión internacional, con una amplia base de usuarios y un historial de financiación/adopción confirmado de forma independiente, y su tecnología de predicción central cuenta con fundamento académico revisado por pares. Sin embargo, sus cifras principales de mejora de puntuación provienen de fuentes patrocinadas por la empresa o reportadas por el CEO, no de una evaluación de resultados independiente.

Implementation
Indicative cost
Low (< €50k) — Consumer-facing freemium model: basic level test and study plan are free; premium daily features are subscription-based. Corporate-level funding (USD 175 million Series D, May 2021, led by SoftBank) capitalised the company but is not a per-deployment implementation cost.
Time to results
Long (> 3 years) — Founded 2014, Santa launched 2017, international expansion (Riiid Labs USA, Kaplan partnership) from 2020, USD 175M funding round May 2021, corporate rebrand to Socra.ai September 2025 with the Santa app continuing to operate.
Staffing & skills
Riiid Inc. (Seoul, platform developer and operator), Riiid Labs (USA, established 2020 for international expansion), Kaplan (GMAT-preparation partnership, from 2020)

Conditions for success

  • Large underlying training dataset (over 300 million TOEIC learning interactions; EdNet dataset of 784,309 unique users) enabling robust knowledge-tracing models
  • Peer-reviewed algorithmic foundation (SAINT+, LAK21) lending technical credibility beyond marketing claims
  • Significant venture funding (USD 175 million SoftBank Series D, 2021) supporting international expansion and partnerships

Common failure modes

  • Headline score-improvement figures (56-point beta study, 165-point CEO claim) are company-sponsored or self-reported rather than independently verified, so the true causal learning effect is uncertain
  • The peer-reviewed academic evidence (SAINT+) validates prediction accuracy of the underlying algorithm, not that using the platform causes the claimed score gains

Where it fits

Governance type
private commercial edtech company, consumer-facing product
Scale
international (Korea, Japan, expanding to USA via Riiid Labs)
Income level
high-income (Korea, Japan, USA)

Data sources

Where this practice's information was retrieved from, and when.

Similar practices you may find useful