Piloto Global de Garantía de IA de Singapur — 16 evaluadores emparejados con 17 desplegadores de IA generativa en 10 sectores

En febrero de 2025, la Infocomm Media Development Authority (IMDA) de Singapur y la AI Verify Foundation lanzaron el Global AI Assurance Pilot para explorar y establecer prácticas de prueba técnica de aplicaciones de IA generativa en despliegues reales.
El piloto emparejó a 16 empresas especializadas en pruebas de IA con 17 desplegadores de aplicaciones de IA generativa en 10 sectores (incluidos finanzas, salud y sector público) y 9 geografías. De las aplicaciones, 12 eran de uso interno y 5 de cara al exterior, y 12 mantenían a una persona en el circuito.
El informe principal (junio de 2025) concluyó que los desplegadores se preocupaban sobre todo por la exactitud y robustez, los requisitos regulatorios y de cumplimiento específicos de cada caso de uso y la seguridad de los contenidos. Rara vez se usaron conjuntos de datos de referencia genéricos; predominaron los datos de prueba específicos del caso de uso. La revisión humana y el LLM como juez fueron los dos métodos de evaluación más populares, y el segundo requiere un diseño cuidadoso y calibración humana.
Los resultados alimentaron un kit inicial de pruebas para aplicaciones de IA generativa y un posterior Global AI Assurance Sandbox. Límites: los resultados son aprendizajes descriptivos de profesionales basados en 17 casos y los enfoques de prueba dependen mucho del contexto; no se reportan métricas de resultados ni de valor público.