Piloto Global de Garantia de IA de Singapura — 16 testadores emparelhados com 17 implementadores de IA generativa em 10 setores

Em fevereiro de 2025, a Infocomm Media Development Authority (IMDA) de Singapura e a AI Verify Foundation lançaram o Global AI Assurance Pilot para explorar e estabelecer práticas de teste técnico de aplicações de IA generativa em implementações reais.
O piloto emparelhou 16 empresas especializadas em testes de IA com 17 implementadores de aplicações de IA generativa em 10 setores (incluindo finanças, saúde e setor público) e 9 geografias. Das aplicações, 12 eram de uso interno e 5 de cara externa, e 12 mantinham um humano no circuito.
O relatório principal (junho de 2025) concluiu que os implementadores se preocupavam sobretudo com a exatidão e robustez, os requisitos regulatórios e de conformidade específicos de cada caso de uso e a segurança dos conteúdos. Raramente se usaram conjuntos de dados de referência genéricos; predominaram dados de teste específicos do caso de uso. A revisão humana e o LLM-como-juiz foram os dois métodos de avaliação mais populares, exigindo o segundo um desenho cuidadoso e calibração humana.
Os resultados alimentaram um Kit Inicial de Testes para aplicações de IA generativa e um Global AI Assurance Sandbox subsequente. Limites: os resultados são perceções descritivas de profissionais baseadas em 17 casos e as abordagens de teste dependem muito do contexto; não são reportadas métricas de resultados ou de valor público.