SyRI ligava dados dos cidadãos para sinalizar risco de fraude de assistência social em bairros mais pobres. Em 2020, um tribunal holandês o interrompeu por violar o direito à privacidade (CEDH Art. 8) — um caso cautela histórico em IA do sector público.
Details
Promoter
Government of the Netherlands (Ministry of Social Affairs)
System Risico Indicatie (SyRI) combinava grandes volumes de dados dos cidadãos para gerar indicações de risco de fraude de assistência social, implantado em bairros maioritariamente de baixa renda.
Em 5 de fevereiro de 2020, o Tribunal de Distrito de Haia ordenou a sua interrupção, decidindo que a legislação era ilegal: o sistema era muito opaco, recolhia dados em excesso e não conseguiu encontrar um equilíbrio justo com o direito à vida privada sob Artigo 8 da Convenção Europeia dos Direitos do Homem. Um especialista da ONU chamou-lhe um aviso contra as "distopias de bem-estar digital" que espiam os pobres.
É incluído aqui como um anti-modelo de precaução: classifica-se mal em todos os domínios porque faltava transparência, proporcionalidade e salvaguardas adequadas — exatamente as falhas que uma prática responsável de IA do sector público deve evitar.
Implementation
Implementation detail (cost, timeline, staffing, conditions for success) is not yet available for this practice.
Data sources
Where this practice's information was retrieved from, and when.
Since 2011, Ireland's Revenue Commissioners have used AI risk scoring (REAP) to target tax-compliance interventions; 290,000 data-analytics-driven interventions in 2023 …