SyRI ligava dados dos cidadãos para sinalizar risco de fraude de assistência social em bairros mais pobres. Em 2020, um tribunal holandês o interrompeu por violar o direito à privacidade (CEDH Art. 8) — um caso cautela histórico em IA do sector público.
Detalhes
Maturidade
Descontinuada
Promotor
Government of the Netherlands (Ministry of Social Affairs)
O System Risico Indicatie (SyRI) combinava grandes volumes de dados de cidadãos para gerar indicações de risco de fraude na segurança social, sendo utilizado sobretudo em bairros de baixos rendimentos nos Países Baixos.
Objetivos
O objetivo declarado do SyRI era detetar o risco de fraude na segurança social combinando e cruzando grandes volumes de dados de cidadãos.
Resultados
Em 5 de fevereiro de 2020, o Tribunal Distrital de Haia ordenou a suspensão do SyRI, considerando ilegal a legislação subjacente: o sistema era demasiado opaco, recolhia dados em excesso e não conseguia estabelecer um equilíbrio justo com o direito à vida privada previsto no artigo 8.º da Convenção Europeia dos Direitos do Homem. Um perito das Nações Unidas classificou-o como um aviso contra 'distopias de bem-estar digital' que espiam os pobres.
Conclusões
Trata-se de um antimodelo cautelar, incluído deliberadamente: deve pontuar baixo em todos os aspetos, porque careceu de transparência, proporcionalidade e salvaguardas adequadas — precisamente as falhas que uma prática responsável de IA no setor público deve evitar. O SyRI é um sistema descontinuado, derrubado pelos tribunais, e não um sistema em funcionamento, e é aqui documentado como uma lição sobre o que não replicar.
Implementação
Custo indicativo
Baixo (< 50 mil €)
Tempo até resultados
Médio (1–3 anos)
Equipa e competências
Government of the Netherlands (Ministry of Social Affairs)
Condições de sucesso
Transparent legal basis and published methodology for any risk-indication system
Proportionate data collection limited to what is necessary for the stated purpose
Adequate safeguards ensuring compliance with the right to private life under Article 8 ECHR
Modos de falha comuns
System ruled unlawful and halted by the District Court of The Hague on 5 February 2020
Too opaque: affected citizens could not understand how risk indications were generated
Collected disproportionate volumes of citizens' data relative to the stated purpose
Failed to strike a fair balance with the right to private life under Article 8 ECHR
Deployed mostly in lower-income neighbourhoods, prompting a UN expert warning against 'digital welfare dystopias' that spy on the poor
Habitualmente financiado por
National / regional programmes
Vias de financiamento indicativas para práticas deste tipo — verifique sempre os avisos abertos e as regras de elegibilidade de cada programa.
Implementa esta prática?
Reivindique-a —
implementadores verificados obtêm um contacto público na página e podem propor correções.
Fontes de dados
De onde foi obtida a informação desta prática, e quando.