SyRI vinculaba datos de ciudadanos para señalar riesgo de fraude de prestaciones en barrios más pobres. En 2020, un tribunal holandés lo detuvo por violar el derecho a la privacidad (CEDH Art. 8) — un caso de advertencia histórico en IA del sector público.
Details
Promoter
Government of the Netherlands (Ministry of Social Affairs)
System Risico Indicatie (SyRI) combinaba grandes volúmenes de datos de ciudadanos para generar indicaciones de riesgo de fraude de prestaciones, desplegado en barrios de mayoría de bajos ingresos.
El 5 de febrero de 2020, el Tribunal de Distrito de La Haya ordenó su cese, decidiendo que la legislación era ilegal: el sistema era demasiado opaco, recopilaba demasiados datos y no logró establecer un equilibrio justo con el derecho a la vida privada conforme al Artículo 8 de la Convención Europea de Derechos Humanos. Un experto de la ONU lo llamó una advertencia contra las "distopías de bienestar digital" que espían a los pobres.
Se incluye aquí como un anti-modelo de precaución: obtiene calificaciones bajas en todos los aspectos porque carecía de transparencia, proporcionalidad y salvaguardas adecuadas — exactamente los fallos que una práctica responsable de IA del sector público debe evitar.
Implementation
Implementation detail (cost, timeline, staffing, conditions for success) is not yet available for this practice.
Data sources
Where this practice's information was retrieved from, and when.
Since 2011, Ireland's Revenue Commissioners have used AI risk scoring (REAP) to target tax-compliance interventions; 290,000 data-analytics-driven interventions in 2023 …