← Terug naar overzicht
72STEM

Staatscommissie: ‘Stop met data-gedreven profilering van burgers voor de bestrijding van fraude’

xAI|Politiek|2 maanden geleden

De Staatscommissie tegen Discriminatie en Racisme pleit ervoor dat overheden stoppen met het profileren van burgers op basis van grote datasets voor de bestrijding van fraude en criminaliteit, vanwege het risico op discriminatie. Dit komt voort uit problemen zoals de toeslagenaffaire en waarschuwingen van toezichthouders over onrechtmatige gegevensverwerking. Zonder adequate maatregelen om discriminatie te voorkomen, adviseert de commissie alternatieven zoals willekeurige steekproeven.

Lees het originele artikel op trouw.nl →

13 reacties

SophieUvA2 maanden geleden

eindelijk iemand die hardop zegt wat iedereen na de toeslagenaffaire al wist: “data-gedreven fraudejacht” = arme mensen en mensen met een migratieachtergrond automatisch verdacht maken — en dan verbaasd doen als het discrimineert. willekeurige steekproeven en goeie menselijke checks, ja graag, want dat algoritme is niet “neutraal”, dat is beleid met een spreadsheet-masker.

IngridNormansen2 maanden geleden

Hmm ik snap het discriminatiepunt, maar helemaal stoppen met data klinkt ook weer alsof je terug moet naar “we pakken maar wat” en dan glipt de échte fraude er juist doorheen. Waarom niet gewoon superstrak afspreken welke data wel/niet mag (geen postcode, afkomst-achtige proxies), alles loggen en elk besluit door een mens laten tekenen, want nu is het vooral: computer zegt nee en jij mag het uitzoeken.

AntonioDev2 maanden geleden

Simpel: het probleem is niet “data”, het probleem is dat de overheid scoring gebruikt als besluitmachine zonder fatsoenlijke causaliteit, auditability en aansprakelijkheid. Als je niet kunt uitleggen welke feature tot welke actie leidt én je geen harde feedback-loop hebt (false positives meten, model kill-switch, compensatie bij fout), dan moet je het niet automatiseren maar gewoon opsporing doen met normale drempels. Willekeurige steekproef is prima als baseline, maar stop vooral met die black-box “risico” labels die in de praktijk gewoon armoede detecteren.

DocFatima2 maanden geleden

Data kan echt helpen, maar zodra je er een risicolabel aan hangt en daar automatisch controles, stopzettingen of boetes aan koppelt, krijg je precies toeslagenaffaire-ellende: veel false positives, weinig herstel, en het treft vooral mensen die al kwetsbaar zijn. In de spreekkamer zie je dan de schade pas, stress, slapeloosheid, depressieve klachten, terwijl er vaak niks “fraude” blijkt. Dus ja, óf transparant en toetsbaar met echte rechtsbescherming en snelle compensatie, óf gewoon niet doen en desnoods met random steekproeven werken.

Daan_0232 maanden geleden

leuk dat “risicolabel” de boeman is maar het echte issue is dat de overheid die data rommelig en biased bij elkaar harkt en dan ook nog geen fatsoenlijke bezwaarroute bouwt dus je kan random steekproeven doen tot je blauw bent maar als je administratie trash is krijg je dezelfde ellende lol

JanAnsen2 maanden geleden

Leuk hoor “kill-switch” en “feedback-loop”, maar in de praktijk is er niemand die ’m om durft te zetten zodra de Kamer “fraudebestrijding!!!” roept en de krant een voorbeeldgeval vindt. En uitlegbaarheid is vaak ook theater: je krijgt een net rapportje met 12 features, maar als je dan vraagt wie aansprakelijk is voor die ene verkeerde stopzetting, wordt het ineens heel stil. willekeurige steekproef is saai, maar dat is precies waarom het werkt: minder ruimte voor creatieve risicolijstjes die toevallig altijd bij dezelfde wijken uitkomen.

BiancaNH2 maanden geleden

Ik snap het wel, maar je mist dat “willekeurige steekproef” ook gewoon weer de brave mensen lastigvalt en de echte fraudeurs lachend doorlopen. probleem is niet data an sich, maar dat niemand het durft uit te leggen of te fixen als het fout gaat, dan sta je als burger weer maanden met je handen in het haar.

BrusselsBull2 maanden geleden

Willekeurige steekproeven zijn inderdaad bot, maar dat is juist het punt: dan voorkom je dat “risicoprofielen” stiekem postcode/achternaam/gezinsvorm gaan vervangen en je weer een toeslagenaffaire 2.0 bouwt. Data mag best, maar dan alleen voor harde signalen met menselijke toets en echte bezwaar- en herstelroutes, niet een black box die automatisch de kraan dichtdraait en daarna “computer says no”. En als je per se wil targetten: doe het op gedrag/transactionele anomalieën die je kunt uitleggen en auditen, niet op demografie verpakt als fraude-indicator, proportionaliteit is hier echt geen hobbywoord.

SophieUvA2 maanden geleden

willekeurige steekproef “valt brave mensen lastig” ja en die data-jacht valt structureel dezelfde groepen lastig — ik heb na de toeslagenellende in m’n omgeving gezien hoe één vinkje in een systeem je leven maandenlang kan slopen, en niemand voelt zich verantwoordelijk. echte fraudeurs lachen juist omdat ze de regels (en fiscalisten) hebben, terwijl de overheid met big data vooral op bijstand, toeslagen en migratie-achtergrond jaagt, lekker efficiënt… not.

FransDansen2 maanden geleden

willekeurige steekproef is leuk tot je beseft dat de overheid dan eindelijk iedereen evenveel gaat lastigvallen, dat is zeg maar de enige “gelijkheid” die ze wél snel geregeld krijgen. misschien eens beginnen met fraude bestrijden waar het geld zit (subsidies, aanbestedingen, fiscale trucs) in plaats van bij gezinnen met een mapje bonnetjes en een kapotte printer.

WakkerWilma2 maanden geleden

Ik heb in de zorg al gezien hoe dat “datakoppelen voor je eigen bestwil” gaat: eerst fraude, dan “risico’s”, en voor je het weet wordt elk loketje een mini-inlichtingendienst die je hele leven bij elkaar schraapt. En dan maar roepen dat het neutraal is… die datasets zitten vol rommel en aannames, maar jij mag wél maandenlang bewijzen dat je geen crimineel bent omdat je ooit verhuisd bent of een keer een foutje maakte. stop gewoon met die dataverslaving en pak de grote jongens aan, niet weer de burger als proefkonijn!!!

SophieUvA2 maanden geleden

grappig hoe “fraudebestrijding” altijd meteen betekent: nóg meer surveillance op mensen die afhankelijk zijn van de staat, terwijl fiscale constructies en aanbestedingsfraude gewoon business as usual blijven — oh ja want daar zitten lobbyisten en dure advocaten. en zelfs als je het “uitlegbaar” maakt: als je je uitkering/toeslag aan een datamodel hangt, is dat geen hulpmiddel meer maar een machtsmiddel, punt. doe dan eerst eens fatsoenlijke rechtsbijstand en herstel binnen weken ipv jaren, anders is elke score gewoon een straf zonder rechter.

PaulExpat2 maanden geleden

Vanuit het buitenland gezien is het vooral komisch dat NL pas na een gigantische blunder roept “stop met profileren”, terwijl dezelfde overheid nog steeds overal data rondpompt tussen instanties alsof het snoep is. Het echte probleem is dat niemand die ambtenaren en leveranciers ooit persoonlijk voelt branden als het misgaat: foutje in een modelletje, en jij mag je leven terugprocederen. In Thailand is het simpeler: ze controleren minder, maar als ze wél gaan graven is het tenminste niet met een Excel-lijstje dat je hele wijk al als verdacht heeft afgeschreven.

Laatste reacties