AI Beleid7 minGevorderd

Laat jij software over mensen beslissen? Dan geldt artikel 22

De AP beboette Uber met 825 miljoen voor automatische blokkades zonder menselijke check. Artikel 22 AVG kent geen ondergrens. Zo weet je of je het raakt.

Miniatuur diorama-illustratie bij artikel 'Laat jij software beslissen over mensen? Dan geldt artikel 22 ook voor jou'

De boete van 825 miljoen euro die de Autoriteit Persoonsgegevens vorige week aan Uber oplegde, leest als nieuws over een techgigant. Dat is het ook. Maar de regel waarop hij is gebaseerd, is geschreven voor iedereen die met een systeem over mensen beslist — en die regel kent geen ondergrens voor bedrijfsgrootte.

Waar Uber tegenaan liep

Tussen 2018 en 2022 deactiveerde Uber accounts van chauffeurs die door zijn systemen van fraude werden verdacht. Dat gebeurde via automatische systemen, zonder dat een mens die beslissing toetste en zonder de chauffeurs er goed over te informeren (Bron: Autoriteit Persoonsgegevens). Uber gaat in beroep, noemt de boete disproportioneel en zegt dat er inmiddels wel mensen bij zulke beslissingen betrokken zijn.

Waar het juridisch om draait is artikel 22 van de AVG. Kort samengevat: je mag niet onderworpen worden aan een besluit dat uitsluitend op geautomatiseerde verwerking berust en dat je in aanzienlijke mate treft. De betrokkene heeft recht op menselijke tussenkomst, op uitleg, en op bezwaar.

Beginner-tip:je hoeft hiervoor geen AI te gebruiken. Artikel 22 gaat over geautomatiseerde besluitvorming, en een puntensysteem in een Excel-macro telt net zo goed als een taalmodel. Wat telt is of er een computer beslist en of dat besluit iemand raakt.

De vraag die je jezelf moet stellen

Niet: “gebruiken wij AI?” Maar: komt hier een besluit tot stand dat iemand aanzienlijk raakt, en kan een mens dat besluit daadwerkelijk anders maken?

Loop je eigen processen langs. In het MKB komt dit vaker voor dan mensen denken:

  • Werving en selectie. Een ATS dat cv’s scoort en onder een drempel automatisch afwijst. Als niemand die afwijzingen nog ziet, is dat een geautomatiseerd besluit over iemands baan.
  • Klantacceptatie en krediet. Een risicoscore die bepaalt of iemand op factuur mag kopen of een abonnement krijgt.
  • Fraude- en misbruikdetectie. Een regel die accounts blokkeert bij afwijkend gedrag. Precies het Uber-scenario, in het klein.
  • Verlenging en opzegging. Software die contracten of huurovereenkomsten automatisch niet verlengt op basis van een gedragsscore.
  • Planning en beoordeling. Een systeem dat prestaties scoort en die score doorgeeft aan een beoordelingsgesprek of aan roosterverdeling.

Zit je in een van deze categorieën, dan heb je drie dingen te regelen.

WatHoe je het aantoonbaar maakt
Menselijke tussenkomstEen bevoegd persoon beoordeelt en kan overrulen; leg vast hoe vaak dat gebeurt
Informatie voorafPrivacyverklaring vermeldt de geautomatiseerde besluitvorming en de globale logica
Bezwaar achterafEen bereikbaar kanaal, een reactietermijn, en een dossier per bezwaar

Waarom “iemand kijkt ernaar” meestal niet genoeg is

Het woord dat in de wet het meeste werk doet is betekenisvol. Toezichthouders kijken niet of er een mens in het proces zit, maar of die mens er iets toe doet.

Een medewerker die tweehonderd geflagde gevallen per dag afvinkt, is geen beoordelaar maar een doorgeefluik. Iemand die het advies van het systeem niet kan overrulen zonder toestemming van drie lagen erboven, evenmin. En iemand die niet ziet wélke signalen tot de flag hebben geleid, kan de zaak per definitie niet beoordelen.

Er is een simpele meting die dit zichtbaar maakt: hoe vaak wijkt je beoordelaar af van het systeemadvies? Staat die teller op nul over de laatste zeshonderd gevallen, dan heb je geen menselijke tussenkomst. Dan heb je een rubberstempel met een salaris. Dat is geen juridisch spitsvondigheid maar een operationeel signaal dat je zelf kunt aflezen voordat een toezichthouder het doet.

Gevorderden:de uitzonderingen op artikel 22 zijn noodzaak voor een overeenkomst, wettelijke grondslag, of uitdrukkelijke toestemming. Ook dan blijf je verplicht tot passende waarborgen, waaronder het recht op menselijke tussenkomst en bezwaar. De uitzondering haalt de verplichting dus niet weg, hij verplaatst hem. Wie zich erop beroept, moet kunnen uitleggen waarom het besluit noodzakelijk was en niet minder ingrijpend kon.

Wat je deze week kunt doen

Begin niet met beleid. Begin met een inventarisatie van een halve dag.

Zet op één A4 welke systemen in je bedrijf een uitkomst produceren die iemand raakt: sollicitanten, klanten, huurders, leveranciers, medewerkers. Zet erachter wie de uitkomst ziet, wie hem kan wijzigen, en of dat het afgelopen kwartaal ook echt is gebeurd. Waar het antwoord op die laatste vraag “nee” of “geen idee” is, ligt je werk.

Daarna pas de tekstuele kant: je privacyverklaring aanvullen, en bij afwijzingen of blokkades een regel opnemen die vertelt dat er geautomatiseerd is besloten en hoe iemand bezwaar maakt.

En houd in het achterhoofd dat er een tweede regime aankomt. Werving- en selectiesystemen vallen onder de EU AI Act in de categorie hoog risico, met eigen documentatie- en toezichtsverplichtingen bovenop de AVG. Welke Nederlandse toezichthouders daarbij horen, zetten we uiteen in EU AI Act: welke 10 Nederlandse toezichthouders jouw MKB raken, en het risiconiveau van je eigen tool bepaal je met AI Act: in welk risiconiveau valt jouw AI-tool?. De bredere duiding van de Uber-zaak staat op Het Laatste AI Nieuws.

Veelgestelde vragen

Valt mijn sollicitatiefilter onder artikel 22 AVG?

Dat hangt af van wat er met de uitkomst gebeurt. Sorteert de software cv's en kijkt een recruiter daarna zelf naar de hele stapel, dan is er geen sprake van een uitsluitend geautomatiseerd besluit. Wijst het systeem kandidaten definitief af zonder dat iemand die afwijzingen nog kan zien of terugdraaien, dan wel — afwijzing voor een baan geldt als een besluit dat iemand aanzienlijk raakt. De praktische vraag die je jezelf stelt: kan een medewerker de beslissing van het systeem daadwerkelijk terugdraaien, en gebeurt dat ook weleens?

Ik ben een klein bedrijf. Loop ik echt risico op zo'n boete?

Niet op 825 miljoen euro. Boetes onder de AVG schalen mee met de omzet, met een maximum van 20 miljoen euro of 4 procent van de wereldwijde jaaromzet, afhankelijk van wat hoger is. Voor een MKB-bedrijf zijn de reële bedragen ordes van grootte kleiner. De verplichting zelf is echter identiek: artikel 22 kent geen ondergrens voor bedrijfsgrootte. En het grootste risico voor een kleiner bedrijf is doorgaans niet de boete maar de klacht — een afgewezen sollicitant of geblokkeerde klant die naar de AP stapt kost je maanden aan correspondentie.

Wat is betekenisvolle menselijke tussenkomst precies?

Een persoon die bevoegd is om anders te beslissen dan het systeem adviseert, die daarvoor de relevante informatie krijgt, en die er de tijd voor heeft. Iemand die 200 flags per dag moet afvinken is dat feitelijk niet. Bij de Uber-zaak is dit exact het punt waar het misging: de deactivering liep via automatische systemen. Wil je aantoonbaar voldoen, log dan hoe vaak een beoordelaar afwijkt van het systeemadvies. Staat die teller structureel op nul, dan heb je een probleem dat je zelf kunt zien aankomen.

Moet ik klanten en sollicitanten hierover informeren?

Ja. Artikel 13 en 14 AVG verplichten je te melden dát er geautomatiseerde besluitvorming plaatsvindt, plus nuttige informatie over de onderliggende logica en de verwachte gevolgen. Dat hoort in je privacyverklaring en, bij een concrete afwijzing of blokkade, in de mededeling zelf. Bij Uber was het gebrek aan informatievoorziening een expliciet onderdeel van het oordeel van de toezichthouder.

Hoe verhoudt dit zich tot de EU AI Act?

Het zijn twee regimes naast elkaar, niet in plaats van elkaar. De AVG regelt wat je met persoonsgegevens mag en geldt al sinds 2018 — daar hoort artikel 22 bij. De AI-verordening regelt wat een AI-systeem moet kunnen en welke documentatie erbij hoort, en komt gefaseerd binnen. AI-systemen voor werving, selectie en personeelsbeslissingen vallen in de AI Act onder hoog risico. In Nederland coördineren de AP en de RDI het toezicht op beide. Voldoen aan de één betekent dus niet automatisch voldoen aan de ander.

Bronnen

Waar deze informatie vandaan komt.