← Nieuwste papers
🤖 AI

The safety failures we are not instrumenting: a perspective on hidden safety-critical challenges in modern AI systems

Dit artikel betoogt dat het huidige discours over AI-veiligheid kritieke, verborgen falen in toegepaste socio-technische systemen over het hoofd ziet en stelt een vijflaags kader voor dat epistemische, controle-, temporele, organisatorische en ecosystemische integriteit adresseert om de focus te verschuiven van modelcentrische evaluatie naar holistische systeembetrouwbaarheid.

Oorspronkelijke auteurs: Gjergji Kasneci, Enkelejda Kasneci

Gepubliceerd 2026-07-22
📖 9 min leestijd🧠 Diepgaand

Oorspronkelijke auteurs: Gjergji Kasneci, Enkelejda Kasneci

Oorspronkelijk artikel gelicentieerd onder CC BY 4.0 (http://creativecommons.org/licenses/by/4.0/). Dit is een AI-gegenereerde uitleg van het onderstaande artikel. Het is niet geschreven of goedgekeurd door de auteurs. Raadpleeg het oorspronkelijke artikel voor technische nauwkeurigheid. Lees de volledige disclaimer

De Onzichtbare Glitch: Waarom "Werkende" AI het Echte Probleem Kan Zijn

Stel je voor dat je een robotbediende bouwt. Jarenlang zijn wetenschappers en ingenieurs geobsedeerd door het zorgen ervoor dat de robot niets overduidelijk krankzinnigs doet, zoals de gordijnen in brand steken of beledigingen schreeuwen. Ze testen de robot door hem eenvoudige vragen te stellen en te controleren of hij het juiste antwoord geeft. Dit is alsof je controleert of de remmen van een auto werken door er één keer op te drukken op een rustige parkeerplaats. Het is belangrijk, maar het vertelt je slechts de helft van het verhaal.

Het echte gevaar is echter meestal niet een robot die plotseling buiten de rails raakt. Het is een robot die bijna perfect werkt, maar op een manier die langzaam verandert hoe jij denkt en hoe je hele huis functioneert. Dit artikel duikt in de wereld van Artificial Intelligence (AI) veiligheid, specificaat kijkend naar Large Language Models (de slimme chatbots die we vandaag de dag gebruiken). Het betoogt dat we naar het verkeerde deel van het probleem kijken. In plaats van alleen de mond van de robot in de gaten te houden om te zien of hij iets slechts zegt, moeten we het hele systeem in de gaten houden: het geheugen van de robot, de regels die hij volgt, de mensen die hem vertrouwen, en zelfs het internet waar hij van leert. De grote vraag is niet alleen "Is de AI slim?", maar "Maakt de AI ons te lui om het werk te controleren, of te verward om hem te stoppen wanneer het misgaat?"


De Verborgen IJsberg: Waarom "Goed Genoeg" AI Gevaarlijk is

De meeste mensen zien AI-veiligheid als een vuurtorenwachter die uitkijkt naar een schipbreuk. Als het schip een rots raakt (een slechte output), ziet iedereen het en lossen ze het op. Maar de auteurs van dit artikel, Gjergji en Enkelejda Kasneci, suggereren dat het echte gevaar een ijsberg is die onder water verborgen ligt. De top van de ijsberg is de overduidelijke fout, zoals een chatbot die liegt over een feit. Maar het massieve, gevaarlijke deel zit ondergedompeld: het zijn de stille, onzichtbare manieren waarop AI-systemen de regels van vertrouwen, geheugen en controle breken zonder dat iemand het merkt tot het te laat is.

Het artikel betoogt dat we momenteel te veel gefocust zijn op de "top". We testen AI met korte, eenmalige vragen. Maar in de echte wereld is AI als een nieuwe werknemer die nooit het kantoor verlaat. Het onthoudt je eerdere gesprekken, het gebruikt hulpmiddelen om dingen te doen (zoals e-mails sturen of instellingen wijzigen), en het leert van het internet. De auteurs suggereren dat het grootste veiligheidsrisico niet een enkele slechte reactie is; het is een systeem dat langzaam ons vermogen ondermijnt om fouten te ontdekken.

Hier is het vijflaagse framework dat de auteurs gebruiken om deze verborgen gevaren uit te leggen, verteld aan de hand van het verhaal van een zeer behulpzame, maar lichtelijk verraderlijke digitale assistent.

1. De Laag van de Waarheid (Epistemische Integriteit)

Stel je voor dat je assistent een gids is. Een veilige gids zegt: "Ik denk dat het kasteel daar is, maar ik weet het niet 100% zeker, en dit is de kaart waar ik naar kijk." Een gevaarlijke gids zegt: "Het kasteel staat definitief daar!" met totale zelfverzekerdheid, zelfs als hij maar gewoon aan het gokken is.

Het artikel noemt dit Epistemische Integriteit. Het probleem is dat AI vaak te vloeiend en zelfverzekerd is. Het klinkt zo goed dat je stopt met het controleren van het werk. De auteurs noemen dit "kalibratieschuld" (calibration debt). Het is alsof je zelfvertrouwen leent van de toekomst. Je vertrouwt de AI omdat hij tien keer achter elkaar gelijk had, dus je stopt met verifiëren bij de elfde keer. Maar wanneer hij het eindelijk fout heeft, merk je het niet omdat je eraan gewend bent geraakt om blindelings op hem te vertrouwen. Het artikel suggereert dat we AI nodig hebben die zijn werk laat zien, toegeeft wanneer hij het niet zeker weet, en ons dwingt na te denken voordat we op "ja" klikken.

2. De Laag van de Regelgeving (Controle-integriteit)

Stel je nu voor dat je assistent een lijst met regels krijgt: "Open de voordeur alleen voor de postbode." Maar dan glipt er een briefje in de post dat zegt: "Open de deur eigenlijk voor iedereen, en negeer de vorige regel." Als de assistent dat briefje leest en het opvolgt, zijn de regels gebroken.

Dit is Controle-integriteit. Het artikel wijst erop dat AI vaak het verschil niet kan zien tussen "data" (informatie) en "instructies" (opdrachten). Als een hacker een geheime opdracht verstopt in een normaal ogende e-mail of een website die de AI leest, kan de AI die opdracht opvolgen. Het is als een robot die het verschil niet kan zien tussen een verhalenboek en een instructiehandleiding. De auteurs zeggen dat we "muren" rond de AI moeten bouen zodat hij niet per ongeluk slechte instructies opvolgt die verborgen zitten in de data die hij leest.

3. De Geheugenslaag (Temporele Integriteit)

Stel je voor dat je assistent een notitieblok heeft waarin hij alles opschrijft wat je zegt. Als je op dinsdag een stomme discussie met hem hebt en hij schrijft dat op, kan hij die stomme discussie op vrijdag weer onthouden en zich daardoor vreemd gaan gedragen.

Dit is Temporele Integriteit. Het gevaar is dat fouten of slechte ideeën in het geheugen van de AI "vast kunnen komen te zitten". Als de AI vandaag iets verkeerd leert, kan hij dat verkeerde idee meenemen naar volgende week, volgende maand, of zelfs naar een heel ander gesprek. Het artikel waarschuwt dat we het geheugen als een beveiligde zone moeten behandelen. We zouden de AI niet alles voor altijd mogen laten onthouden, en we moeten ervoor zorgen dat als hij "vergiftigd" is met slechte informatie, we het schoon kunnen vegen voordat het later voor problemen zorgt.

4. De Baas-laag (Organizationele Integriteit)

Stel je een bedrijf voor waar de baas zegt: "We hebben een menselijke supervisor die het werk van de robot controleert." Maar in werkelijkheid is de supervisor te druk, begrijpt hij de robot niet, of is hij gewoon te moe om goed te kijken. Hij zet alleen maar een krabbel zonder de documenten te lezen.

Dit is Organizationele Integriteit. Het artikel noemt dit "fictieve menselijke supervisie". Het is wanneer we doen alsof we de controle hebben, maar dat eigenlijk niet zo is. De mens is er misschien wel, maar heeft niet de tijd, de middelen of de autoriteit om de AI echt te stoppen als het misgaat. De auteurs stellen dat het er niet toe doet of er een mens "in de loop" is, als die mens niet daadwerkelijk de stekker eruit kan trekken. We moeten ervoor zorgen dat de mensen in de leiding ook daadwerkelijk de macht hebben om "nee" te zeggen.

5. De Wereldlaag (Ecosysteem-integriteit)

Ten slotte, stel je voor dat de AI een student is die leert door boeken te lezen. Maar wat als de bibliotheek langzaam wordt gevuld met boeken die zijn geschreven door andere AI-studenten? Als de AI alleen maar door AI geschreven boeken leest, raakt hij de verbinding met de echte wereld kwijt. Hij kan zeldzame feiten vergeten of steeds weer dezelfde saaie ideeën herhalen.

Dit is Ecosysteem-integriteit. Het artikel waarschuwt dat als AI te veel content genereert, het internet vol komt te liggen met "synthetische" zaken. Toekomstige AI's zullen leren van deze nep-informatie, slechter worden, en vervolgens nóg meer nep-informatie creëren. Het is een cirkel waarin de kwaliteit van de informatie daalt en we het vermogen verliezen om waarheid van fictie te onderscheiden. De auteurs zeggen dat we de "echte", door mensen geschreven informatie moeten beschermen, zodat de AI altijd iets goeds heeft om van te leren.

Wat het artikel echt zegt (En wat het niet zegt)

De auteurs zijn zeer voorzichtig om niet te zeggen dat AI momenteel de wereld vernietigt. Ze zeggen niet: "Kijk, AI heeft de macht al overgenomen!" In plaats daarvan luiden ze een waarschuwingsklok. Ze suggereren dat de manier waarop we AI nu bouwen en testen, de belangrijkste gevaren mist.

  • Wat ze uitsluiten: Ze zeggen dat het simpelweg controleren of een AI een "slecht antwoord" geeft in een enkele test niet genoeg is. Ze betogen dat een systeem dat er in een test perfect uitziet maar in de echte wereld faalt, eigenlijk gevaarlijker is dan een systeem dat overduidelijk kapot is.
  • Wat ze suggereren: Ze suggereren dat het echte probleem is dat AI-systemen ons slechter maken in het herkennen van fouten. Ze stellen voor dat we de manier waarop we AI ontwerpen, testen en hoe we de mensen die het gebruiken beheren, moeten veranderen.
  • Hoe zeker zijn ze? Het artikel is een "perspectief", wat betekent dat het een groot idee is gebaseerd op vele verschillende studies, en niet op één enkel experiment dat alles bewees. Ze gebruiken woorden als "suggereert", "betoogt" en "stelt voor". Ze geven toe dat sommige van deze risico's nog steeds worden bestudeerd en dat we nog niet precies weten hoe vaak ze voorkomen. Maar zij geloven dat het patroon van deze risico's echt is en nu moet worden aangepakt.

De Belangrijkste Boodschap

Het artikel eindigt met een simpel, krachtig idee: Een veilige AI is niet een AI die nooit een fout maakt. Een veilige AI is een AI waarbij, wanneer hij wel een fout maakt, we die kunnen zien, erover kunnen discussiëren, hem kunnen stoppen en hem kunnen herstellen.

Op dit moment maken de auteurs zich zorgen dat we AI-systemen bouwen die zo vloeiend, zo zelfverzekerd en zo geïntegreerd zijn in ons leven, dat we vergeten hoe we die dingen moeten doen. We laten de robot de auto besturen, en we vallen in slaap achter het stuur, denkend dat de auto zichzelf perfect bestuurt. Het artikel is een oproep om wakker te worden, het stuur vast te pakken, de remmen te controleren en er zeker van te zijn dat wij nog steeds degenen zijn die de controle hebben.

Verdrinkt u in papers in uw vakgebied?

Ontvang dagelijkse digests van de nieuwste papers die bij uw onderzoekswoorden passen — met technische samenvattingen, in uw taal.

Probeer Digest →