Thought leaders

Waarom Chatbot-Beveiligingsmaatregelen het Verkeerde Beveiligingsgebied zijn

mm
Voeg Unite.AI toe aan je voorkeursbronnen op Google

Enterprise AI is verder gegaan dan de proof-of-concept-fase. 23% van de organisaties gebruiken al agentic AI-systemen ergens in hun onderneming, en 62% zijn minstens aan het experimenteren met AI-agents. Dit zijn geen onderzoeksprojecten. Het zijn productiedeployments, ingebed in workflows die code-repositories, klantgegevens, interne API’s en operationele infrastructuur aanraken.

De reactie van de industrie op deze groei is voornamelijk gericht op wat er gebeurt voordat een agent live gaat. Leveranciers en onderzoekers hebben veel energie gestoken in pre-deployment-beveiligingsmaatregelen: publicatie van schaalbeleid, verharding van basismodellen, filtering van invoer, beveiliging van de AI-supply chain en afdwingen van uitlijning tijdens de trainingsfase. Grote AI-leveranciers hebben aanzienlijke investeringen gedaan in developer-georiënteerde beveiligingstools, waarmee een centraal uitgangspunt wordt versterkt: als het model en de invoer worden gecontroleerd, kan het downstream-risico worden beperkt.

Het is een redelijke instinct, maar een steeds onvollediger een.

De Prompt is geen Beveiligingsgebied

Beveiligingsmaatregelen die werken op het modelinterface bieden voornamelijk voordelen voor teams die de toepassingscode, het model en de onderliggende infrastructuur controleren. Ze bieden veel minder bescherming voor verdedigers die zijn belast met het beveiligen van AI-systemen die ze niet zelf hebben gebouwd en niet kunnen wijzigen. Dat is een aanzienlijke blind spot, en tegenstanders hebben deze al gevonden.

OpenAI’s laatste dreigingsinformatierapport documenteert precies deze dynamiek. Dreigingsactoren gebruiken ChatGPT en soortgelijke tools actief in productieomgevingen, niet door het uitvinden van nieuwe aanvalstechnieken, maar door AI in bestaande workflows in te bedden om sneller te kunnen handelen. Verkenningsmissies worden efficiënter. Sociale manipulatie wordt geschaald. Malware-ontwikkeling versnelt. Het aanvalsoppervlak is niet fundamenteel veranderd; de snelheid en het volume van exploitatie zijn dat wel.

Meer verklarend is hoe aanvallers reageerden toen die tools terugvochten. OpenAI zag dreigingsactoren die hun prompts snel muteerden, waarbij de onderliggende intentie behouden bleef, terwijl ze oppervlakte-varianten doorliepen om front-end-controles te omzeilen. Dit is een patroon dat beveiligingspraktijken eerder hebben gezien. Statische verdedigingen, of het nu gebaseerd is op antivirus of invoerfiltering, houden geen stand tegen tegenstanders die sneller itereren dan regelupdates kunnen volgen.

De uitdaging wordt verergerd als agents autonomie winnen. Moderne AI-agents opereren niet in een enkele uitwisseling. Ze voeren multi-stap-actievolgorden uit, waarbij ze legitieme tools en machtigingen aanroepen op manieren die in isolatie volledig normaal lijken. Een agent die met geldige referenties interne API’s opsomt, activeert geen alarm. Een agent die gevoelige gegevensopslag toegang heeft tijdens een routine-workflow, activeert geen onmiddellijke vlag. Elk individueel actie passeert de inspectie; het gevaar leeft in de combinatie en de volgorde.

Wanneer de Dreiging Downstream Verhuist

Beveiligingsteams die vandaag AI-implementaties verdedigen, hebben te maken met een structurele mismatch. De tools die voor hen beschikbaar zijn, zijn voornamelijk gebouwd om te redeneren over wat een model mag zeggen. Het werkelijke risico dat ze moeten beheren, is wat een agent doet over systemen, netwerken en identiteiten, eenmaal het is toegelaten en losgelaten in een productieomgeving.

Prompt-gebaseerde beveiligingsmaatregelen delen de fundamentele zwakheden van eerdere regel-gedreven beveiligingsbenaderingen. Ze zijn broos omdat ze afhankelijk zijn van het voorspellen van aanvalspatronen van tevoren. Ze zijn reactief omdat ze iemand nodig hebben die de dreiging heeft waargenomen en gecodeerd voordat de verdediging kan werken. En ze worden ingehaald door tegenstanders die AI-geassisteerde iteratie als standaardpraktijk hebben aangenomen. Een verdediger die afhankelijk is van invoerfiltering om een dreigingsactor te vangen die een taalmodel gebruikt om verse prompt-varianten te genereren, is in een fundamenteel verliespositie.

Het werkelijke risicooppervlak verschijnt na de implementatie. Agent-gedreven acties verspreiden zich door omgevingen op manieren die geen enkele pre-launch-test volledig kan voorzien. Agents ontmoeten randgevallen, interactie met gegevensbronnen waarvoor ze niet zijn ontworpen, ontvangen invoer van systemen buiten de oorspronkelijke architectuur en nemen beslissingen die over tijd accumuleren. Pre-deployment-testen zijn een momentopname; productie is een continue stroom. Alleen de momentopname verdedigen, betekent accepteren dat alles wat gebeurt in de stroom effectief ongecontroleerd is.

Het Beveiligingsgebied naar Gedrag van de Agent Verplaatsen

Het opbouwen van AI-resilientie vereist een andere kader en het doel moet niet zijn om het modelinterface te beschermen. Het moet zijn om de intentie van de aanvaller te detecteren door de waarneembare gevolgen van agent-acties. Dat is een betekenisvolle onderscheid. Intentie komt niet altijd aan het licht in wat een agent zegt of welke invoer hij ontvangt.

AI-systemen beveiligen moet verder gaan dan uitlijningscontroles en robuustheidsbeoordelingen tot continue beoordeling van hoe agents zich gedragen zodra ze interactie hebben met echte tools, echte API’s en echte gegevens. Statische evaluatie op implementatietijd is noodzakelijk maar onvoldoende. De dreigingsomgeving waarin een agent opereert, verandert constant. Agent-gedrag moet worden gemonitord met dezelfde continuïteit.

Dit is een probleem dat prompt-verharding niet kan oplossen. Het detecteren van kwaadwillige intentie zoals het ontstaat door actievolgorden, vereist modellen die complex, sequentieel gedrag in operationele omgevingen kunnen begrijpen. Diepe leermodellen die speciaal zijn ontwikkeld voor gedragsanalyse, kunnen dit doen op manieren die regel-gebaseerde systemen en traditionele SIEM-hulpmiddelen niet kunnen. Ze leren wat normaal lijkt over de volledige context van agent-activiteit en brengen afwijkingen aan het licht die aangeven dat er iets is veranderd, zelfs als geen enkele individuele actie een conventioneel alarm zou activeren.

De onderliggende logica geldt ongeacht de implementatiecontext: beveiliging verankerd op het prompt-niveau zal consistent verliezen van aanvallers die op het actie-niveau opereren. De verdediging moet verhuizen naar waar de dreiging werkelijk leeft.

Wat Beveiligingsteams Nu Moeten Doen

Voor beveiligingsleiders die proberen om voorop te lopen, kunnen een paar praktische verschuivingen de kloof tussen waar verdedigingen momenteel zitten en waar ze moeten zijn, dichten.

Beoordeel AI-veiligheid over de volledige toepassingsstack. Het basismodel is één laag. Even belangrijk is hoe agents zich gedragen zodra ze zijn geïmplementeerd in productie, welke tools ze aanroepen, welke machtigingen ze gebruiken en hoe die keuzes over tijd evolueren. Beveiligingsbeoordelingen die stoppen bij de modelgrens, laten het operationele oppervlak grotendeels ongeïnspecteerd.

Enforceer het minste privilege op agent-niveau. AI-agents moeten alleen toegang hebben tot de tools, API’s en gegevens die nodig zijn voor hun aangewezen functie. Deze beperking is belangrijk, zelfs als de uitvoer van de agent onschuldig lijkt. Het beperken van de reikwijdte vermindert de blast radius van een gecompromitteerde agent en creëert duidelijkere gedragsbaselines die anomaliedetectie effectiever maken.

Behandel agents als identiteiten die telemetrie genereren. Elke actie die een agent uitvoert, is een gegevenspunt. Beveiligingsteams moeten detectielogica bouwen rond agent-geïnitieerde actieketens, niet alleen de gebruikersprompts die eraan voorafgaan. Deze herschikking verschuift monitoring van wat iemand de agent heeft gevraagd te doen naar wat de agent werkelijk doet, waar de intentie van de aanvaller zichtbaar wordt.

Investeer in continue gedragsmonitoring met detectiemodellen die speciaal zijn ontwikkeld voor deze taak. Het identificeren van kwaadwillige intentie zoals het ontstaat door actievolgorden, vereist gespecialiseerde capaciteit. Conventionele monitortools waren gebouwd voor menselijke activiteitspatronen. Agent-gedrag, met zijn snelheid, volume en multi-stapstructuur, vraagt om detectie-infrastructuur die speciaal is ontwikkeld met die context in gedachten.

Prioriteer collectieve verdediging. AI-gedreven aanvalstechnieken evolueren sneller dan enige enkele organisatie kan bijhouden. Gedeelde onderzoek, open samenwerking en community-dreigingsinformatie zijn niet optionele complementen van een AI-beveiligingsstrategie; ze zijn core-inputs. De verdedigers die up-to-date blijven, zijn degene die bijdragen aan en putten uit collectieve kennis.

Gedragsbeveiliging Levert Echt Wat

Voor beveiligingsteams die deze verschuiving maken, is de operationele opbrengst concreet. Het verankeren van detectie in agent-gedrag in plaats van model-uitvoer, maakt het mogelijk om kwaadwillige intentie eerder te identificeren, zelfs als aanvallen stiekem, adaptief of versleuteld zijn. Aanvallers die hun prompts met succes muteren voorbij invoerfilters, moeten nog steeds handelen. Die acties laten sporen achter. Gedragsdetectie vindt die sporen voordat schade zich verspreidt.

Misschien wel het meest significant, biedt deze benadering organisaties een geloofwaardige weg om AI-agents op grote schaal te implementeren zonder evenredig beveiligingsrisico te accepteren. De vraag die veel ondernemingen tegenhoudt, is niet of AI-agents waarde kunnen leveren; het is of ze kunnen worden geïmplementeerd met voldoende vertrouwen dat de beveiligingspositie niet verslechtert naarmate de implementatie groeit. Gedragsbeveiliging, gebaseerd op hoe agents werkelijk opereren in plaats van op wat invoer ze ontvangen, biedt dat vertrouwen op een manier die prompt-gebaseerde controles structureel niet kan.

De beveiligingsgrens was getrokken op de verkeerde plaats, en die fout was logisch toen AI een tool was die wachtte op invoer. Het wacht niet langer, agente-systemen handelen, ketenen, escaleren en accumuleren over omgevingen heen die geen enkele pre-deployment-test had voorzien. Organisaties die dit het eerst erkennen, zullen degene zijn die AI met vertrouwen schalen. Iedereen anders zal de komende jaren ontdekken, inbraak na inbraak, dat het controleren van wat een model zegt nooit hetzelfde was als het controleren van wat het doet.

Mayank Kumar is de Founding AI Engineer bij DeepTempo, waar hij de ontwikkeling van het fundamentale Log Language Model (LogLM) van het bedrijf leidt. Met een sterke academische en onderzoeksachtergrond in generatieve en multimodale AI, brengt hij gespecialiseerde expertise om domeinspecifieke modellen te bouwen die de dreigingsdetectie en -reactie in cybersecurity-omgevingen verbeteren.