Tankeledere

Fra Generative til Agentic AI: Skiftet fra Indholdrisiko til UdfÃļrelseseksponering

mm
FÃļj Unite.AI til dine foretrukne kilder pÃĨ Google
A photorealistic widescreen image of a modern Security Operations Center (SOC) where a single glowing data stream from a computer screen branches out into multiple autonomous pathways, representing the shift from generative AI to complex agentic AI workflows.

Enterprise AI udvikler sig hurtigt. Det, der startede som generative AI-kopiloter, der udarbejdede e-mails og sammenfattede dokumenter, er nu pÃĨ vej til at blive noget meget mere autonomet: systemer, der planlÃĶgger, beslutter og udfÃļrer opgaver pÃĨ tvÃĶrs af vÃĶrktÃļjer og miljÃļer.

Dette er skiftet fra generative til agentic AI. Det er at se risikoen forvandle sig.

GenAI introducerede indholdrisici, herunder hallucinationer, dataleaks via prompts og fordomsfulde output. Agentic AI-eksponering sker gennem dets autonome systemer, der har tilladelse, hukommelse og evnen til at fÃĨ adgang til alle tilgÃĶngelige vÃĶrktÃļjer i maskinens hastighed.

Dette er en mulighed for sikkerheds-, governance- og AI-fagfolk til at omvurdere deres stilling til disse nye risici.

Hvad er agentic AI-risiko?

Agentic AI-risiko henviser til de sikkerheds-, operations- og governance-risici, der stilles af AI-systemer, der opererer autonomt, ikke kun genererer tekst, men ogsÃĨ udfÃļrer multi-trins arbejdsprocesser pÃĨ enterprise-systemer.

I modsÃĶtning til traditionelle store sprogmodeller (LLM’er) kan agentic-systemer bryde opgaver ned i dynamiske arbejdsprocesser, foretage eksterne API-anmodninger og aktiverer interne applikationer, og gemme og hente hukommelse. De kan ogsÃĨ operere under delegueret identitet og kommunikere med andre agenter.

I andre ord er de mindre som chatbots og mere som junior-digitale medarbejdere. Dette reprÃĶsenterer en massiv Ãļgning i AI-agentens angrebsoverflade.

Generative vs agentic AI: Hvad ÃĶndrer sig?

Generative AI-risiko er centreret om output. Sikkerhedsteams stiller spÃļrgsmÃĨl som, om modellen lÃĶkker data, om den kan hallucinere, eller om skadelig eller ikke-sammenlignelig indhold genereres.

Mennesker er fast i lÃļkken. AI foreslÃĨr, mennesker godkender.

Agentic AI-risiko er handlingssorienteret. Nu mÃĨ sikkerhedsteams spÃļrge sig selv, hvilke systemer agenten kan interagere med, hvilke tilladelser den vil arve, hvor langt dens plan kan nÃĨ, og hvad der vil ske, hvis den bliver bedraget under udfÃļrelse.

Forskellen kan vÃĶre meget lille, men det er betydeligt: Generative AI skaber indhold. Agentic AI skaber konsekvenser. Dette er skiftet fra indholdrisiko til udfÃļrelseseksponering.

Hvordan udvider agentic AI enterprise-angrebsoverflader?

Agentic AI tilfÃļjer ikke bare en ny applikation. Det skaber en ny operationslag. Her er, hvordan angrebsoverfladen vokser:

1. Privilegerede AI-agenter

Der er mange agenter, der handler pÃĨ vegne af brugere eller servicekonti. NÃĨr omfanget af tilladelser ikke er stramt, bliver de vÃĶrdifulde mÃĨl.

Dette kan fÃļre til forvirrede stedfortrÃĶder-problemer, tilladelsesescalering og lateral bevÃĶgelse. Dette er et problem, nÃĨr cloud-, SaaS- og interne systemer giver dynamisk eller arvet adgang til agenter.

2. Dynamiske udfÃļrelsesveje

Kontrollflader i traditionelle apps er deterministiske. Kontrollflader i agentic AI-systemer er det ikke.

De tÃĶnker over mÃĨl, handlinger, reflekterer, forfiner og aktiverer vÃĶrktÃļjer pÃĨ en ikke-deterministisk mÃĨde. Dette fÃļrer til svÃĶrt-analyserede fejltilfÃĶlde, komplekse afhÃĶngighedsgrafer og kaskaderende fejl i multi-agent-systemer. Sikkerhedscontroller udviklet til deterministiske kontrollflader er ikke anvendelige her.

3. Varig hukommelse

Angrebsoverfladen, der skyldes agenthukommelse, er varig.

NÃĨr kort- eller langtids-hukommelse er kompromitteret, kan en ondsindet tilstand pÃĨvirke beslutninger pÃĨ tvÃĶrs af flere sessioner. Dette adskiller sig fra en enkelt injektion af en prompt, da hukommelseskorrigeringspersistence giver.

4. Maskin-hastigheds beslutningsrisici

Autonome agenter tager beslutninger i en hastighed, der er umulig at matche. Dette bringer maskin-hastigheds beslutningsudfordringer, sÃĨsom hurtig fejlpropagation, misbrugscykler langt hurtigere end menneskelig reaktion, og eskalering fÃļr detektering er mulig.

I multi-agent-systemer er omfanget af indflydelse hurtigt. En ondsindet agent kan udlÃļse en fejlkaskade i koordineringskÃĶder.

Hvorfor traditionelle kontroller fejler med agentic AI

De fleste traditionelle enterprise-sikkerhedsmodeller afhÃĶnger af statiske applikationer, forudsigelige kaldegrafer, menneskelig godkendelse og en klar adskillelse mellem databehandling og udfÃļrelse. Agentic AI gÃļr disse antagelser ugyldige.

Tag for eksempel en traditionel kontrol som inputvalidering. Dette sikrer grÃĶnsen for et system. Men agentic-risiko viser sig ofte i midten af en lÃļkke, i planlÃĶgnings-, refleksions- eller vÃĶrktÃļjsfasen.

Traditionel sÃĨrbarhedsskanning fokuserer ogsÃĨ pÃĨ infrastruktur og software. Men AI-udfÃļrelsesrisiko bor i den resonnerende og handlingsslag af agenten.

SpÃļrgsmÃĨlet er: Hvordan beskytter man noget, der kan vÃĶlge sin egen nÃĶste handling? Man kan ikke bare omringe kontroller omkring en enkelt modelkald. Man mÃĨ sikre workflowet.

Sikring af agentic AI: Hvad virker?

NÃĨr det kommer til at sikre agentic AI, mÃĨ der vÃĶre et skift fra perimeter-tÃĶnkning til livscyklus-tÃĶnkning. Agenter bÃļr ikke have lov til at fortolke mÃĨl uendeligt, og der er flere mÃĨder at opnÃĨ dette pÃĨ.

Etablering af tilladte sekvenser af mÃĨl, regulering af dybden af plan-udvidelses-trÃĶer, overvÃĨgning af resonansdrift og forbuddet mod selv-udfÃļrte mÃĨl uden for omfanget er alle essentielle kontroller. Uventede variationer i resonans er ofte forlÃļberne for manipulation.

HÃĶrdning af vÃĶrktÃļjsudfÃļrelse. VÃĶrktÃļjer er, hvor planen mÃļder virkeligheden, og sikkerhed behÃļver at dÃĶkke tilladelseskontroller fÃļr vÃĶrktÃļjsudfÃļrelse, sandbox-udfÃļrelsesmiljÃļer, streng parameter-validering og just-in-time-legitimations-overfÃļrsel. Hver vÃĶrktÃļjsudfÃļrelse skal logges som en fÃļrsteklasses sikkerhedsbegivenhed.

IsolÃĐr hukommelse og tilladelsesomfang. Hukommelse skal behandles som sensitiv infrastruktur. Dette betyder validering af skriveoperationer, hukommelsesdomÃĶne-opdeling, begrÃĶnsning af omfanget for lÃĶseoperationer per opgave, brug af kortvarige legitimationer og forhindring af arvede tilladelser. Uvalideret tilladelsesakkumulation er en stor agentic AI-risiko.

Sikr multi-agent-koordination. I distribuerede agentsystemer bliver kommunikationen selv en angrebsvektor. Dette bÃļr indebÃĶre agent-autentificering, meddelelsesskema-validering, begrÃĶnsede kommunikationskanaler og overvÃĨgning af usÃĶdvanlige indflydelsesmÃļnstre. NÃĨr koordination afviger fra forventede flux, skal isolation ske automatisk.

Fra eksponeringsstyring til eksponeringsvurdering for AI-systemer

Dette er, hvor en bredere sikkerhedsfilosofi bliver nÃļglen. Traditionel sÃĨrbarhedsstyring identificerer kendte svagheder. Men autonome AI-systemer introducerer emergent eksponering: risici, der opstÃĨr fra konfiguration, tilladelsesdesign, integrationsveje og dynamisk adfÃĶrd.

Dette stemmer overens med, hvad branchen har dÃļbt eksponeringsstyring og, mere nylig, eksponeringsvurdering.

Eksponeringsstyring handler om at have kontinuerlig indsigt i, hvordan systemer (herunder cloud-aktiver, identiteter, applikationer og nu AI-agenter) skaber vejene, som dÃĨrlige aktÃļrer kan udnytte.

For autonome AI-systemers sikkerhed betyder det at spÃļrge: Hvad kan denne agent nÃĨ? Hvilke tilladelser akkumulerer den? Hvilke systemer orkestrerer den? Og hvor mÃļdes udfÃļrelse med fÃļlsomme data?

Hold, der allerede bruger eksponeringsbaserede strategier til at reducere cyberrisiko, er i en solid position til at udvide disse principper til deres AI-miljÃļer. For eksempel giver platforme, der samler identitet, cloud og sÃĨrbarhedsindsigt, en mÃĨde at forstÃĨ, hvordan privilegerede AI-agenter mÃļdes med eksisterende angrebsveje.

NÃļglen er ikke vendor-vÃĶrktÃļjer per se. Det er mindset:

Man sikrer ikke agentic AI ved at beskytte modellen. Man sikrer det ved kontinuerligt at mÃĨle og reducere dets eksponering.

Styring af udfÃļrelseslagsrisici i agentic AI

Kendetegnet for agentic AI-sikkerhed er dette: Angrebsoverfladen er ikke responsen, men workflowet.

UdfÃļrelseslagsrisici er mange, herunder ikke-autentificeret vÃĶrktÃļjsbrug, identitets-spoofing, tilladelses-kryb, hukommelsesforgiftning, cross-agent-manipulation og menneske-i-lÃļkken-systemer under pres.

At mildne disse risici krÃĶver indsigt i identitetsrelationer, tilladelsesarv, API-afhÃĶngigheder, runtime-aktivitet og udfÃļrelsestelemetri.

Dette er ikke lÃĶngere kun GenAI-sikkerhed; det er AI-operations-sikkerhed ogsÃĨ.

Agentic AI-risiko er arkitektonisk, ikke hypotetisk

Agentic AI er det nÃĶste skridt i udviklingen af enterprise AI-adopteringsprocessen. Det rummer lÃļftet om efficiens, automatisering og skalerbarhed. Men det introducerer ogsÃĨ risiko fra, hvad AI siger til, hvad AI gÃļr.

Overgangen fra generative til agentic-systemer pÃĨvirker fÃļlgende:

  • Indholdrisiko til udfÃļrelsesrisiko
  • Statisk prompt til dynamisk udfÃļrelsesflow
  • Menneskelig gennemgang til autonom udfÃļrelse
  • Applikationssikkerhed til eksponeringsstyring

Sikkerhedsledere, der forstÃĨr denne overgang fÃļrst, kan arkitektur-sikre guardrails, der skalerer med autonomi. Andre vil ende med digitale insiders uden insider-kontroller.

Fremtiden for AI i virksomheden er agentic. Fremtiden for AI-sikkerhed skal vÃĶre eksponeringsdrevet, workflow-bevidst og designet til maskin-hastighedsoperationer.

Fordi nÃĨr AI-agenter har mulighed for at udfÃļre, er den eneste gyldige tilgang at konstant forstÃĨ (og mildne) hvad de er eksponeret for.

Kirsten Doyle har vÃĶret i teknologi-journalistik og redigering i 27 ÃĨr, hvor hun har udviklet en stor kÃĶrlighed til alle aspekter af teknologi samt ord selv. Hendes erfaring omfatter B2B-teknologi med fokus pÃĨ cybersikkerhed, cloud, virksomhed, digital transformation og datacenter. Hendes specialomrÃĨder er nyheder, tankeledelse, funktioner, hvide papirer, e-bÃļger og PR-skrivning, og hun er en erfaren redaktÃļr for bÃĨde trykte og online publikationer. Hun er ogsÃĨ en fast skribent pÃĨ Bora.