Tankeledere

Den oversete AI-risiko, der ikke overvåges: Hemmelighedsexponering i virksomhedsworkflows

mm
Føj Unite.AI til dine foretrukne kilder på Google

De fleste diskussioner om virksomheds-AI-risici begynder med en velkendt bekymring: medarbejdere, der indsætter kundeoplysninger i chatbots. Privatliv og reguleringsrisici dominerer overskrifter og bestyrelsesmøder, og forskning fra Deloitte viser, at dataprivatliv og -sikkerhed er blandt de øverste AI-risici, som organisationer bekymrer sig om.

Men de data, der kommer fra virkelige virksomhedsbrug, fortæller en anden historie. Den mest almindelige følsomme oplysning, der flyder ind i AI-værktøjer, er ikke personlige data, men hemmeligheder og legitimationsoplysninger.

API-nøgler, adgangstokens, webhooks og autentificeringsartefakter står nu for den største andel af følsomme dataeksponeringer, der observeres i AI-prompts. Disse afsløringer skyldes sjældent uagtsomhed eller ondsindet hensigt, men opstår i stedet under rutinemæssigt arbejde såsom fejlfinding af en mislykket integration, fejlfinding af automatisering, kodetestning eller løsning af en kundeproblem. Da AI bliver integreret i daglige workflows, sker disse øjeblikke konstant og ofte uden for traditionelle sikkerhedscontrollers synsvidde.

Konsekvenserne er klare. Da AI-adopteringsudbredelsen udvides, får organisationer en mere præcis vurdering af, hvor de virkelige risici opstår, og styringen må udvikles for at imødekomme dem.

Et overset AI-dataeksponeringsrisiko gemmer sig i åbenlysning

En ny AI-anvendelsesanalyse gennemført af Nudge Security undersøgte anonymiseret telemetri over virksomhedsmiljøer for at forstå, hvordan AI-værktøjer faktisk bruges på arbejdspladsen. I stedet for at basere sig på undersøgelser eller selvrapportering analyserede forskningen observeret AI-aktivitet, integrationer og promptadfærd over virksomhedens SaaS-økosystemer.

Forskningen giver ny indsigt i, hvor AI-risici faktisk opstår i virksomhedsbrug. Følsomme dataeksponeringer i AI-prompts domineres af operationelle legitimationsoplysninger. Hemmeligheder og legitimationsoplysninger står for ca. 48 procent af detekterede følsomme datahændelser, sammenlignet med 36 procent for finansielle data og 16 procent for sundhedsrelaterede oplysninger. Disse mønstre antyder, at den største AI-dataeksponeringsudfordring ikke er privatlivslækage, men hemmelighedsspredning.

Samme forskning viser, at AI-adopteringsudbredelsen er gået ud over eksperimenter. AI-værktøjer er integreret i workflows, forbundet med kerneforretningsplatforme og i stigende grad i stand til at udføre selvstændige handlinger. De vigtigste leverandører af store sprogmodeller er nu næsten ubegrænsede, med OpenAI til stede i 96 procent af organisationer og Anthropic i 78 procent.

Forskning fra McKinsey viser, at 88 procent af organisationer rapporterer regelmæssig AI-brug i mindst én forretningsfunktion, sammenlignet med 78 procent året før. Mødeintelligensværktøjer, AI-understøttede kodningsplatforme, præsentationsgenerering og taleteknologier er bredt udbredt, hvilket afspejler, hvordan AI har udvidet sig fra chatgrænseflader til daglige workflows. Denne udvidelse er vigtig, fordi risikoen følger brugen. Da AI bliver integreret i udviklermiljøer, samarbejdsplatforme og kundesupportworkflows, får det nærhed til følsomme systemer og operationelle data.

Adopteringsudbredelsen er også blevet drevet fra bunden og op. En ny KPMG-undersøgelse fandt, at 44 procent af medarbejderne bruger AI-værktøjer på måder, som deres arbejdsgivere ikke har godkendt, hvilket afspejler, hvor hurtigt disse værktøjer kommer ind i daglige workflows. Medarbejdere installerer browserudvidelser, forbinder assistenter og eksperimenterer med integrationer for at accelerere daglige opgaver, ofte uden for centraliserede indkøbsprocesser. Sikkerhedsanalytikere beskriver denne mønster som skygge-AI, hvor værktøjer opererer inden for browsere og SaaS-workflows uden for traditionel IT-synsvidde. Fordi disse værktøjer kan installeres øjeblikkeligt og kræver lidt teknisk opsætning, kæmper styringsprogrammer, der er bygget op omkring leverandørgodkendelse og acceptabel brugspolitik, med at følge med, hvordan AI faktisk introduceres og bruges på tværs af virksomheden.

Hvorfor lækkede hemmeligheder kan skabe øjeblikkelig operationel risiko

Personlige data er følsomme og regulerede, men hemmeligheder har øjeblikkelig operationel indvirkning. En lækket API-nøgle kan give adgang til produktionsystemer. En kompromitteret token kan eksponere repositories. En webhook-URL kan aktivere uautoriseret automatisering. Legitimationsoplysninger dukker ofte op i AI-prompts under rutinemæssigt arbejde. Udviklere indsætter tokens i chatgrænseflader, mens de fejlfinder autentificeringsfejl, og ingeniører kan dele konfigurationsstykker for at diagnosticere integrationsproblemer. Disse handlinger er ikke usædvanlige. Hemmeligheder er integreret i tekniske workflows og dukker op i logfiler, scripts, konfigurationsfiler og automatiseringsoutput. Når holdene er under pres for at løse problemer hurtigt, kan de dele disse artefakter uden at tænke over, hvilke følsomme data de indeholder.

AI-grænseflader forstærker denne adfærd. Prompts opmuntrer til kontekstdeling. Filoverførsler understøtter rigere fejlfinding. Integreret workflows gør det let at flytte data mellem systemer. Nudge Securitys forskning fandt, at 17 procent af prompts inkluderer kopiering og indsætning eller filoverførsler. I denne omgang kan følsomme legitimationsoplysninger eksponeres på få sekunder.

Traditionel styring overser adfærdsrisiko

AI-styringsprogrammer fokuserer ofte på formelle kontroller såsom politikker og godkendte værktøjer. Denne tilgang antager, at risikoen stammer fra misbrug eller modeladfærd. I praksis sker de mest betydelige eksponeringer under rutinemæssigt arbejde udført af velmenende medarbejdere.

AI-landskabet udvikler sig hurtigt, med nye teknologier udgivet dagligt. Da medarbejderne når efter det seneste værktøj, kan de omgå den traditionelle tilgang med netværkskontroller, fordi de simpelthen ikke kan følge med. Browseren giver mulighed for direkte observation af kontekstuel adfærd, hvilket giver den fleksibilitet, der er nødvendig for at følge med den konstant udviklende virksomhedsverden.

Denne afkobling forklarer, hvorfor organisationer kan implementere stærke politikker og alligevel opleve følsomme dataeksponering. Politikker fastsætter forventninger. Adfærd bestemmer resultater. Effektiv styring kræver indsigt i, hvordan AI-værktøjer faktisk bruges, og guardrails, der guider sikrere beslutninger i øjeblikket, hvor data deles.

Integrationer og agenter udvider eksponeringsområdet

Risikoprofilen for et AI-værktøj påvirkes af, hvad det kan få adgang til. Integrationer skaber tillidsfulde forbindelser mellem systemer. OAuth-godkendelser, API-tokens og servicekonti giver AI-værktøjer mulighed for at hente dokumenter, opdatere billetter eller interagere med koderepositories. Forskning i virksomheds-AI-adopteringsudbredelse fremhæver, at integrationer effektivt definerer eksponeringsområdet. En miskonfigureret tilladelse eller en kompromitteret token kan eksponere hele dokumentrepositories eller udviklingsmiljøer, fordi tillidsfulde forbindelser muliggør dataforsendelse i maskinehastighed.

Agenter introducerer yderligere kompleksitet. Tidlige installationer prioriterer ofte funktionalitet over mindst privilegie. Tilladelser, der er givet under eksperimenter, kan fortsætte langt efter de oprindelige brugstilfælde er udviklet. Over tid skaber disse akkumulerede tilladelser stille risiko. Sikkerhedsteams skal behandle integrationer og agenttilladelser som varige adgangsbeslutninger og ikke som midlertidige bekvemmeligheder.

Hvad sikkerhedsteams skal gøre nu

Reduktion af hemmelighedseksponering i AI-workflows kræver en ændring fra reaktive kontroller til styring, der afspejler, hvordan arbejdet faktisk sker. Sikkerhedsledere kan begynde med praktiske skridt, der forbedrer synlighed, guider sikrere adfærd og reducerer eksponering uden at sænke produktiviteten:

  • Kortlæg, hvor AI-interaktioner finder sted.
    Identificer miljøerne, hvor data kommer ind i AI-værktøjer, herunder browserudvidelser, udviklermiljøer, automatiseringsplatforme og chatgrænseflader. Kontinuerlig synlighed i disse kontaktpunkter giver grundlaget for effektiv styring.
  • Intervener i øjeblikket, hvor beslutninger træffes.
    Implementer hemmelighedsscanning, redigeringsprompts og just-in-time-advarsler, der alarmerer brugere, når legitimationsoplysninger eller følsomme artefakter er på vej til at blive delt. Timelig vejledning reducerer utilsigtet eksponering, mens den bevarede workflowhastighed.
  • Anvend integrationsstyring med samme rigor som OAuth-apps.
    Gennemgå AI-værktøjer, der er forbundet med e-mail, dokumenter, billetter og repositories. Gennemtving mindst privilegie og gennemfør regelmæssige tilladelsesgennemgang for at reducere langsigtede eksponeringsrisiko.
  • Opret sikrere workflows til fejlfinding og support.
    Tilbyd redigerede skabeloner, sikre forbindelser og interne værktøjer til analyse af logfiler eller konfigurationsfiler, så hold kan bruge AI til problemløsning uden at eksponere levende legitimationsoplysninger.
  • Etabler guardrails for agentbaseret automatisering.
    Kræv menneskelig godkendelse for højrisiko-handlinger, log agentaktivitet centralt og brug scoped adgangstokens for at forhindre tilladelsesspredning og uventet automatisering.
  • Baser uddannelse i virkelige workflows.
    Uddannelse er mest effektiv, når den afspejler almindelige opgaver såsom fejlfinding af integrationer, gennemgang af logfiler eller overførsel af filer. Praktiske eksempler hjælper medarbejdere med at genkende risiko i øjeblikket, det opstår.

Disse foranstaltninger bringer styring i overensstemmelse med dagligt arbejde, hvilket muliggør for organisationer at reducere hemmelighedseksponering, samtidig med at de støtter produktivitetsgevinsterne, der driver AI-adopteringsudbredelsen.

Fra AI-politik til AI-adfærdsstyring

AI udvikler sig fra et produktivitetsværktøj til et operationelt lag, der er integreret i dagligt arbejde, med forskning, der viser, at AI-agenter nu er integreret på tværs af virksomhedsworkflows og prognoser, der forudser task-specifikke agenter inden for en stor andel af virksomhedsapplikationer. Da adopteringsudbredelsen dybder, udvider de dominerende risici sig ud over privatlivsovertrædelser eller modelmisbrug. De opstår fra, hvordan mennesker, tilladelser og platforme mødes i virkelige workflows.

Hemmelighedseksponering i AI-prompts er et synligt signal af denne bredere transformation. Det fremhæver begrænsningerne af perimeterbaserede kontroller og politikbaseret styring og understreger behovet for guardrails, der fungerer, hvor beslutninger træffes. Organisationer, der tilpasser sig, vil gå ud over reaktive kontroller og mod styringsmodeller, der er baseret på reel adfærd. De vil behandle integrationer og tilladelser som varige adgangsforhold. De vil guide medarbejdere i øjeblikket af handling i stedet for kun at basere sig på politikgennemførelse.

AI udvikler sig fra værktøj til samarbejdspartner i moderne arbejde. Sikring af dette samarbejde kræver styring, der holder trit, beskytter kritiske data, guider sikrere beslutninger og opretholder hastigheden og efficiensen, som AI muliggør.

Russell Spitler er medstifter og administrerende direktør i Nudge Security, som er førende inden for SaaS og AI-sikkerhedsstyring. Russell har mere end 20 års erfaring med at udvikle produkter og startup-virksomheder, der sikrer organisationer verden over. Før Nudge, fungerede Russell i produkt-, ingeniør- og strategilederroller hos AT&T Cybersecurity, AlienVault (opkøbt af AT&T Cybersecurity) og Fortify Software. Hos AlienVault co-foundede han Open Threat Exchange, verdens største åbne trusselforskningsfællesskab med over 370.000 globale deltagere i dag.