Myslitelé

Osvětlující podnikatelská rizika slepých míst: Jak Shadow AI předefinovává mobilní hrozby

mm
Přidejte Unite.AI mezi své preferované zdroje na Google

Umělá inteligence revolucionalizuje způsob, jakým pracujeme. Od souhrnů dokumentů a návrhů smluv po generování kódu a automatizaci pracovních postupů se nástroje AI staly nedílnou součástí denních podnikatelských operací. Nicméně, spolu s schváleným použitím AI v organizacích, existuje rostoucí trend známý jako Shadow AI — nesанкcionované použití aplikací AI bez formální kontroly ze strany IT nebo bezpečnostních týmů.

Shadow AI není pouze porušením IT politik. Představuje strukturální mezeru v řízení na rozhraní identity, ochrany dat, dodržování předpisů a vznikajících autonomních systémů. Jak se schopnosti AI rozšiřují, zejména v mobilních prostředích, organizace čelí rychle rostoucímu povrchu hrozeb, které tradiční bezpečnostní kontroly nebyly navrženy tak, aby řešily.

Mobilní zařízení: Síla, která zvyšuje riziko Shadow AI

Jak se zvyšuje adopce mobilních zařízení, riziko Shadow AI se zvyšuje. Smartphony a tablety se staly operačním centrem podniku, který kombinuje identitu, zasílání zpráv a přístup do cloudu do jednoho zařízení, které je vždy zapnuto. Mezitím se aplikace s umělou inteligencí rozšíří do obchodů s aplikacemi, umožňující zaměstnancům nasadit agenticní schopnosti okamžitě, často mimo kontrolu IT. Ve skutečnosti společnost Lookout identifikovala více než 25 000 mobilních aplikací s schopnostmi AI, které jsou již přítomny v Apple App Store a Google Play Store, což zdůrazňuje, jak rychle se tato expozice vyvíjí na mobilním okraji.

Jak se mobility a nesанкcionované AI protínají, expozice podniku se zvyšuje, potvrzující základní pravdu: mobilní riziko je podnikatelské riziko.

Agentic AI: Autonomní digitální aktéři uvnitř organizace

Agentic AI přináší další změnu v podnikatelském riziku. Na rozdíl od pasivních generativních nástrojů, které pouze produkují obsah v reakci na podněty, agenticní systémy jsou navrženy tak, aby plánovaly, rozhodly a provedly akce nezávisle. Mohou autonomně iniciovat komunikaci, spouštět finanční transakce, měnit záznamy, interagovat s podnikovými aplikacemi a řetězit více krokových pracovních postupů bez lidské kontroly. Ve skutečnosti fungují jako digitální aktéři uvnitř organizace.

Když tyto schopnosti fungují mimo zavedené rámce řízení, zvyšují riziko na rychlost strojů. Rozhodnutí, která dříve vyžadovala lidský úsudek, mohou být nyní provedena okamžitě, opakovaně a v měřítku. Přístupová práva, API integrace a delegovaná autorita transformují tyto systémy z poradních nástrojů na operační agenty schopné pohybu dat, změny systémů a iniciování obchodních procesů.

Například mobilní AI asistent s přístupem k firemní e-mailové schránce a cloudové úložiště může autonomně souhrnně zpracovat citlivé materiály představenstva a přenést je do externí AI služby pro “analýzu”. I když je to provedeno s dobrými úmysly, důsledky pro řízení jsou hluboké: důvěrné informace mohou opustit kontrolovaná prostředí, regulační povinnosti mohou být spuštěny, auditní stopy mohou být neúplné a požadavky na rezidenci dat mohou být porušeny. Riziko není pouze únik dat — je to delegace operační autority na systémy, které nemusí být viditelné, schválené nebo řízené.

Riziko a vzestup ISO 42001

Jak se riziko AI zvyšuje, globální rámce řízení se objevují, aby uvalily strukturu a odpovědnost. Mezi nejvýznamnější patří ISO/IEC 42001, mezinárodní standard pro systémy řízení umělých inteligencí. ISO 42001 vyžaduje, aby organizace implementovaly procesy řízení založené na riziku pro dohled, monitorování a kontinuální řízení systémů AI.

Tento standard se vztahuje nejen na tradiční nasazení AI, ale také na agenticní systémy AI schopné autonomního jednání. Organizace musí prokázat viditelnost, kontrolu a stopovatelnost napříč použitím AI ve svých prostředích. Shadow AI přímo eroduje tento mandát. Když zaměstnanci nasazují nástroje AI mimo schválené kanály, podniky ztrácejí schopnost credibly tvrdit, že mají komplexní dohled nad AI.

Ve regulovaných sektorech — včetně zdravotnictví, finančních služeb, vlády a kritické infrastruktury — je tato mezera v řízení zvláště závažná. Neřízené použití AI může vytvořit materiální expozici dodržování předpisů podle předpisů o ochraně osobních údajů, předpisů o ochraně dat a smluvních povinností.

Tradiční bezpečnostní kontroly selhávají na mobilních zařízeních

Mnoho organizací předpokládá, že stávající bezpečnostní kontroly — jako jsou brány e-mailů, platformy ochrany koncových bodů a CASB — jsou dostatečné pro řízení rizika AI. Ve skutečnosti nejsou. Shadow AI, zejména v mobilních prostředích, kde se činnost odehrává zcela na smartphonech a tabletech, může se vyhnout desktopovým kontrolám a obejít tradiční síťové monitorování. Bez speciální viditelnosti do mobilních aplikací bezpečnostní týmy postrádají vhled, který je potřebný k detekci AI-poháněného úniku dat, nesанкcionovaného použití AI nebo autonomního systému činnosti, ke které dochází mimo rámce řízení.

Povinnost dodržování předpisů: Identifikace mobilních aplikací AI

Aby organizace splnily ISO 42001 a vznikající regulační očekávání, vyžadují bezpečnostní schopnosti, které mohou identifikovat AI-poháněné mobilní aplikace, detekovat nesанкcionované nebo vysoce rizikové použití AI, monitorovat tok dat mezi AI aplikacemi a podnikovými systémy, hodnotit agenticní chování a vymáhat kontrolu politik přímo na mobilním koncovém bodě. Bezpečnostní produkty schopné klasifikovat a analyzovat AI-poháněné mobilní aplikace — zejména ty s autonomními schopnostmi — se stávají nezbytnými nástroji dodržování předpisů spíše než volitelnými vylepšeními.

Bez viditelnosti do toho, které mobilní aplikace zahrnují AI motory, organizace nemohou provádět smysluplné hodnocení rizika AI, dokumentovat dohled nebo vymáhat rámce řízení. Jak se AI stává součástí produktivních aplikací, platforem pro zasílání zpráv a pracovních nástrojů, detekce musí evoluce za hranice tradiční identifikace malwaru a zahrnout analýzu chování, mapování oprávnění a kontinuální monitorování přístupu a pohybu dat.

Volání k akci

Shadow AI není budoucí obava; je již zabudován do mobilních zařízení, která pohánějí podnikatelskou činnost. Jak se adopce zvyšuje, mezery v řízení se budou rozšiřovat nejprve — a nejrychleji — na mobilních zařízeních. Vedoucí bezpečnostních týmů musí vědět, které AI aplikace jsou přítomny na firemních a BYOD zařízeních, detekovat agenticní chování uvnitř mobilních aplikací a monitorovat AI-poháněné toky dat, které opouštějí koncové body. Protože Shadow AI prosperuje v rámci šifrovaného mobilního provozu a aplikací, dodržování předpisů nyní závisí na mobilních bezpečnostních schopnostech, které odhalují AI aktivitu a vymáhají rámce řízení.

Jak se AI mění podnikatelské operace, řízení AI nakonec znamená zajištění mobilních zařízení, která zaměstnanci nosí každý den.

Jim Dolce je generální ředitel a předseda představenstva společnosti Lookout. Založil čtyři úspěšné technologické společnosti a zastával výkonné pozice ve společnostech Juniper Networks, Inc. a Akamai Technologies, Inc. Jim se připojil k Lookout v březnu 2014, aby společnost vedl do další fáze růstu, včetně rearchitektury produktů, vedení a pracovních sil, aby sloužily velkým podnikům a vládním agenturám, které chtějí využít výhod mobility bez ohrožení bezpečnosti.