Hack The Box Benchmark: Echipele de securitate cibernetica augmentate cu AI depasesc analistii de securitate umani

Un nou studiu de la Hack The Box intitulat „Raport de benchmark al performantei securitatii cibernetice: AI-augmentat vs doar uman” arata ca echipele de securitate cibernetica augmentate cu AI pot depasi semnificativ echipele doar umane, cu echipe de elită care finalizează sarcinile de până la 4,1 ori mai repede. Rezultatele se bazează pe datele de performanță din competiția NeuroGrid Capture the Flag (CTF), una dintre cele mai mari benchmark-uri din lume care compară echipele agențice AI-asistate și echipele umane tradiționale care efectuează sarcini de securitate cibernetica.

Benchmark-ul a analizat datele din competiția NeuroGrid Capture the Flag (CTF), la care au participat 1.337 de echipe doar umane și 156 de echipe cu agenți AI, cu 958 de echipe umane și 120 de echipe cu AI care au încercat să finalizeze provocările de securitate cibernetica în 36 de domenii tehnice și patru niveluri de dificultate.

Rezultatele subliniază atât câștigurile de productivitate ale operațiunilor de securitate cibernetica augmentate cu AI, cât și provocările emergente cu care se pot confrunta organizațiile pe măsură ce automatizarea reconfigurează modul în care funcționează echipele de securitate.

Echipele augmentate cu AI oferă beneficii de performanță măsurabile

Benchmark-ul demonstrează că integrarea agenților AI în fluxurile de lucru de securitate cibernetica poate crește dramatic productivitatea, în special atunci când este combinată cu operatori umani experimentați.

Principalele constatări includ:

• Până la 4,1 ori mai multă productivitate pentru echipele de elită augmentate cu AI comparativ cu echipele doar umane
• Îmbunătățire a productivității cu 1,4 ori pentru toate echipele în același interval de timp
• Rată de rezolvare a provocărilor cu 70% mai mare pentru echipele augmentate cu AI
• Rată de rezolvare de 27% pentru echipele cu AI versus 16% pentru echipele umane de top
• Rată de rezolvare generală de 3,2 ori mai mare pentru toți participanții

Conform CEO-ului și fondatorului Haris Pylarinos de la Hack The Box, rezultatele arată că AI poate crește dramatic viteza de operare, dar trebuie să fie încă combinat cu supravegherea umană.

“AI poate ridica standardul performanței în securitatea cibernetica, dar nu elimină nevoia de expertiză umană,” a declarat Pylarinos. “Organizațiile trebuie să dezvolte echipe fluent în AI și fluxuri de lucru cu uman în buclă pentru a debloca în siguranță aceste beneficii.”

Spre deosebire de benchmark-urile sintetice utilizate de obicei în evaluările AI, competiția a folosit provocări profesionale de securitate cibernetica sub presiunea reală a competiției, oferind o comparație mai realistă din punct de vedere operațional între echipele asistate de AI și cele umane.

Modelul hibrid uman-AI emerge ca strategia câștigătoare

Deși AI a accelerat semnificativ performanța, studiul a constatat că echipele hibride care combină agenți AI cu operatori umani au produs rezultatele cele mai puternice în general.

În competiție:

• 73,3% din echipele augmentate cu AI au finalizat cel puțin o provocare, comparativ cu 46% din echipele doar umane
• Agenții AI au îmbunătățit adesea productivitatea de bază, dar au necesitat încă validarea și direcția strategică umană atunci când s-au confruntat cu sarcini complexe

Pentru CISO și liderii de securitate, raportul subliniază că AI ar trebui să fie considerat în primul rând ca un factor de multiplicare a forței, și nu ca o înlocuire a profesioniștilor în securitatea cibernetica.

Impactul AI variază dramatic în funcție de nivelul de abilitate

Una dintre cele mai importante insight-uri din raport este că AI afectează practicienii de securitate cibernetica în mod diferit, în funcție de nivelul lor de experiență.

Cariera timpurie: „Iluzia productivității”

Pentru operatorii de la început de carieră, AI poate acționa ca o punte de competență, ajutându-i să rezolve provocări cu care altfel s-ar confrunta. Cu toate acestea, raportul avertizează că acest lucru poate crea o falsă senzație de productivitate, dacă analiștii juniori lipsesc de expertiza necesară pentru a verifica ieșirile AI sau pentru a ghida fluxurile de lucru ale agenților în mod eficient.

În unele cazuri, echipele augmentate cu AI cu performanță scăzută au fost de fapt 12,5% mai lente, adesea blocându-se în bucle ineficiente atunci când operatorii nu aveau suficiente abilități de supraveghere.

Cariera de mijloc: Punctul dulce pentru AI

Cele mai mari câștiguri de productivitate s-au înregistrat printre analiștii de carieră de mijloc, în special atunci când au abordat sarcini de complexitate medie.

În această categorie:

• Avantajul AI a atins un vârf de 3,89 ori îmbunătățire a performanței la probleme de dificultate medie
• Echipele de nivel mediu au experimentat o finalizare a sarcinilor cu 40–70% mai rapidă în comparație cu echipele doar umane

Acest lucru sugerează că întreprinderile ar putea vedea cel mai mare randament imediat al investițiilor în AI prin implementarea sistemelor agențice alături de analiștii de nivel mediu.

Operatori de elită: Avantaj de viteză, nu de înlocuire a capacității

Printre cei mai buni performeri, gap-ul dintre echipele augmentate cu AI și experții umani s-a îngustat semnificativ.