Liderzy opinii

Problemka Everywhere: Dlaczego “Dane Wszędzie” stają się największym wyzwaniem infrastrukturalnym ery AI

mm
Dodaj Unite.AI do preferowanych ÅšrÃģdeł w Google

Najbardziej doniosłe pytanie w dziedzinie AI dziś nie brzmi: ktÃģry model jest najmądrzejszy. Chodzi o to, gdzie mieszka dane, i czy inteligencja moÅže do niego dotrzeć.

Przez większą część dekady branÅža AI działała pod wpływem pocieszającej premisy: scentralizuj dane, scentralizuj obliczenia, a geniusz nastąpi. Model hyperskalera — scentralizowanie ogromnych zbiorÃģw danych w duÅžych klastrach chmury i zastosowanie ogromnych obliczeń GPU do skompresowania ich w parametry modelu — przyniÃģsł nadzwyczajne rezultaty, ale rÃģwnieÅž architekturę, ktÃģra teraz cierpi pod cięŞarem własnego sukcesu.

Nazywajmy to “problemem danych wszędzie”. Gdy AI wypływa z laboratoriÃģw badawczych i wprowadza się w tkankę szpitali, fabryk, instytucji finansowych i rządÃģw, dane, ktÃģre muszą poinformować te systemy, są wewnętrznie rozproszone, ograniczone jurysdykcyjnie i operacyjnie nieporuszone. Regulatorzy w Europie nalegają, aby rekordy finansowe obywateli nie opuszczały kontynentu. Danych klinicznych prÃģb z Bazylei nie moÅžna umieścić w tym samym bucket cloud, co zestaw danych genomiki z Seulu.

Bez względu na to, inteligencja musi iść do danych. Dane, stanowczo, nie przyjdą do inteligencji.

Ekonomika Przełomu

To napięcie strukturalne jest zaostrzone przez rewolucję w ekonomice AI. BranÅža przechodzi przez tectoniczną rebalans w wydatkach od szkolenia do inferencji, a implikacje dla architektury danych są ogromne.

Deloitte oszacował, Åže obciÄ…Åženia inferencyjne stanowiły połowę wszystkich obliczeń AI w 2025 roku, a ta liczba wzrośnie do dwÃģch trzecich w 2026 roku. Stosunek odwraca się z zdumiewającą szybkością. Analitycy szacują, Åže do 2026 roku popyt na inferencję przewyÅžszy popyt na szkolenie o 118 razy. Do 2030 roku inferencja moÅže stanowić 75% wszystkich obliczeń AI, napędzając inwestycje w infrastrukturę o wartości 7 bilionÃģw dolarÃģw.

Matematyka kosztÃģw jest rÃģwnie zaskakująca. Na kaÅždy 1 miliard dolarÃģw wydanych na szkolenie modelu AI, organizacje muszą liczyć się z kosztami inferencji w wysokości 15-20 miliardÃģw dolarÃģw przez cały okres produkcyjnego Åžycia modelu: stosunek ilustrowany wyraÅšnie przez GPT-4, ktÃģrego koszt szkolenia wyniÃģsł około 150 milionÃģw dolarÃģw, ale ktÃģrego koszty inferencji sięgnęły 2,3 miliarda dolarÃģw do końca 2024 roku. Szkolenie, ktÃģre kiedyś było głÃģwnym obsesją inwestorÃģw i oficerÃģw ds. zakupÃģw AI, jest teraz postrzegane jako jednorazowa opłata za naukę. Inferencja jest stałym kosztem operacyjnym inteligencji i jest teraz dominującym punktem.

JednakÅže tu leÅžy paradoks: koszty inferencji dla systemu na poziomie GPT-3.5 spadły o ponad 280-krotność między listopadem 2022 a paÅšdziernikiem 2024, przy czym koszty sprzętu spadły o około 30% rocznie, a wydajność energetyczna poprawiła się o 40% rocznie. Ceny spadają; konsumpcja przyspiesza szybciej. Jednostkowe koszty inferencji spadły o 100 razy, podczas gdy Microsoft i Google zgłosili wzrost obciÄ…Åžeń AI o 31 razy w tym samym okresie.

Gdzie Mieszkają Dane, Tam Musi Iść Inteligencja

Gospodarka inferencyjna zmienia w zasadniczy sposÃģb wymagania dotyczące infrastruktury, a nigdzie nie jest to bardziej widoczne niÅž wokÃģł grawitacji danych. Inferencja, w przeciwieństwie do szkolenia, nie jest zadaniem wsadowym uruchamianym raz w centrum danych. Jest to ciągła, wraÅžliwa na opÃģÅšnienia, geograficznie rozproszona usługa, i jest tak dobra, jak dane, do ktÃģrych moÅže dotrzeć w momencie zapytania.

To jest rdzeń wyzwania “danych wszędzie”.

Na przykład, model językowy, ktÃģry rozwaÅža dane telemetryczne pacjenta w czasie rzeczywistym, nie moÅže pozwolić sobie na 200-milisekundową rundę do klastra hyperskalera na wschodnim wybrzeÅžu. Model oszustw finansowych uruchamiający inferencję w punkcie transakcji nie moÅže wyeksfiltrować danych konta do jurysdykcji, w ktÃģrej naruszyłby GDPR. WdroÅženie suwerennego AI nie moÅže opierać się na infrastrukturze naleŞącej i obsługiwanej przez zagraniczną jednostkę komercyjną.

Pionierzy są tego świadomi. Umowa Anthropic z Google Cloud na maksymalnie jeden milion TPU, dostarczająca ponad gigawat AI pojemności do 2026 roku, sygnalizuje, jak wiodące laboratoria inwestują w bezprecedenskim zakresie, aby ukształtować globalny ślad infrastrukturalny inferencji.

Taksonomia NatęŞenia Danych

Nie wszystkie systemy AI konfrontują się z tym wyzwaniem identycznie, i jest pouczające rozwaÅžyć pewną taksonomię, gdy istnieją rÃģÅžne typy modeli AI i złoÅžoności. RozłÃģÅžmy to na trzy podstawowe przykłady: LLM, obraz i modele fizyczne.

Wielkie modele językowe — rodziny Claude, GPT i Gemini — zajmują się głÃģwnie tokenami językowymi: względnie lekkimi, kompresowalnymi i podatnymi na techniki zachowania prywatności, takie jak rÃģÅžnicowa prywatność lub federacyjne uczenie. Ich problem “danych wszędzie” jest bardzo złoÅžony.

Generatywne modele wizualne przedstawiają jeszcze trudniejszy przypadek. Systemy takie jak Black Forest Labs’ FLUX.2 mogą wyprodukować wysokiej rozdzielczości, fotorealistyczne obrazy w czasie krÃģtszym niÅž sekunda na potęŞnym sprzęcie, ale generowanie jednego obrazu wymaga znacznie więcej danych i obliczeń niÅž generowanie tekstu. Gdy AI wizualna przechodzi od narzędzi kreatywnych do inspekcji przemysłowych, obrazowania medycznego i analizy satelitarnej, podstawowe dane są często duÅže, wraÅžliwe i trudne do przeniesienia, zwiększając potrzebę uruchamiania AI tam, gdzie dane juÅž mieszka.

Bardziej złoÅžoną kategorią jest AI fizyczna. NVIDIA’s Jensen Huang ogłosił, Åže “AI fizyczna przybyła, a kaÅžda firma przemysłowa stanie się firmą robotyczną”. Nowe modele, takie jak NVIDIA’s Cosmos 3, mają dać maszynom ogÃģlny zrozumienie świata fizycznego, łącząc symulację, wizję i rozumowanie, podczas gdy firmy takie jak Physical Intelligence szkolą roboty na danych sensorycznych z świata rzeczywistego — w tym siły, ruchu i danych wizualnych — aby umoÅžliwić bardziej adaptacyjne, autonomiczne zachowanie.

Te same dynamiki skalowania, ktÃģre poprawiły duÅže modele rozumowania, są teraz stosowane do danych rzeczywistych, takich jak drgania, dÅšwięk i dane sensoryczne. Ale te informacje są wewnętrznie lokalne. Robot na podłodze fabryki nie moÅže wysłać danych wizualnych i dotykowych w czasie rzeczywistym do odległej chmury do przetwarzania bez wprowadzania opÃģÅšnień, ktÃģre mogą stwarzać ryzyko bezpieczeństwa, co oznacza, Åže AI musi coraz częściej działać na krawędzi, blisko miejsca, w ktÃģrym dane są generowane.

Zaufanie, Wyjaśnialność i Wyniki

To jest miejsce, w ktÃģrym wyzwanie “danych wszędzie” przechodzi poza infrastrukturę i staje się kwestią zarządzania. Gdy AI jest stosowany w decyzjach o wysokim ryzyku — od diagnoz medycznych po modele ryzyka finansowego i systemy kontroli fizycznej — pytania o to, gdzie dane mieszka, są coraz częściej związane z tym, kto jest odpowiedzialny za wyniki.

W dzisiejszym środowisku regulacyjnym wyjaśnialność nie jest opcjonalna. Na przykład, Unijna ustawa o AI wymaga, aby systemy wysokiego ryzyka wykazały podstawę swoich danych wyjściowych, co jest trudne, jeśli dane, ktÃģre informują te decyzje, są rozproszone w wielu systemach, jurysdykcjach i ramach regulacyjnych.

Zaufanie staje się więc warunkiem wstępnym przyjęcia na duŞą skalę. Kontrola nad środowiskiem danych staje się rÃģwnie waÅžna, jak kontrola nad samymi modelami.

Następna Generacja Infrastruktury AI

Rozwiązanie wyzwania “danych wszędzie” zdefiniuje mapę konkurencyjną AI na najbliÅžszą dekadę. Inferencja federacyjna, bezpieczne środowiska przetwarzania danych, modele zoptymalizowane pod kątem krawędzi i systemy orchestracji, ktÃģre uwzględniają, gdzie dane mogą mieszkać, nie są niszowymi funkcjami technicznymi, ale warunkami wstępnymi dla rozszerzenia AI poza przypadki, w ktÃģrych dane mogą być swobodnie scentralizowane.

Firmy i rządy, ktÃģre zbudują infrastrukturę zdolną do dostarczania zaufanego, wyjaśnialnego, suwerennego wnioskowania — inteligencji, ktÃģra dociera do danych, zamiast domagać się, aby dane podrÃģÅžowały do niej — będą dysponować najtrwalszym przywilejem ery AI. Szkolenie bardziej inteligentnego modelu staje się coraz bardziej rozwiązaniem komodyfikowanym. WdroÅženie go w sposÃģb odpowiedzialny, na krawędzi, przez granice jurysdykcyjne, przeciwko danym, ktÃģre nie mogą się poruszać, jest problemem, ktÃģry pozostaje.

Dane wszędzie nie są sloganem. Jest to najtrudniejszy nierozwiązany problem w przedsiębiorstwach AI. I określi, czy nadzwyczajna zdolność odblokowana przez minioną dekadę inwestycji w szkolenie kiedykolwiek przekłada się na skalę w wyniki, ktÃģrym świat moÅže zaufać.

Jako dyrektor generalny ds. strategii, Abhas kieruje ogÃģlną strategią korporacyjną dla Cloudera i jest odpowiedzialny za tworzenie wizji firmy, budowanie modelu operacyjnego dla biznesu i klientÃģw, komunikowanie go z kluczowymi interesariuszami za pomocą wyraÅšnie zdefiniowanych OKR, oraz wdraÅžanie kluczowych inicjatyw transformacyjnych w celu realizacji tego planu. Jest rÃģwnieÅž odpowiedzialny za napędzanie wzrostu i innowacji oraz podejmowanie odpowiednich decyzji dotyczących budowy, kupna lub partnerstwa, w tym ustalania cen i pakietÃģw, rozwoju korporacyjnego oraz przyspieszacza innowacji Cloudera w celu wprowadzania nowych produktÃģw. Wcześniej pełnił funkcję szefa sztabu i wiceprezesa ds. transformacji biznesu w firmie.

Przed połączeniem Cloudera i Hortonworks pomÃģgł w skalowaniu wysiłkÃģw Hortonworks w zakresie wejścia na rynek jako globalny dyrektor innowacji i zarządzania wartością dla klientÃģw. Jako konsultant zarządzania z wykształcenia, jest pasjonatem napędzania działań i zmian w społeczeństwie i kierował projektami z wieloma organizacjami, w tym Światowym Forum Ekonomicznym, ZałoÅžycielami Przyszłości i innymi organizacjami non-profit.