Liderzy opinii

Problemka Everywhere: Dlaczego “Dane Wszędzie” stają się największym wyzwaniem infrastrukturalnym ery AI

mm
Dodaj Unite.AI do preferowanych źródeł w Google

Najbardziej doniosłe pytanie w dziedzinie AI dziś nie brzmi: który model jest najmądrzejszy. Chodzi o to, gdzie mieszka dane, i czy inteligencja może do niego dotrzeć.

Przez większą część dekady branża AI działała pod wpływem pocieszającej premisy: scentralizuj dane, scentralizuj obliczenia, a geniusz nastąpi. Model hyperskalera — scentralizowanie ogromnych zbiorów danych w dużych klastrach chmury i zastosowanie ogromnych obliczeń GPU do skompresowania ich w parametry modelu — przyniósł nadzwyczajne rezultaty, ale również architekturę, która teraz cierpi pod ciężarem własnego sukcesu.

Nazywajmy to “problemem danych wszędzie”. Gdy AI wypływa z laboratoriów badawczych i wprowadza się w tkankę szpitali, fabryk, instytucji finansowych i rządów, dane, które muszą poinformować te systemy, są wewnętrznie rozproszone, ograniczone jurysdykcyjnie i operacyjnie nieporuszone. Regulatorzy w Europie nalegają, aby rekordy finansowe obywateli nie opuszczały kontynentu. Danych klinicznych prób z Bazylei nie można umieścić w tym samym bucket cloud, co zestaw danych genomiki z Seulu.

Bez względu na to, inteligencja musi iść do danych. Dane, stanowczo, nie przyjdą do inteligencji.

Ekonomika Przełomu

To napięcie strukturalne jest zaostrzone przez rewolucję w ekonomice AI. Branża przechodzi przez tectoniczną rebalans w wydatkach od szkolenia do inferencji, a implikacje dla architektury danych są ogromne.

Deloitte oszacował, że obciążenia inferencyjne stanowiły połowę wszystkich obliczeń AI w 2025 roku, a ta liczba wzrośnie do dwóch trzecich w 2026 roku. Stosunek odwraca się z zdumiewającą szybkością. Analitycy szacują, że do 2026 roku popyt na inferencję przewyższy popyt na szkolenie o 118 razy. Do 2030 roku inferencja może stanowić 75% wszystkich obliczeń AI, napędzając inwestycje w infrastrukturę o wartości 7 bilionów dolarów.

Matematyka kosztów jest równie zaskakująca. Na każdy 1 miliard dolarów wydanych na szkolenie modelu AI, organizacje muszą liczyć się z kosztami inferencji w wysokości 15-20 miliardów dolarów przez cały okres produkcyjnego życia modelu: stosunek ilustrowany wyraźnie przez GPT-4, którego koszt szkolenia wyniósł około 150 milionów dolarów, ale którego koszty inferencji sięgnęły 2,3 miliarda dolarów do końca 2024 roku. Szkolenie, które kiedyś było głównym obsesją inwestorów i oficerów ds. zakupów AI, jest teraz postrzegane jako jednorazowa opłata za naukę. Inferencja jest stałym kosztem operacyjnym inteligencji i jest teraz dominującym punktem.

Jednakże tu leży paradoks: koszty inferencji dla systemu na poziomie GPT-3.5 spadły o ponad 280-krotność między listopadem 2022 a październikiem 2024, przy czym koszty sprzętu spadły o około 30% rocznie, a wydajność energetyczna poprawiła się o 40% rocznie. Ceny spadają; konsumpcja przyspiesza szybciej. Jednostkowe koszty inferencji spadły o 100 razy, podczas gdy Microsoft (MSFT ) i Google zgłosili wzrost obciążeń AI o 31 razy w tym samym okresie.

Gdzie Mieszkają Dane, Tam Musi Iść Inteligencja

Gospodarka inferencyjna zmienia w zasadniczy sposób wymagania dotyczące infrastruktury, a nigdzie nie jest to bardziej widoczne niż wokół grawitacji danych. Inferencja, w przeciwieństwie do szkolenia, nie jest zadaniem wsadowym uruchamianym raz w centrum danych. Jest to ciągła, wrażliwa na opóźnienia, geograficznie rozproszona usługa, i jest tak dobra, jak dane, do których może dotrzeć w momencie zapytania.

To jest rdzeń wyzwania “danych wszędzie”.

Na przykład, model językowy, który rozważa dane telemetryczne pacjenta w czasie rzeczywistym, nie może pozwolić sobie na 200-milisekundową rundę do klastra hyperskalera na wschodnim wybrzeżu. Model oszustw finansowych uruchamiający inferencję w punkcie transakcji nie może wyeksfiltrować danych konta do jurysdykcji, w której naruszyłby GDPR. Wdrożenie suwerennego AI nie może opierać się na infrastrukturze należącej i obsługiwanej przez zagraniczną jednostkę komercyjną.

Pionierzy są tego świadomi. Umowa Anthropic z Google Cloud na maksymalnie jeden milion TPU, dostarczająca ponad gigawat AI pojemności do 2026 roku, sygnalizuje, jak wiodące laboratoria inwestują w bezprecedenskim zakresie, aby ukształtować globalny ślad infrastrukturalny inferencji.

Taksonomia Natężenia Danych

Nie wszystkie systemy AI konfrontują się z tym wyzwaniem identycznie, i jest pouczające rozważyć pewną taksonomię, gdy istnieją różne typy modeli AI i złożoności. Rozłóżmy to na trzy podstawowe przykłady: LLM, obraz i modele fizyczne.

Wielkie modele językowe — rodziny Claude, GPT i Gemini — zajmują się głównie tokenami językowymi: względnie lekkimi, kompresowalnymi i podatnymi na techniki zachowania prywatności, takie jak różnicowa prywatność lub federacyjne uczenie. Ich problem “danych wszędzie” jest bardzo złożony.

Generatywne modele wizualne przedstawiają jeszcze trudniejszy przypadek. Systemy takie jak Black Forest Labs’ FLUX.2 mogą wyprodukować wysokiej rozdzielczości, fotorealistyczne obrazy w czasie krótszym niż sekunda na potężnym sprzęcie, ale generowanie jednego obrazu wymaga znacznie więcej danych i obliczeń niż generowanie tekstu. Gdy AI wizualna przechodzi od narzędzi kreatywnych do inspekcji przemysłowych, obrazowania medycznego i analizy satelitarnej, podstawowe dane są często duże, wrażliwe i trudne do przeniesienia, zwiększając potrzebę uruchamiania AI tam, gdzie dane już mieszka.

Bardziej złożoną kategorią jest AI fizyczna. NVIDIA’s (NVDA ) Jensen Huang ogłosił, że “AI fizyczna przybyła, a każda firma przemysłowa stanie się firmą robotyczną”. Nowe modele, takie jak NVIDIA’s Cosmos 3, mają dać maszynom ogólny zrozumienie świata fizycznego, łącząc symulację, wizję i rozumowanie, podczas gdy firmy takie jak Physical Intelligence szkolą roboty na danych sensorycznych z świata rzeczywistego — w tym siły, ruchu i danych wizualnych — aby umożliwić bardziej adaptacyjne, autonomiczne zachowanie.

Te same dynamiki skalowania, które poprawiły duże modele rozumowania, są teraz stosowane do danych rzeczywistych, takich jak drgania, dźwięk i dane sensoryczne. Ale te informacje są wewnętrznie lokalne. Robot na podłodze fabryki nie może wysłać danych wizualnych i dotykowych w czasie rzeczywistym do odległej chmury do przetwarzania bez wprowadzania opóźnień, które mogą stwarzać ryzyko bezpieczeństwa, co oznacza, że AI musi coraz częściej działać na krawędzi, blisko miejsca, w którym dane są generowane.

Zaufanie, Wyjaśnialność i Wyniki

To jest miejsce, w którym wyzwanie “danych wszędzie” przechodzi poza infrastrukturę i staje się kwestią zarządzania. Gdy AI jest stosowany w decyzjach o wysokim ryzyku — od diagnoz medycznych po modele ryzyka finansowego i systemy kontroli fizycznej — pytania o to, gdzie dane mieszka, są coraz częściej związane z tym, kto jest odpowiedzialny za wyniki.

W dzisiejszym środowisku regulacyjnym wyjaśnialność nie jest opcjonalna. Na przykład, Unijna ustawa o AI wymaga, aby systemy wysokiego ryzyka wykazały podstawę swoich danych wyjściowych, co jest trudne, jeśli dane, które informują te decyzje, są rozproszone w wielu systemach, jurysdykcjach i ramach regulacyjnych.

Zaufanie staje się więc warunkiem wstępnym przyjęcia na dużą skalę. Kontrola nad środowiskiem danych staje się równie ważna, jak kontrola nad samymi modelami.

Następna Generacja Infrastruktury AI

Rozwiązanie wyzwania “danych wszędzie” zdefiniuje mapę konkurencyjną AI na najbliższą dekadę. Inferencja federacyjna, bezpieczne środowiska przetwarzania danych, modele zoptymalizowane pod kątem krawędzi i systemy orchestracji, które uwzględniają, gdzie dane mogą mieszkać, nie są niszowymi funkcjami technicznymi, ale warunkami wstępnymi dla rozszerzenia AI poza przypadki, w których dane mogą być swobodnie scentralizowane.

Firmy i rządy, które zbudują infrastrukturę zdolną do dostarczania zaufanego, wyjaśnialnego, suwerennego wnioskowania — inteligencji, która dociera do danych, zamiast domagać się, aby dane podróżowały do niej — będą dysponować najtrwalszym przywilejem ery AI. Szkolenie bardziej inteligentnego modelu staje się coraz bardziej rozwiązaniem komodyfikowanym. Wdrożenie go w sposób odpowiedzialny, na krawędzi, przez granice jurysdykcyjne, przeciwko danym, które nie mogą się poruszać, jest problemem, który pozostaje.

Dane wszędzie nie są sloganem. Jest to najtrudniejszy nierozwiązany problem w przedsiębiorstwach AI. I określi, czy nadzwyczajna zdolność odblokowana przez minioną dekadę inwestycji w szkolenie kiedykolwiek przekłada się na skalę w wyniki, którym świat może zaufać.

Jako dyrektor generalny ds. strategii, Abhas kieruje ogólną strategią korporacyjną dla Cloudera i jest odpowiedzialny za tworzenie wizji firmy, budowanie modelu operacyjnego dla biznesu i klientów, komunikowanie go z kluczowymi interesariuszami za pomocą wyraźnie zdefiniowanych OKR, oraz wdrażanie kluczowych inicjatyw transformacyjnych w celu realizacji tego planu. Jest również odpowiedzialny za napędzanie wzrostu i innowacji oraz podejmowanie odpowiednich decyzji dotyczących budowy, kupna lub partnerstwa, w tym ustalania cen i pakietów, rozwoju korporacyjnego oraz przyspieszacza innowacji Cloudera w celu wprowadzania nowych produktów. Wcześniej pełnił funkcję szefa sztabu i wiceprezesa ds. transformacji biznesu w firmie.

Przed połączeniem Cloudera i Hortonworks pomógł w skalowaniu wysiłków Hortonworks w zakresie wejścia na rynek jako globalny dyrektor innowacji i zarządzania wartością dla klientów. Jako konsultant zarządzania z wykształcenia, jest pasjonatem napędzania działań i zmian w społeczeństwie i kierował projektami z wieloma organizacjami, w tym Światowym Forum Ekonomicznym, Założycielami Przyszłości i innymi organizacjami non-profit.