Trzy pokolenia chłodzenia centrów danych – i dlaczego większość operatorów buduje infrastrukturę wczorajszego dnia

Trzy lata temu branża centrów danych debatowała, czy chłodzenie cieczą będzie kiedykolwiek niezbędne. Dwa lata temu większość operatorów uważała, że single-fazowe chłodzenie wodą będzie rozwiązaniem. Dziś wiodące obiekty przechodzą na architektury chłodzenia następnej generacji, podczas gdy wiele nowych budów zamyka się w systemach, które będą przestarzałe w ciągu kilku lat.

Ten rozdźwięk jest napędzany przez fizykę i mapy procesorów, które są już widoczne do 2027 roku. Razem tworzą one rozdział między operatorami, którzy rozumieją, że chłodzenie wkracza w nową erę architektoniczną, a tymi, którzy mogą wkrótce odkryć, że zainwestowali setki milionów w infrastrukturę, która nie będzie w stanie wspierać następnej fali procesorów AI.

Trzy pokolenia chłodzenia

Chłodzenie centrów danych przeszło przez trzy odrębne ery architektoniczne, z których każda została zdefiniowana przez nowy zestaw przeszkód do pokonania i przez gęstości szaf, które wymagają wsparcia ekonomicznego.

• Pierwsze pokolenie: Chłodzenie powietrzem (2000–2023): Osiągnęło szczyt przy 10–15 kW na szafę. Ekonomika zaczęła się psuć wokół 2020 roku, gdy obciążenia AI przekroczyły 20 kW. Do 2023 roku chłodzenie powietrzem było w dużej mierze przestarzałe dla nowych wdrożeń o wysokiej gęstości.

• Drugie pokolenie: Chłodzenie cieczą jednofazową (2020–2027): Początkowe podejście do chłodzenia cieczą. Wykorzystuje wodę lub PG25 przy wysokich przepływach, aby usunąć ciepło przez zmianę temperatury. Nadaje się od 20–120 kW na szafę, ale wykazuje napięcia powyżej 150 kW. Oczekuje się, że osiągnie swoje praktyczne limity do 2027 roku, gdy procesory przekroczą 2,000 W.

• Trzecie pokolenie: Dwufazowe + zaawansowana rejekcja ciepła (2024–2035+): Wykorzystuje czynniki chłodnicze, które absorbują ciepło przez zmianę fazy, a nie przez zmianę temperatury. Skalowalne od 150 kW i znacznie powyżej na szafę. Umożliwia nowe strategie rejekcji ciepła od układu scalonego do atmosfery. Już jest wdrożone przez wiodących operatorów i oczekuje się, że zdominuje do 2027–2028.

Każda transakcja oznacza punkt przerwy – gdy fizyka i ekonomika osiągają swój sufit jednocześnie.

Problem fizyczny drugiego pokolenia

Pierwsze wdrożenia drugiego pokolenia zaczynają ujawniać limity chłodzenia jednofazowego.

Systemy wodne wymagają przepływów w przybliżeniu 1,5 litra na minutę na kilowat. Szafa 120 kW potrzebuje około 180 litrów na minutę; przy 250 kW skacze do 375 litrów na minutę przez płyty chłodzące z otworami o średnicy milimetrów.

Na GTC w tym roku szafy połączone z liniami o rozmiarze węży ogniowych ujawniły wyzwanie. Wysokie przepływy tworzą kaskadowe problemy. Woda zmieszana z glikolem utlenia mikrofaliste struktury, a korozja jest nasilona przez prędkości przepływu, które erodują osłabione płyty. Wymagania konserwacyjne zaskoczyły wielu operatorów: comiesięczne zmiany filtrów zamiast kwartalnych lub dwa razy w roku, stałe monitorowanie chemii i worki z glikolem dołączone do szaf.

Stawki awaryjne są równie niepokojące. Wewnętrzne dane z pola sugerują, że około 4% chłodzonych cieczą GPU ulega awarii w ciągu trzyletniego cyklu życia z powodu wycieków. Z szafami zawierającymi sprzęt o wartości 3–5 milionów dolarów, ta strata fundamentalnie łamie ekonomię drugiego pokolenia.

Analiza 10 MW obiektu przez Jacobs Engineering ujawnia kolejną nieefektywność. Systemy jednofazowe wymagają niższych temperatur wody niż systemy trzeciego pokolenia. Niższe temperatury wody wymagane przez drugie pokolenie zwiększają zarówno wymagania dotyczące pojemności chłodniczej, jak i zużycie energii.

Co wyróżnia trzecie pokolenie

Trzecie pokolenie reprezentuje prawdziwą zmianę architektoniczną. Dwufazowe czynniki chłodnicze absorbują ciepło przez zmianę fazy, redukując przepływy o czynnik cztery do dziewięć. Zmniejszona prędkość płynu znacznie redukuje stres infrastruktury, minimalizuje erozję płyty chłodzącej i eliminuje wiele problemów konserwacyjnych, które dotknęły drugie pokolenie.

Czynniki chłodnicze umożliwiają również nowe projekty rejekcji ciepła – takie jak systemy czynnik-czynnik i czynnik-CO₂ – które optymalizują chłodzenie od układu scalonego do atmosfery. Te projekty są już w produkcji, demonstrując skalowalność i efektywność ekonomiczną trzeciego pokolenia.

Gdy Jacobs Engineering – odpowiedzialny za ponad 80% globalnych projektów MEP centrów danych – stworzył równoległe modele referencyjne 10 MW, usunął on stronniczość dostawców z porównania.

Wyniki:

• CapEx: 10,39 mln dolarów za jednofazowe vs. 10,38 mln dolarów za dwufazowe

• Roczny OpEx: 1,04 mln dolarów vs. 679 000 dolarów (35% redukcja)

• Pięcioletni TCO: 15,6 mln dolarów vs. 13,8 mln dolarów (12% oszczędności)

Parytet CapEx zaskoczył wielu, którzy oczekiwali premii za dwufazowe. Bieżące systemy dwufazowe wymagają więcej CDU, ale projekty jednofazowe potrzebują złożonych manifoldów wierszowych, wydajnych systemów wykrywania wycieków i filtracji harmonicznej – złożoności unikanych przez bieżące CDU dwufazowe. Następne CDU, które przyjdą w 2026 roku, jeszcze bardziej zredukują koszty, czyniąc trzecie pokolenie jeszcze bardziej ekonomicznym do wdrożenia.

Przewaga OpEx wynika z termodynamiki. Systemy dwufazowe utrzymują identyczne temperatury układu scalonego, używając cieplejszej wody obiektu – około 8°C wyższej średnio. Każdy stopień zaoszczędzonej energii redukuje roczne zużycie energii o około 4%, co przekłada się na 35% redukcję OpEx, którą Jacobs udokumentował w różnych klimatach od Phoenix do Sztokholmu.

Przewidujący operatorzy idą o krok dalej, konwertując tę marżę termiczną na około 5% więcej możliwości obliczeniowych w tym samym zakresie mocy. W świecie, w którym każdy GPU reprezentuje przychód, a moc jest ograniczona, ta przewaga staje się różnicą konkurencyjną.

Mapa krzemowa wymusza sprawę

Przejdź do trzeciego pokolenia nie jest napędzany przez dostawców chłodzenia – jest dyktowany przez projekt procesora.

Architektury Rubin od NVIDIA są spodziewane do przekroczenia 2,000 W na procesor. MI450 od AMD jest na podobnej trajektorii. Każdy główny producent układów scalonych pakuje coraz więcej wydajności w mniejsze ślady, powodując ostry wzrost gęstości termicznej.

Kluczowym wyzwaniem jest strumień ciepła – koncentracja ciepła mierzona w watów na centymetr kwadratowy. Gdy strumień ciepła rośnie, rozwiązania drugiego pokolenia osiągają fizyczne i ekonomiczne limity. Przepływy stają się destrukcyjne, różnice temperatur nie do zaakceptowania, a koszty systemowe nie do utrzymania.

Trzecie pokolenie zostało zbudowane z myślą o tej rzeczywistości. Wiodący operatorzy już określają szafy 250 kW z wyraźnymi ścieżkami do 1 MW+. Czekanie, “aby zobaczyć, co wygrywa”, może wydawać się konserwatywne, ale jest to najbardziej ryzykowne podejście. Mapa krzemowa jest ustalona; fizyka nie ugina się. Jedyną decyzją, która pozostaje, jest, kiedy działać.

Dylemat brownfield

Miliardy są inwestowane właśnie teraz w infrastrukturę drugiego pokolenia, która będzie ograniczona w ciągu 36 miesięcy. Obiekty zaprojektowane dzisiaj wokół jednofazowej wody będą miały trudności z obsługą procesorów klasy 2027. Późniejsze modernizacje będą kosztować znacznie więcej niż budowanie z trzecim pokoleniem dzisiaj.

Dla istniejących obiektów systemy czynnik-powietrze mogą służyć jako most, ale nie są długoterminowym rozwiązaniem. Kierunek branży jest jasny: architektury trzeciego pokolenia będą kotwicą następnej dekady nowych budów.

Wybór pokoleniowy

Każda transakcja chłodzenia wyglądała wystarczająco dobrze, aż następne pokolenie uczyniło ją przestarzałą. Operatorzy, którzy wcześnie przyjęli chłodzenie cieczą – przyjmując je w latach 2020-2021 zamiast 2023 – zyskali prawie dwa lata przewagi wdrożeniowej.

Ten sam punkt inflacji jest ponownie w toku. Fizyka jest udowodniona. Ekonomika jest potwierdzona przez niezależną analizę. Mapy procesorów czynią przejście nieuniknionym.

Pytanie nie brzmi, czy zmiana nastąpi – jest to, czy będziesz ją prowadził, czy będziesz zmuszony do niej, gdy drugie pokolenie osiągnie swoje limity.

Centra danych zaprojektowane dzisiaj będą działać dobrze w 2030 roku. Budowanie z architekturami trzeciego pokolenia gwarantuje, że pozostaną one przydatne w erze AI, zamiast stawać się ograniczonymi aktywami, zanim jeszcze się ustabilizują.

Przyszłość chłodzenia centrów danych to transformacja pokoleniowa – a trzecie pokolenie jest już tu.