Liderzy opinii

10 niezbędnych pytań, aby zapewnić skuteczne wdrożenie chłodzenia w centrum danych AI

mm
Dodaj Unite.AI do preferowanych źródeł w Google

Wraz ze wzrostem AI i obliczeń o wysokiej wydajności, centra danych rozwijają się w rekordowym tempie. W rzeczywistości, ilość mocy chłodniczej w budowie na koniec 2024 roku więcej niż podwoiła się w porównaniu z końcem 2023 roku (6 350 MW w budowie w porównaniu z około 3 078 MW). W tym samym czasie, sprzęt używany w tych centrach danych i obciążenia są coraz bardziej intensywne. W tych szybko zmieniających się warunkach, zarówno stawki, jak i wyzwania są na wzrost.

I z tym, że średnie centrum danych wydaje do 40% swojego całkowitego budżetu energetycznego na chłodzenie, zarządzanie ciepłem staje się jednym z największych wyzwań dla branży. Z drugiej strony, operatorzy centrów danych mają więcej opcji niż kiedykolwiek wcześniej, aby chłodzić swoje obiekty w sposób niezawodny, wydajny i ekonomiczny.

Oczywiście, kiedy są opcje, są również decyzje do podjęcia. Więc, gdy rozważasz swoje własne wdrożenie centrum danych, oto 10 niezbędnych pytań, które powinieneś odpowiedzieć, aby uruchomić swoją operację szybko, a jednocześnie zapewnić wydajność, niezawodność i zrównoważoność na dłuższą metę.

Pytanie 1: Jak szybko mogę wdrożyć ten system chłodzenia bez naruszania niezawodności?

W wyścigu zbrojeń AI, prawdziwym różnicowaniem między sukcesem a porażką nie jest to, kto zgromadzi najwięcej GPU — to kto wdroży je najszybciej. Czas do uruchomienia (tj. czas od rozpoczęcia wdrożenia do jego uruchomienia) stał się nowym polem bitwy, decydującym o tym, jak szybko przedsiębiorstwa mogą przekształcić inwestycje w AI w biznesowy wpływ. Liderzy nie będą tylko tymi, którzy posiadają ogromne zasoby obliczeniowe, ale także tymi, którzy je odblokują najpierw, przyspieszając innowacje, przychody i przewagę konkurencyjną.

Ale pośpiech w wdrożeniu chłodzenia może się zemścić, prowadząc do nieefektywności, przestojów lub kosztownych modernizacji. Operatorzy muszą spytać, czy ich wybrany system może być wdrożony szybko i wytrzymać próbę czasu. Strategia, która balansuje szybkość wdrożenia z solidnością, zapewnia zarówno natychmiastową gotowość rynkową, jak i długoterminową wytrzymałość.

Pytanie 2: Jaki sposób chłodzenia jest najlepiej dopasowany do potrzeb mojego projektu?

Nie ma uniwersalnego rozwiązania dla każdego wdrożenia centrum danych. Chłodzenie powietrzem przez długi czas było standardem, ale szybko osiąga swoje fizyczne granice w radzeniu sobie z zaawansowanym sprzętem i gęstymi szafami typowymi dla centrów danych AI. Chłodzenie cieczą oferuje niezrównaną wydajność w skali i przyszłościowe działanie dla coraz bardziej wymagających obciążeń. Hybrydowe podejścia mogą pomóc w przejściu, ale na dłuższą metę centra danych AI będą polegać na rozwiązaniach chłodzenia cieczą, aby zarządzać coraz bardziej intensywnymi obciążeniami AI. Wybór odpowiedniej metody chłodzenia cieczą zależy jednak od typu obciążenia, gęstości, lokalizacji i innych czynników.

Istnieją dwa główne metody chłodzenia cieczą stosowane obecnie w środowisku komercyjnym: bezpośrednie do chipa (DTC) i chłodzenie przez zanurzenie. Podczas gdy DTC jest obecnie bardziej powszechne, chłodzenie przez zanurzenie ma szansę na zyskanie popularności wraz ze wzrostem gęstości mocy chipów. Systemy DTC kierują chłodziwo bezpośrednio do generujących ciepło komponentów, takich jak CPU i GPU, przez płyty chłodzące, oferując szybkie korzyści w zakresie wydajności z minimalnymi zmianami w infrastrukturze. Systemy jednofazowe są prostsze i przyjazne dla modernizacji, podczas gdy systemy dwufazowe wykorzystują czynniki chłodzące, aby osiągnąć wyższą wydajność transferu ciepła z niższą mocą pomp, ale o większej złożoności systemu. Chłodzenie przez zanurzenie, z drugiej strony, zanurza całe serwery w dielektrycznych płynach — albo krążących (jednofazowych), albo wrzących i skraplających w hermetycznych zbiornikach (dwufazowych).

Jaki rozwiązanie jest odpowiednie dla Twojego środowiska, zależy od charakteru Twojego sprzętu, obciążeń, budżetu i innych czynników. Ale być świadomym swoich opcji jest niezwykle ważne zarówno dla krótkoterminowej, jak i długoterminowej żywotności Twojego centrum danych AI.

Pytanie 3: Czy mój system chłodzenia będzie wspierał dzisiejsze obciążenia i jutrzejsze gęstości napędzane przez AI?

Co nas prowadzi do następnego wielkiego pytania: czy mój system wytrzyma próbę czasu? Popyt na centra danych przyspiesza poza historycznymi normami. Klaster szkoleniowy AI, na przykład, może wymagać 10-20 razy większej gęstości mocy niż tradycyjne szafy przedsiębiorstw. Pytanie, które operatorzy muszą zadać, to, czy ich projekt chłodzenia może pomieścić przyszłe gęstości bez całkowitej wymiany.

Wzrost AI, HPC (obliczeń o wysokiej wydajności) i coraz gęstszych architektur szaf już teraz popycha chłodzenie powietrzem do jego granic. W badaniu Uptime Institute z 2024 roku dotyczącym systemów chłodzenia, większość operatorów stwierdziła, że chłodzenie powietrzem staje się niepraktyczne i/lub zbyt drogie powyżej ~20 kW na szafę. Jednakże, obecne raporty branżowe pokazują, że szafy AI już często przekraczają 100 kW na szafę. I te liczby są już rosnące. Nvidia opublikowała niedawno plany dotyczące swoich GPU Rubin Ultra z szafami Kyber, które przekroczą 600 kW na szafę do 2027 roku.

Wiedząc, że chłodzenie powietrzem jest na drodze do przestarzałości w wdrożeniach centrów danych AI, operatorzy mogą rozważyć hybrydowe lub stopniowe podejścia, gdzie pełne, nowe wdrożenia chłodzenia cieczą nie są opcją. Jeszcze raz, biorąc pod uwagę ogromny czas i koszty włożone w te projekty, długoterminowa żywotność jest najważniejsza. Więc, przy wyborze rozwiązań chłodzenia, upewnij się, że są one gotowe na dłuższą metę.

Pytanie 4: Jakie są całkowite implikacje kosztowe w całym cyklu życia?

Podczas gdy wydatki początkowe mogą być oszałamiające w przestrzeni centrów danych, wydatki kapitałowe (CAPEX) stanowią tylko część historii. Operatorzy powinni obliczyć całkowity koszt posiadania (TCO), w tym wydatki operacyjne (OPEX) związane z zużyciem energii, konserwacją i modernizacjami, przy rozważaniu swoich rozwiązań chłodzenia. System, który wydaje się droższy na początku, może zapewnić długoterminowe oszczędności dzięki wydajności energetycznej, zmniejszeniu przestojów i zwiększeniu żywotności. Prawidłowa strategia chłodzenia rzadko jest najtańsza na początku — to ta, która optymalizuje koszty w 10-15-letnim cyklu życia obiektu.

Pamiętaj, te nie są krótkoterminowe wdrożenia. Im więcej życia uzyskasz z tego wdrożenia, tym więcej wartości możesz uzyskać. Patrząc poza CAPEX i myśląc o długoterminowych kosztach i oszczędnościach jest kluczowe, aby upewnić się, że uzyskasz najwięcej z Twojego projektu centrum danych.

Pytanie 5: Jak ta strategia chłodzenia wpłynie na mój profil zrównoważoności?

Jak wcześniej wspomniano, chłodzenie może stanowić 40% lub więcej całkowitego zużycia energii przez centrum danych. Wraz ze wzrostem regulacji i wymagań raportowania ESG, operatorzy muszą spytać: jak ten system wpłynie na mój ślad węglowy, zużycie energii i inne zobowiązania zrównoważoności? Rozwiązania, które redukują zużycie energii lub marnowanie zasobów lub są zgodne z globalnymi standardami, takimi jak ramy Green Grid, stają się coraz bardziej pożądane, a nawet wymagane dla zaufania inwestorów i zgodności z przepisami.

Tymczasem sektor publiczny coraz bardziej domaga się zmniejszenia zużycia energii. Monitoring Analytics, niezależny obserwator rynku dla sieci średnio-atlantyckiej, opublikował w czerwcu badanie, które 70% zwiększonego kosztu energii elektrycznej w zeszłym roku wynikało z popytu centrów danych. Niezbyt zaskakująco, konsumenci alarmują, a stany rozważają poważne środki, aby rozwiązać tę sprawę, w tym możliwość przymusowych wyłączeń podczas okresów wysokiego popytu. Inwestując w bardziej efektywne i zrównoważone rozwiązania chłodzenia, organizacje mogą przygotować się do radzenia sobie z wyzwaniami percepcji publicznej i regulacyjnymi, które leżą przed nimi.

Pytanie 6: Ile wody zużyje to podejście chłodzenia — i czy jest to zrównoważone w moim regionie?

Duże centra danych mogą zużywać do 5 milionów galonów wody dziennie. Nie powinno to być zaskoczeniem, że niedobór wody staje się definiującym problemem dla centrów danych, zwłaszcza w regionach takich jak południowo-zachodnie Stany Zjednoczone i części Europy, gdzie prawa wodne i problemy z niedoborem wody prowadzą do zwiększonej kontroli wobec centrów danych. Aby to zrobić dobrze, operatorzy muszą obliczyć przewidywane zużycie wody przez swój system chłodzenia i ocenić, czy jest ono zgodne z lokalnymi i regionalnymi realiami (zarówno pod względem dostępności, jak i wymagań regulacyjnych).

Nie daj się zwieść nazwie — chłodzenie cieczą zużywa znacznie mniej wody niż tradycyjne systemy chłodzenia powietrzem. Według badania opublikowanego przez Nature, chłodzenie cieczą redukuje zużycie wody w centrach danych o 31-52% w porównaniu z tradycyjnym chłodzeniem powietrzem w całym cyklu życia. Rozwiązania chłodzenia, które minimalizują lub eliminują zużycie wody, mogą pomóc w zabezpieczeniu obiektów przed ryzykiem środowiskowym i regulacyjnym.

Pytanie 7: Jakie ryzyka lub ograniczenia są związane z chłodzeniem cieczą, i jak można je złagodzić?

Chociaż oferuje niezrównane korzyści w zakresie wydajności, zrównoważoności i długoterminowych korzyści ekonomicznych, wiele mitów utrzymuje się wokół chłodzenia cieczą, zwłaszcza wokół niezawodności, kosztów i integracji. W rzeczywistości, postępy w technologiach, materiałach i projektowaniu uczyniły chłodzenie cieczą bezpiecznym, niezawodnym i coraz bardziej ekonomicznym. Klucz dla operatorów polega na ocenianiu tych systemów na podstawie danych z rzeczywistych wyników, a nie przestarzałych postrzeżeń, i projektowaniu z udziałem sprawdzonych najlepszych praktyk.

Gdy rozważasz chłodzenie cieczą, równie ważne jest, aby być świadomym którego rozwiązania jest najlepsze dla Twojego obiektu. Z różnymi podejściami (np. bezpośrednie do chipa [DTC], zanurzenie) i wieloma dostawcami oferującymi szeroki wybór rozwiązań, zawsze należy przeprowadzić należytą staranność przy rozważaniu wdrożenia chłodzenia cieczą.

Pytanie 8: Jak mój projekt chłodzenia wpłynie na wykorzystanie przestrzeni i gęstość szaf?

Przestrzeń jest równie cenna jak energia w nowoczesnych centrach danych. Wysokogęstościowe szafy wspierane przez efektywne chłodzenie cieczą mogą dramatycznie zmniejszyć wymagania dotyczące powierzchni i powierzchni obiektów. To z kolei pozwala operatorom albo zwiększyć obciążenia w istniejących powierzchniach, albo minimalizować koszty ziemi i budowy nowych obiektów. Możliwość robienia więcej z mniejszą przestrzenią nie tylko redukuje koszty, ale także otwiera drzwi do znacznie większej liczby potencjalnych miejsc budowy. Z mniejszymi powierzchniami, deweloperzy mogą budować bardziej swobodnie i nawet przybliżać obliczenia do użytkownika końcowego. Zadawanie tych pytań na początku zapewnia, że projekt chłodzenia jest zgodny z zarówno gęstością, jak i wykorzystaniem przestrzeni.

Pytanie 9: Jaka jest moja długoterminowa strategia wytrzymałości, jeśli obciążenia wzrosną lub przepisy zostaną zaostrzone?

Centra danych nie są statyczne. Nagłe skoki popytu, nowe aplikacje AI i zaostrzające się wymagania dotyczące wydajności i zrównoważoności mogą szybko obciążyć infrastrukturę. Operatorzy muszą spytać, czy ich strategia chłodzenia jest wystarczająco elastyczna, aby sprostać tym często nieoczekiwanym zmianom. Skuteczne systemy chłodzenia muszą być gotowe do skalowania pojemności, spełniania nowych wymagań zgodności i integracji z przyszłymi technologiami.

Systemy, które oferują modułowość i dostawcy z solidnymi łańcuchami dostaw, pomogą izolować Twoje centrum danych od zmieniającego się popytu, umożliwiając łatwiejsze skalowanie i modernizację, gdy jest to potrzebne.

Pytanie 10: Czy traktuję chłodzenie jako strategicznego współpracownika, czy tylko jako pomyślne zdarzenie?

To ostatnie, ogólne pytanie jest najważniejsze. Gdy rozważasz swój system chłodzenia, najpierw weź chwilę, aby ponownie rozważyć rolę chłodzenia w Twoich ogólnych operacjach centrum danych. Zbyt często chłodzenie traktowane jest jako tło infrastruktury, kiedy w rzeczywistości jest strategicznym współpracownikiem wydajności, czasu pracy i zrównoważoności. Przedsiębiorstwa, które inwestują w przemyślaną strategię chłodzenia, zyskują nie tylko efektywność operacyjną, ale także przewagę konkurencyjną w niezawodności, zgodności i długoterminowych kosztach.

I gdy AI nadal stawia nowe, bardziej intensywne wymagania wobec centrów danych, jest kluczowe, aby wziąć długoterminową perspektywę chłodzenia. Nie myśl tylko o tym, co jest najlepsze, najszybsze lub najtańsze dla Twojego wdrożenia dzisiaj. Myśl o tym, jak Twoje rozwiązanie chłodzenia pozycjonuje Cię 5, 10 lub nawet 15 lat do przodu. Jeśli Twój system chłodzenia ledwo spełnia wymagania dzisiaj, możesz być pewien, że nie będzie już wystarczający za kilka lat. Pamiętaj, chłodzenie jest centralnym elementem ogólnego sukcesu Twojego obiektu przez cały jego cykl życia.

Chłodzenie jest teraz centralnym elementem długoterminowego sukcesu centrum danych — wybierz mądrze

Chłodzenie nie jest już sprawą z tyłu — jest centralnym elementem każdego centrum danych, zarówno krótko-, jak i długoterminowo. Poprzez zadawanie tych dziesięciu pytań na początku, operatorzy mogą zmniejszyć czas wdrożenia, minimalizować ryzyko i zapewnić, że obiekty są budowane z wytrzymałością w świecie napędzanym przez AI, charakteryzującym się zmianą i fluktuacjami.

Przyszłość branży zostanie określona nie tylko przez to, jak szybko operatorzy wdrożą pojemność, ale także przez to, jak inteligentnie zaprojektują oni długoterminową zrównoważoność i niezawodność. Ci, którzy traktują chłodzenie jako strategicznego współpracownika, będą najlepiej przygotowani do prowadzenia w nadchodzących latach.

Kevin Roof jest Dyrektorem Globalnym ds. Zarządzania Ofertami i Przechwytywaniem dla LiquidStack. Jako inżynier mechaniczny i PMP z ponad dekadą doświadczenia w chłodzeniu centrów danych, Kevin wnosi niezwykle cenne spostrzeżenia i przywództwo w dziedzinie chłodzenia cieczą.