Kolme sukupolvea datakeskuksen jäähdytyksessä – ja miksi useimmat operaattorit rakentavat eilisen infrastruktuurin

Kolme vuotta sitten datakeskuksien teollisuus keskusteli siitä, tarvitaanko koskaan nestejäähdytystä. Kaksi vuotta sitten useimmat operaattorit uskoivat, että yksivaiheinen vesi olisi ratkaisu. Nykyään johtavat laitokset siirtyvät seuraavan sukupolven jäähdytysarkkitehtuureihin, kun taas monissa uusissa rakennuksissa lukitaan järjestelmiin, jotka tulevat vanhenemaan muutamassa vuodessa.

Tämä ero johtuu fysiikasta ja prosessorien tiestä, jotka ovat jo nyt näkyvissä vuoteen 2027 asti. Yhdessä ne luovat jakoa operaattoreiden välille, jotka ymmärtävät, että jäähdytys on siirtymässä uuteen arkkitehtoniseen aikakauteen, ja niiden, jotka saattavat pian huomata, että he ovat investoineet satoja miljoonia infrastruktuuriin, joka ei pysty tukemaan seuraavaa aaltoa AI-prosessoreita.

Kolme jäähdytyssukupolvea

Datakeskuksen jäähdytys on edennyt kolmen erillisen arkkitehtonisen aikakauden kautta, kunkin määriteltynä uusilla esteillä, jotka on voitettava, ja hyllytiheydellä, jolle on taloudellinen tuki.

• Sukupolvi 1: Ilmajäähdytys (2000–2023): Saavutti huipun 10–15 kW/hylly. Taloudellinen kannattavuus alkoi murtua vuoden 2020 tienoilla, kun AI-työkuormat ylittivät 20 kW. Vuoteen 2023 mennessä ilmajäähdytys oli suurelta osin vanhentunut uusille korkeatiheyksille.

• Sukupolvi 2: Yksivaiheinen neste (2020–2027): Ensimmäinen nestejäähdytyslähestymistapa. Käyttää vettä tai PG25:ää suurilla virtauksilla lämmön poistamiseen lämpötilan muutoksen kautta. Toimiva 20–120 kW/hylly, mutta osoittaa jännitystä yli 150 kW. Odotetaan, että se saavuttaa käytännön rajoitukset vuoteen 2027 mennessä, kun prosessorit ylittävät 2 000 W.

• Sukupolvi 3: Kaksivaiheinen + edistynyt lämmönpoisto (2024–2035+): Käyttää kylmäaineita, jotka absorboida lämpöä faasinmuutoksen kautta lämpötilanmuutoksen sijaan. Mittakaavassa 150 kW ja siitä ylöspäin hyllykohtaisesti. Mahdollistaa uudet lämmönpoistosuunnitelmat prosessorista ilmakehään. Johtavat operaattorit ovat jo ottaneet sen käyttöön, ja odotetaan, että se tulee hallitsemaan markkinaa vuosina 2027–2028.

Kunkin siirtymän kohdalla on murruttava piste – kun fysiikka ja talous osuvat yhteen.

Sukupolvi 2:n fysiikan ongelma

Ensimmäisen sukupolven sukupolvi 2 -laitteiden käyttöönotto alkaa paljastaa yksivaiheisen jäähdytyksen rajoja.

Vesipohjaiset järjestelmät vaativat virtauksia, jotka ovat noin 1,5 litraa minuutissa kilowatin kohti. 120 kW hylly tarvitsee noin 180 litraa minuutissa; 250 kW: ssä se hyppää 375 litraan minuutissa kylmälevyjen kautta, joissa on millimetrin kokoiset aukot.

GTC:ssä tänä vuonna hyllyt, jotka olivat kytketty linjoihin, jotka olivat palonsammutusletkun kokoisia, tekivät haasteen näkyväksi. Suuret virtaukset luovat kaskadi-ongelmia. Vesi, johon on sekoitettu glykolia, hapettuu mikrohuokosrakenteissa, ja korroosio on yhdistetty virtausnopeuksiin, jotka kuluttavat heikentyneitä siipiä. Huoltovaatimukset ovat yllättäneet monia operaattoreita: kuukausittaiset suodattimien vaihdot sen sijaan, että ne olisivat neljännesvuosittaisia tai kahdesti vuodessa, jatkuva kemian seuranta ja glykolin “IV-laukut” kiinni hyllyissä.

Vikamuodot ovat yhtä huolestuttavia. Sisäinen kenttätieto osoittaa, että noin 4 % vesisäiliöistä GPUp:ista epäonnistuu kolmen vuoden elinkaaren aikana vuotien vuoksi. Hyllyt, jotka sisältävät 3-5 miljoonan dollarin arvosta laitteita, tuottavat tappion, joka perustuu sukupolvi 2:n taloudelliseen perustaan.

10 MW:n laitoksen analyysi Jacobs Engineering korostaa toisen tehokkuuden. Yksivaiheiset järjestelmät vaativat kylmempää vettä kuin sukupolvi 3 -järjestelmät. Kylmät vesilämpötilat, jotka vaaditaan sukupolvi 2:sta, lisäävät sekä jäähdytyslaitteiden kapasiteettivaatimuksia että energiankulutusta.

Mikä erottaa sukupolvi 3:n

Sukupolvi 3 edustaa todellista arkkitehtonista muutosta. Kaksivaiheiset kylmäaineet kaappaavat lämmön faasinmuutoksen kautta, vähentäen virtauksia neljänneksellä yhdeksään. Vähennetty virtausnopeus vähentää merkittävästi infrastruktuurin jännitystä, minimoi kylmälevyjen kulutusta ja poistaa suuren osan huoltovaatimuksia, jotka vaivaavat sukupolvi 2:ta.

Kylmäaineet mahdollistavat myös uudet lämmönpoistosuunnitelmat, kuten kylmäaine-CO2- ja kylmäaine-kylmäainejärjestelmät, jotka optimoivat jäähdytystä prosessorista ilmakehään. Nämä suunnitelmat ovat jo tuotannossa, osoittaen sukupolvi 3:n mittakaavallisuutta ja taloudellista tehokkuutta.

Kun Jacobs Engineering, joka on vastuussa yli 80 %:sta maailmanlaajuisista datakeskuksen MEP-suunnitelmista, loi rinnakkaisia 10 MW:n viitekohtaisia malleja, he poistivat valmistajan puolueettomuuden vertailusta.

Löydökset:

• Käyttöomaisuus: 10,39 miljoonaa dollaria yksivaiheinen vs. 10,38 miljoonaa dollaria kaksivaiheinen

• Vuotuinen käyttökustannus: 1,04 miljoonaa dollaria vs. 679 000 dollaria (35 % vähennys)

• Viiden vuoden yhteiskustannus: 15,6 miljoonaa dollaria vs. 13,8 miljoonaa dollaria (12 % säästö)

Käyttöomaisuuden tasapuolisuus yllätti monia, jotka odottivat kaksivaiheiselle järjestelmälle korkeampaa hintaa. Nykyiset kaksivaiheiset järjestelmät vaativat enemmän CDU:ita, mutta yksivaiheiset suunnitelmat tarvitsevat monimutkaisia rivi-manifoldereita, vahvaa vuotojen havaitsemista ja harmonisen suodattamista – monimutkaisuuksia, joita voidaan välttää nykyisillä kaksivaiheisilla CDU:illa. Seuraavan sukupolven CDU:t, jotka saapuvat vuonna 2026, vähentävät kustannuksia entisestään, tehden sukupolvi 3:sta taloudellisesti kannattavamman.

Käyttökustannus-etu johtuu termodynamiikasta. Kaksivaiheiset järjestelmät ylläpitävät samanlaisia prosessorilämpötiloja käyttäen lämpimämpää laitoksen vettä – noin 8 °C lämpimämpää keskimäärin. Jokainen aste, joka säästyy, leikkaa vuotuisen energiankulutuksen noin 4 %, mikä vastaa 35 %:n käyttökustannusvähennystä, jonka Jacobs dokumentoi ilmastojen välillä Phoenixistä Tukholmaan.

Eteenpäin suunnittelevat operaattorit menevät askelen pidemmälle, muuttaen lämpövarausta noin 5 %:iin enemmän laskentakapasiteettiin samassa tehokotelossa. Maailmassa, jossa jokainen GPU edustaa tuottoa ja teho on rajoitettu, tämä etu muuttuu kilpailuedulla.

Piirien tiekartta pakottaa asian

Siirtymä sukupolviin 3 ei johdu jäähdytysvalmistajista – se määräytyy prosessorin suunnittelun mukaan.

NVIDIAN Rubin-arkkitehtuureja odotetaan ylittävän 2 000 W prosessoria kohti. AMD:n MI450 on samalla radalla. Jokainen suuri piirisuunnittelija pakkaa enemmän suorituskykyä pienempiin jäljennöksiin, ajamalla lämpötiheyttä voimakkaasti ylöspäin.

Avainhaaste on lämpövirta – lämmön keskittyminen, mitattuna watinia neliösenttimetrillä. Kun lämpövirta kasvaa, sukupolvi 2:n ratkaisut osuvat fysikaalisiin ja taloudellisiin rajoituksiin. Virtaukset tulevat tuhoisiksi, lämpötilaerot kestämättömiksi ja järjestelmän kustannukset kestämättömiksi.

Sukupolvi 3 on rakennettu tätä todellisuutta varten. Johtavat operaattorit ovat jo määrittäneet 250 kW:n hyllyt selkeällä polulla 1 MW:aan. Odottaminen “nähdäkseen, mikä voittaa” saattaa tuntua konservatiiviselta, mutta se on riskialttisin lähestymistapa. Piirien tiekartta on kiinteä; fysiikka ei taivu. Ainoa jäljellä oleva päätös on, milloin toimia.

Brownfield-dilemma

Miljardeja dollareita investoidaan parhaillaan sukupolvi 2:n infrastruktuuriin, joka tulee rajoitettua 36 kuukauden kuluessa. Laitokset, jotka suunnitellaan tänään yksivaiheisen veden ympärille, kamppailevat tukemalla 2027-luokan prosessoreita. Myöhempi uudelleenrakentaminen maksaa paljon enemmän kuin rakentaminen sukupolvi 3:lla tänään.

Olemassa oleviin kohteisiin voidaan käyttää kylmäaine-ilma-järjestelmiä silta-ratkaisuna, mutta ne eivät ole pitkäaikainen ratkaisu. Teollisuuden suunta on selvä: sukupolvi 3:n arkkitehtuuri tulee ankkuroimaan seuraavan vuosikymmenen uusia rakennuksia.

Sukupolven valinta

Jokainen jäähdytysmuutos on näyttänyt riittävältä, kunnes seuraava sukupolvi teki sen vanhentuneeksi. Operaattorit, jotka omaksuivat nestejäähdytyksen aikaisin – sen ottaminen käyttöön vuosina 2020-2021 sen sijaan, että vuonna 2023 – saivat lähes kaksi vuotta etua käyttöönotossa.

Sama inflektio on tapahtumassa jälleen. Fysiikka on todistettu. Taloudellinen perusta on vahvistettu riippumattomalla analyysillä. Prosessorien tiekartat tekevät siirtymisen välttämättömäksi.

Kysymys ei ole siitä, tapahtuuko muutos – vaan johtatko sinä sitä vai pakotutaanko sinä siihen, kun sukupolvi 2 saavuttaa rajojensa.

Datakeskukset, jotka suunnitellaan tänään, toimivat hyvin 2030-luvulle saakka. Rakentaminen sukupolvi 3:n arkkitehtuureilla takaa, että ne säilyvät käyttökelpoisina AI-ajan vaatimusten mukaisesti eivätkä muutu rajoittuneiksi varoiksi ennen kuin ne edes vakiintuvat.

Datakeskuksen jäähdytyksen tulevaisuus on sukupolven muutos – ja sukupolvi 3 on jo täällä.