AI-modellen en platforms

Cerebras Systems zet nieuwe benchmark in AI-innovatie met lancering van de snelste AI-chip ooit

Antoine Tardif
Voeg Unite.AI toe aan je voorkeursbronnen op Google
Belangrijkste puntenDe nieuwe WSE-3-chip van Cerebras verdubbelt de prestaties van zijn voorganger zonder…
Meer weergeven
  • De nieuwe WSE-3-chip van Cerebras verdubbelt de prestaties van zijn voorganger zonder het stroomverbruik of de kosten te verhogen.
  • De chip maakt het trainen van AI-modellen mogelijk tot wel 24 biljoen parameters groot.
  • Het systeem van Cerebras kan tot 2048 eenheden clusteren voor een rekenkracht van 256 exaFLOPs.

Cerebras Systems (CBRS ) is bekend om het bouwen van enorme computerclusters die worden gebruikt voor allerlei soorten AI en wetenschappelijke taken. heeft opnieuw records gebroken in de AI-industrie door zijn laatste technologische wonder, de Wafer-Scale Engine 3 (WSE-3), te onthullen, die wordt geprezen als de snelste AI-chip die de wereld tot nu toe heeft gezien. Met een verbijsterende 4 biljoen transistors is deze chip ontworpen om de volgende generatie AI-supercomputers te laten draaien, waardoor ongekende prestatieniveaus mogelijk worden.

De WSE-3, vervaardigd met een cutting-edge 5nm-proces, vormt de ruggengraat van de Cerebras CS-3 AI-supercomputer. Het biedt een baanbrekende 125 petaflops van piek-AI-prestaties, mogelijk gemaakt door 900.000 AI-geoptimaliseerde compute-kernen. Deze ontwikkeling markeert een significante stap voorwaarts, waarbij de prestaties van zijn voorganger, de WSE-2, worden verdubbeld zonder dat de stroomverbruik of de kosten toenemen.

Cerebras Systems’ ambitie om AI-rekenen te revolutioneren is duidelijk in de WSE-3-specificaties. De chip beschikt over 44GB aan on-chip SRAM en ondersteunt externe geheugenconfiguraties variërend van 1,5TB tot een kolossale 1,2PB. Deze enorme geheugencapaciteit maakt het mogelijk om AI-modellen tot 24 biljoen parameters in omvang te trainen, waardoor de ontwikkeling van modellen mogelijk wordt gemaakt die tien keer groter zijn dan die van GPT-4 en Gemini.

Een van de meest overtuigende aspecten van de CS-3 is zijn schaalbaarheid. Het systeem kan worden gekoppeld tot 2048 CS-3-eenheden, waardoor een verbluffende 256 exaFLOPs aan rekenkracht worden bereikt. Deze schaalbaarheid gaat niet alleen over brute kracht; het vereenvoudigt de AI-trainingsworkflow, waardoor de productiviteit van ontwikkelaars wordt verhoogd door grote modellen te trainen zonder de noodzaak van complexe partitionering of herschrijving.

Cerebras’ toewijding aan het vooruit helpen van AI-technologie strekt zich uit tot zijn softwareframework, dat nu PyTorch 2.0 en de nieuwste AI-modellen en -technieken ondersteunt. Dit omvat native hardwareversnelling voor dynamische en ongestructureerde sparsity, waardoor de trainings­tijd tot acht keer kan worden versneld.

De reis van Cerebras, zoals verteld door CEO Andrew Feldman, van de scepsis die acht jaar geleden werd geconfronteerd tot de lancering van de WSE-3, belichaamt de pioniersgeest en de toewijding van het bedrijf om de grenzen van AI-technologie te verleggen.

“Toen we acht jaar geleden aan deze reis begonnen, zei iedereen dat wafer-schaalprocessors een pipe dream waren. We kunnen niet trotser zijn op het introduceren van de derde generatie van onze baanbrekende wafer-schaal AI-chip,” zei Andrew Feldman, CEO en medeoprichter van Cerebras. “WSE-3 is de snelste AI-chip ter wereld, speciaal ontworpen voor de nieuwste state-of-the-art AI-toepassingen, van mixture of experts tot 24 biljoen parametermodellen. We zijn verheugd om WSE-3 en CS-3 op de markt te brengen om de grootste AI-uitdagingen van vandaag te helpen oplossen.”

Deze innovatie is niet onopgemerkt gebleven, met een aanzienlijke achterstand in bestellingen voor de CS-3 van ondernemingen, overheidsentiteiten en internationale clouds. De impact van Cerebras’ technologie wordt verder benadrukt door strategische partnerschappen, zoals met G42, die hebben geleid tot de creatie van enkele van ‘s werelds grootste AI-supercomputers.

Terwijl Cerebras Systems de weg naar toekomstige AI-verbeteringen blijft effenen, fungeert de lancering van de WSE-3 als een getuigenis van het ongelofelijke potentieel van wafer-schaaltechniek. Deze chip is niet alleen een stuk technologie; het is een poort naar een toekomst waarin de grenzen van AI voortdurend worden uitgebreid, waardoor nieuwe mogelijkheden worden beloofd voor onderzoek, bedrijfsapplicaties en daarbuiten.

Antoine is een visionaire leider en medeoprichter van Unite.AI, gedreven door een onwankelbare passie om de toekomst van AI en robotica vorm te geven en vooruit te helpen. Als serieondernemer gelooft hij dat AI de samenleving net zo ingrijpend zal veranderen als elektriciteit. Hij spreekt vaak enthousiast over het potentieel van baanbrekende technologieën en artificiële algemene intelligentie (AGI).

Als futurist onderzoekt hij hoe deze innovaties onze wereld zullen vormgeven. Daarnaast is hij oprichter van Securities.io, een platform dat zich richt op investeringen in geavanceerde technologieën die de toekomst opnieuw definiëren en hele sectoren veranderen.