Cerebras heeft de “snelste AI-computer ter wereld”

Volgens het startupbedrijf Cerebras Systems (CBRS ) is de CS-1 de krachtigste AI-computersysteem ter wereld. Het is de laatste poging om de beste supercomputer te creëren, en het is geaccepteerd door het supercomputingprogramma van de Amerikaanse federale overheid.

De CS-1 gebruikt een hele wafer in plaats van een chip, en het computergesign heeft veel kleine kernen over de wafer. Er zijn meer dan 1,2 biljoen transistors over de kernen van één wafer, wat veel meer is dan de 10 miljoen die meestal op één chip van een processor zitten. Als dat nog niet genoeg was, heeft de CS-1-supercomputer zes van de Cerebras-wafers in één systeem. Ze worden een Wafer Scale Engine genoemd.

De eerste CS-1 van Cerebras werd naar het Argonne National Laboratory van het Amerikaanse ministerie van Energie gestuurd. De 400.000 kernen zullen worden gebruikt om te werken aan extreem moeilijke AI-computingproblemen, zoals het bestuderen van interacties tussen kankermedicijnen. Het Argonne National Lab is een van de grootste kopers van supercomputers ter wereld.

De CS-1

De CS-1 is programmeerbaar met het Cerebras Software Platform en kan worden gebruikt met bestaande infrastructuur, volgens het startupbedrijf. De Wafer Scale Engine (WSE) heeft meer siliciumoppervlak dan de grootste graphics processing unit, en de 400.000 Sparse Linear Algebra Compute (SLAC)-kernen zijn flexibel, programmeerbaar en geoptimaliseerd voor neurale netwerken.

De CS-1 heeft een koperkleurige blok, of cold plate, die warmte wegvoert van de reusachtige chip. Pijpen met koud water zijn verantwoordelijk voor de koeling, en ventilatoren blazen koele lucht om de warmte weg te voeren van de pijpen.

Volgens velen is de grote doorbraak het dashboard. Argonne heeft constant gewerkt aan het verspreiden van een neuronaal netwerk over een groot aantal individuele chips, waardoor ze beter te programmeren zijn in vergelijking met andere supercomputermachines zoals Google’s Pod.

De Cerebras CS-1 is in wezen één reusachtige, zelfstandige chip waarop het neurale netwerk kan worden geplaatst. Er is een programma ontwikkeld om de manier waarop mathematische operaties van een neuronaal netwerk worden verdeeld over de circuits van de WSE te optimaliseren.

Volgens Rick Stevens, de associate laboratory director voor computing, milieu en levenswetenschappen van Argonne, “We hebben tools om dit te doen, maar niets wat turnkey is zoals de CS-1, [waar] alles automatisch wordt gedaan.”

Van de grond af opgebouwd

Volgens Cerebras zijn ze het enige startupbedrijf dat een speciaal systeem van de grond af opbouwt. Om de verbazingwekkende prestaties te bereiken, heeft Cerebras elk aspect van chipdesign, systeemdesign en software van het CS-1-systeem geoptimaliseerd. Dit stelt de CS-1 in staat om AI-taken te voltooien die normaal gesproken maanden duren in enkele minuten.

De supercomputer vermindert ook aanzienlijk de trainingsduur, en enkele beeldclassificatie kan in microseconden worden voltooid.

Volgens een interview met de technologie-website VentureBeat, zei Andrew Feldman, de CEO van Cerebras, “Dit is het grootste vierkant dat je uit een 300 millimeter wafer kunt knippen.” Hij vervolgde, “Ondanks dat we de grootste en snelste chip hebben, weten we dat een buitengewone processor niet noodzakelijkerwijs voldoende is om buitengewone prestaties te leveren. Als je echt snelle prestaties wilt leveren, moet je een systeem bouwen. En je kunt geen Ferrari-motor in een Volkswagen plaatsen om Ferrari-prestaties te krijgen. Wat je doet, is dat je de bottlenecks verplaatst als je een prestatieverbetering van 1.000 keer wilt bereiken.”

Na de introductie van het CS-1-systeem heeft Cerebras zichzelf gepositioneerd als een van de leiders in de supercomputingindustrie. Hun bijdrage zal ongetwijfeld een grote impact hebben op het oplossen van enkele van de meest dringende AI-uitdagingen ter wereld. Deze systemen verminderen de tijd die nodig is om veel problemen aan te pakken aanzienlijk.