Byl odhalen nejrychlejší superpočítač na světě s výkonem 4 exaflopů

Technologická holdingová skupina G42 se sídlem v Abu Dhabi odhalila nejrychlejší superpočítač na světě. Nese název Condor Galaxy-1 (CG-1), má 54 milionů jader a zpracovatelskou kapacitu čtyři exaflopy. Superpočítač se nachází v Santa Clara v Kalifornii a bude ho provozovat společnost Cerebras, americká firma zabývající se umělou inteligencí.

Vývoj AI zvýšil poptávku po superpočítačích

Vzhledem k tomu, že se do centra pozornosti dostává technologie umělé inteligence (AI), existuje silná poptávka po superpočítačích, které by podnikům pomohly trénovat jejich vlastní modely. Společnosti jako Microsoft nabídly, že vybudují extrémně drahou infrastrukturu, kterou budou pronajímat jiným společnostem, aby na nich pracovaly. G42 se sídlem v Abu Dhabi je holdingová skupina v technologické oblasti a jejím cílem je vytvořit infrastrukturu pro futuristický svět. Spolupracuje s národy i korporacemi na realizaci své vize a buduje systém superpočítačů Condor Galaxy, aby pomohla vyřešit největší problémy, kterým dnes lidstvo čelí.

Co je systém Condor Galaxy?

Mnoho technologických společností oznámilo vytvoření masivních shluků grafických procesorových jednotek (GPU), mozků modelů umělé inteligence. „Distribuce jednoho modelu na tisíce malých GPU trvá měsíce od desítek lidí se vzácnými zkušenostmi,“ řekl Andrew Feldman, generální ředitel společnosti Cerebras Systems, která spolupracovala s G42 na dodání nejrychlejšího superpočítače.

Místo použití centrálního superpočítače staví Feldman a jeho tým v Cerebras sadu vzájemně propojených superpočítačů s umělou inteligencí, které mohou podstatně zkrátit dobu školení modelu umělé inteligence. Podle přístupu společnosti Cerebras je nastavení generativních modelů umělé inteligence otázkou několika minut a zvládne ho jediný jedinec. Dohromady bude mít systém Condor Galaxy System kombinovaný výpočetní výkon 36 exaflopů, což je v dnešním světě výpočetní techniky bezprecedentní.

Nejrychlejší superpočítač

Jádrem systému Condor Galaxy je každý superpočítač, z nichž první byl nedávno odhalen. Cerebras sestavil 64 svých vlajkových procesorů CS-2 AI pro sestavení superpočítače CG-1. Procesorová jádra AMD EPYC zásobují systém a mohou se pochlubit 54 miliony výpočetních jader optimalizovaných pro umělou inteligenci s šířkou pásma 388 terabitů za sekundu a 82 TB paměti.

Při 16bitovém výpočtu může systém dodat čtyři exaflopy výpočetního výkonu, což je čtyřikrát rychlejší než nejrychlejší superpočítač na světě. Může být použit k trénování 600 miliard modelů parametrů a rozšířen na podporu 100 bilionů modelů parametrů. Abychom to uvedli do kontextu, model GPT-4 od OpenAI je trénován pomocí 1,7 bilionu parametrů. Cerebras a G42 také plánují představit dvě další instalace superpočítače, CG-2 a CG-3, na začátku roku 2024 v USA a zároveň nabízet zákazníkům CG-1 jako cloudovou službu.

CG-1 může nativně pracovat s 50 000 tokeny a bez speciálních softwarových knihoven. Programování na CG-1 lze provádět zcela bez použití složitých distribuovaných programovacích jazyků, což šetří drahocenný čas strávený distribucí pracovních postupů mezi GPU. Superpočítač se nachází v Colovore, kolokačním zařízení v Santa Clara v Kalifornii. Cerebras jej bude provozovat podle amerických zákonů, aby zajistil, že výpočetní výkon nebude dostupný pro nepřátelské země.

G42 a Cerebras jsou přesvědčeny, že nejrychlejší superpočítač pomůže řešit problémy v oblasti zdravotnictví, energetiky a klimatu.