Najava procesorja Cerebras ― Cerebras Wafer Scale Engine (WSE) ali Cerebras wafer scale engine ― v okviru letne konference Hot Chips 31. Ob pogledu na to silikonsko pošast ni presenetljivo niti dejstvo, da so jo lahko izdali v telesu. Presenetljiva sta pogum zasnove in delo razvijalcev, ki so tvegali razvoj kristala s površino 46 kvadratnih milimetrov s stranicami 225 cm, za izdelavo enega procesorja pa je potrebna cela 21,5-mm rezina. Z najmanjšo napako je stopnja napak 300%, stroške izdaje pa si je težko predstavljati.
Cerebras WSE proizvaja TSMC. Tehnološki proces - 16 nm FinFET. Tudi ta tajvanski proizvajalec si zasluži spomenik za izdajo Cerebrasa. Izdelava takšnega čipa je zahtevala najvišje znanje in reševanje številnih problemov, vendar je bilo vredno, zagotavljajo razvijalci. Čip Cerebras je v bistvu superračunalnik na čipu z neverjetno prepustnostjo, minimalno porabo energije in fantastičnim paralelizmom. To je zdaj idealna rešitev za strojno učenje, ki bo raziskovalcem omogočila, da začnejo reševati izjemno zapletene probleme.
Vsaka matrica Cerebras WSE vsebuje 1,2 bilijona tranzistorjev, organiziranih v 400 računalniških jeder, optimiziranih za AI, in 000 GB lokalno porazdeljenega SRAM-a. Vse to povezuje mrežasto omrežje s skupno prepustnostjo 18 petabitov na sekundo. Pasovna širina pomnilnika doseže 100 PB/s. Hierarhija pomnilnika je enonivojska. Ni predpomnilnika, ni prekrivanja in minimalne zamude pri dostopu. Je idealna arhitektura za pospeševanje nalog, povezanih z AI. Gole številke: v primerjavi z najsodobnejšimi grafičnimi jedri čip Cerebras zagotavlja 9-krat več pomnilnika na čipu in 3000-krat večjo hitrost prenosa pomnilnika.
Računalniška jedra Cerebras - SLAC (Sparse Linear Algebra Cores) - so popolnoma programabilna in jih je mogoče optimizirati za delo s poljubnimi nevronskimi mrežami. Poleg tega arhitektura jedra sama po sebi filtrira podatke, ki jih predstavljajo ničle. To sprosti računalniške vire od potrebe po izvajanju nedejavnih operacij množenja z nič, kar za redke podatkovne obremenitve pomeni hitrejše izračune in izjemno energetsko učinkovitost. Tako se izkaže, da je procesor Cerebras več sto ali celo tisočkrat bolj učinkovit za strojno učenje glede na površino čipa in porabo kot trenutne rešitve za AI in strojno učenje.
Izdelava čipa podobne velikosti veliko edinstvenih rešitev. Skoraj ročno ga je bilo treba zapakirati v kovček. Težave so bile z napajanjem kristala in njegovim hlajenjem. Odvzem toplote je postal mogoč samo s tekočino in le z organizacijo conske oskrbe z navpično cirkulacijo. Vendar so bile vse težave rešene in čip je deloval. Zanimivo bo izvedeti o njegovi praktični uporabi.
Vir: 3dnews.ru