Cerebrase protsessori – Cerebras Wafer Scale Engine (WSE) või Cerebras Wafer Scale Engine’i – teadaanne ― osana iga-aastasest konverentsist Hot Chips 31. Vaadates seda ränikoletist, pole üllatav isegi asjaolu, et nad võiksid selle lihast vabastada. Üllatav on disainijulgus ja arendajate töö, kes riskisid välja töötada 46 225 ruutmillimeetrise pindalaga kristalli, mille küljed on 21,5 cm. Ühe protsessori valmistamiseks kulub terve 300 mm vahvel. Väikseima vea korral on defektimäär 100% ja probleemi maksumust on isegi raske ette kujutada.
Cerebras WSE toodab TSMC. Tehnoloogiline protsess: 16 nm FinFET. See Taiwani tootja väärib ausammast ka Cerebra vabastamise eest. Sellise kiibi tootmine nõudis kõrgeimat oskust ja paljude probleemide lahendamist, kuid see oli seda väärt, kinnitavad arendajad. Cerebrase kiip on sisuliselt superarvuti kiibil, millel on uskumatu läbilaskevõime, minimaalne energiatarve ja fantastiline paralleelsus. See on nüüd ideaalne masinõppelahendus, mis võimaldab teadlastel alustada äärmiselt keeruliste probleemide lahendamist.
Iga Cerebras WSE stants sisaldab 1,2 triljonit transistorit, mis on jaotatud 400 000 AI-le optimeeritud arvutustuumaks ja 18 GB kohalikuks hajutatud SRAM-iks. Kõik see on ühendatud võrguga, mille koguvõimsus on 100 petabitti sekundis. Mälu ribalaius ulatub 9 PB/s. Mälu hierarhia on ühetasandiline. Puudub vahemälu, kattumine ja minimaalsed juurdepääsuviivitused. See on ideaalne arhitektuur AI-ga seotud ülesannete kiirendamiseks. Paljad numbrid: võrreldes kõige moodsamate graafikatuumadega pakub Cerebrase kiip 3000 korda rohkem kiibimälu ja 10 000 korda suuremat mäluedastuskiirust.
Aju arvutussüdamikud - SLAC (Sparse Linear Algebra Cores) - on täielikult programmeeritavad ja neid saab optimeerida töötamiseks mis tahes närvivõrkudega. Lisaks filtreerib tuumaarhitektuur oma olemuselt nullidega tähistatud andmeid. See vabastab arvutusressursid vajadusest teha tühikäigul nulliga korrutamist, mis hõreda andmekoormuse korral tähendab kiiremaid arvutusi ja äärmist energiatõhusust. Seega osutub Cerebrase protsessor kiibi pindala ja tarbimise osas masinõppe jaoks sadu või isegi tuhandeid kordi tõhusamaks kui praegused AI ja masinõppe lahendused.
Sarnase suurusega kiibi valmistamine palju ainulaadseid lahendusi. See tuli isegi peaaegu käsitsi ümbrisesse pakkida. Kristalli vooluga varustamise ja jahutamisega oli probleeme. Soojuse eemaldamine sai võimalikuks ainult vedelikuga ja ainult vertikaalse tsirkulatsiooniga tsoonivarustuse korraldamisega. Kõik probleemid said siiski lahendatud ja kiip tuli tööle. Huvitav on teada saada selle praktilisest rakendamisest.
Allikas: 3dnews.ru