Intel Xeon stóð sig nokkrum sinnum betur en átta Tesla V100 vélar þegar þeir þjálfuðu taugakerfi

Miðlægi örgjörvinn var margfalt hraðari í afköstum en samsetning átta grafískra örgjörva í einu þegar djúplærð er taugakerfi. Hljómar eins og eitthvað úr vísindaskáldskap, er það ekki? En vísindamenn frá Rice háskólanum, sem nota Intel Xeon, hafa sannað að það er mögulegt.

Intel Xeon stóð sig nokkrum sinnum betur en átta Tesla V100 vélar þegar þeir þjálfuðu taugakerfi

GPUs hafa alltaf hentað miklu betur fyrir djúpnám tauganet en örgjörvar. Þetta er vegna arkitektúrs GPUs, sem samanstanda af mörgum litlum kjarna sem geta framkvæmt mörg lítil verkefni samhliða, sem er nákvæmlega það sem þarf til að þjálfa taugakerfi. En það kom í ljós að miðlægir örgjörvar, með réttri nálgun, geta verið mjög áhrifaríkar í djúpnámi.

Það er greint frá því að þegar þú notar SLIDE djúpnámsreikniritið hafi Intel Xeon örgjörvi með 44 kjarna verið 3,5 sinnum afkastameiri en samsetning átta NVIDIA Tesla V100 tölvuhraðla. Þetta er kannski í fyrsta skipti sem örgjörvinn náði ekki aðeins GPU í slíkri atburðarás heldur fór fram úr þeim, og mjög áberandi.

Í fréttatilkynningu frá háskólanum kemur fram að SLIDE reikniritið krefst ekki GPUs þar sem það notar allt aðra nálgun. Venjulega, þegar þjálfað er taugakerfi, er þjálfunarvillu bakútbreiðsla tækni notuð, sem notar fylki margföldun, sem er tilvalið álag fyrir GPU. SLIDE breytir námi hins vegar í uppflettingarvandamál sem er leyst með kjötkássatöflum.


Intel Xeon stóð sig nokkrum sinnum betur en átta Tesla V100 vélar þegar þeir þjálfuðu taugakerfi

Að sögn vísindamannanna dregur þetta verulega úr reiknikostnaði við þjálfun tauganeta. Til að fá grunnlínu notuðu vísindamennirnir núverandi kerfi Rice háskólans með átta Tesla V100 hröðlum til að þjálfa taugakerfi með því að nota TensorFlow bókasafn Google. Ferlið tók 3,5 klst. Í kjölfarið var svipað taugakerfi þjálfað með því að nota SLIDE reikniritið á kerfi með einum 44 kjarna Xeon örgjörva og það tók aðeins 1 klukkustund.

Hér er rétt að taka fram að Intel er ekki með 44 kjarna örgjörvagerðir í vöruúrvali sínu eins og er. Hugsanlegt er að rannsakendur hafi notað einhvers konar sérsniðna eða óútgefna flís, en það er ólíklegt. Það er miklu líklegra að hér hafi verið notað kerfi með tveimur 22 kjarna Intel Xeonum, eða að það hafi einfaldlega verið villa í fréttatilkynningunni, og við erum að tala um 44 þræði sem voru útvegaðir af einum 22 kjarna örgjörva. En hvað sem því líður dregur þetta ekki úr afrekinu sjálfu.

Auðvitað þarf SLIDE reikniritið enn að fara í gegnum margar prófanir og sanna virkni þess, auk þess sem engin sérkenni og gildrur eru til staðar. Hins vegar er það sem við sjáum núna mjög áhrifamikið og getur í raun haft mikil áhrif á þróun greinarinnar.



Heimild: 3dnews.ru

Bæta við athugasemd