Bha am pròiseasar meadhanach grunn thursan nas luaithe ann an coileanadh na measgachadh de ochd pròiseasairean grafaigs aig an aon àm nuair a bha iad ag ionnsachadh lìonraidhean neural domhainn. Tha e coltach ri rudeigin a-mach à ficsean saidheans, nach eil? Ach tha luchd-rannsachaidh bho Oilthigh Rice, a 'cleachdadh Intel Xeon, air dearbhadh gu bheil e comasach.
Tha GPUs an-còmhnaidh air a bhith fada nas freagarraiche airson lìonraidhean neural ionnsachadh domhainn na CPUs. Tha seo mar thoradh air ailtireachd GPUs, anns a bheil mòran de choraichean beaga a tha comasach air mòran de ghnìomhan beaga a choileanadh aig an aon àm, agus is e sin dìreach a tha riatanach airson lìonraidhean neural a thrèanadh. Ach thionndaidh e a-mach gum faod luchd-giullachd meadhanach, leis an dòigh-obrach cheart, a bhith gu math èifeachdach ann an ionnsachadh domhainn.
Thathas ag aithris, nuair a bha iad a’ cleachdadh an algairim ionnsachaidh domhainn SLIDE, bha pròiseasar Intel Xeon le 44 cores 3,5 uair nas cinneasaiche na measgachadh de ochd luathadairean coimpiutaireachd NVIDIA Tesla V100. Is dòcha gur e seo a’ chiad uair a tha an CPU chan ann a-mhàin air grèim fhaighinn air an GPU ann an suidheachadh mar sin, ach cuideachd air a dhol thairis orra, agus gu math follaiseach.
Tha fios naidheachd a chuir an t-oilthigh a-mach ag ràdh nach eil feum aig an algairim SLIDE air GPUs leis gu bheil e a’ cleachdadh dòigh-obrach gu tur eadar-dhealaichte. Mar as trice, nuair a bhios tu a ’trèanadh lìonraidhean neural, thathas a’ cleachdadh an dòigh ath-mhilleadh mearachd trèanaidh, a bhios a ’cleachdadh iomadachadh matrix, a tha na dheagh luchd airson an GPU. Air an làimh eile, bidh SLIDE a’ tionndadh ionnsachadh gu bhith na dhuilgheadas sgrùdaidh a thèid fhuasgladh le bhith a’ cleachdadh clàran hash.
A rèir an luchd-rannsachaidh, tha seo gu mòr a’ lughdachadh cosgais coimpiutaireachd lìonraidhean neural trèanaidh. Gus bun-loidhne fhaighinn, chleachd an luchd-rannsachaidh an siostam a th’ aig obair-lann Oilthigh Rice le ochd luathaichean Tesla V100 gus lìonra neòil a thrèanadh a’ cleachdadh leabharlann TensorFlow aig Google. Thug am pròiseas 3,5 uair a thìde. Às deidh sin, chaidh lìonra neural coltach ris a thrèanadh a’ cleachdadh an algairim SLIDE air siostam le aon phròiseasar Xeon 44-core, agus cha tug e ach 1 uair.
Is fhiach a bhith mothachail an seo nach eil modalan pròiseasar 44-core aig Intel an-dràsta anns an raon toraidh aige. Tha e comasach gun do chleachd an luchd-rannsachaidh seòrsa de chip àbhaisteach no gun fhoillseachadh, ach chan eil coltas ann gu bheil seo. Tha e tòrr nas coltaiche gun deach siostam le dà 22-core Intel Xeons a chleachdadh an seo, no bha dìreach mearachd anns an fhios naidheachd, agus tha sinn a’ bruidhinn mu dheidhinn snàithleanan 44 a chaidh a thoirt seachad le aon phròiseasar 22-core. Ach ann an suidheachadh sam bith, chan eil seo a 'cur bacadh air coileanadh fhèin.
Gu dearbh, feumaidh an algairim SLIDE fhathast a dhol tro iomadh deuchainn agus dearbhadh a dhèanamh air èifeachdas, a bharrachd air nach eil feartan sònraichte agus duilgheadasan ann. Ach, tha na chì sinn a-nis gu math drùidhteach agus faodaidh e buaidh mhòr a thoirt air leasachadh a’ ghnìomhachais.
Source: 3d naidheachdan.ru