Što će nuditi novi repozitoriji za AI i ML sustave?

MAX Data će se kombinirati s Optane DC za učinkovit rad sa AI i ML sustavima.

Što će nuditi novi repozitoriji za AI i ML sustave?
Foto - Hitesh Choudhary — Neprskati

Na podaci Prema studiji MIT Sloan Management Review i The Boston Consulting Group, 85% od tri tisuće anketiranih menadžera vjeruje da će AI sustavi pomoći njihovim tvrtkama da steknu konkurentsku prednost na tržištu. Međutim, samo 39% tvrtki pokušalo je implementirati nešto slično u praksi.

Jedan od razloga za ovu situaciju je taj što učinkovito raditi s podacima i optimizirati korištenje energije za zadatke strojnog učenja nije lak posao. U IDC-u oznaka, da bi nova tehnologija temeljena na trajnoj memoriji (Persistent Memory, PMEM) mogla riješiti situaciju.

Ovu tehnologiju predložili su NetApp i Intel, ujedinjujući se NetApp Memory Accelerated (MAX) Data i Intel Optane DC Persistent Memory za proizvod za pohranu lokalne trajne memorije.

Kako ovo radi

MAX Data je poslužiteljska tehnologija koja poboljšava performanse aplikacije korištenjem PMEM-a ili DRAM-a, ali ne zahtijeva promjene u arhitekturi softvera.

Implementira principe automatizirane pohrane na više razina, raspodjeljujući podatke po razinama i pohranjujući ovisno o učestalosti korištenja - pristupačnija pohrana koristi se za "hladne" podatke, a podaci koji se često koriste su "pri ruci" - u Persistent Memory, koji minimizira kašnjenje pri radu s takvim podacima.

Verzija 1.1 koristi DRAM memoriju i NVDIMM. Obje implementacije imaju svoje nedostatke — relativan gubitak učinkovitosti i visoke troškove memorije — u usporedbi s Optane DCPMM-om. Prikazan je grafikon koji daje usporednu procjenu latencije здесь (stranica 4).

Технология podupire и POSIX i rad sa semantikom blokovskih ili datotečnih sustava. Zaštita podataka i oporavak na razini pohrane implementirani su pomoću MAX Snap i MAX Recovery. Ove tehnologije koriste snimke, alat SnapMirror i druge ONTAP sigurnosne mehanizme.

Shematski implementacija izgleda ovako:

Što će nuditi novi repozitoriji za AI i ML sustave?

Na ovom krugu još nema PMEM-a, ali programeri obećavaju da će dodati podršku za ovu vrstu memorije do kraja godine. Za sada Max Data radi s DRAM-om i DIMM-om.

Potencijal rješenja

U IDC-u zahtjevda će u nadolazećim godinama biti više razvoja poput MAX Data, budući da količina korporativnih podataka stalno raste, a tvrtke nemaju dovoljno kapaciteta za njihovu učinkovitu obradu. Tehnologija može koristan u okruženju velikog oblaka i za rad sa zadacima koji zahtijevaju velike resurse, kao što je obuka neuronskih mreža. Naći će primjenu na platformama za trgovanje, sustavima informacijske sigurnosti i svim drugim softverskim proizvodima koji zahtijevaju stalan i brz pristup velikim količinama informacija.

Također postoji šansa da se tehnologija neće odmah ukorijeniti na tržištu. Kao što smo gore napomenuli, samo trećina tvrtki diljem svijeta radi sa sustavima umjetne inteligencije u ovom ili onom obliku. S ove točke gledišta, mnogi bi pojavu MAX Data mogli smatrati preuranjenom te će svoju pozornost usmjeriti na pristupačniju infrastrukturu koja im omogućuje rješavanje trenutnih problema.

Ostali naši materijali o IT infrastrukturi:

Izvor: www.habr.com

Dodajte komentar