Šta će nova spremišta za AI i ML sisteme ponuditi?

MAX Data će biti kombinovan sa Optane DC za efikasan rad sa AI i ML sistemima.

Šta će nova spremišta za AI i ML sisteme ponuditi?
Foto - Hitesh Choudhary — Unsplash

By dato Prema studiji MIT Sloan Management Review i The Boston Consulting Group, 85% od tri hiljade anketiranih menadžera vjeruje da će AI sistemi pomoći njihovim kompanijama da steknu konkurentsku prednost na tržištu. Međutim, samo 39% kompanija pokušalo je nešto slično implementirati u praksi.

Jedan od razloga za ovu situaciju je taj što efikasan rad sa podacima i optimizacija upotrebe energije za zadatke mašinskog učenja nije lak posao. U IDC-u slaviti, da bi nova tehnologija bazirana na trajnoj memoriji (Persistent Memory, PMEM) mogla riješiti situaciju.

Ovu tehnologiju su predložili NetApp i Intel, ujedinjenje NetApp Memory Accelerated (MAX) podaci i Intel Optane DC Persistent Memory za lokalni proizvod za trajnu memoriju.

Kako ovo radi

MAX Data je serverska tehnologija koja poboljšava performanse aplikacije korištenjem PMEM ili DRAM-a, ali ne zahtijeva promjene softverske arhitekture.

Implementira principe automatizovanog skladištenja na više nivoa, distribucije podataka po nivoima i skladištenja u zavisnosti od učestalosti upotrebe - pristupačnija pohrana se koristi za "hladne" podatke, a često korišćeni podaci su "pri ruci" - u Persistent Memory, koji minimizira kašnjenje pri radu sa takvim podacima.

Verzija 1.1 koristi DRAM memoriju i NVDIMM. Obje implementacije imaju svoje nedostatke – relativni gubitak efikasnosti i visoke troškove memorije, respektivno – u poređenju sa Optane DCPMM. Prikazan je grafikon koji daje uporednu procjenu latencije ovdje (stranica 4).

tehnologija podržava и POSIX i rad sa semantikom blokova ili sistema datoteka. Zaštita podataka i oporavak na razini skladišta implementirani su pomoću MAX Snap i MAX Recovery. Ove tehnologije koriste snimke, SnapMirror alat i druge ONTAP sigurnosne mehanizme.

Šematski implementacija izgleda ovako:

Šta će nova spremišta za AI i ML sisteme ponuditi?

Na ovom kolu još nema PMEM-a, ali programeri obećavaju da će dodati podršku za ovu vrstu memorije do kraja godine. Do sada, Max Data radi sa DRAM-om i DIMM-om.

Potencijal rješenja

U IDC-u tvrdeda će u narednim godinama biti još razvoja poput MAX Data, budući da obim korporativnih podataka stalno raste, a kompanije nemaju dovoljno kapaciteta da ih efikasno obrađuju. Tehnologija moći korisno u velikom oblaku i za rad sa resursno intenzivnim zadacima kao što je obuka neuronskih mreža. Naći će primjenu na trgovačkim platformama, sistemima sigurnosti informacija i svim drugim softverskim proizvodima koji zahtijevaju stalan i brz pristup velikim količinama informacija.

Također postoji šansa da tehnologija neće odmah zaživjeti na tržištu. Kao što smo već napomenuli, samo trećina kompanija širom svijeta radi sa AI sistemima u ovom ili onom obliku. S ove točke gledišta, mnogi mogu smatrati pojavu MAX Data preuranjenim i usmjerit će svoju pažnju na pristupačniju infrastrukturu koja im omogućava rješavanje trenutnih problema.

Naši ostali materijali o IT infrastrukturi:

izvor: www.habr.com

Dodajte komentar