Mida pakuvad uued salvestussüsteemid AI ja ML jaoks

MAX Data ühendab Optane DC tõhusaks töötamiseks AI ja ML süsteemidega.

Mida pakuvad uued salvestussüsteemid AI ja ML jaoks
Foto — Hitesh Choudhary — Unsplash

Ajal andmete MIT Sloan Management Review ja The Boston Consulting Group uurimistulemuste kohaselt arvavad 85% kolmest tuhandest küsitletud juhtidest, et AI süsteemid aitavad nende ettevõtetel turul konkurentsieelist saavutada. Kuid sellist lähenemist on praktikas proovinud rakendada vaid 39% ettevõtetest.

Üks põhjus olemasolevasse olukorda seisneb selles, et andmete tõhus töötlemine ja ressursside optimeerimine masinõppe ülesannete jaoks on keeruline töö. IDC toovad esile, et olukorda võiks lahendada uus tehnoloogia, mis põhineb püsivatel andmemälu (Persistent Memory, PMEM) lahendustel.

Seda tehnoloogiat pakkusid NetApp ja Intel, ühendades NetApp Memory Accelerated (MAX) Data ja Intel Optane DC Persistent Memory, et luua toode kohaliku andmesalvestuse jaoks, mis põhineb volatiilsusel.

Kuidas see töötab

MAX Data on serveritehnoloogia, mis võimaldab rakenduste jõudlust suurendada PMEM-i või DRAM-i kasutamise kaudu, kuid ei nõua tarkvaraarhitektuuri ümberkujundamist.

See rakendab automatiseeritud mitmekihilist salvestuse põhimõtteid, jagades andmeid tasemete ja salvestuslahenduste vahel vastavalt kasutamise sagedusele — „külmade” andmete jaoks kasutatakse soodsamat salvestust, samas kui sageli kasutatavad andmed on „käeulatuses” — püsiv mälu vähendab tundlikkuse viivitust nende andmetega töötamisel.

Versioon 1.1 kasutab DRAM mälusid ja NVDIMM-i.Mõlemal versioonil on oma puudused — vastavalt efektiivsuse suhteline kadu ja mälu kõrge hind — võrreldes Optane DCPMM-iga. Diagramm, mis annab võrdleva hinnangu viivitusele, on esitatud siin (lk. 4).

Tehnoloogia toetab ja POSIX-i ja töötlust plokki või failisüsteemide semantika alusel. Andmete kaitse ja taastamine tasandil on rakendatud MAX Snap ja MAX Recovery kaudu. Need tehnoloogiad kasutavad oma töös hetkekontosid, SnapMirror tööriista ja teisi kaitsemehhanisme ONTAP.

Skeemiliselt näeb rakendus välja järgmine:

Mida pakuvad uued salvestussüsteemid AI ja ML jaoks

Selles skeemis pole veel PMEM-i, kuid arendajad lubavad selle mälutüübi toetust lisada aasta lõpuks. Praegu töötab Max Data DRAM-i ja DIMM-iga.

Lahenduse potentsiaal

IDC töötavad, et etteneb reaalsete lahenduste arendus, nagu MAX Data, suureneb lähiaastatel, kuna ettevõtte andmemaht pidevalt kasvab ja firmadel puuduvad ressursid nende tõhusaks töötlemiseks. Tehnoloogia võib leiduda suurtes pilvekeskkondades ja ressursse nõudvate ülesannete, nagu tehisintellekti koolitamine, täitmisel. Seda rakendatakse kauplemisplatvormidel, küberturbe süsteemides ja muudes tarkvaralistes toodetes, kus on vajalik pidev ja kiire juurdepääs suurtele andmemahtudele.

On ka tõenäosus, et tehnoloogia ei võta turul kohe jalgu alla. Nagu eespool mainitud, töötab tehisintellekti süsteemidega vaid kolmandik ettevõtetest üle kogu maailma. Selle vaatenurgast võivad paljud pidada MAX Data ilmumist enneaegseks ja keskenduda kergematele infrastruktuuridele, mis võimaldavad lahendada praegusi ülesandeid.

Meie muud IT-infrastruktuuri materjalid:

Allikas: habr.com

Osta usaldusväärne hostimine veebilehtede jaoks DDoS-i kaitsega, VPS VDS serverid 🔥 Osta usaldusväärne hostimine veebilehtede jaoks DDoS-i kaitsega, VPS VDS serverid | ProHoster