Ce vor oferi noile stocări pentru sistemele AI și ML

MAX Data se va combina cu Optane DC pentru a îmbunătăți eficiența sistemelor de inteligență artificială și machine learning.

Ce vor oferi noile stocări pentru sistemele AI și ML
Fotografie — Hitesh Choudhary — Unsplash

După informațiile un studiu realizat de MIT Sloan Management Review și The Boston Consulting Group, 85% dintre cei trei mii de managers intervievați consideră că sistemele de inteligență artificială vor ajuta companiile lor să obțină un avantaj competitiv pe piață. Cu toate acestea, doar 39% dintre companii au încercat să implementeze astfel de soluții în practică.

Una dintre cauzele acestei situații este că gestionarea eficientă a datelor și optimizarea utilizării capacităților pentru sarcini de învățare automată sunt sarcini complexe. În IDC pun accent pe, o nouă tehnologie bazată pe memorie persistentă (Persistent Memory, PMEM) ar putea rezolva această problemă.

Această tehnologie a fost propusă de NetApp și Intel, unind NetApp Memory Accelerated (MAX) Data și Intel Optane DC Persistent Memory pentru a obține un produs de stocare locală bazat pe memorie nevolatilă.

Cum funcționează

MAX Data este o tehnologie de server care permite creșterea performanței aplicațiilor prin utilizarea PMEM sau DRAM, fără a necesita refacerea arhitecturii software-ului.

Aceasta implementează principii de stocare automată pe mai multe niveluri, distribuind datele pe niveluri și stocări în funcție de frecvența utilizării - pentru datele „reci” se folosește un stocare mai accesibilă, iar cele frecvent utilizate sunt „la îndemână” - în Memoria Persistentă, care minimizează latența la manipularea acestor date.

Versiunea 1.1 folosește memorie DRAM și NVDIMM.Ambele implementări au dezavantajele lor - pierderea relativă de eficiență și costul ridicat al memoriei, respectiv - în comparație cu Optane DCPMM. Un grafic care oferă o evaluare comparativă a latenței este prezentat aici (p. 4).

Tehnologie susține și POSIX și gestionarea semantica sistemelor de fișiere sau de blocuri. Protecția și recuperarea datelor la nivelul stocării sunt realizate prin MAX Snap și MAX Recovery. Aceste tehnologii utilizează în funcționare instantanee, instrumentul SnapMirror și alte mecanisme de protecție ONTAP.

Implementarea schematizată arată astfel:

Ce vor oferi noile stocări pentru sistemele AI și ML

În acest schemă, PMEM nu este încă prezent, dar dezvoltatorii promit să adauge suport pentru acest tip de memorie până la sfârșitul anului. Până acum, MAX Data funcționează cu DRAM și DIMM.

Potentțialul soluției

În IDC susțin, se estimează că, în următorii ani, numărul de dezvoltări de genul MAX Data va crește, dat fiind că volumele de date corporative cresc constant, iar companiile nu dispun de capacități suficiente pentru a le procesa eficient. Tehnologia poate va fi util într-un mediu cloud scalabil și pentru a lucra cu sarcini solicitante, cum ar fi antrenarea rețelelor neuronale. Aceasta va găsi aplicare pe platformele de trading, în sistemele de securitate informațională și în orice alte produse software, unde este necesar un acces constant și rapid la volume mari de informații.

Există și o șansă ca tehnologia să nu se impună pe piață imediat. Așa cum am menționat mai sus, doar o treime dintre companii la nivel mondial lucrează, în diverse forme, cu sisteme de inteligență artificială. Din acest punct de vedere, apariția MAX Data poate fi considerată prematură de mulți, care își vor concentra atenția asupra unei infrastructuri mai accesibile, capabile să rezolve problemele actuale.

Materialele noastre suplimentare despre infrastructura IT:

Sursa: habr.com

Cumpără un hosting fiabil pentru site-uri cu protecție DDoS, servere VPS VDS 🔥 Cumpără un hosting fiabil pentru site-uri cu protecție DDoS, servere VPS VDS | ProHoster