Ce vor oferi noile depozite pentru sistemele AI și ML?

MAX Data va fi combinat cu Optane DC pentru a lucra eficient cu sistemele AI și ML.

Ce vor oferi noile depozite pentru sistemele AI și ML?
Фото - Hitesh Choudhary — Unsplash

Pe În conformitate cu Potrivit unui studiu realizat de MIT Sloan Management Review și The Boston Consulting Group, 85% dintre cei trei mii de manageri chestionați cred că sistemele AI vor ajuta companiile lor să obțină un avantaj competitiv pe piață. Cu toate acestea, doar 39% dintre companii au încercat să implementeze ceva similar în practică.

Unul dintre motivele acestei situații este că lucrul eficient cu date și optimizarea utilizării puterii pentru sarcinile de învățare automată nu este o muncă ușoară. La IDC marca, că o nouă tehnologie bazată pe memorie permanentă (Persistent Memory, PMEM) ar putea rezolva situația.

Această tehnologie a fost propusă de NetApp și Intel, unind Date NetApp Memory Accelerated (MAX) și Intel Optane DC Persistent Memory pentru un produs local de stocare cu memorie persistentă.

Cum funcționează

MAX Data este o tehnologie de server care îmbunătățește performanța aplicației prin utilizarea PMEM sau DRAM, dar nu necesită modificări ale arhitecturii software.

Implementează principiile stocării automate pe mai multe niveluri, distribuirea datelor pe niveluri și stocarea în funcție de frecvența de utilizare - stocarea mai accesibilă este utilizată pentru datele „rece”, iar datele utilizate frecvent sunt „la îndemână” - în Memoria persistentă, care minimizează latența atunci când lucrați cu astfel de date.

Versiunea 1.1 utilizează memorie DRAM și NVDIMM-uri. Ambele implementări au dezavantajele lor - pierderea relativă a eficienței și, respectiv, costuri mari de memorie - în comparație cu Optane DCPMM. Este prezentată o diagramă care oferă o estimare comparativă a latenței aici (pagina 4).

Технология suporturi и POSIX și lucrul cu semantica sistemelor de blocuri sau fișiere. Protecția și recuperarea datelor la nivel de stocare este implementată folosind MAX Snap și MAX Recovery. Aceste tehnologii folosesc instantanee, instrumentul SnapMirror și alte mecanisme de securitate ONTAP.

Schematic implementarea arată astfel:

Ce vor oferi noile depozite pentru sistemele AI și ML?

Nu există încă PMEM pe acest circuit, dar dezvoltatorii promit să adauge suport pentru acest tip de memorie până la sfârșitul anului. Până acum, Max Data funcționează cu DRAM și DIMM.

Potential de solutie

La IDC revendicarecă în următorii ani vor exista mai multe evoluții precum MAX Data, deoarece volumul de date corporative este în continuă creștere, iar companiile nu au suficientă capacitate pentru a le procesa eficient. Tehnologie putea util într-un mediu cloud pe scară largă și pentru lucrul cu sarcini care necesită mult resurse, cum ar fi antrenarea rețelelor neuronale. Acesta va găsi aplicații pe platformele de tranzacționare, sistemele de securitate a informațiilor și orice alte produse software care necesită acces constant și rapid la volume mari de informații.

Există, de asemenea, șansa ca tehnologia să nu prindă imediat rădăcini pe piață. După cum am menționat mai sus, doar o treime dintre companiile din întreaga lume lucrează cu sisteme AI într-o formă sau alta. Din acest punct de vedere, mulți pot considera apariția MAX Data prematură și își vor concentra atenția asupra unei infrastructuri mai accesibile care să le permită să rezolve problemele actuale.

Celelalte materiale despre infrastructura IT:

Sursa: www.habr.com

Adauga un comentariu