Cosa offriranno i nuovi repository per i sistemi AI e ML?

MAX Data sarà combinato con Optane DC per funzionare efficacemente con i sistemi AI e ML.

Cosa offriranno i nuovi repository per i sistemi AI e ML?
Фото - Hitesh Choudhary — Spruzza

Su Secondo Secondo uno studio del MIT Sloan Management Review e del Boston Consulting Group, l’85% dei tremila manager intervistati ritiene che i sistemi di intelligenza artificiale aiuteranno le loro aziende a ottenere un vantaggio competitivo sul mercato. Tuttavia, solo il 39% delle aziende ha provato a mettere in pratica qualcosa di simile.

Uno dei motivi di questa situazione è che lavorare in modo efficace con i dati e ottimizzare l’uso della potenza per le attività di machine learning non è un lavoro facile. All'IDC contrassegno, che una nuova tecnologia basata sulla memoria permanente (Persistent Memory, PMEM) potrebbe risolvere la situazione.

Questa tecnologia è stata proposta da NetApp e Intel, unendo Dati NetApp Memory Accelerated (MAX) e memoria persistente Intel Optane DC per un prodotto di storage di memoria persistente locale.

Come funziona

MAX Data è una tecnologia server che migliora le prestazioni delle applicazioni attraverso l'uso di PMEM o DRAM, ma non richiede modifiche all'architettura software.

Implementa i principi dell'archiviazione multilivello automatizzata, distribuendo i dati su livelli e archiviazione in base alla frequenza di utilizzo: l'archiviazione più accessibile viene utilizzata per i dati "freddi" e i dati utilizzati di frequente sono "a portata di mano" - nella memoria persistente, che riduce al minimo la latenza quando si lavora con tali dati.

La versione 1.1 utilizza la memoria DRAM e NVDIMM. Entrambe le implementazioni presentano degli svantaggi, rispettivamente relativa perdita di efficienza e costi di memoria elevati, rispetto a Optane DCPMM. Viene presentato un grafico che fornisce una stima comparativa della latenza qui (Pag. 4).

Технология поддерживает и POSIX e lavorare con la semantica dei blocchi o dei file system. La protezione e il ripristino dei dati a livello di storage vengono implementati utilizzando MAX Snap e MAX Recovery. Queste tecnologie utilizzano snapshot, lo strumento SnapMirror e altri meccanismi di sicurezza ONTAP.

Schematicamente l'implementazione è simile alla seguente:

Cosa offriranno i nuovi repository per i sistemi AI e ML?

Non esiste ancora PMEM su questo circuito, ma gli sviluppatori promettono di aggiungere il supporto per questo tipo di memoria entro la fine dell'anno. Finora Max Data funziona con DRAM e DIMM.

Potenziale della soluzione

All'IDC affermazioneche nei prossimi anni ci saranno altri sviluppi come MAX Data, poiché il volume dei dati aziendali è in costante crescita e le aziende non hanno abbastanza capacità per elaborarli in modo efficace. Tecnologia может utile in un ambiente cloud su larga scala e per lavorare con attività ad uso intensivo di risorse come l'addestramento delle reti neurali. Troverà applicazione su piattaforme di trading, sistemi di sicurezza informatica e qualsiasi altro prodotto software che richieda un accesso costante e rapido a grandi volumi di informazioni.

Esiste anche la possibilità che la tecnologia non attecchisca immediatamente sul mercato. Come abbiamo notato sopra, solo un terzo delle aziende in tutto il mondo lavora con sistemi di intelligenza artificiale in una forma o nell’altra. Da questo punto di vista molti potrebbero considerare prematura la comparsa di MAX Data e concentreranno la loro attenzione su un’infrastruttura più accessibile che consenta loro di risolvere i problemi attuali.

I nostri altri materiali sull'infrastruttura IT:

Fonte: habr.com

Aggiungi un commento