Cosa offriranno i nuovi archivi per i sistemi di IA e ML

MAX Data sarà unito a Optane DC per un lavoro efficace con i sistemi di IA e ML.

Cosa offriranno i nuovi archivi per i sistemi di IA e ML
Foto — Hitesh Choudhary — Unsplash

Secondo dati Ricerca del MIT Sloan Management Review e del Boston Consulting Group, l'85% dei tremila manager intervistati ritiene che i sistemi di IA aiuteranno le loro aziende a ottenere un vantaggio competitivo sul mercato. Tuttavia, solo il 39% delle aziende ha tentato di implementare qualcosa di simile nella pratica.

Una delle ragioni di questa situazione è che il lavoro efficace con i dati e l'ottimizzazione dell'uso delle capacità per i compiti di machine learning non è facile. In IDC sottolineano, una nuova tecnologia basata sulla memoria non volatile (Persistent Memory, PMEM) potrebbe risolvere la situazione.

Questa tecnologia è stata proposta da NetApp e Intel, unendo NetApp Memory Accelerated (MAX) Data e Intel Optane DC Persistent Memory, per ottenere un prodotto per lo storage locale dei dati basato su memoria non volatile.

Come funziona

MAX Data è una tecnologia server che migliora le prestazioni delle applicazioni utilizzando PMEM o DRAM, senza richiedere una ristrutturazione dell'architettura software.

Essa implementa i principi di storage multistrato automatizzato, distribuendo i dati attraverso livelli e archiviazione in base alla frequenza di utilizzo: per i dati "freddi" viene impiegato un archivio più economico, mentre i dati frequentemente utilizzati si trovano "a portata di mano" nella Persistent Memory, che minimizza la latenza durante l'elaborazione di tali dati.

La versione 1.1 utilizza la memoria DRAM e NVDIMM. Entrambe le implementazioni presentano i loro svantaggi: una relativa perdita di efficienza e l'alto costo della memoria, rispetto a Optane DCPMM. Un diagramma che fornisce una valutazione comparativa della latenza è presentato qui (pag. 4).

Tecnologia supporta e POSIX e il lavoro con la semantica dei sistemi di file o a blocchi. La protezione e il recupero dei dati a livello di storage sono implementati tramite MAX Snap e MAX Recovery. Queste tecnologie utilizzano snapshot, lo strumento SnapMirror e altri meccanismi di protezione ONTAP.

Schematizzando, l'implementazione appare come segue:

Cosa offriranno i nuovi archivi per i sistemi di IA e ML

In questo schema non è ancora presente PMEM, ma gli sviluppatori promettono di aggiungere il supporto per questo tipo di memoria entro la fine dell'anno. Per il momento, Max Data funziona con DRAM e DIMM.

Il potenziale della soluzione

In IDC affermano, che nei prossimi anni ci saranno più sviluppi come MAX Data, poiché i volumi di dati aziendali continuano a crescere e le aziende non hanno la capacità di gestirli in modo efficace. La tecnologia può sarà utile in un ambiente cloud su larga scala e per lavorare su compiti intensivi in termini di risorse come l'addestramento delle reti neurali. Troverà applicazione sulle piattaforme di trading, nei sistemi di sicurezza informatica e in qualsiasi altro prodotto software che richieda accesso rapido e continuo a grandi volumi di informazioni.

C'è anche una certa probabilità che la tecnologia non riesca a decollare subito sul mercato. Come abbiamo notato in precedenza, solo un terzo delle aziende in tutto il mondo utilizza sistemi di intelligenza artificiale in un modo o nell'altro. Da questo punto di vista, l'apparizione di MAX Data potrebbe essere considerata prematura e molti potrebbero concentrare la loro attenzione su infrastrutture più accessibili che consentono di affrontare le sfide attuali.

Altri nostri materiali sull'infrastruttura IT:

Fonte: habr.com

Acquista hosting affidabile per siti web con protezione DDoS, VPS VDS server 🔥 Acquista hosting affidabile per siti web con protezione DDoS, VPS VDS server | ProHoster