Què oferiran els nous repositoris per als sistemes d'IA i ML?

MAX Data es combinarà amb Optane DC per treballar eficaçment amb sistemes d'IA i ML.

Què oferiran els nous repositoris per als sistemes d'IA i ML?
Фото - Hitesh Choudhary — Desesquitxa

En donat Una investigació del MIT Sloan Management Review i el Boston Consulting Group, el 85% dels tres mil directius enquestats creuen que els sistemes d'IA ajudaran les seves empreses a obtenir un avantatge competitiu al mercat. Tanmateix, només el 39% de les empreses han intentat implementar alguna cosa semblant a la pràctica.

Una de les raons d'aquesta situació és que treballar de manera eficient amb dades i optimitzar l'ús de les capacitats per a les tasques d'aprenentatge automàtic no és una feina fàcil. A l'IDC celebrarque una nova tecnologia basada en la memòria persistent (Persistent Memory, PMEM) podria resoldre la situació.

Aquesta tecnologia va ser proposada per NetApp i Intel, reunint Dades NetApp Memory Accelerated (MAX) i memòria persistent Intel Optane DC per a un producte d'emmagatzematge local basat en memòria persistent.

Com funciona això

MAX Data és una tecnologia de servidor que millora el rendiment de les aplicacions mitjançant l'ús de PMEM o DRAM, però no requereix una nova arquitectura de programari.

Implementa els principis d'emmagatzematge en nivells automatitzat, distribuint les dades en nivells i emmagatzematges en funció de la freqüència d'ús -per a dades "freds", s'utilitza un emmagatzematge més accessible i els d'ús freqüent estan "a mà"- a la memòria persistent, que minimitza el retard en treballar amb aquestes dades.

La versió 1.1 utilitza DRAM i NVDIMM. Ambdues implementacions tenen els seus inconvenients: la pèrdua relativa d'eficiència i l'alt cost de la memòria, respectivament, en comparació amb Optane DCPMM. Es presenta un gràfic amb una valoració comparativa del retard aquí (pàgina 4).

Технология suports и POSIX i treballar amb la semàntica dels sistemes de blocs o fitxers. La protecció i recuperació de dades a nivell d'emmagatzematge s'implementa amb MAX Snap i MAX Recovery. Aquestes tecnologies utilitzen instantànies, l'eina SnapMirror i altres mecanismes de seguretat ONTAP.

Esquemàticament, la implementació té aquest aspecte:

Què oferiran els nous repositoris per als sistemes d'IA i ML?

Encara no hi ha PMEM en aquest esquema, però els desenvolupadors prometen afegir suport per a aquest tipus de memòria abans de finals d'any. Fins ara, Max Data funciona amb DRAM i DIMM.

Potencial de solució

A l'IDC reclamacióque en els propers anys hi haurà més novetats com MAX Data, ja que el volum de dades corporatives està en constant creixement, i les empreses no tenen prou capacitat per processar-les de manera eficaç. Tecnologia llauna útil en un entorn de núvol a gran escala i per treballar amb tasques intensives en recursos com l'entrenament de xarxes neuronals. Trobarà aplicació en plataformes comercials, sistemes de seguretat de la informació i qualsevol altre producte de programari que requereixi un accés constant i ràpid a grans quantitats d'informació.

També hi ha un cert grau de probabilitat que la tecnologia no s'arreli immediatament al mercat. Com hem assenyalat anteriorment, només un terç de les empreses a tot el món treballen amb sistemes d'IA d'una forma o una altra. Des d'aquest punt de vista, l'aparició de MAX Data pot ser considerada prematura per molts i centrarà la seva atenció en una infraestructura més accessible que els permeti resoldre els problemes actuals.

Els nostres altres materials sobre infraestructura informàtica:

Font: www.habr.com

Afegeix comentari