Wat bieden de nieuwe opslagplaatsen voor AI- en ML-systemen?

MAX Data wordt gecombineerd met Optane DC om effectief samen te werken met AI- en ML-systemen.

Wat bieden de nieuwe opslagplaatsen voor AI- en ML-systemen?
Фото - Hitesh Choudhary - ontspatten

Op Volgens onderzoek door MIT Sloan Management Review en The Boston Consulting Group, gelooft 85% van de drieduizend ondervraagde managers dat AI-systemen hun bedrijven zullen helpen een concurrentievoordeel in de markt te behalen. Slechts 39% van de bedrijven heeft echter geprobeerd iets soortgelijks in de praktijk te implementeren.

Een van de redenen voor deze situatie is dat het efficiënt werken met data en het optimaliseren van de benutting van capaciteiten voor machine learning-taken geen sinecure is. Bij IDC markdat een nieuwe technologie op basis van persistent geheugen (Persistent Memory, PMEM) de situatie zou kunnen oplossen.

Deze technologie is voorgesteld door NetApp en Intel, samenbrengen NetApp Memory Accelerated (MAX) Data en Intel Optane DC Persistent Memory voor een lokaal opslagproduct op basis van persistent geheugen.

Hoe werkt dit

MAX Data is een servertechnologie die de prestaties van applicaties verbetert door het gebruik van PMEM of DRAM, maar waarvoor geen herontwerp van software nodig is.

Het implementeert de principes van geautomatiseerde gelaagde opslag, het verdelen van gegevens in niveaus en opslagen, afhankelijk van de gebruiksfrequentie - voor "koude" gegevens wordt meer toegankelijke opslag gebruikt en veelgebruikte zijn "bij de hand" - in Persistent Memory, dat minimaliseert de vertraging bij het werken met dergelijke gegevens.

Versie 1.1 gebruikt DRAM en NVDIMM. Beide implementaties hebben hun nadelen - respectievelijk het relatieve verlies aan efficiëntie en de hoge geheugenkosten - in vergelijking met Optane DCPMM. Er wordt een grafiek gepresenteerd die een vergelijkende beoordeling van de vertraging geeft hier (blz. 4).

Технология ondersteunt de и POSIX en werken met de semantiek van blok- of bestandssystemen. Gegevensbescherming en -herstel op opslagniveau wordt geïmplementeerd met MAX Snap en MAX Recovery. Deze technologieën maken gebruik van snapshots, de SnapMirror-tool en andere ONTAP-beveiligingsmechanismen.

Schematisch ziet de uitvoering er als volgt uit:

Wat bieden de nieuwe opslagplaatsen voor AI- en ML-systemen?

Er is nog geen PMEM op dit schema, maar de ontwikkelaars beloven voor het einde van het jaar ondersteuning voor dit type geheugen toe te voegen. Tot nu toe werkt Max Data met DRAM en DIMM.

Oplossingspotentieel

Bij IDC vorderingdat er de komende jaren meer ontwikkelingen zullen zijn zoals MAX Data, aangezien de hoeveelheid bedrijfsgegevens voortdurend groeit en bedrijven niet genoeg capaciteit hebben om deze effectief te verwerken. Technologie kan handig in een grootschalige cloudomgeving en voor het werken met resource-intensieve taken zoals het trainen van neurale netwerken. Het zal toepassing vinden op handelsplatforms, informatiebeveiligingssystemen en alle andere softwareproducten die een constante en snelle toegang tot grote hoeveelheden informatie vereisen.

Er is ook een kans dat de technologie niet meteen wortel zal schieten in de markt. Zoals we hierboven al aangaven, werkt slechts een derde van de bedrijven wereldwijd met AI-systemen in een of andere vorm. Vanuit dit oogpunt kan de opkomst van MAX Data door velen als voorbarig worden beschouwd en zal hun aandacht worden gericht op een meer toegankelijke infrastructuur waarmee ze huidige problemen kunnen oplossen.

Onze andere materialen over IT-infrastructuur:

Bron: www.habr.com

Voeg een reactie