Čo ponúknu nové úložiská pre systémy AI a ML?

MAX Data sa skombinujú s Optane DC, aby efektívne spolupracovali so systémami AI a ML.

Čo ponúknu nové úložiská pre systémy AI a ML?
Foto — Hitesh Choudhary — Odstriekať

Na Podľa Podľa štúdie MIT Sloan Management Review a The Boston Consulting Group sa 85 % z troch tisícok opýtaných manažérov domnieva, že systémy AI pomôžu ich firmám získať konkurenčnú výhodu na trhu. Niečo podobné sa však v praxi pokúsilo zaviesť len 39 % firiem.

Jedným z dôvodov tejto situácie je, že efektívna práca s dátami a optimalizácia využitia energie pre úlohy strojového učenia nie je jednoduchá práca. V IDC značka, že situáciu by mohla vyriešiť nová technológia založená na permanentnej pamäti (Persistent Memory, PMEM).

Táto technológia bola navrhnutá spoločnosťami NetApp a Intel, zjednocovať NetApp Memory Accelerated (MAX) Data a Intel Optane DC Persistent Memory pre lokálny produkt s trvalou pamäťou.

Ako to funguje

MAX Data je serverová technológia, ktorá zlepšuje výkon aplikácií pomocou PMEM alebo DRAM, ale nevyžaduje zmeny softvérovej architektúry.

Implementuje princípy automatizovaného viacúrovňového ukladania, distribúcie dát medzi jednotlivými úrovňami a úložiska v závislosti od frekvencie používania – pre „studené“ dáta sa používa dostupnejšie úložisko a často používané dáta sú „po ruke“ – v perzistentnej pamäti, ktorá minimalizuje latenciu pri práci s takýmito údajmi.

Verzia 1.1 využíva pamäť DRAM a NVDIMM. Obe implementácie majú svoje nevýhody – relatívnu stratu efektivity a vysoké náklady na pamäť – v porovnaní s Optane DCPMM. Uvádza sa graf poskytujúci porovnávací odhad latencie tu (strana 4).

Технология podporuje и POSIX a prácu so sémantikou blokových alebo súborových systémov. Ochrana a obnova dát na úrovni úložiska je realizovaná pomocou MAX Snap a MAX Recovery. Tieto technológie využívajú snímky, nástroj SnapMirror a ďalšie bezpečnostné mechanizmy ONTAP.

Schematicky implementácia vyzerá takto:

Čo ponúknu nové úložiská pre systémy AI a ML?

Na tomto okruhu zatiaľ nie je PMEM, no vývojári sľubujú pridať podporu pre tento typ pamätí do konca roka. Max Data zatiaľ funguje s DRAM a DIMM.

Potenciál riešenia

V IDC pohľadávkaže v najbližších rokoch dôjde k ďalšiemu vývoju ako MAX Data, keďže objem firemných dát neustále rastie a spoločnosti nemajú dostatok kapacít na ich efektívne spracovanie. Technológia plechovka užitočné vo veľkom cloudovom prostredí a pri práci s úlohami náročnými na zdroje, ako je trénovanie neurónových sietí. Uplatnenie nájde na obchodných platformách, systémoch informačnej bezpečnosti a akýchkoľvek iných softvérových produktoch, ktoré vyžadujú neustály a rýchly prístup k veľkým objemom informácií.

Existuje tiež šanca, že technológia sa na trhu hneď neudomácni. Ako sme uviedli vyššie, iba tretina spoločností na celom svete pracuje so systémami AI v tej či onej forme. Z tohto pohľadu môžu mnohí považovať vzhľad MAX Data za predčasný a svoju pozornosť zamerajú na dostupnejšiu infraštruktúru, ktorá im umožňuje riešiť aktuálne problémy.

Naše ďalšie materiály o IT infraštruktúre:

Zdroj: hab.com

Pridať komentár