Co nabídnou nová úložiště pro systémy AI a ML?

MAX Data budou kombinována s Optane DC pro efektivní spolupráci se systémy AI a ML.

Co nabídnou nová úložiště pro systémy AI a ML?
--Ото - Hitesh Choudhary — Odstříknout

Na Podle průzkumu MIT Sloan Management Review a The Boston Consulting Group se 85 % ze tří tisíc dotazovaných manažerů domnívá, že systémy AI pomohou jejich společnostem získat konkurenční výhodu na trhu. Něco podobného se však v praxi pokusilo zavést pouze 39 % firem.

Jedním z důvodů této situace je, že efektivně pracovat s daty a optimalizovat využití kapacit pro úlohy strojového učení není jednoduchá práce. V IDC slavitže nová technologie založená na perzistentní paměti (Persistent Memory, PMEM) by mohla situaci vyřešit.

Tato technologie byla navržena společnostmi NetApp a Intel, dát dohromady NetApp Memory Accelerated (MAX) Data a Intel Optane DC Persistent Memory pro lokální úložiště založené na perzistentní paměti.

Jak to funguje

MAX Data je serverová technologie, která zlepšuje výkon aplikací pomocí PMEM nebo DRAM, ale nevyžaduje softwarovou re-architekturu.

Implementuje principy automatizovaného vrstveného úložiště, distribuce dat do úrovní a úložišť v závislosti na frekvenci používání - pro "studená" data se používá dostupnější úložiště a často používaná jsou "po ruce" - v trvalé paměti, která minimalizuje zpoždění při práci s takovými daty .

Verze 1.1 používá DRAM a NVDIMM. Obě implementace mají ve srovnání s Optane DCPMM své nevýhody – relativní ztrátu efektivity, respektive vysokou cenu paměti. Je uveden graf poskytující srovnávací hodnocení zpoždění zde (str. 4).

Технология podporuje и POSIX a pracovat se sémantikou blokových nebo souborových systémů. Ochrana a obnova dat na úrovni úložiště je implementována pomocí MAX Snap a MAX Recovery. Tyto technologie využívají snímky, nástroj SnapMirror a další bezpečnostní mechanismy ONTAP.

Schematicky implementace vypadá takto:

Co nabídnou nová úložiště pro systémy AI a ML?

V tomto schématu zatím není žádný PMEM, ale vývojáři slibují přidat podporu pro tento typ paměti do konce roku. Max Data zatím pracuje s DRAM a DIMM.

Potenciál řešení

V IDC nárokže v příštích letech dojde k dalšímu vývoji, jako je MAX Data, protože objem firemních dat neustále roste a společnosti nemají dostatečnou kapacitu na jejich efektivní zpracování. Technika moci užitečné ve velkém cloudovém prostředí a pro práci s úkoly náročnými na zdroje, jako je trénování neuronových sítí. Najde uplatnění na obchodních platformách, systémech informační bezpečnosti a jakýchkoli dalších softwarových produktech, které vyžadují neustálý a rychlý přístup k velkému množství informací.

Existuje také určitá míra pravděpodobnosti, že technologie na trhu okamžitě nezapustí kořeny. Jak jsme uvedli výše, pouze třetina společností na celém světě pracuje se systémy AI v té či oné formě. Z tohoto pohledu mohou mnozí považovat vznik MAX Data za předčasný a svou pozornost zaměří na dostupnější infrastrukturu, která jim umožní řešit aktuální problémy.

Naše další materiály o IT infrastruktuře:

Zdroj: www.habr.com

Přidat komentář