MAX Data kombiniert mit Optane DC für effizientes Arbeiten mit KI- und ML-Systemen.
Foto – — Unsplash
Nach Laut einer Studie der MIT Sloan Management Review und der Boston Consulting Group sind 85% von dreitausend befragten Führungskräften der Meinung, dass KI-Systeme ihren Unternehmen helfen werden, einen Wettbewerbsvorteil auf dem Markt zu erlangen. Dennoch haben nur 39% der Unternehmen versucht, sowas in der Praxis umzusetzen.
Eine der Ursachen für diese Situation ist, dass das effektive Arbeiten mit Daten und die Optimierung der Ressourcennutzung für maschinelles Lernen eine anspruchsvolle Aufgabe ist. Bei IDC , wurde festgestellt, dass eine neue Technologie, die auf persistentem Speicher basiert (Persistent Memory, PMEM), die Situation verbessern könnte.
Eine solche Technologie wurde von NetApp und Intel angeboten, NetApp Memory Accelerated (MAX) Data und Intel Optane DC Persistent Memory zusammengeführt haben, um ein Produkt für die lokale Datenspeicherung auf der Basis von nichtflüchtigem Speicher zu schaffen.
Wie es funktioniert
MAX Data ist eine Servertechnologie, die die Leistung von Anwendungen steigern kann, indem sie PMEM oder DRAM nutzt, ohne dass eine Neugestaltung der Softwarearchitektur erforderlich ist.
Es implementiert die Prinzipien der automatisierten mehrstufigen Speicherung, indem es Daten je nach Nutzungshäufigkeit auf verschiedene Ebenen und Speicher verteilt – für "kalte" Daten wird kostengünstigerer Speicher verwendet, während häufig genutzte Daten "griffbereit" in Persistent Memory liegen, was die Latenz bei der Verarbeitung solcher Daten minimiert.
Version 1.1 nutzt DRAM und . Beide Implementierungen haben ihre Nachteile – relative Effizienzverluste und hohe Speicherkosten – im Vergleich zu Optane DCPMM. Eine Diagramm, das einen Vergleich der Latenz anzeigt, ist (S. 4).
Technologie und und die Arbeit mit der Semantik von Block- oder Dateisystemen. Der Schutz und die Wiederherstellung von Daten auf der Speicherebene erfolgen durch MAX Snap und MAX Recovery. Diese Technologien nutzen Snapshots, das Tool SnapMirror und andere Schutzmechanismen von ONTAP.
Schemaatisch sieht die Implementierung wie folgt aus:
Auf diesem Schema ist PMEM bisher nicht sichtbar, aber die Entwickler versprechen, die Unterstützung für diesen Speichertyp bis Ende des Jahres hinzuzufügen. Bis jetzt arbeitet Max Data mit DRAM und DIMM.
Potenzial der Lösung
In IDC , dass in den kommenden Jahren Entwicklungen wie MAX Data zunehmen werden, da die Menge der Unternehmensdaten ständig wächst und den Unternehmen die Kapazitäten zur effektiven Verarbeitung fehlen. Die Technologie wird sich in großangelegten Cloud-Umgebungen und für ressourcenintensive Aufgaben wie das Training von neuronalen Netzen als nützlich erweisen. Sie wird Verwendung auf Handelsplattformen, in Informationssicherheitssystemen und in allen anderen Softwareprodukten finden, die kontinuierlichen und schnellen Zugriff auf große Datenmengen erfordern.
Es besteht auch die Möglichkeit, dass die Technologie sich zunächst nicht sofort am Markt durchsetzen wird. Wie bereits erwähnt, arbeitet weltweit nur ein Drittel der Unternehmen in irgendeiner Form mit KI-Systemen. Aus dieser Perspektive könnte die Einführung von MAX Data von vielen als verfrüht angesehen werden, und sie richten ihren Fokus auf eine kostengünstigere Infrastruktur, die es ermöglicht, aktuelle Aufgaben zu bewältigen.
Weitere Materialien von uns zur IT-Infrastruktur:
Quelle: habr.com
