MAX Data wird mit Optane DC kombiniert, um effektiv mit KI- und ML-Systemen zu arbeiten.
Фото - – Unsplash
Auf Laut einer Studie von MIT Sloan Management Review und The Boston Consulting Group glauben 85 % der dreitausend befragten Manager, dass KI-Systeme ihren Unternehmen helfen werden, sich einen Wettbewerbsvorteil auf dem Markt zu verschaffen. Allerdings versuchten nur 39 % der Unternehmen, etwas Ähnliches in die Praxis umzusetzen.
Einer der Gründe für diese Situation ist, dass es keine leichte Aufgabe ist, effektiv mit Daten zu arbeiten und den Stromverbrauch für maschinelle Lernaufgaben zu optimieren. Bei IDC , dass eine neue Technologie basierend auf permanentem Speicher (Persistent Memory, PMEM) die Situation lösen könnte.
Diese Technologie wurde von NetApp und Intel vorgeschlagen, NetApp Memory Accelerated (MAX) Data und Intel Optane DC Persistent Memory für ein lokales persistentes Speicherprodukt.
Wie funktioniert das
MAX Data ist eine Servertechnologie, die die Anwendungsleistung durch den Einsatz von PMEM oder DRAM verbessert, jedoch keine Änderungen der Softwarearchitektur erfordert.
Es implementiert die Prinzipien der automatisierten mehrstufigen Speicherung und verteilt Daten je nach Nutzungshäufigkeit auf Ebenen und Speicher. Für „kalte“ Daten wird besser zugänglicher Speicher verwendet, und häufig verwendete Daten sind „zur Hand“ – im Persistent Memory minimiert die Latenz beim Arbeiten mit solchen Daten.
Version 1.1 verwendet DRAM-Speicher und . Beide Implementierungen haben im Vergleich zu Optane DCPMM ihre Nachteile – relativer Effizienzverlust bzw. hohe Speicherkosten. Es wird ein Diagramm mit einer vergleichenden Schätzung der Latenz angezeigt (S. 4).
Технология и und Arbeiten mit der Semantik von Block- oder Dateisystemen. Datenschutz und Wiederherstellung auf Speicherebene werden mithilfe von MAX Snap und MAX Recovery implementiert. Diese Technologien nutzen Snapshots, das SnapMirror-Tool und andere ONTAP-Sicherheitsmechanismen.
Schematisch sieht die Implementierung so aus:
Auf dieser Schaltung gibt es noch kein PMEM, aber die Entwickler versprechen, bis Ende des Jahres Unterstützung für diesen Speichertyp hinzuzufügen. Bisher arbeitet Max Data mit DRAM und DIMM.
Lösungspotenzial
Bei IDC dass es in den kommenden Jahren weitere Entwicklungen wie MAX Data geben wird, da die Menge an Unternehmensdaten ständig wächst und Unternehmen nicht über genügend Kapazitäten verfügen, um diese effektiv zu verarbeiten. Technologie nützlich in einer großen Cloud-Umgebung und für die Arbeit mit ressourcenintensiven Aufgaben wie dem Training neuronaler Netze. Es findet Anwendung auf Handelsplattformen, Informationssicherheitssystemen und allen anderen Softwareprodukten, die einen ständigen und schnellen Zugriff auf große Informationsmengen erfordern.
Es besteht auch die Möglichkeit, dass sich die Technologie nicht sofort auf dem Markt durchsetzen wird. Wie bereits erwähnt, arbeitet weltweit nur ein Drittel der Unternehmen in der einen oder anderen Form mit KI-Systemen. Aus dieser Sicht halten viele das Erscheinen von MAX Data für verfrüht und werden ihre Aufmerksamkeit auf eine besser zugängliche Infrastruktur richten, die es ihnen ermöglicht, aktuelle Probleme zu lösen.
Unsere anderen Materialien zur IT-Infrastruktur:
Source: habr.com