Veröffentlichung des Clusters FS Lustre 2.13

Veröffentlicht Veröffentlichung des Cluster-Dateisystems Glanz 2.13, verwendet meistens (~60%) der größte Linux-Cluster mit Zehntausenden von Knoten. Die Skalierbarkeit auf solch großen Systemen wird durch eine Mehrkomponentenarchitektur erreicht. Die Schlüsselkomponenten von Lustre sind Metadatenverarbeitungs- und Speicherserver (MDS), Verwaltungsserver (MGS), Objektspeicherserver (OSS), Objektspeicher (OST, unterstützt die Ausführung auf ext4 und ZFS) und Clients.

Haupt- Innovationen:

• Umgesetzt persistenter clientseitiger Cache (Persistent Client Cache), der Ihnen die Verwendung von lokalem Speicher wie NVMe oder NVRAM als Teil des globalen FS-Namespace ermöglicht. Clients können Daten, die mit neu erstellten oder vorhandenen Dateien verknüpft sind, in einem lokal bereitgestellten Cache-Dateisystem (z. B. ext4) zwischenspeichern. Während der aktuelle Client läuft, werden diese Dateien lokal mit der Geschwindigkeit des lokalen FS verarbeitet, aber wenn ein anderer Client versucht, darauf zuzugreifen, werden sie automatisch zum globalen FS migriert.
• In Routern LNet umgesetzt automatische Erkennung von Routen bei der Verwendung von Routing entlang mehrerer Pfade über verschiedene Netzwerkschnittstellen (Multi-Rail-Routing) und erhöhte Zuverlässigkeit von Konfigurationen mit Knoten, die über mehrere Netzwerkschnittstellen verfügen.
• Добавлен „Overstriping“-Modus, bei dem ein Objektspeicher (OST) mehrere Kopien von Stripe-Blöcken für eine Datei enthalten kann, was es mehreren Clients ermöglicht, gleichzeitig gemeinsame Schreibvorgänge in eine Datei durchzuführen, ohne auf die Aufhebung der Sperre warten zu müssen.
• Erschien unterstützen selbsterweiternde Dateilayouts (Self-Extending Layouts), wodurch die Flexibilität bei der Verwendung des PFL-Modus (Progressive File Layouts) in heterogenen Dateisystemen erhöht wird. Wenn das Dateisystem beispielsweise kleine Speicherpools auf Basis schneller Flash-Laufwerke und große Festplattenpools umfasst, können Sie mit der vorgeschlagenen Funktion zuerst auf schnelle Speicher schreiben und nach Erschöpfung des Speicherplatzes automatisch auf langsame Festplattenpools umschalten.

Source: opennet.ru