Utgivning av klustert FS Lustre 2.13

Publicerad utgåvan av en klusterfilsystem Lustre 2.13, används i den största delen (~60%) av de största Linux-kluster som innehåller tiotusentals noder. Skalbarheten i så stora system uppnås genom en flerkomponentsarkitektur. Nyckelkomponenterna i Lustre är metadatabehandlings- och lagringsservrar (MDS), styrservrar (MGS), objektlagringsservrar (OSS), objektlagringsenheter (OST, som stöder arbete över ext4 och ZFS) och kunder.

Huvud nyheter:

• Implementerad permanent cache på klientsidan (Persistent Client Cache) som möjliggör användning av lokal lagring, såsom NVMe eller NVRAM, som en del av globalt namespace för filsystemet. Kunder kan cacha data relaterade till skapade eller befintliga filer i det lokalt monterade filsystemet med cache (t.ex. i ext4). Under den aktuella klientens arbete bearbetas dessa filer lokalt med hastighet av det lokala filsystemet, men i händelse av att en annan klient gör ett försök att få tillgång till dem flyttas de automatiskt till det globala filsystemet.
• I routrarna LNet har genomförts automatisk upptäckts av rutter vid användning av multipath-routing genom olika nätverksgränssnitt (Multi-Rail Routing) och ökad tillförlitlighet i konfigurationer med noder som har flera nätverksgränssnitt.
• Tillagd överstriping-mode, där flera kopior av stripe-block för en fil kan finnas i en och samma objektlagringsenhet (OST), vilket gör det möjligt för flera kunder att utföra skrivoperationer på filen samtidigt utan att behöva vänta på att låset ska släppas.
• Det har kommit stöd för självutvidgande scheman för filplacering (Self-Extending Layouts) som ökar flexibiliteten hos PFL-läget (Progressive File Layouts) i heterogena filsystem. Till exempel när filsystemet inkluderar små lagringspooler baserade på snabba Flash-enheter samt stora diskpooler, gör den erbjudna möjligheten att först skriva till snabba lagringsenheter och därefter, när utrymmet tar slut, automatiskt växla till långsamma diskpooler.

Källa: opennet.ru