Rilascio del file system clustering Lustre 2.13

Pubblicato rilascio del file system a cluster Lustre 2.13, utilizzato nella maggior parte (~60%) dei più grandi cluster Linux, contenenti decine di migliaia di nodi. La scalabilità su sistemi di queste dimensioni è raggiunta grazie a un'architettura multi-componente. I componenti chiave di Lustre includono i server di elaborazione e archiviazione dei metadati (MDS), i server di gestione (MGS), i server di archiviazione degli oggetti (OSS), lo storage degli oggetti (OST, supportato da ext4 e ZFS) e i client.

Principali novità:

• Implementato cache persistente lato client (Persistent Client Cache), che consente di utilizzare lo storage locale, come NVMe o NVRAM, come parte dello spazio dei nomi globale del file system. I client possono memorizzare nella cache i dati associati a file creati o esistenti, in un file system montato localmente con cache (ad esempio, in ext4). Durante il funzionamento del client attuale, questi file vengono elaborati localmente alla velocità del file system locale, ma, nel caso di un accesso da parte di un altro client, migrano automaticamente nel file system globale.
• Nei router LNet implementato rilevamento automatico dei percorsi quando si utilizza la routing su più percorsi tramite diverse interfacce di rete (Multi-Rail Routing) e maggiore affidabilità delle configurazioni con nodi che dispongono di più interfacce di rete.
• Aggiunto modalità «overstriping», in cui in un singolo archivio oggetti (OST) possono coesistere più copie dei blocchi stripe per un file, consentendo a più client di eseguire operazioni di scrittura simultanea sul file senza attendere il rilascio del blocco.
• È stata aggiunta support schemi di allocazione dei file autoespandibili (Self-Extending Layouts), che aumentano la flessibilità dell'uso della modalità PFL (Progressive File Layouts) in sistemi di file eterogenei. Ad esempio, quando il sistema di file include piccoli pool di archiviazione basati su veloci unità Flash e grandi pool di dischi, la funzionalità proposta consente di scrivere prioritariamente negli archivi veloci e, una volta esaurito lo spazio, di passare automaticamente ai pool di dischi più lenti.

Fonte: opennet.ru