Випуск кластерної ФС Lustre 2.13

Опубліковано реліз кластерної файлової системи Lustre 2.13, використовуваної здебільшого (~60%) найбільших Linux-кластерів, що містять десятки тисяч вузлів. Масштабованість на таких великих системах досягається завдяки багатокомпонентній архітектурі. Ключовими компонентами Lustre є сервери обробки та зберігання метаданих (MDS), керуючі сервери (MGS), сервери зберігання об'єктів (OSS), сховище об'єктів (OST, підтримується робота поверх ext4 та ZFS) та клієнти.

Випуск кластерної ФС Lustre 2.13

Основні нововведення:

  • Реалізовано постійний кеш на стороні клієнта (Persistent Client Cache), що дозволяє використовувати локальне сховище, таке як NVMe або NVRAM, як частина глобального простору імен ФС. Клієнти можуть кешувати дані, пов'язані з створюваними або існуючими файлами, локально примонтованої ФС з кешем (наприклад, ext4). У процесі роботи поточного клієнта ці файли обробляються локально зі швидкістю локальної ФС, але у разі спроби звернення іншого клієнта автоматично мігрують до глобальної ФС.
  • У маршрутизаторах LNet реалізовано автоматичне виявлення маршрутів при використанні маршрутизації кількома шляхами через різні мережні інтерфейси (Multi-Rail Routing) і підвищена надійність роботи конфігурацій з вузлами, що мають кілька мережевих інтерфейсів.
  • доданий режим «overstriping», при якому в одному сховищі об'єктів (OST) може міститися кілька копій stripe-блоків для одного файлу, що дозволяє кільком клієнтам одночасно виконувати операції спільного запису у файл без очікування звільнення блокування.
  • з'явилася підтримка саморозширюваних схем розміщення файлів (Self-Extending Layouts), що збільшують гнучкість застосування режиму PFL (Progressive File Layouts) у різнорідних ФС. Наприклад, коли ФС включає невеликі пули сховищ на базі швидких Flash-накопичувачів та великі дискові пули, запропонована можливість дозволяє в першу чергу здійснювати запис у швидкі сховища, а після того, як місце закінчиться автоматично переключитися на повільні дискові пули.

Джерело: opennet.ru

Додати коментар або відгук