Ntọhapụ nke rqlite 7.0, DBMS kesara, na-anabata mmejọ dabere na SQLite

Состоялся релиз распределённой СУБД rqlite 7.0, которая использует SQLite в качестве движка хранения и позволяет организовать работу кластера из синхронизированных между собой хранилищ. Из особенностей rqlite отмечается простота установки, развёртывания и сопровождения распределённого отказоустойчивого хранилища, чем-то похожего на etcd и Consul, но использующего реляционную модель работы с данными вместо формата ключ/значения. Код проекта написан на языке Go и распространяется под лицензией MIT.

Для поддержания всех узлов в синхронизированном состояния используется алгоритм достижения консенсуса Raft. Rqlite использует оригинальную библиотеку SQLite и драйвер go-sqlite3, поверх которых запускается прослойка, обрабатывающая запросы клиентов, выполняющая репликацию на другие узлы и отслеживающая достижение консенсуса по выбору лидирующего узла.

Изменения в базу данных могут вноситься только узлом, который выбран в качестве лидирующего, но соединения с операциями записи могут направляться и к другим узлам кластера, которые вернут адрес лидера для повторения запроса (в следующей версии обещают добавить автоматический проброс обращения к лидеру). Главный упор делается на отказоустойчивость, поэтому СУБД масштабируется только по операциям чтения, а операции записи являются узким местом. Возможно запустить кластер rqlite из одного узла и такое решение может использоваться для организации доступа к SQLite поверх HTTP без предоставления отказоустойчивости.

Данные SQLite на каждом узле хранятся не в файле, а в памяти. На уровне слоя с реализацией протокола Raft ведётся журнал всех команд SQLite, приводящих к изменению базы данных. Данный журнал используется при репликации (репликация на уровне воспроизведения запросов на других узлах), при запуске нового узла или для восстановления после потери связности. Для сокращения размера журнала применяется автоматическая упаковка, которая запускается после заданного числа изменений и приводит к фиксации снимка, относительно которого начинает вестись новый журнал (состояние базы в памяти идентично снимку + накопившемуся журналу изменений).

Njirimara nke rqlite:

  • Ọ dị mfe ibugharị ụyọkọ, na-enweghị mkpa maka nrụnye dị iche nke SQLite.
  • Ikike iji nweta ngwa ngwa nchekwa SQL oyiri.
  • Готовность для использования в рабочих проектах (production-grade).
  • Наличие HTTP(S) API, позволяющего обновлять данные в пакетном режиме и определять лидирующий узел кластера. Также предоставляется интерфейс командной строки и клиентские библиотеки для различных языков программирования.
  • Ịnweta ọrụ maka ịchọpụta ọnụ ụzọ ndị ọzọ, na-enye gị ohere ịmepụta ụyọkọ n'ike.
  • Nkwado maka izoro mgbanwe data n'etiti ọnụ.
  • Ikike ịhazi ọkwa nke ịlele mkpa na nkwụsi ike nke data mgbe ị na-agụ.
  • Ikike nhọrọ iji jikọọ ọnụ na ọnọdụ ọgụgụ naanị, nke na-adịghị etinye aka n'ịchọpụta nkwenye ma jiri ya mee ka scalability nke ụyọkọ ahụ maka ịrụ ọrụ ịgụ.
  • Nkwado maka ụdị azụmahịa nke gị dabere na ijikọta iwu n'otu arịrịọ (a naghị akwado azụmahịa dabere na BEGIN, COMMIT, ROLLBACK, SAVEPOINT na Ntọhapụ).
  • Nkwado maka ịmepụta ndabere na-ekpo ọkụ.

Na mwepụta ọhụrụ:

  • Добавлена поддержка автоматического кластеринга rqlite с использованием нового сервиса определения узлов, который может работать на базе распределённых хранилищ Consul и etcd. Сервис позволяет узлам rqlite автоматичкески находить друг друга — администратору достаточно запустить несколько узлов на разных серверах, указав общий адрес кластера Consul или etcd (например, «example.com:8500»), и узлы автоматически будут объединены в кластер. Лидирующий узел периодически обновляет в хранилище Consul или etcd информацию о своём адресе, что позволяет в последующем изменить лидера без необходимости перенастройки остальных узлов, а также добавлять новые узлы даже после изменения лидера. Поддержка старого сервиса определения узлов (Discovery mode), работающего на базе AWS Lambda, прекращена.
  • В CLI интерфейсе разрешено указание сразу нескольких хостов — если первый узел окажется недоступен, будет осуществлено обращение к следующим хостам.
  • Переработан код для разбора аргументов командной строки rqlited.
  • Прекращено использование устаревшего пакета protobuf.
  • Хранилище BoltDB, применяемое в реализации протокола Raft, заменено на bbolt, форк от проекта etcd.

isi: opennet.ru

Tinye a comment