SQLite 기반 분산 내결함성 DBMS인 rqlite 7.0 출시

분산 DBMS rqlite 7.0이 출시되었습니다. SQLite를 스토리지 엔진으로 사용하여 동기화된 스토리지 클러스터의 작업을 구성할 수 있습니다. rqlite의 주요 기능 중 하나는 etcd 및 Consul과 유사한 분산 장애 허용 스토리지를 쉽게 설치, 배포 및 유지 관리할 수 있다는 점입니다. 단, 키/값 형식 대신 관계형 모델을 사용하여 데이터를 처리합니다. 프로젝트 코드는 Go 언어로 작성되었으며 MIT 라이선스에 따라 배포됩니다.

모든 노드의 동기화를 유지하기 위해 Raft 합의 알고리즘이 사용됩니다. Rqlite는 기존 SQLite 라이브러리와 go-sqlite3 드라이버를 사용하며, 그 위에 클라이언트 요청을 처리하고, 다른 노드로 복제를 수행하며, 선두 노드 선출에 대한 합의 달성을 모니터링하는 계층이 실행됩니다.

데이터베이스 변경은 리더로 선택된 노드에서만 수행할 수 있지만, 쓰기 작업이 포함된 연결은 클러스터의 다른 노드로 전달될 수 있으며, 이 경우 리더의 주소를 반환하여 요청을 반복합니다(다음 버전에서는 리더로의 자동 요청 전달 기능을 추가할 예정입니다). 주요 초점은 내결함성이므로 DBMS는 읽기 작업에 의해서만 확장되며, 쓰기 작업은 병목 현상입니다. 단일 노드에서 rqlite 클러스터를 실행할 수 있으며, 이러한 솔루션을 사용하면 내결함성을 제공하지 않고도 HTTP를 통해 SQLite에 액세스할 수 있습니다.

각 노드의 SQLite 데이터는 파일이 아닌 메모리에 저장됩니다. Raft 프로토콜을 구현하는 계층 수준에서는 데이터베이스를 변경하는 모든 SQLite 명령의 로그가 유지됩니다. 이 로그는 복제(다른 노드에서 쿼리를 재현하는 수준의 복제), 새 노드 시작 시 또는 연결 끊김 후 복구에 사용됩니다. 로그 크기를 줄이기 위해 자동 패킹이 사용되는데, 이 패킹은 지정된 개수의 변경 후 시작되어 스냅샷을 수정하고, 이를 기준으로 새 로그가 시작됩니다(메모리에 있는 데이터베이스의 상태는 스냅샷 + 누적된 변경 로그와 동일합니다).

rqlite의 특징:

• 별도의 SQLite 설치가 필요 없이 클러스터를 쉽게 배포할 수 있습니다.
• 신속하게 복제된 SQL 스토리지를 확보할 수 있는 기능
• 생산 프로젝트에서 사용할 준비가 되었습니다(생산 등급).
• HTTP(S) API를 통해 일괄 모드로 데이터를 업데이트하고 클러스터의 선두 노드를 확인할 수 있습니다. 또한 다양한 프로그래밍 언어를 위한 명령줄 인터페이스와 클라이언트 라이브러리도 제공됩니다.
• 다른 노드를 감지하고 클러스터를 동적으로 생성할 수 있는 서비스를 제공합니다.
• 노드 간 데이터 교환 암호화 지원
• 읽을 때 데이터 관련성 및 일관성 검사 수준을 사용자 정의할 수 있는 기능.
• 합의 결정에 참여하지 않고 읽기 작업을 위한 클러스터의 확장성을 높이는 데 사용되는 읽기 전용 노드를 연결할 수 있는 선택적 기능입니다.
• 단일 요청에서 명령을 결합하는 방식의 기본 트랜잭션 형식 지원(BEGIN, COMMIT, ROLLBACK, SAVEPOINT, RELEASE 기반 트랜잭션은 지원되지 않음).
• 핫 백업 생성 지원

새 릴리스에서:

• Consul 및 etcd와 같은 분산 스토리지에서 실행될 수 있는 새로운 노드 검색 서비스를 사용하여 자동 rqlite 클러스터링에 대한 지원이 추가되었습니다. 이 서비스를 통해 rqlite 노드는 자동으로 서로를 찾을 수 있으며, 관리자는 서로 다른 서버에 여러 노드를 실행하기만 하면 됩니다. 서버Consul 또는 etcd 클러스터의 공유 주소(예: "example.com:8500")를 지정하면 노드가 자동으로 클러스터에 참여하게 됩니다. 리더 노드는 Consul 또는 etcd 스토리지에 저장된 주소 정보를 주기적으로 업데이트하므로, 다른 노드를 재구성하지 않고도 나중에 리더를 변경할 수 있으며, 리더가 변경된 후에도 새 노드를 추가할 수 있습니다. AWS Lambda 기반의 기존 노드 검색 서비스(Discovery 모드)는 더 이상 지원되지 않습니다.
• CLI 인터페이스를 사용하면 여러 호스트를 동시에 지정할 수 있습니다. 첫 번째 노드를 사용할 수 없는 경우 다음 호스트에 접속합니다.
• rqlited 명령줄 인수를 구문 분석하기 위한 코드를 다시 작업했습니다.
• 더 이상 지원되지 않는 protobuf 패키지가 더 이상 지원되지 않습니다.
• Raft 프로토콜 구현에 사용된 BoltDB 스토리지는 etcd 프로젝트의 포크인 bbolt로 대체되었습니다.

출처 : opennet.ru