SQLite 기반 분산 내결함성 DBMS인 rqlite 7.0 출시

SQLite를 스토리지 엔진으로 사용하고 서로 동기화된 스토리지에서 클러스터 작업을 구성할 수 있는 분산 DBMS rqlite 7.0이 출시되었습니다. rqlite의 기능 중 하나는 etcd 및 Consul과 다소 유사하지만 키/값 형식 대신 관계형 데이터 모델을 사용하는 분산 내결함성 스토리지의 설치, 배포 및 유지 관리가 쉽다는 것입니다. 프로젝트 코드는 Go로 작성되었으며 MIT 라이선스에 따라 배포됩니다.

모든 노드를 동기화된 상태로 유지하기 위해 Raft 합의 알고리즘이 사용됩니다. Rqlite는 원본 SQLite 라이브러리와 go-sqlite3 드라이버를 사용하며, 그 위에 클라이언트 요청을 처리하고 다른 노드에 대한 복제를 수행하며 선두 노드 선택에 대한 합의 달성을 모니터링하는 계층이 시작됩니다.

데이터베이스 변경은 리더로 선택된 노드에 의해서만 이루어질 수 있지만 쓰기 작업이 포함된 연결은 클러스터의 다른 노드로 전송될 수도 있으며, 이는 요청을 반복하기 위해 리더의 주소를 반환합니다(다음 버전에서는 리더에게 요청 자동 전달을 추가하겠다고 약속합니다). 내결함성에 중점을 두므로 DBMS는 읽기 작업으로만 확장되고 쓰기 작업은 병목 현상이 발생합니다. 단일 노드에서 rqlite 클러스터를 실행할 수 있으며 이 솔루션을 사용하면 내결함성을 제공하지 않고 HTTP를 통해 SQLite에 대한 액세스를 제공할 수 있습니다.

각 노드의 SQLite 데이터는 파일이 아닌 메모리에 저장됩니다. Raft 프로토콜을 구현하는 레이어 수준에서는 데이터베이스 변경으로 이어지는 모든 SQLite 명령의 로그가 유지됩니다. 이 로그는 복제(다른 노드에서 요청을 재생산하는 수준의 복제) 중에, 새 노드를 시작할 때, 연결이 끊어진 경우 복구하는 데 사용됩니다. 로그 크기를 줄이기 위해 자동 패킹이 사용됩니다. 이 패킹은 지정된 횟수의 변경 후에 시작되어 스냅샷을 고정하고 새 로그가 유지되기 시작합니다(메모리의 데이터베이스 상태는 다음과 같습니다). 스냅샷 + 누적 변경 로그와 동일)

rqlite의 특징:

• 별도의 SQLite 설치 없이 클러스터 배포가 쉽습니다.
• 복제된 SQL 스토리지를 빠르게 확보하는 기능.
• 프로덕션 프로젝트(프로덕션 등급)에 사용할 준비가 되었습니다.
• 일괄 모드로 데이터를 업데이트하고 클러스터의 선두 노드를 결정할 수 있는 HTTP(S) API가 있습니다. 다양한 프로그래밍 언어에 대한 명령줄 인터페이스와 클라이언트 라이브러리도 제공됩니다.
• 다른 노드를 식별하는 서비스를 사용하면 클러스터를 동적으로 생성할 수 있습니다.
• 노드 간 데이터 교환 암호화를 지원합니다.
• 읽을 때 데이터의 관련성과 일관성을 확인하는 수준을 구성하는 기능입니다.
• 합의 결정에 참여하지 않고 읽기 작업을 위한 클러스터의 확장성을 높이는 데 사용되는 읽기 전용 모드에서 노드를 연결하는 선택적 기능입니다.
• 하나의 요청에 명령을 결합하여 고유한 형태의 트랜잭션을 지원합니다(BEGIN, COMMIT, ROLLBACK, SAVEPOINT 및 RELEASE 기반 트랜잭션은 지원되지 않음).
• 핫 백업 생성을 지원합니다.

새 릴리스에서:

• Consul 및 etcd 분산 스토리지를 기반으로 작동할 수 있는 새로운 노드 감지 서비스를 사용하여 자동 rqlite 클러스터링에 대한 지원이 추가되었습니다. 이 서비스를 사용하면 rqlite 노드가 자동으로 서로를 찾을 수 있습니다. 관리자는 공통 Consul 또는 etcd 클러스터 주소(예: "example.com:8500")를 지정하여 서로 다른 서버에서 여러 노드를 시작하기만 하면 노드가 자동으로 검색됩니다. 클러스터로 결합됩니다. 선두 노드는 Consul 또는 etcd 스토리지의 주소에 대한 정보를 주기적으로 업데이트하므로 다른 노드를 재구성할 필요 없이 이후에 리더를 변경할 수 있을 뿐만 아니라 리더를 변경한 후에도 새 노드를 추가할 수 있습니다. AWS Lambda에서 실행되는 레거시 검색 모드 서비스가 중단되었습니다.
• CLI 인터페이스를 사용하면 한 번에 여러 호스트를 지정할 수 있습니다. 첫 번째 노드를 사용할 수 없으면 다음 호스트에 연결됩니다.
• rqlited 명령줄 인수를 구문 분석하는 코드가 재작업되었습니다.
• 더 이상 사용되지 않는 protobuf 패키지가 중단되었습니다.
• Raft 프로토콜 구현에 사용되는 BoltDB 스토리지는 etcd 프로젝트의 포크인 bbolt로 대체되었습니다.

출처 : opennet.ru