CBS 및 sqld 프로젝트는 SQLite의 클라우드 및 서버 버전을 개발합니다.

SQLite 개발자는 데이터베이스의 내용을 로컬 파일이 아닌 외부 클라우드 스토리지에 저장할 수 있는 실험적인 CBS(Cloud Backed SQLite) VFS 모듈을 개발하고 있습니다. 스토리지의 경우 외부 스토리지에 특별히 최적화된 데이터베이스 형식이 사용되므로 먼저 전체 데이터베이스를 로컬 시스템에 복사하지 않고도 필요에 따라 외부 스토리지에서 동적으로 데이터를 로드할 수 있습니다. 클라우드 스토리지 중 Azure Blob Storage와 Google Cloud Storage가 현재 지원됩니다. 일반 SQLite를 지원하는 모든 응용 프로그램은 CBS를 사용하도록 변환할 수 있습니다.

VFS 모듈은 백그라운드 및 활성 모드에서 작동할 수 있습니다. 백그라운드에서 백그라운드 프로세스는 시스템에서 지속적으로 실행되어 읽기 전용 모드에서 외부 데이터베이스에 대한 액세스를 허용하지만 다른 프로세스에서 공유할 수 있는 공유 캐시를 유지합니다. 활성 모드에서는 읽기와 쓰기가 허용되지만 현재 프로세스의 로컬 캐시만 사용됩니다. 한 번에 하나의 클라이언트만 쓸 수 있으며 다른 클라이언트는 클라우드 스토리지에서 명시적으로 요청할 때까지 기록된 변경 사항을 볼 수 없습니다. 다른 쓰기 요청을 분리하기 위해 WAL 로그를 기반으로 하는 일반적인 SQLite 잠금 시스템이 사용됩니다.

개발자는 외부 저장소 생성 및 지우기, 외부 저장소에서 데이터베이스 로드 및 언로드, 외부 저장소에 데이터베이스 복사본 생성, 목록 보기와 같은 작업을 수행할 수 있는 확장된 C API 및 명령줄 인터페이스를 제공받습니다. 클라우드 스토리지에서 사용하지 않는 블록을 삭제하는 클라우드 스토리지의 데이터베이스.

이와는 별도로 libSQL 프로젝트(SQLite의 확장 포크) 개발자는 SQLite의 서버 버전인 sqld를 발표했습니다. 이를 통해 PostgreSQL 또는 HTTP를 사용하여 수행되는 클라이언트 연결인 공유 DBMS의 작업을 구성할 수 있습니다. 규약. 예를 들어 sqld에 연결하려면 PostgreSQL DBMS용으로 생성된 기존 클라이언트 라이브러리와 무엇보다도 psql CLI 인터페이스를 사용할 수 있습니다. sqld 서버는 HTTP 기반 API를 사용하여 액세스할 수도 있으므로 웹 애플리케이션과 쉽게 통합할 수 있습니다. sqld 코드는 Rust로 작성되었으며 MIT 라이선스에 따라 배포됩니다.

sqld는 백업, 다른 시스템으로의 복제, 그리고 영구 저장 공간이 부족하고 로컬 파일 데이터베이스를 유지 관리할 수 없는 서버리스 환경에서 SQLite 데이터베이스에 접근하는 데 사용됩니다. 서버리스 시스템에서 sqld가 사용하는 데이터베이스는 다른 시스템에서 복제할 수 있습니다. 서버고가용성과 내결함성을 보장하기 위해 FoundationDB 위에 실행되는 분산형 SQLite 변형인 mvSQLite와의 통합을 지원합니다. 데이터베이스 상태의 주기적인 스냅샷 생성과 WAL 로그의 변경 사항을 Amazon S3와 호환되는 클라우드 스토리지로 복제하는 방식으로 능동 백업 모드를 구현합니다.

애플리케이션의 경우 LD_PRELOAD를 통해 로드하여 로컬 파일에 데이터를 저장하는 것에서 sqld를 통해 작업하는 것으로 전환할 수 있는 SQLite 호환 라이브러리가 제공됩니다. SQLite에 대한 확장을 다운로드할 수 있습니다. 클라이언트 라이브러리는 TypeScript, JavaScript, Rust, Go 및 Python용으로 준비되어 있습니다. 표준 SQLite 도구를 사용하여 동시에 sqld에 연결된 데이터베이스로 작업할 수 있습니다. sqld는 데이터베이스, 복제 및 백업에 대한 네트워크 액세스를 제공하기 위한 애드온 역할을 합니다. 예: # SQLite 데이터베이스 foo.db용 서버 시작: sqld -d foo.db -p 127.0.0.1:5432 --http-listen-addr=127.0.0.1:8000 # PostgreSQL 유틸리티를 사용하여 데이터베이스에 액세스: psql -q postgres ://127.0.0.1 # SQLite 툴킷을 사용하여 데이터베이스에 로컬로 연결: sqlite3 foo.db # HTTP를 통한 액세스: curl -s -d "{\"statements\": [\"SELECT * from databases; \"] } »\http://127.0.0.1:8000

결론적으로 Fly.io에서 개발한 LiteFS 프로젝트를 언급할 수 있습니다. LiteFS는 여러 호스트에서 하나의 공유 SQLite 데이터베이스 작업을 구성하기 위한 FUSE 모듈입니다. LiteFS는 일종의 트랜잭션 메커니즘을 사용하고 LTX 형식의 별도 파일에 트랜잭션을 저장하여 데이터베이스에서 파일에 대한 쓰기 작업을 가로채고 이러한 작업을 다른 시스템에 브로드캐스트함으로써 여러 시스템 간에 데이터베이스 상태를 복제합니다. LiteFS 코드는 Go로 작성되었으며 Apache 2.0 라이선스에 따라 배포됩니다.

출처 : opennet.ru