{"id":143994,"date":"2025-09-22T17:11:59","date_gmt":"2025-09-22T15:11:59","guid":{"rendered":"https:\/\/prohoster.info\/blog\/novosti-interneta\/reliz-subd-duckdb-1-4-0-s-podderzhkoj-shifrovaniya-bd"},"modified":"2025-09-22T17:11:59","modified_gmt":"2025-09-22T15:11:59","slug":"reliz-subd-duckdb-1-4-0-s-podderzhkoj-shifrovaniya-bd","status":"publish","type":"post","link":"https:\/\/prohoster.info\/pl\/blog\/news\/reliz-subd-duckdb-1-4-0-s-podderzhkoj-shifrovaniya-bd","title":{"rendered":"Wydanie systemu zarz\u0105dzania baz\u0105 danych DuckDB 1.4.0 z obs\u0142ug\u0105 szyfrowania Bazy Danych","gt_translate_keys":[{"key":"rendered","format":"text"}]},"content":{"rendered":"
Opublikowano wydanie systemu DB DuckDB 1.4.0, zaprojektowanego do realizacji zapyta\u0144 analitycznych, koncepcyjnie przypominaj\u0105ce SQLite. DuckDB \u0142\u0105czy cechy SQLite, takie jak kompaktowo\u015b\u0107, mo\u017cliwo\u015b\u0107 u\u017cycia jako wbudowanej biblioteki, przechowywanie bazy danych w jednym pliku oraz interfejs CLI, z funkcjami i optymalizacjami do realizacji zapyta\u0144 analitycznych obejmuj\u0105cych znaczn\u0105 cz\u0119\u015b\u0107 przechowywanych danych, na przyk\u0142ad agregacj\u0119 ca\u0142ej zawarto\u015bci tabel lub \u0142\u0105czenie kilku du\u017cych tabel. Kod projektu zosta\u0142 napisany w j\u0119zyku C++ i jest udost\u0119pniany na licencji MIT. <\/p>\n
DuckDB oferuje rozszerzony dialekt j\u0119zyka SQL, kt\u00f3ry zawiera dodatkowe mo\u017cliwo\u015bci przetwarzania bardzo skomplikowanych i d\u0142ugotrwa\u0142ych zapyta\u0144. Mo\u017cliwe jest u\u017cycie z\u0142o\u017conych typ\u00f3w (tablice, struktury, unie), a tak\u017ce wykonywanie dowolnych i zagnie\u017cd\u017conych zapyta\u0144 skorelowanych. Obs\u0142ugiwane jest r\u00f3wnoleg\u0142e wykonywanie wielu zapyta\u0144 oraz realizacja zapyta\u0144 bezpo\u015brednio z plik\u00f3w w formatach CSV i Parquet. Dost\u0119pne jest wsparcie dla importu z system\u00f3w DB PostgreSQL. <\/p>\n
Projekt wykorzystuje pow\u0142ok\u0119 SQLite, parser PostgreSQL, komponent Date Math z MonetDB, w\u0142asn\u0105 implementacj\u0119 funkcji okiennych (na podstawie algorytmu Segment Tree Aggregation), obs\u0142ugiwacz wyra\u017ce\u0144 regularnych oparty na bibliotece RE2, a tak\u017ce w\u0142asny optymalizator zapyta\u0144, mechanizm MVCC do zarz\u0105dzania r\u00f3wnoleg\u0142ym wykonaniem zada\u0144 (Multi-Version Concurrency Control) oraz wektoryzowany silnik wykonywania zapyta\u0144 oparty na algorytmie Hyper-Pipelining Query Execution, kt\u00f3ry pozwala na jednoczesne przetwarzanie du\u017cych zbior\u00f3w warto\u015bci w jednej operacji. <\/p>\n
W nowej wersji: <\/p>\n
\n
Dodano wsparcie dla przechowywania plik\u00f3w baz danych w postaci zaszyfrowanej. Do szyfrowania u\u017cywany jest algorytm AES-256 w trybie GCM. Szyfrowany jest nie tylko g\u0142\u00f3wny plik z danymi, ale tak\u017ce pliki dziennika WAL oraz pliki tymczasowe. Klucze do szyfrowania bazy danych s\u0105 ustawiane za pomoc\u0105 polecenia ATTACH przez parametr ENCRYPTION_KEY. ATTACH 'encrypted.db' AS enc_db (ENCRYPTION_KEY 'quack_quack');\n
Dodano wsparcie dla polecenia 'MERGE INTO', kt\u00f3re mo\u017ce by\u0107 stosowane jako alternatywa dla wyra\u017cenia 'INSERT ... ON CONFLICT', nie wymagaj\u0105c klucza g\u0142\u00f3wnego i dzia\u0142aj\u0105c z dowolnymi warunkami scalania. Polecenie 'MERGE INTO' pozwala na tworzenie warunkowych wyra\u017ce\u0144 SQL, \u0142\u0105cz\u0105cych w jednym wyra\u017ceniu operacje INSERT, UPDATE i DELETE. Na przyk\u0142ad, za pomoc\u0105 MERGE mo\u017cna zorganizowa\u0107 scalanie dw\u00f3ch tabel, wstawiaj\u0105c brakuj\u0105ce rekordy i aktualizuj\u0105c istniej\u0105ce. WITH deletes(item_id, delete_threshold) AS (VALUES (10, 3000)) MERGE INTO Stock USING deletes USING (item_id) WHEN MATCHED AND balance < delete_threshold THEN DELETE RETURNING merge_action, *; \n\n
Opr\u00f3cz tego, dodano wsparcie dla operacji zapisu w przypadku pracy z tabelami w formacie Apache Iceberg (wcze\u015bniej wspierano tylko odczyt), co pozwala na przenoszenie danych z Iceberg do DuckDB i z powrotem.\n
W klienta wiersza polece\u0144 dodano wska\u017anik post\u0119pu operacji z prognoz\u0105 czasu pozosta\u0142ego do zako\u0144czenia.\n
Dodano funkcj\u0119 okienn\u0105 'FILL', kt\u00f3r\u0105 mo\u017cna wykorzysta\u0107 do interpolacji brakuj\u0105cych warto\u015bci w uporz\u0105dkowanych oknach. FROM (VALUES (1, 1), (2, NULL), (3, 42)) t(c1, c2) SELECT fill(c2) OVER (ORDER BY c1) f; 1 21 42\n
Zrealizowano dodatek Teradata Connector do \u0142\u0105czenia z bazami danych Teradata. Dodatek umo\u017cliwia manipulacj\u0119 tabelami, wykonywanie zapyta\u0144 i uruchamianie polece\u0144 SQL bezpo\u015brednio w Teradata, u\u017cywaj\u0105c DuckDB.\n
Dodano wsparcie dla tworzenia punkt\u00f3w kontrolnych (checkpoint) tabel przechowywanych w pami\u0119ci, co umo\u017cliwi\u0142o wdro\u017cenie wsparcia dla kompresji. Ponadto, podczas tworzenia punkt\u00f3w kontrolnych wykonywane jest usuwanie usuni\u0119tych wierszy oraz zwalnianie miejsca po operacjach usuwania. ATTACH ':memory:' AS memory_compressed (COMPRESS);\n
Zaproponowano kilka optymalizacji wydajno\u015bci: Implementacja sortowania zosta\u0142a przetworzona na wykorzystanie algorytmu wielo\u015bcie\u017ckowego scalania (k-way merge sort), co zmniejsza ruch danych. Uog\u00f3lnione wyra\u017cenia tabelaryczne (Common Table Expression, CTE) s\u0105 teraz domy\u015blnie materializowane. <\/ul>\n