DBMS DuckDB 1.4.0 väljaanne, mis toetab andmebaaside krüpteerimist.

Ilmus välja DuckDB andmebaasi 1.4.0, mis on suunatud analüütiliste päringute täitmisele ja mille kontseptsioon sarnaneb SQLite-le. DuckDB ühendab SQLite omadused, nagu kompaktsus, integreeritud teegi kujul ühendamine, andmebaasi salvestamine ühte faili ja CLI-liides, koos võimekuste ja optimeeringutega analüütiliste päringute täitmiseks, mis hõlmavad märkimisväärset osa salvestatud andmetest, näiteks kõigi tabelite sisu agregatsiooni või mitme suure tabeli ühendamist. Projekti kood on kirjutatud C++ keeles ja levitatakse MIT litsentsi all.

DuckDB pakub ulatuslikku SQL keele dialekti, mis sisaldab täiendavaid võimalusi keerukate ja pikaajaliste päringute töötlemiseks. Toetatakse keeruliste tüüpide (massiv, struktuurid, liidendid) kasutamist ja võimalust täita omavahel seotud alampäringuid. Samuti on toetatud mitme päringu samanaegne täitmine, päringute otsefailidest, nagu CSV ja Parquet. On olemas ka toimetamine PostgreSQL andmebaasidest.

Projekt kasutab SQLite'i kestat, PostgreSQL'i parset, MonetDB Date Math komponenti, oma aknafunktsioonide rakendust (Segment Tree Aggregation alusel), regulaaravalduste töötlejat RE2 raamatukogu põhjal, oma päringu optimeerijat, MVCC mehhanismi (Multi-Version Concurrency Control) ja vektori mootori päringutäitmiseks, mis põhineb hüpertorustuse päringute täitmise algoritmil, võimaldades ühes tegevuses korraga käsitleda suuri väärtuste kogumeid.

Uues versioonis:

• Lisatud tugi andmebaasi failide salvestamiseks krüpteeritud kujul. Krüptimiseks kasutatakse AES-256 algoritmi GCM režiimis. Krüpteeritakse mitte ainult peamine andmefail, vaid ka WAL-logid ja ajutised failid. Andmebaasi krüptimise võtmed määratakse käsuga ATTACH parameetriga ENCRYPTION_KEY. ATTACH 'encrypted.db' AS enc_db (ENCRYPTION_KEY 'quack_quack');
• Lisatud tugi käsule 'MERGE INTO', mida saab kasutada alternatiivina väljendile 'INSERT ... ON CONFLICT', mis ei nõua esmast võtit ja töötab juhuslike ühendamistingimustega. Käsk 'MERGE INTO' võimaldab luua tingimuslikke SQL-väljendeid, mis ühendavad ühes väljendis INSERT, UPDATE ja DELETE toimingud. Näiteks saab MERGE'iga korraldada kahe tabeli ühendamist, sisestades puuduvad kirjed ja uuendades olemasolevaid. WITH deletes(item_id, delete_threshold) AS (VALUES (10, 3000)) MERGE INTO Stock USING deletes USING (item_id) WHEN MATCHED AND balance < delete_threshold THEN DELETE RETURNING merge_action, *;
• Lisaks on Apache Icebergi vormingus tabelite toetamiseks lisatud kirjutamise operatsioonide tugi (varem oli toetatud ainult lugemine), mis võimaldab andmete edastamist Icebergist DuckDB-sse ja tagasi.
• Käsurea kliendile on lisatud toimingu edenemise indikaator, mis ennustab seda, kui kaua on jäänud kuni operatsiooni lõpetamiseni.
• Lisatud aknafunktsioon 'FILL', mida saab kasutada järjestatud akendes puuduvate väärtuste interpoleerimiseks. FROM (VALUES (1, 1), (2, NULL), (3, 42)) t(c1, c2) SELECT fill(c2) OVER (ORDER BY c1) f; 1 21 42
• Realiseeritud Teradata Connector laiendus, et ühendada Teradata andmebaasidega. Laiendus võimaldab manipuleerida tabelitega, esitada päringuid ja käivitada SQL-käske otse Teradata's, kasutades DuckDB.
• Lisatud on mälus hoidvate tabelite oleku (checkpoint) fikseerimise tugi, mis võimaldas rakendada kokkusurumise toetust. Lisaks toimub oleku fikseerimise ajal eemaldatud ridade puhastamine ja ruumi vabastamine kustutamisoperatsioonide järel. ATTACH ‘:memory:’ AS memory_compressed (COMPRESS);
• Töötamiseks on pakutud mitmeid jõudluse optimeerimisi: Sortimise teostamine on muudetud kasutama mitmerealist ühinemismeetodit (k-way merge sort), mis vähendab andmete liikumist. Üldised tabeliväljendid (Common Table Expression, CTE) materialiseeritakse nüüd vaikimisi.

Allikas: opennet.ru