{"id":143994,"date":"2025-09-22T17:11:59","date_gmt":"2025-09-22T15:11:59","guid":{"rendered":"https:\/\/prohoster.info\/blog\/novosti-interneta\/reliz-subd-duckdb-1-4-0-s-podderzhkoj-shifrovaniya-bd"},"modified":"2025-09-22T17:11:59","modified_gmt":"2025-09-22T15:11:59","slug":"reliz-subd-duckdb-1-4-0-s-podderzhkoj-shifrovaniya-bd","status":"publish","type":"post","link":"https:\/\/prohoster.info\/hu\/blog\/news\/reliz-subd-duckdb-1-4-0-s-podderzhkoj-shifrovaniya-bd","title":{"rendered":"Megjelent a DuckDB 1.4.0 adatb\u00e1zis-kezel\u0151 rendszer titkos\u00edt\u00e1si t\u00e1mogat\u00e1ssal","gt_translate_keys":[{"key":"rendered","format":"text"}]},"content":{"rendered":"
Megjelent a DuckDB 1.4.0 verzi\u00f3ja, amely az analitikai lek\u00e9rdez\u00e9sek v\u00e9grehajt\u00e1s\u00e1ra \u00f6sszpontos\u00edt, \u00e9s koncepcion\u00e1lisan hasonl\u00edt a SQLite-ra. A DuckDB \u00f6tv\u00f6zi a SQLite olyan tulajdons\u00e1gait, mint a kompakt m\u00e9ret, az integr\u00e1lhat\u00f3 k\u00f6nyvt\u00e1rk\u00e9nt val\u00f3 csatlakoz\u00e1s, az adatb\u00e1zis egy f\u00e1jlban val\u00f3 t\u00e1rol\u00e1sa \u00e9s a parancssori fel\u00fclet, valamint a lek\u00e9rdez\u00e9sek v\u00e9grehajt\u00e1s\u00e1hoz sz\u00fcks\u00e9ges lehet\u0151s\u00e9geket \u00e9s optimaliz\u00e1l\u00e1sokat k\u00edn\u00e1l, amelyek jelent\u0151s mennyis\u00e9g\u0171 t\u00e1rolt adatot fednek le, p\u00e9ld\u00e1ul az eg\u00e9sz t\u00e1bl\u00e1k tartalm\u00e1nak aggreg\u00e1l\u00e1s\u00e1val vagy t\u00f6bb nagy t\u00e1bla \u00f6sszef\u00e9s\u00fcl\u00e9s\u00e9vel. A projekt k\u00f3dja C++ nyelven \u00edr\u00f3dott \u00e9s MIT licenc alatt terjesztik. <\/p>\n
A DuckDB kiterjesztett SQL-dialektust biztos\u00edt, bele\u00e9rtve a nagyon bonyolult \u00e9s hossz\u00fa ideig tart\u00f3 lek\u00e9rdez\u00e9sek kezel\u00e9s\u00e9re vonatkoz\u00f3 tov\u00e1bbi lehet\u0151s\u00e9geket. Lehets\u00e9ges bonyolult t\u00edpusok (t\u00f6mb\u00f6k, strukt\u00far\u00e1k, uni\u00f3k) haszn\u00e1lata, valamint tetsz\u0151leges \u00e9s be\u00e1gyazott korrel\u00e1lt almint\u00e1k v\u00e9grehajt\u00e1sa. T\u00e1mogatott a t\u00f6bb lek\u00e9rdez\u00e9s egyidej\u0171 v\u00e9grehajt\u00e1sa, lek\u00e9rdez\u00e9sek k\u00f6zvetlen v\u00e9grehajt\u00e1sa CSV \u00e9s Parquet form\u00e1tum\u00fa f\u00e1jlokb\u00f3l. Tov\u00e1bb\u00e1, t\u00e1mogatja a PostgreSQL adatb\u00e1zisb\u00f3l val\u00f3 import\u00e1l\u00e1st. <\/p>\n
A projekt SQLite alap\u00fa h\u00e9jat, PostgreSQL-b\u0151l sz\u00e1rmaz\u00f3 elemz\u0151t, MonetDB-b\u0151l sz\u00e1rmaz\u00f3 Date Math komponenst, saj\u00e1t megval\u00f3s\u00edt\u00e1s\u00fa ablakos f\u00fcggv\u00e9nyeket (Segment Tree Aggregation algoritmus alapj\u00e1n), RE2 k\u00f6nyvt\u00e1ron alapul\u00f3 regul\u00e1ris kifejez\u00e9sek feldolgoz\u00f3j\u00e1t, saj\u00e1t lek\u00e9rdez\u00e9s-optimaliz\u00e1l\u00f3t, MVCC (t\u00f6bb verzi\u00f3s p\u00e1rhuzamos v\u00e9grehajt\u00e1s) rendszert, valamint a Hyper-Pipelining Query Execution algoritmust alapul vev\u0151 vektorozott lek\u00e9rdez\u00e9s v\u00e9grehajt\u00f3 motorj\u00e1t haszn\u00e1lja, amely lehet\u0151v\u00e9 teszi, hogy egyetlen m\u0171velet sor\u00e1n nagy \u00e9rt\u00e9khalmazokat egyszerre dolgozzon fel. <\/p>\n
Az \u00faj verzi\u00f3ban: <\/p>\n
\n
F\u00e1jlok titkos\u00edtott adatb\u00e1zis t\u00e1rol\u00e1s\u00e1nak t\u00e1mogat\u00e1sa ker\u00fclt hozz\u00e1ad\u00e1sra. A titkos\u00edt\u00e1shoz AES-256 algoritmust haszn\u00e1lunk GCM m\u00f3dban. Nemcsak az alapadatokat tartalmaz\u00f3 f\u00e1jl, hanem a WAL napl\u00f3k \u00e9s ideiglenes f\u00e1jlok is titkos\u00edt\u00e1sra ker\u00fclnek. Az adatb\u00e1zis titkos\u00edt\u00e1s\u00e1hoz sz\u00fcks\u00e9ges kulcsokat az ATTACH parancs seg\u00edts\u00e9g\u00e9vel a ENCRYPTION_KEY param\u00e9tert megadva \u00e1ll\u00edthatjuk be. ATTACH 'encrypted.db' AS enc_db (ENCRYPTION_KEY 'quack_quack');\n
Hozz\u00e1adva a 'MERGE INTO' parancs t\u00e1mogat\u00e1sa, amely alternat\u00edvak\u00e9nt haszn\u00e1lhat\u00f3 az 'INSERT ... ON CONFLICT' kifejez\u00e9shez, \u00e9s nem ig\u00e9nyel els\u0151dleges kulcsot, ehelyett tetsz\u0151leges \u00f6sszefon\u00f3d\u00e1si felt\u00e9telekkel m\u0171k\u00f6dik. A 'MERGE INTO' parancs lehet\u0151v\u00e9 teszi felt\u00e9teles SQL kifejez\u00e9sek l\u00e9trehoz\u00e1s\u00e1t, amelyek egyes\u00edtik az INSERT, UPDATE \u00e9s DELETE m\u0171veleteket egyetlen kifejez\u00e9sben. P\u00e9ld\u00e1ul a MERGE seg\u00edts\u00e9g\u00e9vel k\u00e9t t\u00e1bl\u00e1zat egyes\u00edt\u00e9se val\u00f3s\u00edthat\u00f3 meg, hi\u00e1nyz\u00f3 rekordok besz\u00far\u00e1s\u00e1val \u00e9s l\u00e9tez\u0151 rekordok friss\u00edt\u00e9s\u00e9vel. WITH deletes(item_id, delete_threshold) AS (VALUES (10, 3000)) MERGE INTO Stock USING deletes USING (item_id) WHEN MATCHED AND balance < delete_threshold THEN DELETE RETURNING merge_action, *; \n\n
Tov\u00e1bb\u00e1 az Apache Iceberg form\u00e1tum\u00fa t\u00e1bl\u00e1k kezel\u00e9s\u00e9hez a kor\u00e1bbi csak olvas\u00e1si t\u00e1mogat\u00e1s mellett a \u00edr\u00e1si m\u0171veletek t\u00e1mogat\u00e1sa is hozz\u00e1adva lett, lehet\u0151v\u00e9 t\u00e9ve az adatok \u00e1tvitel\u00e9t Iceberg \u00e9s DuckDB k\u00f6z\u00f6tt.\n
A parancssori klienshez hozz\u00e1adva egy folyamat el\u0151rehalad\u00e1s\u00e1t jelz\u0151 mutat\u00f3, amely megjelen\u00edti a h\u00e1tral\u00e9v\u0151 id\u0151t a m\u0171velet befejez\u00e9s\u00e9ig.\n
Hozz\u00e1adva a 'FILL' ablakf\u00fcggv\u00e9ny, amely haszn\u00e1lhat\u00f3 a hi\u00e1nyz\u00f3 \u00e9rt\u00e9kek interpol\u00e1l\u00e1s\u00e1ra rendezett ablakokban. FROM (VALUES (1, 1), (2, NULL), (3, 42)) t(c1, c2) SELECT fill(c2) OVER (ORDER BY c1) f; 1 21 42\n
Megval\u00f3s\u00edtva a Teradata Connector kieg\u00e9sz\u00edt\u0151, amely lehet\u0151v\u00e9 teszi a Teradata adatb\u00e1zisokhoz val\u00f3 csatlakoz\u00e1st. A kieg\u00e9sz\u00edt\u0151 lehet\u0151v\u00e9 teszi a t\u00e1bl\u00e1k manipul\u00e1l\u00e1s\u00e1t, lek\u00e9rdez\u00e9sek v\u00e9grehajt\u00e1s\u00e1t \u00e9s SQL-parancsok futtat\u00e1s\u00e1t k\u00f6zvetlen\u00fcl a Teradata-ban a DuckDB haszn\u00e1lat\u00e1val.\n
Hozz\u00e1adva a mem\u00f3ri\u00e1ban t\u00e1rolt t\u00e1bl\u00e1k \u00e1llapot\u00e1nak (checkpoint) r\u00f6gz\u00edt\u00e9s\u00e9nek t\u00e1mogat\u00e1sa, amely lehet\u0151v\u00e9 tette a t\u00f6m\u00f6r\u00edt\u00e9s t\u00e1mogat\u00e1s\u00e1nak megval\u00f3s\u00edt\u00e1s\u00e1t. Ezen k\u00edv\u00fcl az \u00e1llapot r\u00f6gz\u00edt\u00e9se sor\u00e1n megtiszt\u00edt\u00e1sra ker\u00fclnek a t\u00f6r\u00f6lt sorok, \u00e9s hely felszabad\u00edt\u00e1sa t\u00f6rt\u00e9nik a t\u00f6rl\u00e9si m\u0171veletek ut\u00e1n. ATTACH ':memory:' AS memory_compressed (COMPRESS);\n
T\u00f6bb teljes\u00edtm\u00e9nyoptimaliz\u00e1l\u00e1s javasolt: A rendez\u00e9si megval\u00f3s\u00edt\u00e1s \u00e1tt\u00e9rt a t\u00f6bbutas egyes\u00edt\u00e9s (k-way merge sort) algoritmus haszn\u00e1lat\u00e1ra, cs\u00f6kkentve az adatok mozgat\u00e1s\u00e1t. Az \u00e1ltal\u00e1nos t\u00e1bl\u00e1zatos kifejez\u00e9sek (Common Table Expression, CTE) most alap\u00e9rtelmezetten materializ\u00e1lva vannak. <\/ul>\n