Megjelent a DuckDB 1.2.0, amely az analitikai lek\u00e9rdez\u00e9sek v\u00e9grehajt\u00e1s\u00e1ra \u00f6sszpontos\u00edt, \u00e9s alapvet\u0151en az SQLite-hoz hasonl\u00edt. A DuckDB \u00f6tv\u00f6zi az SQLite olyan tulajdons\u00e1gait, mint a kompakt m\u00e9ret, az integr\u00e1lt k\u00f6nyvt\u00e1r form\u00e1j\u00e1ban t\u00f6rt\u00e9n\u0151 csatlakoz\u00e1s, az adatb\u00e1zisok egy f\u00e1jlban t\u00f6rt\u00e9n\u0151 t\u00e1rol\u00e1sa \u00e9s a CLI fel\u00fclet, valamint a nagy mennyis\u00e9g\u0171 t\u00e1rolt adat v\u00e9grehajt\u00e1s\u00e1ra vonatkoz\u00f3 lehet\u0151s\u00e9geket \u00e9s optimaliz\u00e1l\u00e1sokat, p\u00e9ld\u00e1ul az \u00f6sszes t\u00e1bl\u00e1zat tartalm\u00e1nak aggreg\u00e1l\u00e1s\u00e1t vagy t\u00f6bb nagy t\u00e1bl\u00e1zat egyes\u00edt\u00e9s\u00e9t. A projekt k\u00f3dja C++ nyelven k\u00e9sz\u00fclt, \u00e9s MIT licenc alatt terjesztik. <\/p>\n
A DuckDB kiterjesztett SQL-dialektust biztos\u00edt, bele\u00e9rtve a nagyon bonyolult \u00e9s hossz\u00fa ideig tart\u00f3 lek\u00e9rdez\u00e9sek kezel\u00e9s\u00e9re vonatkoz\u00f3 tov\u00e1bbi lehet\u0151s\u00e9geket. Lehets\u00e9ges bonyolult t\u00edpusok (t\u00f6mb\u00f6k, strukt\u00far\u00e1k, uni\u00f3k) haszn\u00e1lata, valamint tetsz\u0151leges \u00e9s be\u00e1gyazott korrel\u00e1lt almint\u00e1k v\u00e9grehajt\u00e1sa. T\u00e1mogatott a t\u00f6bb lek\u00e9rdez\u00e9s egyidej\u0171 v\u00e9grehajt\u00e1sa, lek\u00e9rdez\u00e9sek k\u00f6zvetlen v\u00e9grehajt\u00e1sa CSV \u00e9s Parquet form\u00e1tum\u00fa f\u00e1jlokb\u00f3l. Tov\u00e1bb\u00e1, t\u00e1mogatja a PostgreSQL adatb\u00e1zisb\u00f3l val\u00f3 import\u00e1l\u00e1st. <\/p>\n
A projekt SQLite alap\u00fa h\u00e9jat, PostgreSQL-b\u0151l sz\u00e1rmaz\u00f3 elemz\u0151t, MonetDB-b\u0151l sz\u00e1rmaz\u00f3 Date Math komponenst, saj\u00e1t megval\u00f3s\u00edt\u00e1s\u00fa ablakos f\u00fcggv\u00e9nyeket (Segment Tree Aggregation algoritmus alapj\u00e1n), RE2 k\u00f6nyvt\u00e1ron alapul\u00f3 regul\u00e1ris kifejez\u00e9sek feldolgoz\u00f3j\u00e1t, saj\u00e1t lek\u00e9rdez\u00e9s-optimaliz\u00e1l\u00f3t, MVCC (t\u00f6bb verzi\u00f3s p\u00e1rhuzamos v\u00e9grehajt\u00e1s) rendszert, valamint a Hyper-Pipelining Query Execution algoritmust alapul vev\u0151 vektorozott lek\u00e9rdez\u00e9s v\u00e9grehajt\u00f3 motorj\u00e1t haszn\u00e1lja, amely lehet\u0151v\u00e9 teszi, hogy egyetlen m\u0171velet sor\u00e1n nagy \u00e9rt\u00e9khalmazokat egyszerre dolgozzon fel. <\/p>\n
Az \u00faj verzi\u00f3ban: <\/p>\n
\n
\u00daj t\u00f6m\u00f6r\u00edt\u00e9si m\u00f3dszerek t\u00e1mogat\u00e1s\u00e1t val\u00f3s\u00edtottuk meg, amelyek alap\u00e9rtelmez\u00e9s szerint nincsenek enged\u00e9lyezve az adatb\u00e1zisf\u00e1jlok visszafel\u00e9 kompatibilit\u00e1s\u00e1nak meg\u0151rz\u00e9se \u00e9rdek\u00e9ben a DuckDB kor\u00e1bbi verzi\u00f3ival. Az \u00faj adatb\u00e1zisf\u00e1jl-form\u00e1tum haszn\u00e1lat\u00e1hoz lehet\u0151s\u00e9g ny\u00edlik az adatb\u00e1zis verzi\u00f3sz\u00e1mhoz val\u00f3 k\u00f6t\u00e9s\u00e9re \u2014 a f\u00e1jl megnyit\u00e1sakor a \"STORAGE_VERSION\" param\u00e9ter seg\u00edts\u00e9g\u00e9vel megadhat\u00f3 a minimum t\u00e1mogathat\u00f3 adatb\u00e1zis-verzi\u00f3 (\"ATTACH 'file.db' (STORAGE_VERSION 'v1.2.0');\"). Az \u00faj form\u00e1tum r\u00e9gi form\u00e1tumba val\u00f3 konvert\u00e1l\u00e1s\u00e1hoz SQL parancs haszn\u00e1lhat\u00f3, p\u00e9ld\u00e1ul: ATTACH 'file1.db'; ATTACH 'converted_file.db' (STORAGE_VERSION 'v1.0.0'); COPY FROM DATABASE file1 TO converted_file;\n
Hozz\u00e1adtuk az SQL parancs \"ALTER TABLE ... ADD PRIMARY KEY\" t\u00e1mogat\u00e1s\u00e1t, amely lehet\u0151v\u00e9 teszi egy els\u0151dleges kulcs hozz\u00e1ad\u00e1s\u00e1t egy megl\u00e9v\u0151 t\u00e1bl\u00e1hoz.\n
Elt\u00e1vol\u00edtottuk a korl\u00e1toz\u00e1st, amely megakad\u00e1lyozta az olyan azonos\u00edt\u00f3k \u00fajb\u00f3li hozz\u00e1ad\u00e1s\u00e1t, amelyekhez egyedi nyomk\u00f6vet\u0151 index tartozik, ha az azonos\u00edt\u00f3k a jelenlegi tranzakci\u00f3ban t\u00f6r\u00f6lve lettek. P\u00e9ld\u00e1ul az al\u00e1bbi SQL-k\u00f3d m\u00e1r nem okoz hib\u00e1t: CREATE TABLE students (id INTEGER PRIMARY KEY, name VARCHAR); INSERT INTO students VALUES (1, 'John Doe'); BEGIN; DELETE FROM students WHERE id = 1; INSERT INTO students VALUES (1, 'Jane Doe');\n
Hozz\u00e1adtuk a CSV-f\u00e1jlok Latin-1 \u00e9s UTF-16 k\u00f3dol\u00e1sokban val\u00f3 bet\u00f6lt\u00e9s\u00e9nek t\u00e1mogat\u00e1s\u00e1t (kor\u00e1bban csak az UTF-8 k\u00f3dol\u00e1s volt t\u00e1mogatott). FROM read_csv('cities-latin-1.csv', encoding = 'latin-1');\n
Hozz\u00e1adtuk a t\u00f6bbytek haszn\u00e1lat\u00e1nak t\u00e1mogat\u00e1s\u00e1t CSV-f\u00e1jlokban (max. 4 byte), amely lehet\u0151v\u00e9 teszi az emoji-k oszlopelv\u00e1laszt\u00f3kk\u00e9nt val\u00f3 haszn\u00e1lat\u00e1t. a\ud83d\udc7eb hello\ud83d\udc7eworld FROM read_csv('example.dsv', sep = '\ud83d\udc7e');\n
Alap\u00e9rtelmez\u00e9s szerint aktiv\u00e1lva van a szigor\u00fa CSV-f\u00e1jlok elemz\u00e9si m\u00f3d (\"strict_mode = true\"), amely ellen\u0151rzi a form\u00e1z\u00e1st az RFC 4180 specifik\u00e1ci\u00f3 szerint. Szigor\u00fa m\u00f3dban csak egy karakter haszn\u00e1lhat\u00f3 az \u00faj sorok elv\u00e1laszt\u00e1s\u00e1ra, ami hib\u00e1t eredm\u00e9nyez, ha a f\u00e1jlok elemez\u00e9s\u00e9re nemcsak \u00faj sor, hanem visszat\u00e9r\u0151 karakter (\"\\r\\n\") is haszn\u00e1latos.\n
A CSV elemz\u0151 \u00faj algoritmust haszn\u00e1l az \u00faj sorok meghat\u00e1roz\u00e1s\u00e1hoz, amely t\u00e1mogatja a m\u0171veletek p\u00e1rhuzamos\u00edt\u00e1s\u00e1t. Az \u00faj algoritmus haszn\u00e1lata k\u00f6r\u00fclbel\u00fcl 15%-kal gyors\u00edtotta fel a CSV parsingot.\n
Elt\u00e1vol\u00edtott\u00e1k a sorok m\u00e9ret\u00e9nek korl\u00e1toz\u00e1s\u00e1t a CSV f\u00e1jlokban (kor\u00e1bban a sorok nem haladhatt\u00e1k meg a 8 MB-ot).\n
A Parquet form\u00e1tum\u00fa adatok export\u00e1l\u00e1sakor megval\u00f3s\u00edtott\u00e1k a hash-ek (sz\u00f3t\u00e1rak) \u00e9s a Bloom sz\u0171r\u0151n alapul\u00f3 indexek t\u00e1mogat\u00e1s\u00e1t. Megval\u00f3s\u00edtott\u00e1k a DELTA_BINARY_PACKED t\u00f6m\u00f6r\u00edt\u00e9si m\u00f3dszert, amely jelent\u0151sen cs\u00f6kkenti a Parquet f\u00e1jlok m\u00e9ret\u00e9t.\n
A parancssori fel\u00fclethez hozz\u00e1adtunk egy biztons\u00e1gos m\u00f3dot, amely aktiv\u00e1lhat\u00f3 a \"-safe\" opci\u00f3val vagy a \".safe_mode\" paranccsal. Ebben a m\u00f3dban csak az eredetileg megadott adatb\u00e1zisf\u00e1jlhoz val\u00f3 hozz\u00e1f\u00e9r\u00e9s enged\u00e9lyezett, m\u00e1s f\u00e1jlok megnyit\u00e1sa eset\u00e9n hiba\u00fczenet jelenik meg.\n
A parancssori fel\u00fcleten jav\u00edtott\u00e1k a bemeneti automatikus kieg\u00e9sz\u00edt\u00e9st. Az automatikus kieg\u00e9sz\u00edt\u00e9s k\u00f3dja a PEG (Parsing Expression Grammar) haszn\u00e1lat\u00e1ra lett \u00e1t\u00edrva.\n
A parancssori fel\u00fcleten v\u00e9gzett parancsok sor\u00e1n a nagy sz\u00e1mok szeml\u00e9letes megjelen\u00edt\u00e9se val\u00f3sult meg. P\u00e9ld\u00e1ul, ha a sz\u00e1m 100000000-ot mutat, akkor a k\u00f6vetkez\u0151 mell\u00e9klet is hozz\u00e1 lesz f\u0171zve: «(100 milli\u00f3)».\n
Az SQL-ben t\u00e1mogat\u00e1s ker\u00fclt bevezet\u00e9sre arra a szintaxisra, amely lehet\u0151v\u00e9 teszi, hogy a t\u00e1bl\u00e1k \u00e9s kifejez\u00e9sek r\u00f6vid\u00edtett nevei k\u00f6zvetlen\u00fcl az \u00e1ltaluk mutatott \u00e9rt\u00e9kek el\u0151tt szerepeljenek (a «expression AS n\u00e9v» szintaxis helyett): SELECT e1: some_long_and_winding_expression, e2: t2.a_column_name FROM t1: long_schema.some_long_table_name, t2: short_s.tbl;\n
A «SELECT» parancsban megval\u00f3sult a «RENAME» m\u0171velet t\u00e1mogat\u00e1sa a kifejez\u00e9ssel «*» megadott mez\u0151k \u00e1tnevez\u00e9s\u00e9re: SELECT * RENAME (col1 AS new_col1) FROM integers;\n
A «SELECT» parancsban enged\u00e9lyezett a «LIKE» \u00e9s «SIMILAR TO» m\u0171veletek haszn\u00e1lata az «*» kifejez\u00e9ssel: SELECT * LIKE ‘val%’ FROM key_val;\n
Jav\u00edtott\u00e1k a pszeudo-v\u00e9letlen sz\u00e1mok gener\u00e1l\u00e1s\u00e1nak min\u0151s\u00e9g\u00e9t.\n
Moderniz\u00e1lt\u00e1k a lek\u00e9rdez\u00e9s-optim\u00e1l\u00f3t. A TPC-H SF100 teszten el\u00e9rt teljes\u00edtm\u00e9ny 13%-kal n\u0151tt.\n
Javasripthoz hasonl\u00f3 API-t javasoltak ki b\u0151v\u00edtm\u00e9nyek fejleszt\u00e9s\u00e9hez, p\u00e9ld\u00e1ul \u00faj aggreg\u00e1l\u00f3 vagy t\u00e1bl\u00e1zatos funkci\u00f3k l\u00e9trehoz\u00e1s\u00e1ra.\n
T\u00e1mogat\u00e1s ker\u00fclt az Musl szabv\u00e1nyos C k\u00f6nyvt\u00e1rral rendelkez\u0151 rendszerekhez. <\/ul>\n