{"id":121901,"date":"2025-02-13T14:22:07","date_gmt":"2025-02-13T12:22:07","guid":{"rendered":"https:\/\/prohoster.info\/blog\/novosti-interneta\/reliz-subd-duckdb-1-2-0"},"modified":"2025-02-13T14:22:07","modified_gmt":"2025-02-13T12:22:07","slug":"reliz-subd-duckdb-1-2-0","status":"publish","type":"post","link":"https:\/\/prohoster.info\/et\/blog\/novosti-interneta\/reliz-subd-duckdb-1-2-0","title":{"rendered":"DuckDB andmebaasi versioon 1.2.0","gt_translate_keys":[{"key":"rendered","format":"text"}]},"content":{"rendered":"
Avaldatud on DuckDB andmebaasi 1.2.0 versioon, mis on suunatud anal\u00fc\u00fctiliste p\u00e4ringute t\u00e4itmisele ning meenutab sisuliselt SQLite'i. DuckDB \u00fchendab SQLite omadused, nagu kompaktsus, sisseehitatud raamatukoguna \u00fchendamine, andmebaasi salvestamine \u00fchte faili ning CLI-liidese olemasolu, anal\u00fc\u00fctiliste p\u00e4ringute t\u00e4itmise v\u00f5imaluste ja optimeeringutega, mis katab olulise osa salvestatud andmetest, sealhulgas kogu tabelite sisu agregatsioon v\u00f5i mitme suure tabeli liitmine. Projekti kood on kirjutatud C++ keeles ja see levitatakse MIT litsentsi all. <\/p>\n
DuckDB pakub laiendatud SQL keele dialekti, mis sisaldab t\u00e4iendavaid v\u00f5imalusi v\u00e4ga keeruliste ja pikaajaliste p\u00e4ringute seadmiseks. Toetatakse keeruliste t\u00fc\u00fcpide (massivid, struktuurid, \u00fchendused) kasutamist, samuti v\u00f5imalust teostada omavahelisi ja sisse-v\u00e4lja korreleeruvaid alam-p\u00e4ringuid. Samuti on lubatud mitme p\u00e4ringu samaaegne t\u00e4itmine ning p\u00e4ringute k\u00e4ivitamine otse CSV ja Parquet formaadis failidest. Toetatakse ka andmete importimist PostgreSQL andmebaasidest. <\/p>\n
Projekt kasutab SQLite'i paketti, PostgreSQL'i parserit, MonetDB Date Math komponenti, enda aknafunktsioonide rakendust (Segment Tree Aggregation algoritmil p\u00f5hinev), RE2 raamatukogul p\u00f5hinevat regulaarsete v\u00e4ljendite t\u00f6\u00f6tlejat, enda p\u00e4ringute optimeerijat, MVCC-mehhanismi (Multi-Version Concurrency Control) t\u00e4itmise juhtide haldamiseks, samuti vektoreeritud p\u00e4ringute t\u00e4itmise mootori Hyper-Pipelining Query Execution algoritmil, mis v\u00f5imaldab \u00fches operatsioonis kiiresti t\u00f6\u00f6delda suuri v\u00e4\u00e4rtuste komplekte. <\/p>\n
Uues versioonis: <\/p>\n
\n
Uute tihendamismeetodite tugi on rakendatud, mis ei ole vaikimisi lubatud andmebaasi failide \u00fchilduvuse s\u00e4ilitamiseks varasemate DuckDB versioonidega. Uue andmebaasifailide formaadi kasutamiseks on ette n\u00e4htud andmebaasi sidumine versiooninumbriga \u2014 faili avamisel parameetri \"STORAGE_VERSION\" abil saab n\u00fc\u00fcd m\u00e4\u00e4rata minimaalset toetatud andmebaasi versiooni (\"ATTACH 'file.db' (STORAGE_VERSION 'v1.2.0');\"). Uue formaadi konverteerimiseks vanemaks saab kasutada SQL-k\u00e4sku COPY, n\u00e4iteks: ATTACH 'file1.db'; ATTACH 'converted_file.db' (STORAGE_VERSION 'v1.0.0'); COPY FROM DATABASE file1 TO converted_file;\n
SQL-k\u00e4su \"ALTER TABLE ... ADD PRIMARY KEY\" tugi on lisatud, et lisada esmase v\u00f5ti olemasolevale tabelile.\n
Eemaldatud piirang, mis ei lubanud identifikaatoreid uuesti lisada, millel on unikaalsuse j\u00e4lgimise indeks, kui need identifikaatorid olid praeguses tehingus kustutatud. N\u00e4iteks allolev SQL-kood ei paku enam viga: CREATE TABLE students (id INTEGER PRIMARY KEY, name VARCHAR); INSERT INTO students VALUES (1, 'John Doe'); BEGIN; DELETE FROM students WHERE id = 1; INSERT INTO students VALUES (1, 'Jane Doe');\n
CSV-failide laadimise tugi on lisatud Latin-1 ja UTF-16 kodeeringutele (varem toetati ainult UTF-8 kodeeringut). FROM read_csv('cities-latin-1.csv', encoding = 'latin-1');\n
CSV-failides on lisatud toetus mitme baidi eraldajatele (kuni 4 baiti), mis v\u00f5imaldab kasutada emoji eraldajana. a\ud83d\udc10b hello\ud83d\udc10world FROM read_csv('example.dsv', sep = '\ud83d\udc10');\n
Vaikimisi on lubatud ranget CSV-failide anal\u00fc\u00fcsimise re\u017eiimi ('strict_mode = true'), mis kontrollib formaadi vastavust spetsifikatsioonile RFC 4180. Ranget re\u017eiimi kasutades on lubatud kasutada ainult \u00fchte m\u00e4rki ridade eraldamiseks, mis p\u00f5hjustab vea, kui proovite anal\u00fc\u00fcsida faile, kus ridade eraldamiseks kasutatakse mitte ainult k\u00e4rbes\u00fclemat, vaid ka naasumise s\u00fcmbolit ('\r\n').\n
CSV-parsijas on kasutusele v\u00f5etud uus uue rea m\u00e4\u00e4ramise algoritm, mis toetab operatsioonide paralleelset t\u00e4itmist. Uue algoritmi kasutamine on kiirendanud CSV t\u00f6\u00f6tlemist umbes 15%.\n
CSV-failides on eemaldatud ridade suuruse piirang (varasemalt ei tohtinud rida \u00fcletada 8 MB).\n
Andmete eksportimisel Parquet formaati on tuvastatud toetust h\u00e4\u00e4ltedele (s\u00f5nastikele) ja Bloomi filterp\u00f5histele indeksitele. Tuvastatud on DELTA_BINARY_PACKED tihendusmeetod, mis v\u00f5imaldab oluliselt v\u00e4hendada Parquet-failide suurust.\n
Kommandojoone liidesesse on lisatud turvare\u017eiim, mida saab aktiveerida valiku '-safe' v\u00f5i k\u00e4suga '.safe_mode'. Selles re\u017eiimis on lubatud juurdep\u00e4\u00e4s ainult algselt m\u00e4\u00e4ratud andmebaasifailile ja katse avada teisi faile p\u00f5hjustab veateate.\n
K\u00e4surea liideses on t\u00e4iustatud sisestamise automaatset t\u00e4iendamist. Autot\u00e4iendamise kood on \u00fcmber kirjutatud PEG (Parsing Expression Grammar) kasutamiseks.\n
Kommandojoones k\u00e4skude t\u00e4itmisel on suured numbrid visuaalselt esitatud, n\u00e4iteks numbrit 100000000 kuvades lisatakse ' (100 miljonit)'.\n
SQL-is on lisatud s\u00fcntaks, kus l\u00fchendatud tabelite ja v\u00e4ljendite nimede m\u00e4\u00e4ramine on v\u00f5imalik enne nende viidatud v\u00e4\u00e4rtusi (selle asemel, et kasutada s\u00fcntaksit 'v\u00e4ljend AS nimetus'): SELECT e1: some_long_and_winding_expression, e2: t2.a_column_name FROM t1: long_schema.some_long_table_name, t2: short_s.tbl;\n
K\u00e4skluses 'SELECT' on rakendatud 'RENAME' operatsiooni toetus, et \u00fcmber nimetada v\u00e4lju, mis kuvatakse v\u00e4ljendi '*' n\u00e4idates: SELECT * RENAME (col1 AS new_col1) FROM integers;\n
K\u00e4skluses 'SELECT' on lubatud kasutamine operatsioonide 'LIKE' ja 'SIMILAR TO' kaudu, kui kasutatakse '*': SELECT * LIKE 'val%' FROM key_val;\n
Pseudojuhuslike arvude genereerimise kvaliteeti on parandatud.\n
P\u00e4ringute optimeerijat on moderniseeritud. TPC-H SF100 testi l\u00e4bimise efektiivsus on suurenenud 13%.\n
Pakutud on uus C-sarnane API t\u00e4iustuste arendamiseks, mida saab n\u00e4iteks kasutada uute kogumite v\u00f5i tabelifunktsioonide loomisel.\n
Lisatud on toetus standardse C-teegiga Musl s\u00fcsteemidele. <\/ul>\n