{"id":121901,"date":"2025-02-13T14:22:07","date_gmt":"2025-02-13T12:22:07","guid":{"rendered":"https:\/\/prohoster.info\/blog\/novosti-interneta\/reliz-subd-duckdb-1-2-0"},"modified":"2025-02-13T14:22:07","modified_gmt":"2025-02-13T12:22:07","slug":"reliz-subd-duckdb-1-2-0","status":"publish","type":"post","link":"https:\/\/prohoster.info\/no\/blog\/news\/reliz-subd-duckdb-1-2-0","title":{"rendered":"Utgivelse av DBMS DuckDB 1.2.0","gt_translate_keys":[{"key":"rendered","format":"text"}]},"content":{"rendered":"
Utgitt er versjon 1.2.0 av databasesystemet DuckDB, som er designet for \u00e5 utf\u00f8re analyser og har konsepter som ligner p\u00e5 SQLite. DuckDB kombinerer egenskapene til SQLite, som kompakthet, tilkobling som en innebygd bibliotek, lagring av databasen i \u00e9n fil, og en CLI-grensesnitt, med muligheter og optimaliseringer for \u00e5 utf\u00f8re sp\u00f8rringer p\u00e5 analyser, som dekker en betydelig del av de lagrede dataene, for eksempel ved \u00e5 akkumulerer alt innholdet i tabeller eller sl\u00e5 sammen flere store tabeller. Prosjektkoden er skrevet i C++ og distribueres under MIT-lisensen. <\/p>\n
DuckDB tilbyr en utvidet dialekt av SQL, som inkluderer ekstra funksjoner for \u00e5 h\u00e5ndtere sv\u00e6rt komplekse og langvarige sp\u00f8rringer. Det er mulig \u00e5 bruke avanserte datatyper (array, strukturer, unioner), samt \u00e5 utf\u00f8re vilk\u00e5rlige og innkapslede korrelerte under-sp\u00f8rringer. Samtidig kj\u00f8ring av flere sp\u00f8rringer st\u00f8ttes, sammen med direkte sp\u00f8rring fra filer i CSV- og Parquet-formater. St\u00f8tte for import fra PostgreSQL-databaser er ogs\u00e5 tilgjengelig. <\/p>\n
Prosjektet bruker et skall fra SQLite, parser fra PostgreSQL, komponenten Date Math fra MonetDB, sin egen implementering av vindusfunksjoner (basert p\u00e5 Segment Tree Aggregation-algoritmen), en regul\u00e6r uttrykksh\u00e5ndterer basert p\u00e5 RE2-biblioteket, egne sp\u00f8rringsoptimalisatorer, MVCC-mekanisme for h\u00e5ndtering av samtidige oppgaver (Multi-Version Concurrency Control), samt en vektorisert sp\u00f8rringsmotor basert p\u00e5 Hyper-Pipelining Query Execution-algoritmen, som gj\u00f8r det mulig \u00e5 behandle store sett med verdier i \u00e9n operasjon. <\/p>\n
I den nye versjonen: <\/p>\n
\n
Implementert st\u00f8tte for nye komprimeringsmetoder som ikke er aktivert som standard for \u00e5 bevare kompatibiliteten til DB-filer med eldre versjoner av DuckDB. For \u00e5 bruke det forbedrede formatet for DB-filer, er det lagt til muligheten for \u00e5 knytte DB-en til versjonsnummeret \u2014 n\u00e5r du \u00e5pner filen med parameteren \u00abSTORAGE_VERSION\u00bb kan du n\u00e5 angi den minste st\u00f8ttede DB-versjonen (\u00abATTACH 'file.db' (STORAGE_VERSION 'v1.2.0');\u00bb). For \u00e5 konvertere det nye formatet til det gamle kan du bruke SQL-kommandoen COPY, for eksempel: ATTACH 'file1.db'; ATTACH 'converted_file.db' (STORAGE_VERSION 'v1.0.0'); COPY FROM DATABASE file1 TO converted_file;\n
St\u00f8tte for SQL-kommandoen \u00abALTER TABLE \u2026 ADD PRIMARY KEY\u00bb er lagt til for \u00e5 legge til prim\u00e6rn\u00f8kkel i en eksisterende tabell.\n
Begrensningen som tidligere forhindret gjeninntak av identifikatorer, for hvilke det finnes unikhetsindeksering, hvis disse identifikatorene var blitt slettet i den n\u00e5v\u00e6rende transaksjonen, er fjernet. For eksempel, f\u00f8lgende SQL-kode f\u00f8rer n\u00e5 ikke til en feil: CREATE TABLE students (id INTEGER PRIMARY KEY, name VARCHAR); INSERT INTO students VALUES (1, 'John Doe'); BEGIN; DELETE FROM students WHERE id = 1; INSERT INTO students VALUES (1, 'Jane Doe');\n
St\u00f8tte for innlasting av CSV-filer i kodinger Latin-1 og UTF-16 er lagt til (tidligere ble kun UTF-8 st\u00f8ttet). FROM read_csv('cities-latin-1.csv', encoding = 'latin-1');\n
St\u00f8tte for bruk av flermengde separatorer (opp til 4 byte) i CSV-filer er lagt til, noe som muliggj\u00f8r bruk av emoji som kolonne-separatorer. a\ud83d\udc19b hello\ud83d\udc19world FROM read_csv('example.dsv', sep = '\ud83d\udc19');\n
Streng parsemodus for CSV-filer er aktivert som standard ('strict_mode = true'), noe som sjekker at formatet overholder spesifikasjonen RFC 4180. I strengt modus er det kun tillatt \u00e5 bruke ett tegn for strengseparator, hvilket vil f\u00f8re til en feil ved fors\u00f8k p\u00e5 \u00e5 analysere filer der det ikke kun brukes linjeskift, men ogs\u00e5 vognretur-tegn ('\r\n') for \u00e5 skille rader.\n
Parseren for CSV anvender en ny algoritme til bestemmelse af nye linjer, som underst\u00f8tter parallelisering af operationer. Anvendelsen af den nye algoritme har \u00f8get hastigheden af CSV-parsingen med cirka 15%.\n
Begr\u00e6nsningen p\u00e5 st\u00f8rrelsen af en linje i CSV-filer er fjernet (tidligere m\u00e5tte en linje ikke overstige 8 MB).\n
N\u00e5r der eksporteres data i Parquet-format, er der implementeret underst\u00f8ttelse af hashes (ordb\u00f8ger) og indekser baseret p\u00e5 Bloom-filter. Der er implementeret en komprimeringsmetode, DELTA_BINARY_PACKED, der v\u00e6sentligt reducerer st\u00f8rrelsen af Parquet-filer.\n
En sikker modus har blitt lagt til i kommandolinjegrensesnittet, aktivert via alternativet '-safe' eller kommandoen '.safe_mode'. I denne modusen er tilgangen kun tillatt til den opprinnelig spesifiserte DB-filen, og fors\u00f8k p\u00e5 \u00e5 \u00e5pne andre filer vil generere en feil.\n
Autocompletion af input i kommandolinjegr\u00e6nsefladen er forbedret. Koden til autocompletion er blevet omdannet til at bruge PEG (Parsing Expression Grammar).\n
N\u00e5r du utf\u00f8rer kommandoer i kommandolinjegrensesnittet, er det implementert en visuell fremstilling av store tall, for eksempel n\u00e5r tallet 100000000 vises, vil det i tillegg bli lagt til \u00ab(100 millioner).\u00bb\n
I SQL er det lagt til st\u00f8tte for syntaks der forkortede navn p\u00e5 tabeller og uttrykk kan angis f\u00f8r verdiene de refererer til (i stedet for \u00e5 bruke syntaksen \u00abuttrykk AS navn\u00bb): SELECT e1: some_long_and_winding_expression, e2: t2.a_column_name FROM t1: long_schema.some_long_table_name, t2: short_s.tbl;\n
I \u00abSELECT\u00bb-kommandoen er det implementert st\u00f8tte for \u00abRENAME\u00bb-operasjonen for \u00e5 omd\u00f8pe feltene som vises n\u00e5r uttrykket \u00ab*\u00bb angis: SELECT * RENAME (col1 AS new_col1) FROM integers;\n
I \u00abSELECT\u00bb-kommandoen er bruk av operasjonene \u00abLIKE\u00bb og \u00abSIMILAR TO\u00bb tillatt n\u00e5r man henter ut med \u00ab*\u00bb: SELECT * LIKE \u2018val%\u2019 FROM key_val;\n
Kvaliteten af genereringen af pseudotilf\u00e6ldige tal er blevet forbedret.\n
Optimeringsv\u00e6rkt\u00f8jet til foresp\u00f8rgsler er blevet moderniseret. Ydelsen ved TPC-H SF100 testen er steget med 13%.\n
Det er foresl\u00e5tt en ny C-liknende API for utvikling av tillegg, som kan brukes for eksempel for \u00e5 lage nye aggregat- eller tabellfunksjoner.\n
St\u00f8tte for systemer med standard C-biblioteket Musl er lagt til. <\/ul>\n