{"id":121901,"date":"2025-02-13T14:22:07","date_gmt":"2025-02-13T12:22:07","guid":{"rendered":"https:\/\/prohoster.info\/blog\/novosti-interneta\/reliz-subd-duckdb-1-2-0"},"modified":"2025-02-13T14:22:07","modified_gmt":"2025-02-13T12:22:07","slug":"reliz-subd-duckdb-1-2-0","status":"publish","type":"post","link":"https:\/\/prohoster.info\/nl\/blog\/news\/reliz-subd-duckdb-1-2-0","title":{"rendered":"Release van de database DuckDB 1.2.0","gt_translate_keys":[{"key":"rendered","format":"text"}]},"content":{"rendered":"
De release van de DuckDB-databaseversie 1.2.0 is gepubliceerd, die gericht is op analytische query's en conceptueel lijkt op SQLite. DuckDB combineert de eigenschappen van SQLite, zoals compactheid, integratie als een inbeddingsbibliotheek, opslag van de database in \u00e9\u00e9n bestand en een CLI-interface, met mogelijkheden en optimalisaties voor het uitvoeren van analytische query's, die een aanzienlijk deel van de opgeslagen gegevens bestrijken, bijvoorbeeld het aggregeren van de volledige inhoud van tabellen of het samenvoegen van meerdere grote tabellen. De code van het project is geschreven in C++ en wordt verspreid onder de MIT-licentie. <\/p>\n
DuckDB biedt een uitgebreide SQL-dialect, inclusief extra mogelijkheden voor het verwerken van zeer complexe en langdurige queries. Het is mogelijk om complexe types (arrays, structuren, unions) te gebruiken, evenals het uitvoeren van willekeurige en geneste correlerende subqueries. Gelijktijdige uitvoering van meerdere queries wordt ondersteund, evenals het direct uitvoeren van queries vanuit bestanden in CSV- en Parquet-formaten. Ondersteuning voor import vanuit PostgreSQL-databases is beschikbaar. <\/p>\n
Het project maakt gebruik van een shell van SQLite, een parser van PostgreSQL, een Date Math-component van MonetDB, een eigen implementatie van venstervariabelen (gebaseerd op het Segment Tree Aggregation-algoritme), een reguliere expressie-verwerker op basis van de RE2-bibliotheek, een eigen query-optimalisator, een MVCC-mechanisme voor het beheer van gelijktijdige taakuitvoering (Multi-Version Concurrency Control), en ook een gevectoriseerde query-uitvoeringsengine op basis van het Hyper-Pipelining Query Execution-algoritme, waarmee grote sets waarden in \u00e9\u00e9n operatie tegelijk kunnen worden verwerkt. <\/p>\n
In de nieuwe versie: <\/p>\n
\n
De ondersteuning voor nieuwe compressiemethoden is ge\u00efmplementeerd, die standaard zijn uitgeschakeld om de compatibiliteit van databasebestanden met eerdere versies van DuckDB te behouden. Voor het gebruik van het verbeterde databaseformaat is de mogelijkheid ge\u00efntroduceerd om de database aan een versienummer te koppelen \u2014 bij het openen van een bestand met de parameter \u00abSTORAGE_VERSION\u00bb kan nu de minimaal ondersteunde versie van de database worden opgegeven (\u00abATTACH 'file.db' (STORAGE_VERSION 'v1.2.0');\u00bb). De SQL-opdracht COPY kan worden gebruikt om het nieuwe formaat naar het oude om te zetten, bijvoorbeeld: ATTACH 'file1.db'; ATTACH 'converted_file.db' (STORAGE_VERSION 'v1.0.0'); COPY FROM DATABASE file1 TO converted_file;\n
Ondersteuning toegevoegd voor de SQL-opdracht \u00abALTER TABLE \u2026 ADD PRIMARY KEY\u00bb om een primaire sleutel toe te voegen aan een bestaande tabel.\n
De beperking die het herhaaldelijk toevoegen van identificeerders met een unieke index verbood, is verwijderd, als die identificeerders binnen de huidige transactie zijn verwijderd. Bijvoorbeeld, de onderstaande SQL-code genereert nu geen fout: CREATE TABLE students (id INTEGER PRIMARY KEY, name VARCHAR); INSERT INTO students VALUES (1, 'John Doe'); BEGIN; DELETE FROM students WHERE id = 1; INSERT INTO students VALUES (1, 'Jane Doe');\n
Ondersteuning toegevoegd voor het laden van CSV-bestanden in de coderingen Latin-1 en UTF-16 (voorheen werd alleen UTF-8-encoding ondersteund). FROM read_csv('cities-latin-1.csv', encoding = 'latin-1');\n
Ondersteuning toegevoegd voor het gebruik van multibyte scheidingstekens (tot 4 bytes) in CSV-bestanden, waardoor het mogelijk is om emoji's als kolomscheidingstekens op te geven. a\ud83e\udd84b hello\ud83e\udd84world FROM read_csv('example.dsv', sep = '\ud83e\udd84');\n
Strikte parsingmodus voor CSV-bestanden is standaard ingeschakeld (\u00abstrict_mode = true\u00bb), wat controleert op de indeling volgens de specificatie RFC 4180. In strikte modus is alleen \u00e9\u00e9n teken toegestaan voor het scheiden van regels, wat tot een fout leidt bij het proberen te parseren van bestanden waarbij niet alleen het newline-teken, maar ook het carriage return-teken (\u00ab\r\n\u00bb) wordt gebruikt.\n
De CSV-parser maakt gebruik van een nieuw algoritme voor het bepalen van nieuwe regels, dat parallelle operaties ondersteunt. Het gebruik van het nieuwe algoritme heeft de parsing van CSV-bestanden met ongeveer 15% versneld.\n
De beperking op de grootte van rijen in CSV-bestanden is opgeheven (voorheen mocht een rij niet groter zijn dan 8 MB).\n
Bij het exporteren van gegevens in Parquet-formaat is ondersteuning toegevoegd voor hashes (woordenboeken) en indexen op basis van Bloom-filters. De DELTA_BINARY_PACKED compressiemethode is ge\u00efmplementeerd, waardoor de grootte van Parquet-bestanden aanzienlijk kan worden verkleind.\n
Een veilige modus is toegevoegd aan de opdrachtregelinterface, geactiveerd met de optie \u00ab-safe\u00bb of het commando \u00ab.safe_mode\u00bb. In deze modus is toegang alleen toegestaan tot het oorspronkelijk opgegeven databasebestand, en pogingen om andere bestanden te openen zullen een foutmelding genereren.\n
In de commandoregelinterface is het automatisch aanvullen van invoer verbeterd. De code voor automatisch aanvullen is omgezet naar het gebruik van PEG (Parsing Expression Grammar).\n
Bij het uitvoeren van commando's in de opdrachtregelinterface is er een visuele weergave van grote getallen ge\u00efmplementeerd. Bijvoorbeeld, bij het weergeven van het getal 100000000, wordt er bijkomend «(100 miljoen)» toegevoegd.\n
In SQL is ondersteuning toegevoegd voor een syntaxis waarbij afgekorte namen van tabellen en uitdrukkingen v\u00f3\u00f3r de waarden die ze aanduiden kunnen worden vermeld (in plaats van de syntaxis «uitdrukking AS naam»): SELECT e1: some_long_and_winding_expression, e2: t2.a_column_name FROM t1: long_schema.some_long_table_name, t2: short_s.tbl;\n
In de «SELECT»-opdracht is ondersteuning voor de «RENAME»-bewerking ge\u00efmplementeerd om velden te hernoemen die worden weergegeven met de «*»-notatie: SELECT * RENAME (col1 AS new_col1) FROM integers;\n
In de «SELECT»-opdracht is het gebruik van de bewerkingen «LIKE» en «SIMILAR TO» toegestaan bij het weergeven met «*»: SELECT * LIKE ‘val%’ FROM key_val;\n
De kwaliteit van de generatie van pseudo-willekeurige getallen is verbeterd.\n
De query-optimizer is gemoderniseerd. De prestaties tijdens de TPC-H SF100-test zijn met 13% verhoogd.\n
Er is een nieuwe C-achtige API voorgesteld voor de ontwikkeling van extensies, die kan worden gebruikt voor het cre\u00ebren van nieuwe aggregaat- of tabelfuncties.\n
Ondersteuning voor systemen met de standaard C-bibliotheek Musl is toegevoegd. <\/ul>\n