SQLite andmebaasi versioon 3.42 ja DuckDB 0.8.0. CG/SQL koos SQLite hulgiprotseduuride rakendamisega.

Avaldatud on SQLite 3.42, kergekaaluline andmebaasitarkvara, mis on kujundatud kui ühendatav teek. SQLite kood on jagatud avaliku omandi (public domain) alusel, st seda saab kasutada piiranguteta ja tasuta igasugustel eesmärkidel. SQLite arendajate rahastamist toetab spetsiaalselt loodud konsortsium, kuhu kuuluvad sellised ettevõtted nagu Adobe, Oracle, Mozilla, Bentley ja Bloomberg.

Peamised muudatused:

• FTS5 täisteksti indeksite jaoks on rakendatud käsk secure-delete, mis teostab täieliku puhastamise pärast kustutamist jäänud andmetest.
• JSON formaadi andmete töötlemise funktsioonides on rakendatud JSON5 laienduste tugi.
• Küsimuste ajakava on parendatud. Vaikimisi on sisse lülitatud optimeerimine "count-of-view". Alampäringutes on välistatud kasutamata veergude töötlemine. Push-down optimeerimise rakendust on parendatud.
• Käskude rea liidesesse on lisatud valik "—unsafe-testing", mis võimaldab kasutada mõningaid ohtlikke käske, nagu " .testctrl", mida kasutatakse testimise käigus. Turvarežiimis ("—safe") on lubatud käsud " .log on" ja " .log off". Lisatud on eraldaja "—", mille järel keelatakse argumentide valiku töötlemine. Lisatud on parameetrid ":inf" ja ":nan", mis on seotud väärtustega lõpmatus ja NaN.
• Rakenduse poolsetes SQL-funktsioonide nimedes on lubatud ristumine võtmesõnadega CROSS, FULL, INNER, LEFT, NATURAL, OUTER ja RIGHT.
• PRAGMA integrity_check'i funktsionaalsust on laiendatud. Lisatud on kontroll, et veergudes, millel on tingimus NOT NULL, võib esineda NaN väärtus. Veateadete informatiivsust on parendatud.
• Sessioni lisandis on lubatud tabellide ROWID muutuste interceptimine.
• Aja ja kuupäeva töötlemise funktsioonidesse on lisatud modifikaator "subsec" sekundiosade kasutamiseks.
• JSON-massiivide ja objektide rekursioonide sügavus on vaikimisi vähendatud 2000-lt 1000-le.

Lisaks on välja antud DuckDB 0.8.0, mis on arendatud SQLite'i versioon, millel on laienenud võimalused ja optimeerimised analüütiliste päringute täitmiseks, katab märkimisväärse osa salvestatud andmetest, näiteks tuvastades kogu tabelite sisu agregatsiooni või ühendades mitu suurt tabelit. Pakutakse laiendatud SQL keele dialekti, mis sisaldab täiendavaid võimalusi väga keerukate ja pikaajaliste päringute töötlemiseks, toetab keerulisi tüüpe (massive, struktuurid, ühendused), võimaldab mitme päringu samaaegset täitmist ja päringute täitmist otse CSV, JSON ja Parquet formaadisfailidest. Toetatakse andmete importimist PostgreSQL andmebaasidest.

Lisaks SQLite kestakoodile kasutab projekt eraldi teeki eraldatud PostgreSQL-i parserit, MonetDB Date Math komponenti, enda rakendust aknafunktsioonide jaoks (Segment Tree Aggregation algoritmi põhjal), RE2 teegi põhjal põhinevat regulaaravaldiste töötlejat, enda päringute optimeerijat, MVCC-mehhanismi samaaegse töö juhtimiseks (Multi-Version Concurrency Control) ning vektoreeritud päringute täitmise mootori Hyper-Pipelining Query Execution algoritmi põhjal, võimaldades ühe operatsiooni käigus töödelda suuri väärtuste kogumeid. Projekti kood on litsentseeritud MIT litsentsi alusel.

Uues DuckDB versioonis:

• Lisatud uued väljendid „PIVOT“ ja „UNPIVOT“ ridade muutmiseks veergudeks ja vastupidi.
• Parandatud on paralleelsust andmete importimisel ja eksportimisel. Vaikimisi rakendatakse CSV-formaatidest failide lugemist mitmes keerus ja mitme keerulise kirjutamise korral Parquet, CSV ja JSON formaatide kasutamisel.
• Lisatud operaator „**“ failiteede määramisel kataloogide rekursiivseks läbimiseks (näiteks, FROM „‘data/glob/crawl/stackoverflow/**/*.csv’;“).
• Lisatud tugi ühendamise (JOIN) operatsioonidele ajarealise andmete puhul (parameetrite väärtuste lõiked määratud aja jooksul), kus ühendamise kriteeriumiks on mitte täpne, vaid umbkaudne vaste aja valikuväljas (näiteks saab ühendada kirjeid, mille ajavahemik erineb mitte rohkem kui 1 minut).
• Teostati andmebaasi metaandmete viivitatud laadimine, mis kiirendas DBMS-i käivitamist kümneid kordi.
• Lisatud tugi kasutajafunktsioonide ühendamiseks Pythonis.
• Lisatud tugi ADBC (Arrow Database Connectivity) API-le andmete edastamiseks Apache Arrow'i abil.
• Tehtud sidumine Swift keele koodiga integreerimiseks.
• Muudetud jagamisoperaatori („/”) käitumist, mis nüüd vaikimisi teostab arvutusi ujuva koma formaatides, mitte täisarvude operatsioonides. Täisarvude jagamiseks on soovitatud uus operaator „//”. Vana käitumist saab tagastada seadistusega „SET integer_division=true;”.
• Null väärtuste sorteerimise meetod on muudetud, nii et nüüd kuvatakse NULL-väärtused nimekirja lõpus, mitte alguses. Vanale käitumisele saab tagasi minna seades "SET default_null_order='nulls_first';".

Lisaks võib märkida Facebooki arendatavat projekti CG/SQL, mis pakub koodi generaatorit salvestatud protseduuride kasutamiseks SQLite'iga. CG/SQL võimaldab luua salvestatud protseduure spetsiaalses T-SQL (Transact-SQL) dialektis, mis võimaldab kasutada C standardteeki funktsioone ja pääseda SQLite andmetele. Loomise järel kompileeritud salvestatud protseduurid genereeritakse C keeles, kasutades SQLite C API-d määratud toimingute täitmiseks ja keerukate päringute töötlemiseks. Kompileeritud salvestatud protseduurid saavad liituda C, Java ja Objective-C programmidega. Projekti kood on kirjutatud C keeles ja jagatakse MIT-licentsi alusel.

Allikas: opennet.ru