Sortie de la base de données SQLite 3.32. Le projet DuckDB développe une variante de SQLite pour les requêtes analytiques

Publié la sortie SQLite 3.32.0, une base de données légère sous forme de bibliothèque intégrable. Le code SQLite est distribué dans le domaine public, c'est-à-dire qu'il peut être utilisé sans restrictions et gratuitement à des fins diverses. Le soutien financier des développeurs de SQLite est assuré par un consortium spécialement créé, comprenant des entreprises telles qu'Adobe, Oracle, Mozilla, Bentley et Bloomberg.

Principales modifications:

• l'opérateur de séquence optionnelle approximatif une variante de la commande ANALYZE, qui permet dans de très grandes bases de données de se contenter d'une collecte partielle de statistiques, sans numérisation complète des index. La limite du nombre d'enregistrements lors de la numérisation d'un seul index est déterminée par une nouvelle directive «PRAGMA analysis_limit«.
• Ajout d'une nouvelle table virtuelle «bytecode«, qui fournit des informations sur le bytecode des expressions prédéfinies (prepared statement).
• Ajout d'un niveau VFS checksum, ajoutant des checksums de 8 octets à la fin de chaque page de données dans la base de données et les vérifiant à chaque lecture de la base de données. Ce niveau permet d'identifier les corruptions de la base de données résultant de distorsions aléatoires de bits dans les périphériques de stockage.
• Ajout d'une nouvelle fonction SQL iif(X,Y,Z), retournant la valeur Y si l'expression X est vraie, ou Z sinon.
• Dans les expressions INSERT et UPDATE, le utilisons liage des types de colonnes (column affinity) est désormais effectué avant l'évaluation des conditions dans le bloc CHECK.
• La limite du nombre de paramètres a été augmentée de 999 à 32766.
• Ajout d'une extension Séquence de collation UINT avec mise en œuvre du tri des séquences prenant en compte les entiers dans le texte afin de trier ce texte dans l'ordre numérique.
• Dans l'interface de ligne de commande, la commande «.import» a été améliorée avec les options «—csv», «—ascii» et «—skip». Dans la commande «.dump», il est désormais possible d'utiliser plusieurs modèles LIKE avec une fusion de toutes les tables correspondant aux masques spécifiés. La commande «.oom» a été ajoutée pour les compilations de débogage. Les commandes «.excel», «.output» et «.once» ont été complétées par l'option «—bom». L'option «—schema» a été ajoutée à la commande «.filectrl».
• L'expression spécifiée avec l'opérateur LIKE ESCAPE redéfinit désormais les caractères génériques, se conformant au comportement de PostgreSQL.

On peut également noter le développement d'un nouveau SGBD DuckDB, qui développe une version de SQLite optimisée pour l'exécution de requêtes analytiques.
En plus du code shell de SQLite, le projet utilise un parseur extrait de PostgreSQL, un composant Date Math de MonetDB, sa propre implémentation des fonctions de fenêtre (basée sur l'algorithme Segment Tree Aggregation), un moteur d'exécution de requêtes vectorisé (basé sur l'algorithme Hyper-Pipelining Query Execution), un gestionnaire d'expressions régulières basé sur la bibliothèque RE2, un optimiseur de requêtes propre et un mécanisme de contrôle de concurrence multi-version (Multi-Version Concurrency Control).
Le code du projet est distribué sous licence MIT. Le développement est encore à un stade la création de versions expérimentales.

Source : opennet.ru