Sortie de la base de données PostgreSQL 19

Après un an de développement, une nouvelle branche stable de la base de données PostgreSQL 19 est publiée. Les mises à jour pour cette nouvelle branche seront publiées pendant cinq ans, jusqu'en novembre 2031. Le support de PostgreSQL 14.x, la plus ancienne des branches supportées, prend fin ce mois-ci. La publication a été retardée de près de deux mois par rapport à la date initialement prévue en raison d'un flux inhabituel de messages d'erreurs, identifiés grâce à l'analyse de code à l'aide d'outils d'IA.

Les principales nouveautés :

  • L'implémentation du sous-système d'entrée/sortie asynchrone a été améliorée, permettant d'augmenter la bande passante d'entrée/sortie et d'éliminer les latences. Dans l'implémentation universelle AIO (io_method=worker), il est désormais possible d'ajuster automatiquement le nombre de processus de gestion d'entrée/sortie en fonction de la charge. Des paramètres tels que io_min_workers, io_max_workers, io_worker_idle_timeout et io_worker_launch_interval ont été proposés pour déterminer le nombre minimum et maximum de processus de gestion, ainsi que le temps d'inactivité avant terminaison et le délai avant le lancement des processus.

    En outre, le planificateur de prélecture utilisé dans AIO a été optimisé pour améliorer les performances des requêtes nécessitant le chargement de grandes quantités de données depuis le disque. Cette optimisation est réalisée grâce à une détermination adaptative du nombre acceptable d'opérations de prélecture en fonction de la nature et de la taille de la requête (par exemple, pour les opérations de scan de grandes tables et index, une plus grande quantité de données est désormais préchargée depuis le disque). Pour analyser l'exécution des opérations d'entrée/sortie en mode asynchrone, l'option « IO » a été ajoutée à la commande « EXPLAIN ANALYZE ».

  • Des extensions pg_plan_advice et pg_stash_advice ont été ajoutées pour transmettre au planificateur de requêtes des paramètres d'indices dans un mini-langage « plan advice », permettant d'influencer le choix des plans d'exécution, d'enregistrer les plans sélectionnés et d'expérimenter différents plans. Pour obtenir la liste des paramètres sélectionnés par le planificateur lors de l'exécution d'une requête, une option « PLAN_ADVICE » a été ajoutée à la commande EXPLAIN, et pour définir ses propres paramètres avant l'exécution d'une requête, on peut utiliser l'expression « SET pg_plan_advice.advice = ‘chaîne avec la liste des paramètres' ». L'extension pg_stash_advice complète pg_plan_advice avec des capacités pour lier des paramètres à des identifiants de requêtes, afin de ne pas avoir à les ajouter avant chaque requête. EXPLAIN (COSTS OFF, PLAN_ADVICE) SELECT * FROM join_fact f JOIN join_dim d ON f.dim_id = d.id; … Conseils de plan générés : JOIN_ORDER(f d) HASH_JOIN(d) SEQ_SCAN(f d) NO_GATHER(f d) SET pg_plan_advice.advice = ‘JOIN_ORDER(f d) NO_GATHER(f d)’;
  • Le processus de démarrage automatique du nettoyage (autovacuum) a été amélioré pour permettre l'utilisation simultanée de plusieurs agents lors du nettoyage des index. Le nombre d'agents est configurable via l'option autovacuum_max_parallel_workers. De nouvelles options autovacuum_vacuum_score_weight, autovacuum_vacuum_insert_score_weight et autovacuum_analyze_score_weight ont également été ajoutées pour définir la priorité du nettoyage des tables.
  • Une nouvelle stratégie de nettoyage a été mise en œuvre, permettant de réduire la charge de travail future en mettant à jour la carte de visibilité des pages lors du balayage des tables lors de l'exécution de requêtes SELECT, sans attendre le lancement de la commande VACUUM.
  • Une nouvelle commande SQL « REPACK » a été ajoutée pour reconstruire les tables avec moins de frais généraux. La commande REPACK réécrit intégralement le contenu de la table dans un nouveau fichier sur disque, permettant ainsi de restituer à l'OS l'espace disque occupé par des blocs inutilisés. Contrairement à la commande « VACUUM FULL », qui impose un verrouillage strict lors de réécriture, la commande REPACK offre une option « CONCURRENTLY », permettant l'utilisation simultanée de la table par d'autres transactions pendant le réemballage. Contrairement à l'extension pg_repack, REPACK est considérablement plus rapide, car elle n'attache pas de déclencheurs supplémentaires à la table, mais ne prend pas en charge le traitement des tables entièrement partitionnées.
  • La performance des opérations INSERT a été augmentée jusqu'à deux fois pour les tables où des vérifications des enregistrements par des clés étrangères (Foreign Key) sont effectuées. Cette accélération a été réalisée grâce à l'utilisation de l'index pour vérifier la clé étrangère, ce qui a permis d'éviter l'exécution d'une requête interne gourmande en ressources à la table.
  • Le planificateur de requêtes a intégré la reconnaissance des opérations Anti-Join (définition des lignes de la première table pour lesquelles il n'y a pas de correspondances dans la deuxième table) dans les requêtes complexes avec «LEFT JOIN» et les requêtes avec les expressions «NOT IN» pour activer des optimisations spécifiques. L'application du tri incrémental a été élargie. Une optimisation «eager aggregation» a été ajoutée, déplaçant les opérations d'agrégation à l'étape antérieure à la fusion des tables pour réduire le nombre de lignes traitées durant cette fusion. L'exécution parallèle des opérations de scan séquentiel (parallel seq scan) a été accélérée. Les constructions «IS DISTINCT FROM» et «IS NOT DISTINCT FROM» ont été réduites à des expressions avec les opérateurs «» et «=», si les deux opérandes ne peuvent pas prendre la valeur NULL.
  • L'efficacité de la livraison des notifications via la commande NOTIFY dans des configurations avec plusieurs canaux de notification a été améliorée. Une carte des canaux est désormais conservée dans la mémoire partagée, permettant d'adresser uniquement les backends abonnés au canal donné.
  • La commande «INSERT» a été étendue pour supporter l'expression ON CONFLICT DO SELECT … RETURNING, retournant des enregistrements en cas d'impossibilité d'ajout par «INSERT», en plus des expressions «ON CONFLICT DO NOTHING/UPDATE», qui ignorent silencieusement les conflits lors de l'insertion ou réalisent une mise à jour au lieu de l'insertion.
  • La commande COPY a été étendue pour supporter la sortie de données au format JSON.
  • Le langage SQL/JSON a été enrichi par l'ajout de méthodes de traitement de chaînes lower(), upper(), replace(), split_part() et btrim().
  • Les fonctions de fenêtre lead(), lag(), first_value(), last_value() et nth_value() ont été élargies pour inclure l'expression «IGNORE NULLS» afin de sauter les valeurs NULL.
  • La commande «WAIT FOR LSN» a été ajoutée, qui, lors de la réplication asynchrone, permet de suspendre la requête SELECT sur le serveur répliqué jusqu'à ce que les modifications depuis le serveur principal soient appliquées pour éviter l'affichage de données obsolètes. de serveurs, correspondant à une certaine position LSN (Log Sequence Number) dans le journal WAL.
  • La fonction random() prend en charge les types date et timestamp pour générer des dates et heures aléatoires dans une plage donnée.
  • Ajout de la possibilité de créer des fonctions en PL/Python pour les déclencheurs d'événements.
  • Ajouté pour accepter les connexions réseau. serveur Ajout de la prise en charge de l'extension TLS SNI (Server Name Indication) pour utiliser des certificats TLS liés aux noms d'hôtes auxquels le client se connecte lors de l'établissement d'une connexion chiffrée via une seule adresse IP.
  • Le paramètre password_expiration_warning_threshold a été ajouté au fichier de configuration postgresql.conf, permettant de configurer l'affichage d'un avertissement concernant l'expiration imminente du mot de passe.
  • L'affichage des avertissements lors de l'utilisation de l'algorithme MD5 pour l'authentification, désormais obsolète, est activé par défaut. Pour désactiver ces avertissements, le paramètre md5_password_warnings a été ajouté.
  • Ajout des vues : «pg_stat_lock» pour voir les statistiques accumulées concernant les verrous en fonction des types de verrous ; «pg_stat_recovery» pour obtenir des informations sur l'état des opérations de récupération ; «pg_stat_autovacuum_scores» pour déterminer la priorité du traitement des tables dans autovacuum. Une colonne «stats_reset» a été ajoutée à de nombreuses vues système, indiquant le dernier temps de réinitialisation des compteurs. Dans les vues «pg_stat_progress_vacuum» et «pg_stat_progress_analyze», une colonne «started_by» montre l'initiateur de l'opération. Dans la vue pg_stat_progress_vacuum, une colonne «mode» indiquant le mode de nettoyage appliqué a été ajoutée.
  • Ajout de la possibilité de spécifier les niveaux minimaux de verbosité des logs (log_min_messages) en fonction des types de processus.
  • Des informations sur la taille des pages complètes écrites dans le journal WAL ont été ajoutées aux statistiques affichées après les opérations VACUUM et ANALYZE, ainsi qu'à la vue «pg_stat_wal», facilitant l'analyse des raisons de l'augmentation excessive du journal WAL (il est possible de comprendre si cette augmentation est liée à l'utilisation du paramètre full_page_writes).
  • Le mécanisme de réplication logique prend en charge la réplication des valeurs de séquences (SEQUENCE), qui peuvent être publiées par la commande «CREATE PUBLICATION» en utilisant l'expression «FOR ALL SEQUENCES».
  • Ajout de la syntaxe «CREATE PUBLICATION … EXCEPT» pour la réplication de toutes les tables sauf celles explicitement mentionnées.
  • Une nouvelle commande «CREATE SUBSCRIPTION ... SERVER» a été ajoutée, permettant de créer des abonnements de réplication logique en obtenant les paramètres de connexion d'un serveur externe.
  • Il est désormais possible d'activer la réplication logique à la volée sans redémarrer le serveur, même si le paramètre «wal_level» est défini sur «replica» au lieu de «logical». Pour déterminer le véritable niveau de journalisation effectif, qui n'est pas lié au paramètre wal_level dans le fichier de configuration, un paramètre «effective_wal_level» a été ajouté.
  • Dans le mécanisme de connexion aux tables externes Foreign Data Wrapper (postgres_fdw), des fonctionnalités pour passer des opérations sur des tableaux vers le serveur distant ont été mises en œuvre, et une option import_stats pour importer des statistiques pour les tables depuis un serveur externe lors de l'exécution de la commande ANALYZE a été ajoutée pour améliorer l'efficacité de la planification locale d'exécution des requêtes.
  • La compilation JIT est désactivée par défaut car elle n'apporte un gain de performance significatif que pour les requêtes analytiques lourdes, tandis que dans des charges de travail OLTP normales, elle peut entraîner une baisse de performance due à des erreurs dans la prédiction des ressources nécessaires pour exécuter les requêtes.
  • Pour améliorer les performances de compression et de décompression des tables TOAST, le paramètre «default_toast_compression» est défini sur «lz4».
  • Le support de l'authentification via le protocole RADIUS a été supprimé.
  • Dans la commande «vacuumdb —analyze-only», l'analyse des tables partitionnées est activée par défaut.

En raison de problèmes identifiés lors de la phase finale de test, certaines fonctionnalités présentées dans la version bêta n'ont pas été incluses dans la version finale, telles que la syntaxe «GROUP BY ALL», le support des formats de sortie non textuels dans pg_dumpall, SQL/PGQ pour les requêtes graphiques, l'activation à la volée du support des sommes de contrôle sans redémarrer ni réinitialiser, l'expression «FOR PORTION OF» dans UPDATE et DELETE, les expressions «ALTER TABLE … MERGE PARTITIONS» et «ALTER TABLE … SPLIT PARTITIONS» pour la réorganisation des tables partitionnées, la définition de LC_COLLATE sur «C» pour le processus postmaster et les nouvelles fonctions pg_get_role_ddl(), pg_get_tablespace_ddl() et pg_get_database_ddl(). La nouvelle est sponsorisée par la société Hi-Squared, développeur de la plateforme Low Code XSQUARE sur PostgreSQL (publicité, LLC «Hi-Squared», INN 7718990614).

Source : opennet.ru

Acheter un hébergement fiable pour les sites avec protection DDoS, serveurs VPS VDS 🔥 Acheter un hébergement fiable pour les sites avec protection DDoS, serveurs VPS VDS | ProHoster