După un an de dezvoltare, a fost publicat un nou branch stabil al SGBD-ului PostgreSQL 19. Actualizările pentru noul branch vor fi lansate timp de cinci ani, până în noiembrie 2031. Suportul pentru PostgreSQL 14.x, cea mai veche dintre versiunile susținute, se încheie în această lună. Lansarea a fost publicată cu aproape două luni mai târziu decât data inițial estimată, din cauza unui flux neobișnuit de mesaje de eroare, identificate prin analiza codului cu ajutorul instrumentelor de AI.
Noutăți principale:
- A fost îmbunătățită implementarea subsistemului de input/output asincron, care permite creșterea lățimii de bandă a procesului de input/output și eliminarea întârzierilor. În implementarea universală AIO (io_method=worker) a fost adăugată capacitatea de a crește sau reduce automat numărul de procese gestionare a input/output-ului în funcție de sarcină. Pentru a defini numărul minim și maxim de procese gestionare, precum și timeout-ul de inactivitate înainte de finalizare și întârzierea înainte de lansarea proceselor, au fost propuse parametrii io_min_workers, io_max_workers, io_worker_idle_timeout și io_worker_launch_interval.
În plus, planificatorul de citire anticipată utilizat în AIO a fost optimizat pentru a îmbunătăți performanța cererilor care necesită încărcarea unui volum mare de date de pe disc. Optimizarea a fost realizată prin determinarea adaptivă a numărului permis de operațiuni de citire anticipată în funcție de natura și dimensiunea cererii (de exemplu, pentru operațiunile de scanare a tabelelor și indicilor mari, acum sunt preîncărcate de pe disc mai multe date). Pentru analiza executării operațiunilor de input/output în mod asincron, a fost adăugată opțiunea „IO” în comanda „EXPLAIN ANALYZE”.
- Au fost adăugate extensiile pg_plan_advice și pg_stash_advice pentru a transmite planificatorului de interogări parametrii-sfaturi în mini-limbajul „plan advice”, permițând influențarea alegerii planurilor de execuție, fixarea planurilor selectate și experimentarea cu diferite planuri. Pentru a obține lista parametrilor selectați de planificator în timpul executării interogării, comenzii EXPLAIN i s-a adăugat opțiunea „PLAN_ADVICE”, iar pentru a seta parametrii proprii înainte de a executa interogarea, se poate folosi expresia „SET pg_plan_advice.advice = ‘șir cu lista de parametri'”. Extensia pg_stash_advice completează pg_plan_advice cu posibilități de legare a parametrilor la identificatorii interogărilor, astfel încât să nu fie necesar să fie adăugați înainte de fiecare interogare. EXPLAIN (COSTS OFF, PLAN_ADVICE) SELECT * FROM join_fact f JOIN join_dim d ON f.dim_id = d.id; … Plan de sfaturi generat: JOIN_ORDER(f d) HASH_JOIN(d) SEQ_SCAN(f d) NO_GATHER(f d) SET pg_plan_advice.advice = ‘JOIN_ORDER(f d) NO_GATHER(f d)’;
- În procesul de activare automată a curățării (autovacuum) a fost adăugată posibilitatea utilizării paralele a mai multor manipulatoare în timpul curățării indexurilor. Numărul de manipulatoare este configurabil prin opțiunea autovacuum_max_parallel_workers. De asemenea, au fost adăugate noi opțiuni autovacuum_vacuum_score_weight, autovacuum_vacuum_insert_score_weight și autovacuum_analyze_score_weight pentru a determina prioritățile de curățare a tabelelor.
- A fost implementată o nouă strategie de curățare, care permite reducerea volumului de muncă în viitor, datorită actualizării hartărilor de vizibilitate ale paginilor în timpul scanării tabelelor în cadrul interogărilor SELECT, fără a aștepta lansarea comenzii VACUUM.
- A fost adăugată o nouă comandă SQL „REPACK” pentru reconstruirea tabelor cu costuri mai reduse. Comanda REPACK rescrie complet tot conținutul tabelului într-un nou fișier pe disc, permițând sistemului de operare să recupereze spațiul pe disc ocupat de blocurile neutilizate. Spre deosebire de comanda „VACUUM FULL”, care impune o blocare rigidă în timpul rescrierii, comanda REPACK are opțiunea „CONCURRENTLY”, ceea ce permite utilizarea tabelului de către alte tranzacții în timpul reapachetării. Spre deosebire de extensia pg_repack, REPACK este semnificativ mai rapid, deoarece nu adaugă triggeruri suplimentare la tabel, dar nu suportă procesarea tabelor complet secționate.
- Performanța operațiunii INSERT a fost îmbunătățită de până la două ori pentru tabelele care efectuează verificări de înregistrări pe cheile externe (Foreign Key). Accelerarea a fost obținută prin utilizarea indexului pentru verificarea cheii externe, ceea ce a permis evitarea unei interogări interne cu resurse mari către tabel.
- Planificatorul de interogări a asigurat recunoașterea operațiunilor Anti-Join (identificarea rândurilor din prima tabelă pentru care nu există potriviri în a doua tabelă) în interogările complexe cu „LEFT JOIN” și în interogările cu expresii „NOT IN” pentru activarea optimizărilor specifice. S-a extins aplicarea sortării incrementale. A fost adăugată optimizarea „eager aggregation”, care mută operațiunile de agregare în stadiul anterior fuziunii tabelelor pentru a reduce numărul de rânduri procesate în timpul fuziunii. S-a accelerat executarea paralelă a operațiunilor de scanare secvențială (parallel seq scan). A fost implementată reducerea constructelor „IS DISTINCT FROM” și „IS NOT DISTINCT FROM” la expresiile cu operatorii „” și „=”, dacă ambele operande nu pot accepta valoarea NULL.
- Eficiența livrării notificărilor prin intermediul comenzii NOTIFY a fost îmbunătățită în configurațiile cu mai multe canale de notificare. În memoria partajată acum este păstrată o hartă a canalelor, care permite adresarea directă doar backend-urilor abonate la canalul specificat.
- Comanda „INSERT” a fost îmbunătățită pentru a suporta expresia ON CONFLICT DO SELECT … RETURNING, care returnează înregistrările, în cazul în care nu pot fi adăugate prin „INSERT”, pe lângă expresiile „ON CONFLICT DO NOTHING/UPDATE”, care ignoră în tăcere conflictele la inserare sau efectuează actualizări în loc de inserții.
- Comanda COPY a fost extinsă pentru a susține ieșirea datelor în format JSON.
- În limbajul SQL/JSON au fost adăugate metodele de procesare a șirurilor lower(), upper(), replace(), split_part() și btrim().
- În funcțiile feronice lead(), lag(), first_value(), last_value() și nth_value() a fost adăugată suportul pentru expresia „IGNORE NULLS” pentru a omite valorile NULL.
- A fost adăugată comanda „WAIT FOR LSN”, care, în cazul replicării asincrone, permite suspendarea interogării SELECT pe serverul replicat până când modificările de pe serverul principal sunt aplicate pentru a preveni afișarea datelor învechite. server, corespunzătoare unei anumite poziții LSN (Log Sequence Number) din jurnalul WAL.
- Funcția random() a fost adăugată suport pentru tipurile date și timestamp pentru generarea de date și ore aleatorii într-un interval specificat.
- A fost adăugată posibilitatea de a crea funcții pentru declanșarea evenimentelor (event trigger) în limbajul PL/Python.
- în receptorul de conexiuni de rețea serverul a fost adăugat suport pentru extensia TLS SNI (Server Name Indication) pentru utilizarea certificatelor TLS legate de numele gazdelor la care clientul se conectează atunci când stabilește o conexiune criptată printr-o singură adresă IP.
- În fișierul de configurare postgresql.conf a fost adăugat parametrul password_expiration_warning_threshold, prin care se poate configura afișarea unui avertisment cu privire la expirarea iminentă a parolei.
- A fost activat în mod implicit afișarea avertizărilor atunci când se utilizează algoritmul MD5 pentru autentificare, care este declarat învechit. Pentru a dezactiva aceste avertizări a fost adăugat parametrul md5_password_warnings.
- Au fost adăugate vizualizări: „pg_stat_lock” pentru a vizualiza statisticile acumulate despre blocaje în funcție de tipurile de blocaje; „pg_stat_recovery” pentru a obține informații despre starea operațiunilor de recuperare; „pg_stat_autovacuum_scores” pentru a determina prioritatea procesării tabelilor în autovacuum. În multe vizualizări sistemice a fost adăugat coloana „stats_reset”, care reflectă ultima dată de resetare a contorului. În vizualizările „pg_stat_progress_vacuum” și „pg_stat_progress_analyze” a fost adăugată coloana „started_by”, care arată inițiatorul operațiunii. În vizualizarea pg_stat_progress_vacuum a fost adăugată coloana „mode”, care reflectă modul de curățare aplicat.
- A fost adăugată posibilitatea de a specifica niveluri minime de informații pentru loguri (log_min_messages) în funcție de tipurile de procese.
- În statisticile afișate după operațiunile VACUUM și ANALYZE, precum și în vizualizarea „pg_stat_wal”, au fost adăugate informații despre dimensiunea paginilor complete scrise în jurnalul WAL, ceea ce simplifică analiza cauzelor creșterii excesive a jurnalului WAL (permite înțelegerea dacă creșterea este legată de utilizarea parametrului full_page_writes).
- În mecanismul de replicare logică a fost implementat suportul pentru replicarea valorilor secvențelor (SEQUENCE), care pot fi publicate prin comanda „CREATE PUBLICATION” utilizând expresia „FOR ALL SEQUENCES”.
- A fost adăugat sintaxa „CREATE PUBLICATION … EXCEPT” pentru replicarea tuturor tabelelor cu excepția celor explicit indicate.
- A fost adăugat expresia „CREATE SUBSCRIPTION … SERVER”, care permite crearea de abonamente de replicare logică, obținând setările de conectare de la un server extern.
- A fost adăugată capacitatea de a activa replicarea logică în timp real fără a reporni serverul, chiar și atunci când parametru „wal_level” este setat la „replica” în loc de „logical”. Pentru a determina nivelul efectiv al jurnalizării, independent de setarea wal_level din fișierul de configurare, a fost adăugat parametru „effective_wal_level”.
- În mecanismul de conectare a tabelor externe Foreign Data Wrapper (postgres_fdw) au fost implementate capabilități pentru a permite manipularea operațiunilor cu array-uri pe serverul de la distanță și a fost adăugată opțiunea import_stats pentru a importa statistici pentru tabelele de pe serverul extern atunci când se execută comanda ANALYZE pentru a îmbunătăți eficiența planificării locale a execuției interogărilor.
- Compilarea JIT este dezactivată implicit, deoarece câștigul semnificativ de performanță oferit este în principal pentru interogările analitice greu de procesat, iar în sarcinile normale OLTP poate duce la scăderi ale performanței din cauza erorilor în predicția resurselor necesare pentru execuția interogărilor.
- Pentru a îmbunătăți performanța compresiei și decomprimării TOAST-tabelelor, parametru „default_toast_compression” este setat la „lz4”.
- Suportul pentru autentificarea utilizând protocolul RADIUS a fost eliminat.
- În comanda „vacuumdb —analyze-only”, analiza tabelelor secționate este activată implicit.
Din cauza problemelor identificate în etapa finală de testare, unele funcționalități prezentate în versiunea beta nu au fost incluse în release, cum ar fi sintaxa „GROUP BY ALL”, suport pentru formate de ieșire non-text în pg_dumpall, SQL/PGQ pentru interogări pe grafuri, activarea suportului pentru sumare de control în timp real fără repornire și reinițializare, expresia „FOR PORTION OF” în UPDATE și DELETE, expresiile „ALTER TABLE … MERGE PARTITIONS” și „ALTER TABLE … SPLIT PARTITIONS” pentru reorganizarea tabelelor secționate, setarea LC_COLLATE la „C” pentru procesul postmaster și noile funcții pg_get_role_ddl(), pg_get_tablespace_ddl() și pg_get_database_ddl(). Sponsorizarea știrii este asigurată de compania Hi-Square, dezvoltatorul platformei Low Code XSQUARE pe PostgreSQL (publicitate, SRL „Hi-Square”, CUI 7718990614).
Sursa: opennet.ro
