Egy év fejlesztés után megjelent a PostgreSQL 19 új stabil adatbázis-kezelő rendszer. Az új ág frissítései öt éven át érkeznek, 2031 novemberéig. A PostgreSQL 14.x, a legkorábbi támogatott ágat, ebben a hónapban megszüntetik. A kiadás majdnem két hónappal később jelent meg, mint az eredetileg tervezett időpont, a múltbeli kiadásokhoz képest szokatlan mennyiségű hibaüzenet miatt, amelyeket az AI-eszközök kódanalízise tárt fel.
Főbb újítások:
- Javították az aszinkron I/O alrendszer megvalósítását, amely lehetővé teszi az I/O teljesítményének növelését és a késleltetések megszüntetését. Az AIO univerzális megvalósítása (io_method=worker) automatikus folyamaterőforrás-kezdeményezésének vagy -csökkentésének lehetőségét kapta a terhelés függvényében. A folyamatok kezelőinek minimális és maximális számának, valamint az inaktivitás előtt megvalósított időkorlátnak és a folyamatok elindulásának késleltetésének meghatározására az io_min_workers, io_max_workers, io_worker_idle_timeout és io_worker_launch_interval paraméterek kerültek javaslatra.
Ezen kívül az AIO-ban használt előreolvasó ütemező optimalizálva lett a nagy mennyiségű adat lemezképzésének igénylését igénylő lekérdezések teljesítményének növelése érdekében. Az optimalizálás az engedélyezett előreolvasási műveletek számának alkalmazkodó meghatározásával valósult meg a lekérdezés jellege és mérete szerint (például a nagy táblák és indexek beolvasásához mostantól a lemezről több adatot töltenek be előre). Az aszinkron I/O műveletek végrehajtásának elemzéséhez az „EXPLAIN ANALYZE” parancshoz további „IO” lehetőség került hozzáadásra.
- Hozzáadták a pg_plan_advice és a pg_stash_advice kiterjesztéseket a lekérdezés-tervező számára, amely lehetővé teszi a "plan advice" mini-nyelven megfogalmazott tanács paramétereinek átadását. Ezek segíthetnek a végrehajtási tervek kiválasztásában, a kiválasztott tervek rögzítésében és különféle tervek kiértékelésében. Az EXPLAIN parancsba új "PLAN_ADVICE" opció került, amely megjeleníti a lekérdezés végrehajtása során a tervező által kiválasztott paraméterek listáját, míg saját paramétereik beállításához az "SET pg_plan_advice.advice = 'paraméterek listája'" kifejezés használható. A pg_stash_advice kiterjesztés kiegészíti a pg_plan_advice-t azzal a képességgel, hogy a paraméterek lekérdezés-azonosítókhoz kötődjenek, így azokat nem kell minden egyes lekérdezés előtt megadni. EXPLAIN (COSTS OFF, PLAN_ADVICE) SELECT * FROM join_fact f JOIN join_dim d ON f.dim_id = d.id; … Generált Tervtanács: JOIN_ORDER(f d) HASH_JOIN(d) SEQ_SCAN(f d) NO_GATHER(f d) SET pg_plan_advice.advice = 'JOIN_ORDER(f d) NO_GATHER(f d)';
- Az automatikus tisztítási folyamatba (autovacuum) beépítésre került a lehetőség, hogy párhuzamosan több kezelőt lehessen használni az indexek tisztításakor. A kezelők száma az autovacuum_max_parallel_workers opcióval állítható be. Új opciók is hozzáadásra kerültek: autovacuum_vacuum_score_weight, autovacuum_vacuum_insert_score_weight és autovacuum_analyze_score_weight a táblák tisztításának prioritásának meghatározásához.
- Új tisztítási stratégia került bevezetésre, amely csökkenti a jövőbeli munkák mennyiségét azáltal, hogy frissíti az oldal láthatósági térképét a SELECT lekérdezések során végzett táblázatszkennelés alatt, anélkül, hogy meg kellene várni a VACUUM parancs indítását.
- Új SQL parancs került bevezetésre "REPACK" néven a táblák kisebb költségekkel való újraépítésére. A REPACK parancs teljesen újraírással írja át a tábla tartalmát egy új fájlba a lemezen, lehetővé téve a rendszer számára, hogy visszanyerje a nem használt blokkok miatti lemezterületet. A "VACUUM FULL" parancstól eltérően, amely során szigorú zárolás aktiválódik az újraírás alatt, a REPACK parancs "CONCURRENTLY" opciót is kínál, amely lehetővé teszi, hogy más tranzakciók használják a táblát a repackelési folyamat során. A pg_repack kiterjesztéssel ellentétben a REPACK lényegesen gyorsabb, mivel nem csatol további trigger-eket a táblához, de nem támogatja a teljesen szekcionált táblák kezelését.
- Az INSERT művelet teljesítménye akár kétszeresére is nőtt az olyan táblák esetén, ahol külső kulcsok (Foreign Key) ellenőrzése történik. A gyorsítást a külső kulcs ellenőrzésére szolgáló index alkalmazásával értük el, így feleslegessé vált a táblához irányuló erőforrás-igényes belső lekérdezés végrehajtása.
- A lekérdezés ütemezőben biztosított a Anti-Join műveletek, tehát azok a sorok az első táblában, amelyek nem találhatók meg a második táblában, felismerése a bonyolult lekérdezések során, beleértve a 'LEFT JOIN' és a 'NOT IN' kifejezéseket, hogy speciális optimalizációkat alkalmazhassunk. Kiterjesztettük az inkrementális rendezés alkalmazását. Hozzáadtunk egy 'eager aggregation' optimalizációt, amely az aggregáló műveleteket a táblák egyesítése előtti szakaszra helyezi, csökkentve a kezelésre kerülő sorok számát az egyesítés során. Gyorsítottuk a párhuzamos végrehajtását a sorozatos szkenneléseknek (parallel seq scan). Megvalósítottuk az 'IS DISTINCT FROM' és az 'IS NOT DISTINCT FROM' kifejezések átfordítását a ' ' és '=' operátorokkal, ha mindkét operandus nem lehet NULL.
- A NOTIFY parancs által a több értesítési csatornát használó konfigurációkban javult az értesítések kézbesítésének hatékonysága. A megosztott memóriában mostantól egy csatornakép található, amely lehetővé teszi, hogy közvetlenül az adott csatornára feliratkozott háttérfolyamatokhoz forduljunk.
- Az 'INSERT' parancshoz hozzáadva a ON CONFLICT DO SELECT … RETURNING kifejezés támogatása, amely visszaadja a rekordokat, ha azok hozzáadása 'INSERT'-tel nem lehetséges, a 'ON CONFLICT DO NOTHING/UPDATE' kifejezéseken kívül, amelyek néma módon figyelmen kívül hagyják a beszúrási konfliktusokat, vagy frissítik a rekordokat a beszúrás helyett.
- A COPY parancshoz hozzáadtuk az adatok JSON formátumban történő kimenetének támogatását.
- Az SQL/JSON nyelvhez hozzáadtuk a sztringek feldolgozására szolgáló lower(), upper(), replace(), split_part() és btrim() módszereket.
- Az ablakos funkciók lead(), lag(), first_value(), last_value() és nth_value() támogatják az 'IGNORE NULLS' kifejezést a NULL értékek kihagyására.
- Hozzáadtuk a 'WAIT FOR LSN' parancsot, amely aszinkron replikáció esetén lehetővé teszi, hogy a SELECT lekérdezést a replikált szerveren felfüggesszük, amíg a fő szerverről származó változtatások alkalmazása meg nem történik, hogy elkerüljük az elavult adatok kiadását. a szerver, amely megfelel a WAL naplóban meghatározott LSN pozícióknak (Log Sequence Number).
- A random() függvénybe bevezetésre került a date és timestamp típusok támogatása véletlenszerű dátumok és időpontok generálásához megadott tartományon belül.
- Lehetőség nyílt PL/Python nyelven funkciókat létrehozni eseménytrigger (event trigger) számára.
- A hálózati kapcsolatokat fogadó szerver támogatottá vált a TLS kiterjesztés SNI (Server Name Indication) alkalmazása TLS tanúsítványok hostnevekkel való kapcsolódáshoz, amelyet a kliens a titkosított kapcsolat létrehozása során egy IP-cím mellett keres.
- A postgresql.conf konfigurációs fájlba hozzáadva lett a password_expiration_warning_threshold paraméter, amellyel beállítható a jelszó érvényességének lejáratáról szóló figyelmeztetés kimenete.
- Alapértelmezés szerint engedélyezésre került a figyelmeztetések kiírása, amikor az MD5 algoritmust használják az autentikáció során, ami elavultnak számít. Az ilyen figyelmeztetések kikapcsolásához hozzáadva lett a md5_password_warnings paraméter.
- Új nézetek kerültek bevezetésre: «pg_stat_lock» a blokkolások összegyűjtött statisztikájának megtekintéséhez a blokkolási típusokhoz kötötten; «pg_stat_recovery» a helyreállítási műveletek állapotának megismeréséhez; «pg_stat_autovacuum_scores» a táblák autovacuum feldolgozásának prioritásának megállapításához. Számos rendszer nézethez hozzáadtak egy «stats_reset» oszlopot, amely a számlálók utolsó törlésének idejét tükrözi. A «pg_stat_progress_vacuum» és «pg_stat_progress_analyze» nézetekhez hozzáadták a «started_by» oszlopot, amely mutatja a művelet kezdeményezőjét. A pg_stat_progress_vacuum nézethez hozzáadva lett a «mode» oszlop, amely a használt takarítási módot tükrözi.
- Lehetőség nyílt a logok minimális informativitási szintjeinek (log_min_messages) megadására folyamat típusok szerint.
- A VACUUM és ANALYZE műveletek után bemutatott statisztikákba, valamint a «pg_stat_wal» nézetbe információk kerültek be a WAL-logba írt teljes oldalak méretéről, ami megkönnyíti a WAL-log mértéktelen növekedésének okai mögötti vizsgálatot (megtudhatjuk, hogy a növekedés összefügg-e a full_page_writes paraméter használatával).
- A logikai replikáció mechanizmusába bevezetésre került a sorozatok (SEQUENCE) értékeinek replikációja, amelyeket a «CREATE PUBLICATION» parancs segítségével lehet közzétenni a «FOR ALL SEQUENCES» kifejezéssel.
- Bevezetésre került a «CREATE PUBLICATION … EXCEPT» szintaxis, amely lehetővé teszi minden tábla replikálását a kifejezetten megadott kivételek mellett.
- Hozzáadva a „CREATE SUBSCRIPTION … SERVER” kifejezés, amely lehetővé teszi a logikai replikációs előfizetések létrehozását, miközben csatlakozási beállításokat kapunk egy harmadik fél szerverről.
- Lehetővé vált a logikai replikáció futás közbeni engedélyezése újraindítás nélkül, még akkor is, ha a „wal_level” paraméter értéke a „replica” helyett „logical”. A tényleges, a wal_level konfigurációs fájl beállításához nem kötött naplózási szint meghatározásához hozzáadva lett az „effective_wal_level” paraméter.
- A külső táblák csatlakoztatásának (Foreign Data Wrapper, postgres_fdw) mechanizmusában lehetőségek valósultak meg, amelyek lehetővé teszik a tömbműveletek átkonvertálását távoli szerverre, és hozzáadva lett az import_stats opció a külső szerver tábláinak statisztikájának importálására az ANALYZE parancs végrehajtásakor a lekérdezésvégrehajtási tervezés hatékonyságának növelése érdekében.
- Alapértelmezés szerint a JIT-kompiláció ki van kapcsolva, mivel észlelhető teljesítménynövekedés elsősorban a nehéz analitikai lekérdezések esetén jelentkezik, míg a normál OLTP terhelések esetén teljesítménycsökkenést okozhat a végrehajtáshoz szükséges erőforrások előrejelzésének hibái miatt.
- A TOAST táblák tömörítési és kibővítési teljesítményének növelése érdekében a „default_toast_compression” paraméter értéke „lz4”-re van állítva.
- Eltávolítva a RADIUS protokoll használatával történő hitelesítés támogatása.
- A „vacuumdb —analyze-only” parancs alapértelmezés szerint bekapcsolja a szekcionált táblák elemzését.
A tesztelés végső szakaszában felfedezett problémák miatt a kiadásban nem szerepelnek a béta verzióban bemutatott néhány funkciók, mint például a „GROUP BY ALL” szintaxis, a pg_dumpall-ban a nem szöveges kimeneti formátumok támogatása, az ellenőrző összegek támogatásának futás közbeni engedélyezése újraindítás és újrainicializálás nélkül, a „FOR PORTION OF” kifejezés az UPDATE és DELETE parancsokban, az „ALTER TABLE … MERGE PARTITIONS” és „ALTER TABLE … SPLIT PARTITIONS” kifejezések a szekcionált táblák újraszervezésére, az LC_COLLATE beállítása „C” értékre a postmaster folyamat számára, valamint az új pg_get_role_ddl(), pg_get_tablespace_ddl() és pg_get_database_ddl() funkciók. A hír szponzora a Hi-Square cég, az XSQUARE Low Code platform fejlesztője PostgreSQL-en (hirdetés, Hi-Square Kft., adószám 7718990614).
Forrás: opennet.ru
