Издание Apache Cloudberry 2.2.0, откритата алтернатива на СУБД Greenplum

Представен е выпуск на разпределената СУБД Apache Cloudberry 2.2.0, който продължава развитието на отворената кодова база на СУБД Greenplum, която бе превърната в затворен продукт от компанията Broadcom след придобиването на VMware. Проектът все още се намира в инкубатора на Apache и ще бъде преместен в основния списък на проектите на Apache след готовността на инфраструктурата и съпътстващите я елементи.

СУБД Cloudberry представлява разпределена редакция на отворената СУБД PostgreSQL, оптимизирана за изпълнение на аналитични заявки върху големи обеми данни (Data Warehouse). За паралелна обработка на данните се използва масивно-паралелна архитектура (MPP, massively parallel processing), осигуряваща мащабируемост на хранилището до петабайтни размери чрез разделяне на данните на сегменти и използване на клъстер от група. сървъри.

Сред подобренията в Apache Cloudberry 2.2.0:

• Пренесени са корекциите на грешки, отстраняването на уязвимостите и оптимизациите от изданията на PostgreSQL 14.4-14.10 (клона Cloudberry 2.x е построен на кодовата база на PostgreSQL 14).
• Добавени са шест добавки: diskquota, gp_stats_collector, gp_relsizes_stats, reject_partition_fullscan, try_convert и yezzey.
• Добавено е разширение interconnect, което предоставя обобщени метрики от протокола UDPIFC, достъпни чрез представленията gp_interconnect_stats, gp_interconnect_stats_per_segment и gp_interconnect_stats_per_host. Разширението позволява анализ на статистиката за взаимодействие между възлите чрез SQL запитвания вместо анализ на логовете.
• В оптимизатора ORCA е реализирано вътрешно сегментно паралелно сканиране на таблици. Броят на паралелно стартиращите обработчици се настройва чрез параметъра max_parallel_workers_per_gather.
• Осигурена е възможността за паралелно изпълнение на операциите Full Join и Right Join.
• За запитванията, които съдържат операции по обединение на няколко таблици (JOIN), е реализирана техника за оптимизация AQUMV (Answer-Query-Using-Materialized-Views).
• Добавена е поддръжка за дистрибуции Rocky Linux 8/9/10 и Ubuntu 22.04/24.04. Поддръжката на Ubuntu 20.04 е прекратена.
• Автоматизирано е събирането на пакети в форматите DEB и RPM за архитектури x86_64 и ARM64.
• Добавена е таблица за статистика на PXF сървъра pxf_stat_activity, както и функции pxf_cancel_backend и pxf_interrupt_backend за спиране на външни запитвания без рестартиране на PXF. сървър Добавена е поддръжка за Java 17.
• Добавен е инструментът gpbackman за управление на резервни копия, както и обработчикът gpbackup_exporter за експортиране на информация за резервни копия в системата за мониторинг Prometheus.
• Подготвен е първият релиз cloudberry-go-libs, набор от библиотеки на езика Go, използвани в Apache Cloudberry.
• Представен е выпуск на разпределената СУБД Apache Cloudberry 2.2.0, който продължава развитието на отворената кодова база на СУБД Greenplum, която беше превърната в затворен продукт от компанията Broadcom след придобиването на VMware.

Източник: opennet.ru