Lançado o lançamento do banco de dados distribuído Apache Cloudberry 2.0.0, que continua o desenvolvimento da base de código aberto do banco de dados Greenplum, que foi transformada em um produto fechado pela Broadcom após adquirir a VMware. O Apache Cloudberry 2.0.0 é marcado como a primeira versão do projeto, após a transferência do código para a comunidade Apache. O projeto ainda está incubado na Apache e será promovido ao status de projeto principal da Apache assim que a infraestrutura e os componentes auxiliares estiverem prontos.
O banco de dados Cloudberry é uma edição distribuída do banco de dados PostgreSQL de código aberto, otimizada para executar consultas analíticas em grandes volumes de dados (Data Warehouse). Para o processamento paralelo de dados, é utilizada a arquitetura de processamento massivamente paralelo (MPP), que permite escalabilidade do armazenamento até petabytes, por meio da segmentação dos dados e do uso de um cluster. servidores.
Entre as melhorias do Apache Cloudberry 2.0.0:
- Foi realizada a migração para a base de código do PostgreSQL 14 (o Greenplum era baseado no PostgreSQL 12).
- Adicionada a suporte a tabelas dinâmicas, permitindo a atualização automática dos resultados das consultas. Este novo recurso é útil quando é necessário trabalhar com dados atualizados, por exemplo, para análises em tempo real, arquiteturas Lakehouse e processadores ETL (Extract, Transform, Load) automatizados.
- Implementado um novo formato híbrido de armazenamento PAX (Partition Attributes Across), que combina as capacidades de armazenamentos baseados em linhas e colunas. O formato PAX permite alcançar um alto desempenho tanto sob alta carga de gravação quanto na execução de consultas analíticas.
- Significativamente otimizado o planejamento e a execução de consultas distribuídas.
- Melhorada a gestão de recursos: aumentada a eficiência no uso de memória e CPU nos nós do cluster.
- Melhorada a distribuição de dados entre os nós e o processamento paralelo das consultas.
- Ampliadas as estratégias de backup em ambientes distribuídos.
- As informações sobre licenças e a formatação dos cabeçalhos dos arquivos de código foram ajustadas para atender aos requisitos da Apache Foundation. Artefatos binários foram excluídos das versões no código fonte.
- Aprimorado o processo de compilação dos componentes do projeto nas linguagens C++ e Python.
Fonte: opennet.ru
