Presentato il rilascio del DBMS distribuito Apache Cloudberry 2.0.0, che continua lo sviluppo della base di codice open source del DBMS Greenplum, trasformata in un prodotto closed source da Broadcom dopo l'acquisizione di VMware. Apache Cloudberry 2.0.0 è segnato come il primo rilascio del progetto, dopo il trasferimento del codice alla comunità Apache. Il progetto è attualmente in incubazione presso Apache e sarà trasferito a diventare un progetto principale di Apache dopo che l'infrastruttura e il supporto saranno pronti.
Il DBMS Cloudberry è un'edizione distribuita e open-source del DBMS PostgreSQL, ottimizzata per eseguire query analitiche su grandi volumi di dati (Data Warehouse). Per l'elaborazione parallela dei dati utilizza un'architettura massivamente parallela (MPP, massively parallel processing), che garantisce la scalabilità del database fino a dimensioni petabyte grazie alla suddivisione dei dati in segmenti e all'uso di un cluster per il loro storage e processing. server.
Tra i miglioramenti in Apache Cloudberry 2.0.0:
- Completato il passaggio alla base di codice PostgreSQL 14 (Greenplum si basava su PostgreSQL 12).
- Aggiunta la supporto per le tabelle dinamiche, che consentono di aggiornare automaticamente i risultati delle query. Questa nuova funzionalità è utile per la necessità di lavorare con dati aggiornati, ad esempio per l'analisi dei dati in tempo reale, architetture Lakehouse e processori ETL (Extract, Transform, Load) automatizzati.
- È stato realizzato un nuovo formato ibrido di archiviazione PAX (Partition Attributes Across), che combina le funzionalità degli archivi basati su righe e colonne. Il formato PAX consente di ottenere un'alta prestazione sia in condizioni di elevato carico di scrittura che nell'esecuzione di query analitiche.
- Significativa ottimizzazione della pianificazione e dell'esecuzione delle query distribuite.
- Migliorata la gestione delle risorse: aumentata l'efficienza nell'uso della memoria e della CPU nei nodi del cluster.
- Migliorata la distribuzione dei dati tra i nodi e l'elaborazione parallela delle query.
- Ampliate le strategie di backup in ambienti distribuiti.
- Le informazioni sulle licenze e la formattazione degli header dei file di codice sono state allineate ai requisiti della Apache Foundation. Gli artefatti binari sono stati esclusi dai rilasci nel codice sorgente.
- Migliorato il processo di costruzione dei componenti del progetto nei linguaggi C++ e Python.
Fonte: opennet.ru
