Apache Cloudberry 2.0.0 väljaanne, avatud alternatiiv Greenplumi andmebaasile

Esitletud on jaotatud andmebaasi Apache Cloudberry 2.0.0 väljalase, mis jätkab avatud koodiga Greenplumi andmebaasi arendamist, mille Broadcom muundas pärast VMware'i omandamist suletud tooteks. Apache Cloudberry 2.0.0 on märgitud kui esimene projekt, mille kood edastati Apache'i kogukonnale. Projekt on endiselt Apache'i inkubaatoris ja edastatakse peamiste Apache'i projektide hulka, kui infrastruktuur ja toetavad vahendid on valmis.

Cloudberry andmebaas on hajutatud versioon avatud PostgreSQL andmebaasist, mis on optimeeritud suurte andmekogumite (andmehoidla) analüütiliste päringute täitmiseks. Andmete paralleelseks töötlemiseks kasutatakse massiivset paralleelset arhitektuuri (MPP, massively parallel processing), mis tagab salvestusmahu ulatuslikkuse petabaitideni andmete jagamise ja nende säilitamiseks ning töötlemiseks klastrite kasutamise kaudu. serverite.

Apache Cloudberry 2.0.0 täiustuste seas:

• Üleminek PostgreSQL 14 koodibaasile (Greenplum põhines PostgreSQL 12-l).
• Lisatud tugi dünaamilistele tabelitele, mis võimaldavad automaatselt värskendada päringute tulemusi. See uus funktsioon on kasulik, kui on vajalik töötada aktuaalsete andmetega, näiteks reaalajas andmeanalüüsi, Lakehouse arhitektuuri ja automatiseeritud ETL (Extract, Transform, Load) töötlejatega.
• Rakendatud uus hübriidne PAX (Partition Attributes Across) salvestusformaat, mis ühendab ridade ja veergude põhiste salvestussüsteemide omadused. PAX formaat võimaldab saavutada kõrget jõudlust nii intensiivsete kirjutuskoormuste korral kui ka analüütiliste päringute täitmisel.
• Oluliselt on optimeeritud hajutatud päringute planeerimist ja täitmist.
• Parandatud ressursside haldust: suurenenud mälu ja CPU tõhusus klastrite sõlmedes.
• Parandatud andmete jaotust sõlmede vahel ning päringute paralleelset töötlemist.
• Laienetud varundamisstrateegiad hajutatud keskkondades.
• Teave litsentside ja koodifailide päiste koostamise kohta on viidud vastavusse Apache Fondi nõuetega. Väljalasetest on lähtekoodis välistatud binaarsed artefaktid.
• Parandatud projekti komponentide kogumisprotsess C++ ja Python keeles.

Allikas: opennet.ru