Objavljeno je izdanje otvorene DBMS Nebula Graph 3.2, koje je namijenjeno efikasnom skladištenju velikih skupova međusobno povezanih podataka koji formiraju graf, koji može sadržavati milijarde čvorova i trilione veza. Projekat je napisan na C++ jeziku i distribuira se pod Apache 2.0 licencom. Klijentske biblioteke za pristup DBMS-u su pripremljene za jezike Go, Python i Java.
DBMS koristi distribuiranu arhitekturu bez deljenja resursa (shared-nothing), što podrazumijeva pokretanje nezavisnih i samodostatnih procesa obrade upita graphd i procesa skladištenja storaged. Orkestracijom premještanja podataka i pružanjem meta-informacija o grafu se bavi meta-servis. Za osiguranje dosljednosti podataka koristi se protokol zasnovan na RAFT algoritmu.
Osnovne karakteristike Nebula Graph:
- Obezbjeđenje sigurnosti kroz omogućavanje pristupa samo autentifikovanim korisnicima, čija ovlašćenja se definišu putem sistema upravljanja pristupom zasnovanog na rolama (RBAC).
- Mogućnost povezivanja različitih tipova skladišnih motora. Podrška za proširenje jezika formiranja upita novim algoritmima.
- Osiguranje minimalnih kašnjenja prilikom čitanja ili pisanja podataka i održavanje visoke propusnosti. U testiranju u klasteru sa jednim čvorom graphd i tri čvora storaged, bazom podataka veličine 632 GB, koja uključuje graf sa 1.2 milijarde čvorova i 8.4 milijarde ivica, kašnjenja su bila na nivou nekoliko milisekundi, a propusnost je dostigla do 140 hiljada upita u sekundi.
- Linearno skaliranje.
- SQL-sličan jezik upita, dovoljno moćan i jednostavan za razumijevanje. Podržane su operacije kao što su GO (dvosmerno pretraživanje čvorova grafa), GROUP BY, ORDER BY, LIMIT, UNION, UNION DISTINCT, INTERSECT, MINUS, PIPE (korisćenje rezultata prethodnog upita). Podržani su indeksi i korisnički definisane varijable.
- Osiguranje visoke dostupnosti i otpornosti na greške.
- Podrška za kreiranje snimaka sa rezom stanja baze podataka za olakšanu izradu rezervnih kopija.
- Spremnost za industrijsku primjenu (već se koristi u infrastrukturi kompanija JD, Meituan i Xiaohongshu).
- Mogućnost promjene sheme pohrane i ažuriranja podataka bez zaustavljanja ili utjecaja na izvršene operacije.
- Podrška za TTL radi ograničavanja životnog vijeka podataka.
- Komande za upravljanje postavkama i hostovima pohrane.
- Alati za upravljanje poslovima i planiranje pokretanja poslova (trenutno su podržani COMPACT i FLUSH).
- Operacije pronalaska punog puta i najkraćeg puta između zadanih vrhova.
- OLAP sučelje za integraciju sa vanjskim platformama analitike.
- Alati za uvoz podataka iz CSV datoteka ili iz Sparka.
- Izvoz metrika za praćenje uz pomoć Prometheusa i Grafane.
- Web-sučeše Nebula Graph Studio za vizualizaciju operacija s grafom, navigaciju kroz graf, dizajn sheme pohrane i učitavanje podataka.
U novom izdanju:
- Dodana podrška za funkciju extract() za vađenje podniza koji odgovara zadanom izrazu.
- Optimizirane postavke u datoteci konfiguracije.
- Dodana pravila optimizacije za uklanjanje beskorisnog operatora AppendVertices i isključivanje primjene filtara rubova i vrhova.
- Smanjena količina podataka koji se kopiraju za operaciju JOIN, kao i za operatore Traverse i AppendVertices.
- Optimizirana izvedba SHORTEST PATH i SUBGRAPH.
- Poboljšana raspodjela memorije (uključen Arena Allocator).
Izvor: opennet.ru
