Första stabila utgåvan av graforienterad databashanterare Nebula Graph

Händelse genomförd release av öppen databas Nebula Graph 1.0.0, avsedd för effektiv lagring av stora mängder relaterad data som bildar en graf som kan bestå av miljarder noder och biljoner kopplingar. Projektet är skrivet i C++ och sprids licensierad under Apache 2.0. Klientbiblioteken för att interagera med databasen är förberedda för språk som Go, Python och Java. Det växande databassstartupföretaget VESoft fick för några dagar sedan bidrag den första omgången investeringar på 8 miljoner dollar.

Databasen använder har en distribuerad arkitektur utan resursdelning (shared-nothing), vilket innebär att oberoende och självförsörjande processer för att bearbeta förfrågningar (graphd) och lagra data (storaged) kan köras. Orkestreringen av datarörelser och tillhandahållandet av metadata om grafen hanteras av en metatjänst. För att säkerställa datakonsistens används en protokoll baserat på algoritmen RAFT.

Huvudfunktioner i Nebula Graph:

• Att säkerställa säkerhet genom att ge åtkomst endast till autentiserade användare, vars behörigheter definieras genom ett rollbaserat åtkomstkontrollsystem (RBAC).
• Möjlighet att ansluta olika typer av lagringsmotorer. Stöd för att utöka frågespråk med nya algoritmer.
• Att säkerställa minimala fördröjningar vid läsning eller skrivning av data och upprätthålla hög bandbredd. Vid testning en kluster med en nod av graphd och tre noder av storaged där databasen är 632 GB stor, inklusive en graf med 1,2 miljarder noder och 8,4 miljarder kanter, var fördröjningarna på nivån av några millisekunder och bandbredden nådde upp till 140 000 förfrågningar per sekund.
  
• Imponerande linjär skalbarhet.
• SQL-liknande frågespråk som är tillräckligt kraftfullt och lätt att förstå. Stöder operationer som GO (tvåvägs traversering av grafens noder), GROUP BY, ORDER BY, LIMIT, UNION, UNION DISTINCT, INTERSECT, MINUS, PIPE (användning av resultatet från föregående fråga). Index och användardefinierade variabler stöds.
• Säkerställande av hög tillgänglighet och motståndskraft mot fel.
• Stöd för att skapa snapshots av databasens tillstånd för att underlätta säkerhetskopiering.
• Redo för industriell användning (redan i bruk i infrastrukturen hos företag som JD, Meituan och Xiaohongshu).
• Möjlighet att ändra lagringsschemat och uppdatera data utan att stoppa eller påverka pågående operationer.
• TTL-stöd för att begränsa livslängden på data.
• Kommandon för att hantera lagringsinställningar och värdar.
• Verktyg för att hantera jobb och schemaläggning av jobb (för tillfället stöds JOBB-TYPERNA COMPACT och FLUSH).
• Operationer för att söka efter den fullständiga vägen och kortaste vägen mellan angivna noder.
• OLAP-gränssnitt för integration med tredjepartsanalysplattformar.
• Verktyg för att importera data från CSV-filer eller från Spark.
• Exportera mätvärden för övervakning med hjälp av Prometheus och Grafana.
• Webbgränssnitt
  Nebula Graph Studio för visualisering av operationer med grafen, navigering i grafen, design av lagringsschema och dataladdning.
  

Källa: opennet.ru