שחרור גרף DBMS Nebula Graph 3.2 מכוון גרף

פרסום הגרף הפתוח DBMS Nebula Graph 3.2, שנועד לאחסון יעיל של קבוצות גדולות של נתונים מחוברים היוצרים גרף שיכול למנות מיליארדי צמתים וטריליוני חיבורים. הפרויקט כתוב ב-C++ ומופץ תחת רישיון Apache 2.0. ספריות לקוח לגישה ל-DBMS מוכנות לשפות Go, Python ו-Java.

ה-DBMS משתמש בארכיטקטורה מבוזרת ללא שיתוף משאבים (shared-nothing), מה שמרמז על השקה של תהליכי עיבוד שאילתות גרפים עצמאיים ועצמאיים ותהליכי אחסון מאוחסנים. המטא-service מתזמר את תנועת הנתונים ומספק מטא-מידע על הגרף. כדי להבטיח עקביות נתונים, נעשה שימוש בפרוטוקול המבוסס על אלגוריתם RAFT.

תכונות עיקריות של גרף ערפיליות:

• הבטחת אבטחה על ידי הגבלת גישה רק למשתמשים מאומתים שההרשאות שלהם מוגדרות באמצעות מערכת בקרת גישה מבוססת תפקידים (RBAC).
• יכולת חיבור סוגים שונים של מנועי אחסון. תמיכה בהרחבת שפת יצירת השאילתות עם אלגוריתמים חדשים.
• הבטחת חביון מינימלי בעת קריאה או כתיבה של נתונים ושמירה על תפוקה גבוהה. כאשר נבדק במקבץ של צומת גרף אחד ושלושה צמתים מאוחסנים, מסד נתונים של 632 ג'יגה-בייט, כולל גרף של 1.2 מיליארד קודקודים ו-8.4 מיליארד קצוות, זמן ההשהיה היה כמה אלפיות שניות, והתפוקה הייתה עד 140 אלף בקשות לשנייה.
• מדרגיות ליניארית.
• שפת שאילתות דמוית SQL שהיא חזקה וקלה להבנה. הפעולות הנתמכות כוללות GO (מעבר דו-כיווני של קודקודי גרף), GROUP BY, ORDER BY, LIMIT, UNION, UNION DISTINCT, INTERSECT, MINUS, PIPE (באמצעות תוצאה משאילתה קודמת). אינדקסים ומשתנים המוגדרים על ידי המשתמש נתמכים.
• הבטחת זמינות גבוהה ועמידות בפני כשלים.
• תמיכה ביצירת תמונות מצב עם נתח ממצב מסד הנתונים כדי לפשט את יצירת עותקי הגיבוי.
• מוכן לשימוש תעשייתי (כבר בשימוש בתשתית של JD, Meituan ו-Xiaohongshu).
• היכולת לשנות את ערכת אחסון הנתונים ולעדכן אותה מבלי להפסיק או להשפיע על הפעולות השוטפות.
• תמיכת TTL להגבלת חיי הנתונים.
• פקודות לניהול הגדרות ומארחי אחסון.
• כלים לניהול עבודה ותזמון השקות עבודה (מהעבודות הנתמכות כיום הן COMPACT ו-FLUSH).
• פעולות של מציאת הנתיב השלם והדרך הקצרה ביותר בין קודקודים נתונים.
• ממשק OLAP לאינטגרציה עם פלטפורמות ניתוח של צד שלישי.
• כלי עזר לייבוא ​​נתונים מקובצי CSV או מ-Spark.
• ייצוא מדדים לניטור באמצעות פרומתאוס וגרפאנה.
• ממשק אינטרנט של Nebula Graph Studio להמחשת פעולות גרפים, ניווט גרפים, עיצוב אחסון נתונים וערכות טעינה.

במהדורה החדשה:

• נוספה תמיכה בפונקציה extract() כדי לחלץ מחרוזת משנה התואמת לביטוי נתון.
• הגדרות מיטובות בקובץ התצורה.
• נוספו כללי אופטימיזציה כדי להסיר את האופרטור AppendVertices חסר התועלת ולהשבית את היישום של מסנני קצה וקודקוד.
• כמות הנתונים שהועתקו עבור פעולת JOIN, כמו גם עבור האופרטורים Traverse ו-AppendVertices, הופחתה.
• ביצועים מיטביים של SHORTEST PATH ו-SUBGRAPH
• הקצאת זיכרון משופרת (Arena Allocator מופעל).

מקור: OpenNet.ru