Пускане на графично ориентираната СУБД Nebula Graph 3.2

Беше публикувана версията на отворената СУБД Nebula Graph 3.2, предназначена за ефективно съхранение на големи набори от взаимосвързани данни, които образуват графика, която може да наброява милиарди възли и трилиони връзки. Проектът е написан на C++ и се разпространява под лиценз Apache 2.0. Подготвени са клиентски библиотеки за достъп до СУБД за езиците Go, Python и Java.

СУБД използва разпределена архитектура без споделяне на ресурси (споделено нищо), което предполага стартиране на независими и самодостатъчни процеси за обработка на графични заявки и съхранени процеси за съхранение. Мета-услугата организира движението на данни и предоставя мета-информация за графиката. За да се осигури последователност на данните, се използва протокол, базиран на алгоритъма RAFT.

Основни характеристики на Nebula Graph:

• Гарантиране на сигурност чрез ограничаване на достъпа само до удостоверени потребители, чиито разрешения са зададени чрез система за контрол на достъпа, базирана на роли (RBAC).
• Възможност за свързване на различни видове системи за съхранение. Поддръжка за разширяване на езика за генериране на заявки с нови алгоритми.
• Осигуряване на минимално забавяне при четене или запис на данни и поддържане на висока производителност. При тестване в клъстер от един graphd възел и три съхранени възела, база данни от 632 GB, включително графика от 1.2 милиарда върха и 8.4 милиарда ребра, закъсненията бяха няколко милисекунди, а пропускателната способност беше до 140 хиляди заявки в секунда.
• Линейна мащабируемост.
• Език за заявки, подобен на SQL, който е мощен и лесен за разбиране. Поддържаните операции включват GO (двупосочно обхождане на върховете на графиката), GROUP BY, ORDER BY, LIMIT, UNION, UNION DISTINCT, INTERSECT, MINUS, PIPE (използване на резултата от предишна заявка). Поддържат се индекси и дефинирани от потребителя променливи.
• Осигуряване на висока наличност и устойчивост на повреди.
• Поддръжка за създаване на моментни снимки с част от състоянието на базата данни за опростяване на създаването на резервни копия.
• Готов за промишлена употреба (вече се използва в инфраструктурата на JD, Meituan и Xiaohongshu).
• Възможност за промяна на схемата за съхранение на данни и актуализирането й без спиране или засягане на текущите операции.
• TTL поддръжка за ограничаване на живота на данните.
• Команди за управление на настройки и хостове за съхранение.
• Инструменти за управление на работа и планиране на стартиране на работа (от поддържаните в момента работи са COMPACT и FLUSH).
• Операции за намиране на пълния път и най-краткия път между дадени върхове.
• OLAP интерфейс за интеграция с платформи за анализ на трети страни.
• Помощни програми за импортиране на данни от CSV файлове или от Spark.
• Експортирайте показатели за наблюдение с помощта на Prometheus и Grafana.
• Уеб интерфейс на Nebula Graph Studio за визуализиране на операции с графики, навигация на графики, проектиране на схеми за съхранение и зареждане на данни.

В новата версия:

• Добавена е поддръжка за функцията extract() за извличане на подниз, който съответства на даден израз.
• Оптимизирани настройки в конфигурационния файл.
• Добавени правила за оптимизация за премахване на безполезния оператор AppendVertices и деактивиране на прилагането на филтри за ръбове и върхове.
• Количеството данни, копирани за операцията JOIN, както и за операторите Traverse и AppendVertices, е намалено.
• Оптимизирана производителност на НАЙ-КРАТЪК ПЪТ и ПОДГРАФ
• Подобрено разпределение на паметта (разпределител на арена е активиран).

Източник: opennet.ru