Kuburitswa kweiyo graph-inotungamirwa DBMS Nebula Girafu 3.2

Опубликован выпуск открытой СУБД Nebula Graph 3.2, предназначенной для эффективного хранения крупных наборов связанных между собой данных, образующих граф, который может насчитывать миллиарды узлов и триллионы связей. Проект написан на языке С++ и распространяется под лицензией Apache 2.0. Клиентские библиотеки для обращения к СУБД подготовлены для языков Go, Python и Java.

В СУБД применяется распределённая архитектура без разделения ресурсов (shared-nothing), подразумевающая запуск независимых и самодостаточных процессов обработки запросов graphd и процессов хранения storaged. Оркестровкой перемещения данных и предоставлением мета-информации о графе занимается мета-сервис. Для обеспечения согласованности данных используется протокол на базе алгоритма RAFT.

Zvinonyanya kukosha zveNebula Graph:

• Обеспечение безопасности через предоставление доступа только аутентифицированным пользователям, полномочия которых задаются через систему управления доступа на основе ролей (RBAC).
• Возможность подключения разных типов движков хранения. Поддержка расширения языка формирования запросов новыми алгоритмами.
• Обеспечение минимальных задержек при чтении или записи данных и поддержание высокой пропускной способности. При тестировании в кластере из одного узла graphd и трёх узлов storaged БД размером 632 GB, включающей граф из 1.2 миллиарда вершин и 8.4 миллиарда рёбер задержки были на уровне нескольких миллисекунд, а пропускная способность составила до 140 тысяч запросов в секунду.
• Linear scalability.
• Mutauro wemubvunzo weSQL une simba uye uri nyore kunzwisisa. Mashandiro anotsigirwa anosanganisira GO (bidirectional traversal of graph vertices), GROUP BY, ORDER BY, LIMIT, UNION, UNION DISTINCT, INTERSECT, MINUS, PIPE (uchishandisa zvabuda kubva pamubvunzo wapfuura). Ma indexes uye mashandisi-anotsanangurwa akasiyana anotsigirwa.
• Kuve nechokwadi chekuwanikwa kwepamusoro uye kusimba kune kukundikana.
• Tsigiro yekugadzira snapshots ine chidimbu cheiyo dhatabhesi state kurerutsa kusikwa kwemakopi ekuchengetedza.
• Yakagadzirira kushandiswa kwemaindasitiri (yakatoshandiswa mune zvivakwa zveJD, Meituan uye Xiaohongshu).
• Iko kugona kushandura chirongwa chekuchengeta data uye kuigadzirisa pasina kumira kana kukanganisa mashandiro anoenderera.
• TTL rutsigiro kudzikamisa data hupenyu.
• Mirairo yekutarisira marongero uye mauto ekuchengetera.
• Zvishandiso zvekutarisira basa uye kuronga kutangwa kwebasa (emabasa anotsigirwa parizvino COMPACT uye FLUSH).
• Mashandiro ekutsvaga nzira yakakwana uye nzira ipfupi pakati pema vertices akapihwa.
• OLAP interface yekubatanidza neyechitatu-bato analytics mapuratifomu.
• Zvishandiso zvekupinza data kubva kuCSV mafaera kana kubva kuSpark.
• Экспорт метрик для мониторинга при помощи Prometheus и Grafana.
• Web-интерфейс Nebula Graph Studio для визуализации операций с графом, навигации по графу, проектирования схемы хранения и загрузки данных.

Mukuburitswa kutsva:

• Добавлена поддержка функции extract() для извлечения подстроки, соответствующей заданному выражению.
• Оптимизированы настройки в файле конфигурации.
• Добавлены правила оптимизации для удалений бесполезного оператора AppendVertices и отключения применения фильтров рёбер и вершин.
• Сокращён объём данных, копируемых для операции JOIN, а также для операторов Traverse и AppendVertices.
• Оптимизирована производительность SHORTEST PATH и SUBGRAPH
• Улучшено распределение памяти (задействован Arena Allocator).

Source: opennet.ru