Tso tawm cov duab-oriented DBMS Nebula Graph 3.2

Опубликован выпуск открытой СУБД Nebula Graph 3.2, предназначенной для эффективного хранения крупных наборов связанных между собой данных, образующих граф, который может насчитывать миллиарды узлов и триллионы связей. Проект написан на языке С++ и распространяется под лицензией Apache 2.0. Клиентские библиотеки для обращения к СУБД подготовлены для языков Go, Python и Java.

В СУБД применяется распределённая архитектура без разделения ресурсов (shared-nothing), подразумевающая запуск независимых и самодостаточных процессов обработки запросов graphd и процессов хранения storaged. Оркестровкой перемещения данных и предоставлением мета-информации о графе занимается мета-сервис. Для обеспечения согласованности данных используется протокол на базе алгоритма RAFT.

Cov yam ntxwv tseem ceeb ntawm Nebula Graph:

• Обеспечение безопасности через предоставление доступа только аутентифицированным пользователям, полномочия которых задаются через систему управления доступа на основе ролей (RBAC).
• Возможность подключения разных типов движков хранения. Поддержка расширения языка формирования запросов новыми алгоритмами.
• Обеспечение минимальных задержек при чтении или записи данных и поддержание высокой пропускной способности. При тестировании в кластере из одного узла graphd и трёх узлов storaged БД размером 632 GB, включающей граф из 1.2 миллиарда вершин и 8.4 миллиарда рёбер задержки были на уровне нескольких миллисекунд, а пропускная способность составила до 140 тысяч запросов в секунду.
• Linear scalability.
• Ib qho lus nug zoo li SQL uas muaj zog thiab nkag siab yooj yim. Kev txhawb nqa kev ua haujlwm suav nrog GO (bidirectional traversal ntawm daim duab vertices), GROUP BY, ORDER BY, LIMIT, UNION, UNION DISTINCT, INTERSECT, MINUS, PIPE (siv cov txiaj ntsig los ntawm cov lus nug dhau los). Indexs thiab tus neeg siv cov kev hloov pauv tau txais kev txhawb nqa.
• Ua kom muaj kev txaus siab thiab ua haujlwm tau zoo rau kev ua tsis tiav.
• Kev them nyiaj yug rau kev tsim snapshots nrog ib daim ntawm lub xeev database kom yooj yim rau kev tsim cov ntawv luam.
• Npaj rau kev lag luam siv (twb tau siv nyob rau hauv infrastructure ntawm JD, Meituan thiab Xiaohongshu).
• Lub peev xwm los hloov cov txheej txheem khaws cia cov ntaub ntawv thiab hloov kho nws yam tsis tau nres lossis cuam tshuam rau kev ua haujlwm tsis tu ncua.
• TTL txhawb kom txwv cov ntaub ntawv lub neej.
• Cov lus txib rau kev tswj cov chaw thiab chaw cia khoom.
• Cov cuab yeej los tswj kev ua haujlwm thiab teem caij ua haujlwm tshaj tawm (ntawm cov haujlwm tam sim no txhawb nqa yog COMPACT thiab FLUSH).
• Kev khiav hauj lwm ntawm kev nrhiav txoj hauv kev tiav thiab txoj kev luv tshaj plaws ntawm qhov muab qhov chaw.
• OLAP interface rau kev koom ua ke nrog peb-tog analytics platforms.
• Cov cuab yeej siv rau import cov ntaub ntawv los ntawm CSV cov ntaub ntawv lossis los ntawm Spark.
• Экспорт метрик для мониторинга при помощи Prometheus и Grafana.
• Web-интерфейс Nebula Graph Studio для визуализации операций с графом, навигации по графу, проектирования схемы хранения и загрузки данных.

Hauv qhov kev tso tawm tshiab:

• Добавлена поддержка функции extract() для извлечения подстроки, соответствующей заданному выражению.
• Оптимизированы настройки в файле конфигурации.
• Добавлены правила оптимизации для удалений бесполезного оператора AppendVertices и отключения применения фильтров рёбер и вершин.
• Сокращён объём данных, копируемых для операции JOIN, а также для операторов Traverse и AppendVertices.
• Оптимизирована производительность SHORTEST PATH и SUBGRAPH
• Улучшено распределение памяти (задействован Arena Allocator).

Tau qhov twg los: opennet.ru