Grafikga yo'naltirilgan DBMS Nebula ning chiqarilishi Grafik 3.2

Опубликован выпуск открытой СУБД Nebula Graph 3.2, предназначенной для эффективного хранения крупных наборов связанных между собой данных, образующих граф, который может насчитывать миллиарды узлов и триллионы связей. Проект написан на языке С++ и распространяется под лицензией Apache 2.0. Клиентские библиотеки для обращения к СУБД подготовлены для языков Go, Python и Java.

В СУБД применяется распределённая архитектура без разделения ресурсов (shared-nothing), подразумевающая запуск независимых и самодостаточных процессов обработки запросов graphd и процессов хранения storaged. Оркестровкой перемещения данных и предоставлением мета-информации о графе занимается мета-сервис. Для обеспечения согласованности данных используется протокол на базе алгоритма RAFT.

Tumanlik grafigining asosiy xususiyatlari:

• Обеспечение безопасности через предоставление доступа только аутентифицированным пользователям, полномочия которых задаются через систему управления доступа на основе ролей (RBAC).
• Возможность подключения разных типов движков хранения. Поддержка расширения языка формирования запросов новыми алгоритмами.
• Обеспечение минимальных задержек при чтении или записи данных и поддержание высокой пропускной способности. При тестировании в кластере из одного узла graphd и трёх узлов storaged БД размером 632 GB, включающей граф из 1.2 миллиарда вершин и 8.4 миллиарда рёбер задержки были на уровне нескольких миллисекунд, а пропускная способность составила до 140 тысяч запросов в секунду.
• Chiziqli masshtablilik.
• SQL-ga o'xshash kuchli va tushunarli so'rovlar tili. Qo'llab-quvvatlanadigan operatsiyalarga GO (grafik cho'qqilarining ikki yo'nalishli o'tishi), GROUP BY, ORDER BY, LIMIT, UNION, UNION DISTINCT, INTERSECT, MINUS, PIPE (oldingi so'rov natijasidan foydalanish) kiradi. Indekslar va foydalanuvchi tomonidan belgilangan o'zgaruvchilar qo'llab-quvvatlanadi.
• Muvaffaqiyatsizlik va nosozliklarga chidamlilikni ta'minlash.
• Zaxira nusxalarini yaratishni soddalashtirish uchun ma'lumotlar bazasi holatining bir qismi bilan suratlarni yaratishni qo'llab-quvvatlash.
• Sanoatda foydalanishga tayyor (JD, Meituan va Xiaohongshu infratuzilmasida allaqachon ishlatilgan).
• Ma'lumotlarni saqlash sxemasini o'zgartirish va davom etayotgan operatsiyalarni to'xtatmasdan yoki ta'sir qilmasdan yangilash imkoniyati.
• Ma'lumotlarning ishlash muddatini cheklash uchun TTL qo'llab-quvvatlash.
• Sozlamalar va saqlash xostlarini boshqarish uchun buyruqlar.
• Ishni boshqarish va ishni boshlashni rejalashtirish vositalari (hozirda qo'llab-quvvatlanadigan ishlardan COMPACT va FLUSH).
• Berilgan cho'qqilar orasidagi to'liq yo'l va eng qisqa yo'lni topish operatsiyalari.
• Uchinchi tomon tahliliy platformalari bilan integratsiya uchun OLAP interfeysi.
• CSV fayllaridan yoki Spark'dan ma'lumotlarni import qilish uchun yordamchi dasturlar.
• Экспорт метрик для мониторинга при помощи Prometheus и Grafana.
• Web-интерфейс Nebula Graph Studio для визуализации операций с графом, навигации по графу, проектирования схемы хранения и загрузки данных.

Yangi nashrda:

• Добавлена поддержка функции extract() для извлечения подстроки, соответствующей заданному выражению.
• Оптимизированы настройки в файле конфигурации.
• Добавлены правила оптимизации для удалений бесполезного оператора AppendVertices и отключения применения фильтров рёбер и вершин.
• Сокращён объём данных, копируемых для операции JOIN, а также для операторов Traverse и AppendVertices.
• Оптимизирована производительность SHORTEST PATH и SUBGRAPH
• Улучшено распределение памяти (задействован Arena Allocator).

Manba: opennet.ru