Na vijf jaar ontwikkeling is de tweede release candidate van libmdbx 1.0 gepubliceerd

Beschikbaar для тестирования второй кандидат в релизы библиотеки libmdbx с реализацией высокопроизводительной, компактной встраиваемой базой данных класса ключ-значение. Текущая версия (0.5) является техническим релизом, отмечает завершение каких-либо доработок и переход к фазе публичного финального тестирования и стабилизации, с последующем формированием первого полноценного релиза библиотеки. Код libmdbx gedistribueerd door под лицензией OpenLDAP Public License.

Библиотека MDBX является существенно переработанным ответвлением от LMDB — transactioneel ingebedde DBMS van de klasse “sleutelwaarde” op basis van boom B+ без proactief loggen, которая позволяет многопоточным процессам конкурентно и эффективно работать с локально-разделяемой (не сетевой) БД. В свою очередь MDBX быстрее и надёжнее LMDB, и при этом сохраняет все ключевые возможности своего прародителя, такие как ACID и неблокирующее чтение с линейным масштабированием по ядрам CPU.

De belangrijkste verschillen tussen MDBX en LMDB:

• Fundamenteel wordt er meer aandacht besteed aan codekwaliteit, testen en automatische controles.
• Aanzienlijk meer controle tijdens de werking, van het controleren van parameters tot de interne audit van databasestructuren.
• Auto-compactificatie en automatisch beheer van de databasegrootte.
• Eén databaseformaat voor 32-bits en 64-bits assemblages.
• Schatting van monstervolumes per bereik (schatting van bereikquery's).
• Ondersteuning voor sleutels die twee keer zo groot zijn als pannenkoeken en door de gebruiker te selecteren databasepaginagrootte.

Выпущенный кандидат в релизы libmdbx является результатом принятого в августе 2019 решения о разделении проектов MDBX и MithrilDB. При этом в libmdbx было решено устранить (рациональный) максимум технического долга и стабилизировать библиотеку. По факту в обозначенном направлении сделано в 2-3 раза больше, чем оценивалось и планировалось исходно:

• Реализована поддержка macOS и платформ «второго эшелона»: FreeBSD, Solaris, DragonFly BSD, OpenBSD, NetBSD. Поддержка AIX и HP-UX может быть добавлена при необходимости.
• Проведена санация кода при помощи Undefined Behavior Sanitizer и Address Sanitizer, устранены все предупреждения при сборке с «-Wpedantic», все предупреждения Coverity Static Analyzer и т.д.
• Update API-beschrijvingen.
• Слияние (амальгамация) исходного кода для удобства встраивания.
• CMake-ondersteuning.
• Ondersteuning voor geneste transacties.
• Bootid gebruiken om te bepalen of het besturingssysteem opnieuw is opgestart (vuile databasestop).
• Сквозной подсчёт обновлённых/старых страниц и расширенная информация о транзакциях.
• Optie MDBX_ACCEDE voor verbinding met een reeds geopende database in compatibele modus.
• Gebruiken OFD-blokkering wanneer beschikbaar.
• Hete back-up in pijp.
• Специализированный оптимизированный алгоритм внутренней сортировки (до 2-3 раз быстрее «qsort()» и до 30% быстрее «std::sort()»).
• De maximale sleutellengte is verhoogd.
• Automatische controle van vooruitlezen (cachestrategie voor databasebestanden in het geheugen).
• Agressievere en snellere automatische verdichting.
• Een meer optimale strategie voor het samenvoegen van B+ boompagina's.
• Контроль нелокальных файловых систем (NFS, Samba и т.п.) для предотвращения повреждения БД при неверном использовании.
• Het testpakket is uitgebreid.

De ontwikkeling van de "volgende" versie van libmdbx zal als een apart project worden voortgezet MithrilDB, terwijl de ontwikkelingsvector van de “huidige” versie van MDBX gericht is op het bevriezen en stabiliseren van de functieset. Deze beslissing is genomen om drie redenen:

• Totaal incompatibel: MithrilDB vereist een ander (incompatibel) databasebestandsformaat en een andere (incompatibele) API om alle geplande functies te implementeren.
• Nieuwe broncode: De broncode van MithrilDB is onafhankelijk van LMDB gelicentieerd, en het is de bedoeling dat het project zelf onder een andere licentie wordt gepubliceerd (goedgekeurd door OSI лицензией Apache 2.0, а не OpenLDAP openbare licentie).
• Разделение позволяет избежать потенциальную путаницу, внести больше определённости и обеспечить независимость пути развития проектов.

MithrilDB is, net als MDBX, ook gebaseerd op boom B+ en zal ook extreem hoge prestaties leveren, terwijl een aantal fundamentele nadelen van MDBX en LMDB worden geëlimineerd. In het bijzonder zal het probleem van ‘long reads’ worden geëlimineerd, wat zich manifesteert als ‘opzwellen’ van de database vanwege het feit dat de verwerking van afval wordt geblokkeerd door long reading-transacties. Nieuwe MithrilDB-functies zijn onder meer:

• Поддержка размещения БД на нескольких разнородных носителях: HDD, SSD и энергонезависимой памяти.
• Оптимальные стратегии для «ценных» и «малоценных», для «горячих», «теплых» и «холодных» данных.
• Использование Merkle tree для контроля целостности БД.
• Опциональное использование WAL и существенно более высокая производительно в сценариях с интенсивной записью и гарантиями на целостность данных.
• Ленивая догоняющая фиксация данных на дисках.

Bron: opennet.ru