Libmdbx v1.0 teine kandidaat pärast viit aastat arendust.

Raamatukogu libmdbx on oluline täiustatud järglane LMDB — äärmiselt kõrge jõudlusega, kompaktselt integreeritud võtme-väärtuse andmebaas.
Praegune versioon v0.5 on tehniline versioon, mis tähistab kõikide täiustuste lõpetamist ja üleminekut avalikule lõpptestimise ja stabiliseerimise faasile, millele järgneb esimese täisversiooni loomine raamatukogust.

LMDB on tuntud tehingute läbi viiva sisseehitatud andmebaasi süsteem „võti-väärtus“, mis põhineb B+ puul ilma ennustaval logimisel, mis võimaldab paljudel samal ajal töötavatel protsessidel tõhusalt ja konkurentsivõimeliselt suhelda lokaalset jagatud (mitte võrgu) andmebaasiga. Sellegipoolest on MDBX kiirem ja usaldusväärsem kui LMDB, samas kui libmdbx säilitab kõik oma esivanema olulised omadused, nagu ACID ja blokeerimata lugemine, millel on lineaarne skaleerimine CPU tuumade kaupa, lisades samas mitmeid uusi funktsioone.

libmdbx erinevuste ja täiustuste kirjeldamine võrreldes LMDB-ga väärib eraldi artiklit (kavandatud avaldamiseks „Habré“ ja „Mediumis“). Siin on sobilik mainida olulisimaid ja märgatavaid:

• Oluliselt rohkem tähelepanu pööratakse koodi kvaliteedile, testimisele ja automatiseeritud kontrollidele.
• Oluliselt rohkem kontrolli töö käigus, alates parameetrite kontrollimisest kuni andmebaasi struktuuride sisemise auditini.
• Automaatne kompaktimine ja automaatne andmebaasi suuruse juhtimine.
• Ühtne andmebaasi formaat 32-bitiste ja 64-bitiste kogumiks.
• Valimite mahu hindamine vahemike kaupa (vahemiku päringute hindamine).
• Toetatakse võtmeid kahekordse suurusega ja kasutaja valitud andmebaasi lehe suurusega.

Välja antud libmdbx kandidaadiversioon on tulemuseks otsusele (vt allpool) MDBX ja MithrilDB projektide eraldamise kohta 2019. aasta augustis. Samal ajal otsustati libmdbx-s kõrvaldada (ratsionaalne) maksimaalne tehniline võlg ja stabiliseerida raamatukogu. Tegelikult on selle suuna suunas tehtud 2-3 korda rohkem, kui algselt hinnati ja plaaniti:

• On rakendatud tugi Mac OS ja „teise taseme“ platvormide jaoks: FreeBSD, Solaris, DragonFly BSD, OpenBSD, NetBSD. AIX ja HP-UX toe lisamine on võimalik vajadusel.
• Koodi sanitiseerimine Undefined Behavior Sanitizeri ja Address Sanitizeri abil, eemaldades kõik hoiatused koos -Wpedanticiga, kõik Coverity statiilsed analüsaatori hoiatused jne.
• Ajakohastamine API kirjeldus.
• Algse koodi koondamine mugavuse saavutamiseks.
• CMake toetamine.
• Toetab sisemist tehingute korrutamist.
• Bootid'i kasutamine operatsioonisüsteemi taaskäivitamise (andmebaasi räpase seiskamise) tuvastamiseks.
• Pidev uuendatud/vanade lehtede arvestus ja laiendatud teave tehingute kohta.
• MDBX_ACCEDE valik olemasoleva andmebaasi avamiseks ühilduvas režiimis.
• Kasutamine OFD- lukustused kui need on kergesti kättesaadavad.
• Kuuma varukoopia tegemine pipe'i kaudu.
• Spetsialiseeritud optimeeritud sisemise sortimise algoritm (kuni 2-3 korda kiiremini qsort() ja kuni 30% kiiremini std::sort()).
• Suurenetud maksimaalne võtme pikkus.
• Automaatne read ahead juhtimine (andmebaasi faili vahemälustrateegia).
• Aggressiivsem ja kiirem auto-kompaktimisprotsess.
• Optimeeritud B+ puu lehtede ühendamise strateegia.
• Kontroll mitte-lokaalsete failisüsteemide (NFS, Samba jne) üle, et vältida andmebaasi kahjustumist vale kasutamise korral.
• Testide kogumit on laiendatud.

Libmdbx 'järgmise' versiooni arendamine jätkub eraldi projekti raames. MithrilDB, samas kui 'praeguse' MDBX versiooni arendussuund on suunatud funktsioonipaketi külmutamisele ja stabiliseerimisele. See otsus on tehtud kolmel põhjusel:

• Täielik ühilduvusetus: kõigi kavandatud funktsioonide rakendamiseks MithrilDB-s on vajalik erinev (ühilduvusetu) andmebaasi failivorming ja erinev (ühilduvusetu) API.
• Uus lähtekood: MithrilDB lähtekoodi jaoks on tagatud litsentsist sõltumatus LMDB-st ning projekt plaanitakse avaldada teise litsentsi (heakskiidetud OSI lisentsiga Apache 2.0, mitte OpenLDAP Foundation).
• Eraldamine võimaldab vältida võimalikke segadusi, suurendada selguse taset ja tagada projektide arenguteed sõltumatust.

MithrilDB, nagu ka MDBX, põhineb samuti B+ puul ja eristub äärmiselt kõrge jõudluse poolest, samas elimineerides MDBX ja LMDB põhimõttelised puudused. Eelkõige kaob probleem 'pikad lugemised', mis ilmneb andmebaasi 'paisumise' tõttu, kuna jäätme töötlemine takistab pikaajalisi lugemise tehinguid. Uute võimaluste hulka kuuluvad MithrilDB puhul:

• tugi andmebaasi paigutamiseks mitmele erinevale kandjale: HDD, SSD ja mitte-volatile mälule.
• optimaalsed strateegiad „hindamatute“ ja „väheväärtuslike“, „kuumade“, „soojade“ ja „külmade“ andmete jaoks.
• Merkle puu kasutamine andmebaasi terviklikkuse kontrollimiseks.
• valikuline WAL kasutamine ja oluliselt kõrgem tootlikkus intensiivsete kirjutamisstsenaariumide korral ning andmete terviklikkuse tagamine.
• laiskijärgne andmete fikseerimine ketastel.

Allikas: linux.org.ru