{"id":101601,"date":"2021-10-11T22:22:40","date_gmt":"2021-10-11T20:22:40","guid":{"rendered":"https:\/\/prohoster.info\/blog\/novosti-interneta\/vypusk-vysokoproizvoditelnoj-vstraivaemoj-subd-libmdbx-0-10-4-i-libfpta-0-3-9"},"modified":"2021-10-11T22:22:40","modified_gmt":"2021-10-11T20:22:40","slug":"vypusk-vysokoproizvoditelnoj-vstraivaemoj-subd-libmdbx-0-10-4-i-libfpta-0-3-9","status":"publish","type":"post","link":"https:\/\/prohoster.info\/ro\/blog\/news\/vypusk-vysokoproizvoditelnoj-vstraivaemoj-subd-libmdbx-0-10-4-i-libfpta-0-3-9","title":{"rendered":"Lansarea bazei de date \u00eencorporate de \u00eenalt\u0103 performan\u021b\u0103 libmdbx 0.10.4 \u0219i libfpta 0.3.9","gt_translate_keys":[{"key":"rendered","format":"text"}]},"content":{"rendered":"
A avut loc lansarea bibliotecilor libmdbx 0.10.4 (MDBX) cu implementarea unei baze de date compact\u0103, integrat\u0103 de \u00eenalt\u0103 performan\u021b\u0103, de tip cheie-valoare, \u0219i a bibliotecii asociate libfpta 0.3.9 (FPTA), care ofer\u0103 o reprezentare tabular\u0103 a datelor peste MDBX, cu indec\u0219i secundari \u0219i compu\u0219i. Ambele biblioteci sunt distribuite sub licen\u021be aprobate de OSI. Sunt suportate toate sistemele de operare \u0219i arhitecturile actuale, precum \u0219i procesorul rusesc Elbrus 2000. <\/p>\n
Istoric, libmdbx reprezint\u0103 o reproiectare profund\u0103 a SGBD-ului LMDB \u0219i \u00eel dep\u0103\u0219e\u0219te pe acesta \u00een ceea ce prive\u0219te fiabilitatea, setul de func\u021bionalit\u0103\u021bi \u0219i performan\u021ba. Comparativ cu LMDB, libmdbx pune un accent deosebit pe calitatea codului, functionarea stabil\u0103 a API-ului, testare \u0219i verific\u0103ri automate. Este inclus un utilitar de verificare a integrit\u0103\u021bii structurii bazei de date, cu unele capabilit\u0103\u021bi de recuperare. <\/p>\n
Din punct de vedere tehnologic, libmdbx ofer\u0103 ACID, serializare strict\u0103 a modific\u0103rilor \u0219i citire neblocat, cu scalare liniar\u0103 pe nucleele CPU. Este suportat\u0103 autocontrac\u021bia, gestionarea automat\u0103 a dimensiunii bazei de date, estimarea volumului de selec\u021bii pe intervale (range query estimation). Din 2016, proiectele sunt finan\u021bate de compania Positive Technologies \u0219i din 2017 sunt utilizate \u00een produsele acesteia. <\/p>\n
Pentru libmdbx este oferit un API C++, precum \u0219i leg\u0103turi sus\u021binute de entuzia\u0219ti pentru limbaje precum Rust, Haskell, Python, NodeJS, Ruby, Go, Nim. Pentru libfpta este public disponibil doar descrierea API-ului sub form\u0103 de fi\u0219ier de antet C\/C++. <\/p>\n
Principalele nout\u0103\u021bi, \u00eembun\u0103t\u0103\u021biri \u0219i corec\u021bii ad\u0103ugate dup\u0103 ultima \u0219tire din 9 mai: <\/p>\n
\n
A fost asigurat\u0103 posibilitatea construirii reproducibile.\n
A fost remediat\u0103 o eroare, din cauza c\u0103reia, \u00een circumstan\u021be foarte rare, \u00een timpul fix\u0103rii tranzac\u021biei, se putea produce o bucl\u0103 infinit\u0103\/blocare. Problema a fost identificat\u0103 de speciali\u0219tii de la Positive Technologies \u00een timpul test\u0103rii interne a propriilor produse.\n
Teste \u00eembun\u0103t\u0103\u021bite \u0219i scenarii de testare extinse pentru a verifica toate st\u0103rile neizomorfice posibile ale arborelui de pagini \u0219i con\u021binutul GC din baza de date.\n
\u00cen API-ul C++, a fost corectat\u0103 apari\u021bia inutil\u0103 a «noexcept», au fost ad\u0103ugate suprasarcini suplimentare pentru metoda «cursor::erase()», iar implementarea bufferelor a fost eliberat\u0103 de utilizarea «std::string» pentru a asigura alinierea (relevant\u0103 pentru CLANG libstdc++).\n
Regresul din algoritmul de spooling al paginilor murdare (eliminarea selectiv\u0103 a paginilor modificate din baza de date) a fost corectat, manifest\u00e2ndu-se printr-o eroare rar\u0103 \u0219i nea\u0219teptat\u0103 MDBX_PROBLEM \u00een timpul modific\u0103rii datelor \u00een tranzac\u021bii mari.\n
A fost realizat\u0103 o verificare prin fazare cu ad\u0103ugarea unei serii de verific\u0103ri pentru a asigura stabilitatea \u00een cazul deterior\u0103rii inten\u021bionate a bazei de date.\n
Au fost eliminate avertiz\u0103rile minore UndefinedBehaviorSanitizer \u0219i problemele detectate de Coverity Scan.\n
A fost corectat\u0103 verificarea unui flag intern «P_DIRTY» \u00eenvechit \u0219i deja neutilizat \u00een paginile \u00eencorporate din imaginile bazei de date create de versiunile vechi ale bibliotecii.\n
\u00cen scripturile CMake a fost \u00eembun\u0103t\u0103\u021bit\u0103 c\u0103utarea componentelor compilatorului necesare pentru LTO (optimizare la link).\n
Num\u0103rul maxim de cititori concuren\u021bi a fost crescut la 32767.\n
Performan\u021ba la utilizarea Valgrind \u0219i AddressSanitizer a fost accelerat\u0103.\n
Pe Windows a fost eliminat\u0103 utilizarea recursiv\u0103 a SRW-lock \u00een modul MDBX_NOTLS (f\u0103r\u0103 utilizarea stoc\u0103rii locale pe fir), a fost corectat\u0103 generarea bootid \u00een cazul modific\u0103rii timpului de sistem, a fost \u00eembun\u0103t\u0103\u021bit\u0103 detectarea WSL1 \u0219i WSL2, \u0219i a fost ad\u0103ugat\u0103 posibilitatea de a deschide baza de date pe Plan 9 montat\u0103 prin DrvFS.\n
\u00cen total, au fost efectuate peste 160 de modific\u0103ri \u00een 57 de fi\u0219iere, ad\u0103ug\u00e2ndu-se aproximativ 5000 de linii \u0219i elimin\u00e2ndu-se aproximativ 2500. <\/ul>\n
Doresc s\u0103 mul\u021bumesc echipei proiectului Erigon (ecosistemul Ethereum) pentru ajutorul acordat \u00een testarea \u00een scenarii extreme de utilizare. Este demn de remarcat c\u0103, \u00een cei cinci luni de la lansarea libmdbx v0.10.0, av\u00e2nd o baz\u0103 de date de 1-2 TB \u00een fiecare instalare Erigon (utilizat\u0103 pe 7% din nodurile Ethereum), au fost primite doar trei rapoarte de deteriorare a bazei de date, toate cauzate de motive externe, nu de erori de software: \u00een dou\u0103 cazuri, problema a fost defec\u021biunea memoriei RAM, iar \u00een cazul trei, o eroare de resetare a datelor \u00eentr-o configura\u021bie specific\u0103 a subsistemului de stocare cu utilizarea BTRFS. \n Sursa: opennet.ro<\/a> <\/p>","protected":false,"gt_translate_keys":[{"key":"rendered","format":"html"}]},"excerpt":{"rendered":"