{"id":101601,"date":"2021-10-11T22:22:40","date_gmt":"2021-10-11T20:22:40","guid":{"rendered":"https:\/\/prohoster.info\/blog\/novosti-interneta\/vypusk-vysokoproizvoditelnoj-vstraivaemoj-subd-libmdbx-0-10-4-i-libfpta-0-3-9"},"modified":"2021-10-11T22:22:40","modified_gmt":"2021-10-11T20:22:40","slug":"vypusk-vysokoproizvoditelnoj-vstraivaemoj-subd-libmdbx-0-10-4-i-libfpta-0-3-9","status":"publish","type":"post","link":"https:\/\/prohoster.info\/sk\/blog\/news\/vypusk-vysokoproizvoditelnoj-vstraivaemoj-subd-libmdbx-0-10-4-i-libfpta-0-3-9","title":{"rendered":"Vydanie vysoko v\u00fdkonn\u00e9ho zabudovan\u00e9ho S\u00daDB libmdbx 0.10.4 a libfpta 0.3.9","gt_translate_keys":[{"key":"rendered","format":"text"}]},"content":{"rendered":"
Prezent\u00e1cia kni\u017en\u00edc libmdbx 0.10.4 (MDBX) so zaveden\u00edm vysoko v\u00fdkonnej kompaktnej vstavan\u00e9 datab\u00e1zy typu k\u013e\u00fa\u010d-hodnota a s\u00favisiacej kni\u017enice libfpta 0.3.9 (FPTA), ktor\u00e1 implementuje tabul\u00e1rne zobrazenie \u00fadajov s sekund\u00e1rnymi a zlo\u017een\u00fdmi indexmi nad MDBX. Obe kni\u017enice s\u00fa distribuovan\u00e9 pod licenciami schv\u00e1len\u00fdmi OSI. Podporovan\u00e9 s\u00fa v\u0161etky aktu\u00e1lne opera\u010dn\u00e9 syst\u00e9my a architekt\u00fary, ako aj rusk\u00fd Elbrus 2000. <\/p>\n
Historicky je libmdbx hlbokou rev\u00edziou DBMS LMDB a prekra\u010duje svojho predchodcu z h\u013eadiska spo\u013eahlivosti, rozsahu funkci\u00ed a v\u00fdkonu. V porovnan\u00ed s LMDB d\u00e1va libmdbx ve\u013ek\u00fd d\u00f4raz na kvalitu k\u00f3du, stabiln\u00e9 API, testovanie a automatizovan\u00e9 kontroly. Dod\u00e1va sa s n\u00e1strojom na kontrolu integrity \u0161trukt\u00fary datab\u00e1zy s niektor\u00fdmi schopnos\u0165ami obnovenia. <\/p>\n
Technologicky libmdbx pon\u00faka ACID, pr\u00edsnu serializ\u00e1ciu zmien a neblokuj\u00face \u010d\u00edtanie s line\u00e1rnym \u0161k\u00e1lovan\u00edm na CPU jadr\u00e1. Podporuje sa automatick\u00e1 kompakcia, automatick\u00e9 riadenie ve\u013ekosti datab\u00e1zy a odhad objemu dotazov pod\u013ea rozsahov (range query estimation). Od roku 2016 je projekt financovan\u00fd spolo\u010dnos\u0165ou Positive Technologies a od roku 2017 sa pou\u017e\u00edva v jej produktoch. <\/p>\n
Pre libmdbx sa pon\u00faka C++ API, ako aj podporovan\u00e9 nad\u0161encami v\u00e4zby na jazyky Rust, Haskell, Python, NodeJS, Ruby, Go, Nim. Pre libfpta je verejne dostupn\u00fd iba popis API vo forme hlavi\u010dkov\u00e9ho s\u00faboru C\/C++. <\/p>\n
Hlavn\u00e9 novinky, vylep\u0161enia a opravy pridan\u00e9 od poslednej spr\u00e1vy zo 9. m\u00e1ja: <\/p>\n
Opraven\u00e1 chyba, kv\u00f4li ktorej sa pri ve\u013emi zriedkav\u00fdch okolnostiach po\u010das potvrdenia transakcie mohlo vyskytn\u00fa\u0165 zaseknutie. Probl\u00e9m odhalili odborn\u00edci Positive Technologies pri internom testovan\u00ed vlastn\u00fdch produktov.\n
Vylep\u0161en\u00e9 testy a roz\u0161\u00edren\u00e9 testovacie scen\u00e1re na kontrolu v\u0161etk\u00fdch dosiahnute\u013en\u00fdch neizomorfick\u00fdch stavov stromu str\u00e1n a obsahu GC v datab\u00e1ze.\n
V C++ API bol odstr\u00e1nen\u00fd zbyto\u010dn\u00fd «noexcept», pridali sa \u010fal\u0161ie pre\u0165a\u017eenia met\u00f3dy «cursor::erase()», implement\u00e1cia buffrov sa zbavila pou\u017eitia «std::string» na zabezpe\u010denie vyrovnania (aktu\u00e1lne pre CLANG libstdc++).\n
Opraven regres v algoritme prepisovania \u0161pinav\u00fdch str\u00e1n (v\u00fdberov\u00e9 vytesnenie zmenen\u00fdch str\u00e1nok DB), ktor\u00e9 sa prejavovalo zriedkavou neo\u010dak\u00e1vanou chybou MDBX_PROBLEM pri zmene \u00fadajov vo ve\u013ek\u00fdch transakci\u00e1ch.\n
Bol vykonan\u00fd test f\u00e1zu s pridan\u00edm nieko\u013ek\u00fdch kontrol pre zabezpe\u010denie stability pri z\u00e1mernom po\u0161kodeniu DB.\n
Opraven\u00e9 men\u0161ie varovania UndefinedBehaviorSanitizer a probl\u00e9my Coverity Scan.\n
Opraven\u00e1 kontrola zastaran\u00e9ho a u\u017e nepou\u017e\u00edvan\u00e9ho vn\u00fatorn\u00e9ho pr\u00edznaku «P_DIRTY» vo vnorenej str\u00e1nke v r\u00e1mci datab\u00e1zov\u00fdch obrazov vytvoren\u00fdch star\u00fdmi verziami kni\u017enice.\n
Vo skriptoch CMake bola vylep\u0161en\u00e1 lokaliz\u00e1cia komponentov pre kompil\u00e1tor potrebn\u00fdch na LTO (optimaliz\u00e1cia v \u010dase prepojenia).\n
Maxim\u00e1lny po\u010det s\u00fabe\u017en\u00fdch \u010ditate\u013eov bol zv\u00fd\u0161en\u00fd na 32767.\n
Zr\u00fdchlen\u00e1 pr\u00e1ca pri pou\u017e\u00edvan\u00ed Valgrindu a AddressSanitizeru.\n
Na Windows bolo odstr\u00e1nen\u00e9 rekurz\u00edvne pou\u017e\u00edvanie SRW-zamku pri pr\u00e1ci v re\u017eime MDBX_NOTLS (bez pou\u017eitia lok\u00e1lneho \u00falo\u017eiska threadu), opraven\u00e1 gener\u00e1cia bootid v pr\u00edpade zmeny syst\u00e9mov\u00e9ho \u010dasu, vylep\u0161en\u00e9 detekovanie WSL1 a WSL2, pridan\u00e1 mo\u017enos\u0165 otvorenia DB na Plan 9 pripojenom prostredn\u00edctvom DrvFS.\n
Celkom bolo vykonan\u00fdch viac ako 160 zmien v 57 s\u00faboroch, pridan\u00fdch ~5000 riadkov, odstr\u00e1nen\u00fdch ~2500. <\/ul>\n
Osobitne by som chcel po\u010fakova\u0165 t\u00edmu projektu Erigon (ekosyst\u00e9m Ethereum) za pomoc pri testovan\u00ed v extr\u00e9mnych scen\u00e1roch. Je pozoruhodn\u00e9, \u017ee po\u010das piatich mesiacov od vydania libmdbx v0.10.0, pri objeme DB 1-2 TB v ka\u017edej in\u0161tal\u00e1cii Erigon (pou\u017e\u00edva sa na 7% uzlov Ethereum), boli prijat\u00e9 iba tri hl\u00e1senia o po\u0161koden\u00ed DB, v\u0161etky sa vyskytli z vonkaj\u0161\u00edch pr\u00ed\u010din, nie z ch\u00fdb softv\u00e9ru: v dvoch pr\u00edpadoch boli pr\u00ed\u010dinou probl\u00e9my s RAM, v tre\u0165om chybn\u00e9 vynulovanie \u00fadajov v \u0161pecifickej konfigur\u00e1cii \u00falo\u017en\u00e9ho subsyst\u00e9mu s vyu\u017eit\u00edm BTRFS. \n Zdroj: opennet.ru<\/a> <\/p>","protected":false,"gt_translate_keys":[{"key":"rendered","format":"html"}]},"excerpt":{"rendered":"