{"id":101601,"date":"2021-10-11T22:22:40","date_gmt":"2021-10-11T20:22:40","guid":{"rendered":"https:\/\/prohoster.info\/blog\/novosti-interneta\/vypusk-vysokoproizvoditelnoj-vstraivaemoj-subd-libmdbx-0-10-4-i-libfpta-0-3-9"},"modified":"2021-10-11T22:22:40","modified_gmt":"2021-10-11T20:22:40","slug":"vypusk-vysokoproizvoditelnoj-vstraivaemoj-subd-libmdbx-0-10-4-i-libfpta-0-3-9","status":"publish","type":"post","link":"https:\/\/prohoster.info\/pl\/blog\/news\/vypusk-vysokoproizvoditelnoj-vstraivaemoj-subd-libmdbx-0-10-4-i-libfpta-0-3-9","title":{"rendered":"Wydanie wysoko wydajnej wbudowanej bazy danych libmdbx 0.10.4 i libfpta 0.3.9","gt_translate_keys":[{"key":"rendered","format":"text"}]},"content":{"rendered":"
Wydano biblioteki libmdbx 0.10.4 (MDBX), kt\u00f3re wdra\u017caj\u0105 wysokowydajn\u0105, kompaktow\u0105 baz\u0119 danych wbudowan\u0105 klasy klucz-warto\u015b\u0107, oraz powi\u0105zan\u0105 bibliotek\u0119 libfpta 0.3.9 (FPTA), realizuj\u0105c\u0105 na bazie MDBX tabelaryczne przedstawienie danych z indeksami wt\u00f3rnymi i z\u0142o\u017conymi. Obie biblioteki s\u0105 dystrybuowane na licencjach zatwierdzonych przez OSI. Obs\u0142ugiwane s\u0105 wszystkie aktualne systemy operacyjne oraz architektury, w tym rosyjski Elbrus 2000. <\/p>\n
Historycznie libmdbx jest gruntown\u0105 przebudow\u0105 bazy danych LMDB i przewy\u017csza swojego poprzednika pod wzgl\u0119dem niezawodno\u015bci, zestawu mo\u017cliwo\u015bci i wydajno\u015bci. W por\u00f3wnaniu z LMDB, w libmdbx z du\u017c\u0105 uwag\u0105 podchodzi si\u0119 do jako\u015bci kodu, stabilno\u015bci API, testowania i automatycznych kontroli. Dostarczana jest narz\u0119dzie do sprawdzania integralno\u015bci struktury bazy danych z pewnymi mo\u017cliwo\u015bciami przywracania. <\/p>\n
Technologicznie libmdbx oferuje ACID, \u015bcis\u0142\u0105 serializacj\u0119 zmian oraz odczyt bez blokowania z liniowym skalowaniem na rdzeniach CPU. Obs\u0142uguje automatyczn\u0105 kompaktyfikacj\u0119, automatyczne zarz\u0105dzanie rozmiarem bazy danych, ocen\u0119 obj\u0119to\u015bci zapyta\u0144 w zakresie (range query estimation). Od 2016 roku projekt jest finansowany przez firm\u0119 Positive Technologies i od 2017 roku wykorzystywany w jej produktach. <\/p>\n
Dla libmdbx oferowane jest API w C++, a tak\u017ce wspierane przez entuzjast\u00f3w powi\u0105zania z j\u0119zykami Rust, Haskell, Python, NodeJS, Ruby, Go, Nim. Dla libfpta publicznie dost\u0119pny jest tylko opis API w postaci pliku nag\u0142\u00f3wkowego C\/C++. <\/p>\n
G\u0142\u00f3wne nowo\u015bci, poprawki i zmiany, kt\u00f3re zosta\u0142y dodane po poprzedniej wiadomo\u015bci z 9 maja: <\/p>\n
Usuni\u0119to b\u0142\u0105d, kt\u00f3ry w bardzo rzadkich okoliczno\u015bciach podczas zatwierdzania transakcji m\u00f3g\u0142 powodowa\u0107 zakleszczenie\/zawieszenie. Problem zosta\u0142 zidentyfikowany przez specjalist\u00f3w z Positive Technologies podczas wewn\u0119trznych test\u00f3w w\u0142asnych produkt\u00f3w.\n
Zaktualizowano testy i rozszerzono scenariusze testowe w celu weryfikacji wszystkich osi\u0105galnych nieizomorficznych stan\u00f3w drzewa stron i zawarto\u015bci GC wewn\u0105trz bazy danych.\n
W API C++ usuni\u0119to zb\u0119dny «noexcept», dodano dodatkowe przeci\u0105\u017cenia dla metody «cursor::erase()», a implementacja bufor\u00f3w pozbawiona zosta\u0142a u\u017cycia «std::string» w celu zapewnienia wyr\u00f3wnania (dotyczy to CLANG libstdc++).\n
Usuni\u0119to regres w algorytmie spillowania brudnych stron (selektywne wypieranie zmienionych stron Bazy Danych), co objawia\u0142o si\u0119 rzadkim, nieoczekiwanym b\u0142\u0119dem MDBX_PROBLEM podczas zmiany danych w ogromnych transakcjach.\n
Przeprowadzono kontrol\u0119 za pomoc\u0105 fazowania, dodaj\u0105c szereg weryfikacji dla zapewnienia stabilno\u015bci podczas celowego uszkodzenia Bazy Danych.\n
Usuni\u0119to drobne ostrze\u017cenia UndefinedBehaviorSanitizer i problemy zg\u0142oszone przez Coverity Scan.\n
Poprawiono sprawdzanie przestarza\u0142ego i ju\u017c nieu\u017cywanego wewn\u0119trznego flagi «P_DIRTY» na stronach zagnie\u017cd\u017conych w obrazach bazy danych utworzonych przez stare wersje biblioteki.\n
W skryptach CMake poprawiono wyszukiwanie komponent\u00f3w kompilatora niezb\u0119dnych do LTO (optymalizacji w czasie linkowania).\n
Maksymalna liczba jednoczesnych czytelnik\u00f3w zwi\u0119kszona do 32767.\n
Przyspieszono dzia\u0142anie przy u\u017cyciu Valgrind i AddressSanitizer.\n
Na Windows usuni\u0119to rekurencyjne korzystanie z SRW-lock podczas pracy w trybie MDBX_NOTLS (bez u\u017cycia lokalnego przechowywania w\u0105tk\u00f3w), poprawiono generacj\u0119 bootid w przypadku zmiany czasu systemowego, poprawiono detekcj\u0119 WSL1 i WSL2, dodano mo\u017cliwo\u015b\u0107 otwierania Bazy Danych w Plan 9 zamontowanej za po\u015brednictwem DrvFS.\n
\u0141\u0105cznie wprowadzono ponad 160 zmian w 57 plikach, dodano ~5000 linii, usuni\u0119to ~2500. <\/ul>\n
Szczeg\u00f3lne podzi\u0119kowania dla zespo\u0142u projektu Erigon (ekosystem Ethereum) za pomoc w testowaniu w ekstremalnych scenariuszach u\u017cytkowania. Warto zauwa\u017cy\u0107, \u017ce w ci\u0105gu pi\u0119ciu miesi\u0119cy od wydania libmdbx v0.10.0, przy obj\u0119to\u015bci Bazy Danych 1-2 TB w ka\u017cdej instalacji Erigon (u\u017cywanej na 7% w\u0119z\u0142\u00f3w Ethereum), otrzymano tylko trzy zg\u0142oszenia o uszkodzeniu Bazy Danych, wszystkie spowodowane przyczynami zewn\u0119trznymi, a nie b\u0142\u0119dami oprogramowania: w dw\u00f3ch przypadkach przyczyn\u0105 by\u0142y awarie RAM, a w trzecim b\u0142\u0105d zerowania danych w specyficznej konfiguracji podsystemu przechowywania z u\u017cyciem BTRFS. \n \u0179r\u00f3d\u0142o: opennet.ru<\/a> <\/p>","protected":false,"gt_translate_keys":[{"key":"rendered","format":"html"}]},"excerpt":{"rendered":"