{"id":101601,"date":"2021-10-11T22:22:40","date_gmt":"2021-10-11T20:22:40","guid":{"rendered":"https:\/\/prohoster.info\/blog\/novosti-interneta\/vypusk-vysokoproizvoditelnoj-vstraivaemoj-subd-libmdbx-0-10-4-i-libfpta-0-3-9"},"modified":"2021-10-11T22:22:40","modified_gmt":"2021-10-11T20:22:40","slug":"vypusk-vysokoproizvoditelnoj-vstraivaemoj-subd-libmdbx-0-10-4-i-libfpta-0-3-9","status":"publish","type":"post","link":"https:\/\/prohoster.info\/pt\/blog\/news\/vypusk-vysokoproizvoditelnoj-vstraivaemoj-subd-libmdbx-0-10-4-i-libfpta-0-3-9","title":{"rendered":"Lan\u00e7amento do SGBD embutido de alto desempenho libmdbx 0.10.4 e libfpta 0.3.9","gt_translate_keys":[{"key":"rendered","format":"text"}]},"content":{"rendered":"
Foi lan\u00e7ado o libmdbx 0.10.4 (MDBX) com a implementa\u00e7\u00e3o de um banco de dados compacto e de alto desempenho do tipo chave-valor, e a biblioteca associada libfpta 0.3.9 (FPTA), que implementa uma representa\u00e7\u00e3o tabular de dados sobre o MDBX com \u00edndices secund\u00e1rios e compostos. Ambas as bibliotecas s\u00e3o distribu\u00eddas sob licen\u00e7as aprovadas pela OSI. Todas as principais plataformas e arquiteturas est\u00e3o suportadas, incluindo o Elbrus 2000 da R\u00fassia. <\/p>\n
Historicamente, o libmdbx \u00e9 uma revis\u00e3o profunda do SGBD LMDB e supera seu predecessor em confiabilidade, recursos e desempenho. Em compara\u00e7\u00e3o com o LMDB, o libmdbx d\u00e1 grande aten\u00e7\u00e3o \u00e0 qualidade do c\u00f3digo, ao funcionamento est\u00e1vel da API, aos testes e \u00e0s verifica\u00e7\u00f5es autom\u00e1ticas. Uma ferramenta de verifica\u00e7\u00e3o de integridade da estrutura do banco de dados \u00e9 fornecida, com algumas capacidades de recupera\u00e7\u00e3o. <\/p>\n
Tecnologicamente, o libmdbx oferece ACID, serializa\u00e7\u00e3o rigorosa de mudan\u00e7as e leitura n\u00e3o bloqueante com escalabilidade linear em n\u00facleos de CPU. A auto-compacta\u00e7\u00e3o, o gerenciamento autom\u00e1tico do tamanho do banco de dados e a estimativa de volume de consultas em intervalos (range query estimation) s\u00e3o suportadas. Desde 2016, o projeto \u00e9 financiado pela Positive Technologies e, desde 2017, \u00e9 utilizado em seus produtos. <\/p>\n
Para o libmdbx, uma API C++ \u00e9 oferecida, bem como liga\u00e7\u00f5es a linguagens suportadas por entusiastas, como Rust, Haskell, Python, NodeJS, Ruby, Go e Nim. Para o libfpta, apenas a descri\u00e7\u00e3o da API est\u00e1 publicamente dispon\u00edvel na forma de um arquivo de cabe\u00e7alho C\/C++. <\/p>\n
As principais inova\u00e7\u00f5es, melhorias e corre\u00e7\u00f5es adicionadas desde a \u00faltima not\u00edcia de 9 de maio: <\/p>\n
\n
Foi garantida a possibilidade de builds reproduz\u00edveis.\n
Um erro foi corrigido, que em condi\u00e7\u00f5es muito raras durante a confirma\u00e7\u00e3o de uma transa\u00e7\u00e3o poderia causar um loop\/pend\u00eancia. O problema foi identificado pelos especialistas da Positive Technologies durante testes internos de seus produtos.\n
Os testes foram aprimorados e os cen\u00e1rios de teste foram expandidos para verificar todos os estados n\u00e3o isom\u00f3rficos alcan\u00e7\u00e1veis da \u00e1rvore de p\u00e1ginas e o conte\u00fado do GC dentro do banco de dados.\n
Na API C++, foi corrigido um excessivo «noexcept», adicionadas sobrecargas adicionais para o m\u00e9todo «cursor::erase()», e a implementa\u00e7\u00e3o de buffers foi removida do uso de «std::string» para garantir o alinhamento (relevante para CLANG libstdc++).\n
Foi resolvido um regresso no algoritmo de spooling de p\u00e1ginas sujas (substitui\u00e7\u00e3o seletiva de p\u00e1ginas do banco de dados alteradas) que se manifestava por um erro raro e inesperado MDBX_PROBLEM durante a altera\u00e7\u00e3o de dados em grandes transa\u00e7\u00f5es.\n
Foi realizada uma verifica\u00e7\u00e3o com phase testing, adicionando uma s\u00e9rie de verifica\u00e7\u00f5es para garantir a estabilidade ao danificar intencionalmente o banco de dados.\n
Foram corrigidos avisos menores de UndefinedBehaviorSanitizer e problemas do Coverity Scan.\n
Foi corrigida a verifica\u00e7\u00e3o da flag interna «P_DIRTY» obsoleta e j\u00e1 n\u00e3o utilizada em p\u00e1ginas aninhadas dentro de imagens de BD criadas por vers\u00f5es antigas da biblioteca.\n
Nos scripts CMake, foi aprimorada a busca por componentes do compilador necess\u00e1rios para LTO (otimiza\u00e7\u00e3o em tempo de link).\n
O n\u00famero m\u00e1ximo de leitores simult\u00e2neos foi aumentado para 32767.\n
O desempenho foi acelerado ao usar Valgrind e AddressSanitizer.\n
No Windows, foi resolvido o uso recursivo do SRW-lock ao operar no modo MDBX_NOTLS (sem usar armazenamento local de threads), a gera\u00e7\u00e3o de bootid foi corrigida em caso de altera\u00e7\u00e3o do tempo do sistema, a detec\u00e7\u00e3o do WSL1 e WSL2 foi aprimorada, e adicionada a capacidade de abrir o banco de dados em Plan 9 montado atrav\u00e9s do DrvFS.\n
No total, foram feitas mais de 160 altera\u00e7\u00f5es em 57 arquivos, adicionando cerca de 5000 linhas e removendo cerca de 2500. <\/ul>\n
Gostaria de agradecer \u00e0 equipe do projeto Erigon (ecossistema Ethereum) pela ajuda nos testes em cen\u00e1rios de uso extremos. \u00c9 digno de nota que nos cinco meses desde o lan\u00e7amento do libmdbx v0.10.0, com um volume de banco de dados de 1-2 TB em cada instala\u00e7\u00e3o do Erigon (usado em 7% dos n\u00f3s Ethereum), apenas tr\u00eas relatos de corrup\u00e7\u00e3o de banco de dados foram recebidos, todos ocorrendo devido a causas externas e n\u00e3o erros de software: em dois casos, as falhas foram causadas por problemas de RAM, e no terceiro, um erro de reinicializa\u00e7\u00e3o de dados em uma configura\u00e7\u00e3o espec\u00edfica do subsistema de armazenamento usando BTRFS. \n Fonte: opennet.ru<\/a> <\/p>","protected":false,"gt_translate_keys":[{"key":"rendered","format":"html"}]},"excerpt":{"rendered":"