စွမ်းဆောင်ရည်မြင့် DBMS libmdbx 0.10.4 နှင့် libfpta 0.3.9 ထည့်သွင်းထားသော စွမ်းဆောင်ရည်မြင့် ထုတ်ဝေမှု

libmdbx 0.10.4 (MDBX) စာကြည့်တိုက်ကို စွမ်းဆောင်ရည်မြင့် ကျစ်လစ်သိပ်သည်းစွာ ထည့်သွင်းထားသော သော့တန်ဖိုးဒေတာဘေ့စ်ကို အကောင်အထည်ဖော်ခြင်းဖြင့်၊ နှင့် ဆက်စပ်နေသော libfpta 0.3.9 (FPTA) စာကြည့်တိုက်၊၊ အလယ်တန်းနှင့် ပေါင်းစပ်အညွှန်းများဖြင့် ဒေတာ၏ဇယားကွက်များကို ကိုယ်စားပြုမှုကို အကောင်အထည်ဖော်ပေးပါသည်။ MDBX ၏ထိပ်တွင်။ စာကြည့်တိုက်နှစ်ခုလုံးကို OSI ခွင့်ပြုထားသောလိုင်စင်များအောက်တွင် ဖြန့်ဝေထားပါသည်။ လက်ရှိလည်ပတ်မှုစနစ်များနှင့် ဗိသုကာလက်ရာများအားလုံးကို ပံ့ပိုးထားပြီး ရုရှား Elbrus 2000 ကိုလည်း ပံ့ပိုးထားသည်။

သမိုင်းကြောင်းအရ၊ libmdbx သည် LMDB DBMS ၏ နက်နဲသော ပြန်လည်ပြုပြင်မှုတစ်ခုဖြစ်ပြီး ယုံကြည်စိတ်ချရမှု၊ အင်္ဂါရပ်နှင့် စွမ်းဆောင်ရည်များတွင် ၎င်း၏ဘိုးဘေးများထက် သာလွန်သည်။ LMDB နှင့် နှိုင်းယှဉ်ပါက libmdbx သည် ကုဒ်အရည်အသွေး၊ API တည်ငြိမ်မှု၊ စမ်းသပ်မှုနှင့် အလိုအလျောက် စစ်ဆေးမှုများကို အလေးပေးထားသည်။ ပြန်လည်ရယူခြင်းစွမ်းရည်အချို့နှင့်အတူ ဒေတာဘေ့စ်ဖွဲ့စည်းပုံ၏ ခိုင်မာမှုကို စစ်ဆေးရန်အတွက် အသုံးဝင်မှုတစ်ခုကို ပံ့ပိုးပေးထားသည်။

နည်းပညာအရ၊ libmdbx သည် ACID၊ ပြင်းထန်သောပြောင်းလဲမှု အမှတ်စဉ်ပြုလုပ်ခြင်းနှင့် CPU cores များတစ်လျှောက် linear scaling ဖြင့် ပိတ်ဆို့ခြင်းမဟုတ်သော reads များကို ပေးပါသည်။ အလိုအလျောက် စုစည်းမှု၊ အလိုအလျောက် ဒေတာဘေ့စ် အရွယ်အစား စီမံခန့်ခွဲမှုနှင့် အပိုင်းအခြား မေးမြန်းမှု ခန့်မှန်းချက်တို့ကို ပံ့ပိုးထားသည်။ 2016 ခုနှစ်မှစတင်၍ ပရောဂျက်များအား Positive Technologies မှ ရန်ပုံငွေထောက်ပံ့ခဲ့ပြီး 2017 ခုနှစ်မှစတင်ကာ ၎င်း၏ထုတ်ကုန်များတွင် အသုံးပြုခဲ့သည်။

libmdbx သည် C++ API နှင့် Rust၊ Haskell၊ Python၊ NodeJS၊ Ruby၊ Go နှင့် Nim အတွက် စိတ်အားထက်သန်သော ပံ့ပိုးပေးထားသော ဘာသာစကား bindings များကို ပေးပါသည်။ libfpta အတွက်၊ API ဖော်ပြချက်အား C/C++ ခေါင်းစီးဖိုင်ပုံစံဖြင့် လူသိရှင်ကြား ရရှိနိုင်ပါသည်။

မေလ ၉ ရက်နေ့ထုတ် ယခင်သတင်းမှစ၍ အဓိက တီထွင်ဆန်းသစ်မှုများ၊ မြှင့်တင်မှုများနှင့် ပြင်ဆင်မှုများ ထည့်သွင်းထားသည်-

• မျိုးပွားနိုင်သော တည်ဆောက်မှုများကို ဖွင့်ပေးသည်။
• အလွန်ရှားပါးသော အခြေအနေများတွင် ငွေပေးငွေယူ ကတိပြုနေစဉ်အတွင်း ကွင်းဆက်/အေးခဲမှုများ ဖြစ်ပေါ်နိုင်သောကြောင့် ချွတ်ယွင်းချက်တစ်ခုကို ပြင်ဆင်ခဲ့သည်။ ယင်းပြဿနာကို Positive Tecnologies ကျွမ်းကျင်သူများက ၎င်းတို့၏ကိုယ်ပိုင်ထုတ်ကုန်များကို အတွင်းပိုင်းစမ်းသပ်မှုအတွင်း တွေ့ရှိခဲ့ခြင်းဖြစ်သည်။
• စမ်းသပ်မှုများကို မြှင့်တင်ပြီး ဒေတာဘေ့စ်အတွင်းရှိ စာမျက်နှာသစ်၏ isomorphic မဟုတ်သော အခြေအနေများနှင့် GC အကြောင်းအရာများကို စစ်ဆေးရန်အတွက် စမ်းသပ်မှုအခြေအနေများကို တိုးချဲ့ထားပါသည်။
• C++ API တွင်၊ အပို "noexception" ကို ပြင်ဆင်ပြီးဖြစ်သည်၊ "cursor::erase()" နည်းလမ်းအတွက် အပိုပိုလျှံမှုများကို ပေါင်းထည့်ထားသည်၊ ချိန်ညှိမှုကိုသေချာစေရန်အတွက် ကြားခံများကိုအကောင်အထည်ဖော်ခြင်းသည် "std::string" ကိုအသုံးပြုခြင်းကို နှမြောလိုက်ပါသည်။ (CLANG libstdc++ အတွက် သက်ဆိုင်ရာ)။
• ကြီးမားသောငွေကြေးလွှဲပြောင်းမှုတွင် ဒေတာကိုပြောင်းလဲသောအခါ ရှားပါးသောမမျှော်လင့်ထားသောအမှားတစ်ခုကြောင့် MDBX_PROBLEM မှပြသခဲ့သော ညစ်ပတ်သောစာမျက်နှာ spilling algorithm (ပြောင်းလဲထားသောဒေတာဘေ့စ်စာမျက်နှာများကိုရွေးချယ်ထုတ်ပယ်ခြင်း) မှ ဆုတ်ယုတ်ခြင်းအား ဖယ်ရှားလိုက်ပါသည်။
• ဒေတာဘေ့စ်ကို ရည်ရွယ်ချက်ရှိရှိ ပျက်စီးသွားသည့်အခါတွင် တည်ငြိမ်မှုရှိစေရန် စစ်ဆေးမှုအများအပြားကို ထပ်လောင်းခြင်းဖြင့် အဆင့်ဆင့်စမ်းသပ်မှုကို ပြုလုပ်ခဲ့သည်။
• အသေးအမွှားသတိပေးချက်များ UndefinedBehaviorSanitizer နှင့် Coverity Scan ပြဿနာများကို ပြင်ဆင်ထားသည်။
• ဒစ်ဂျစ်တယ် ဗားရှင်းအဟောင်းများဖြင့် ဖန်တီးထားသည့် ဒေတာဘေ့စ်ပုံများအတွင်းရှိ အစုအဝေးစာမျက်နှာများတွင် “P_DIRTY” အတွင်းပိုင်းအလံ “P_DIRTY” ကို အသုံးမပြုတော့ဘဲ ခေတ်မမီတော့ကြောင်း စစ်ဆေးခြင်းကို ပြင်ဆင်ပြီးဖြစ်သည်။
• CMake scripts များတွင် LTO (link-time optimization) အတွက် လိုအပ်သော compiler အစိတ်အပိုင်းများကို ရှာဖွေမှုကို မြှင့်တင်ထားပါသည်။
• တစ်ပြိုင်နက်တည်းဖတ်ရှုသူ အများဆုံးအရေအတွက်သည် ၃၂၇၆၇ ဦးအထိ တိုးလာခဲ့သည်။
• Valgrind နှင့် AddressSanitizer ကို အသုံးပြုသောအခါ စွမ်းဆောင်ရည် ပိုမိုကောင်းမွန်လာသည်။
• Windows တွင်၊ MDBX_NOTLS မုဒ်တွင် အလုပ်လုပ်သည့်အခါ SRW-လော့ခ်ကို တစ်ကျော့ပြန်အသုံးပြုခြင်း (အပ်ဒျဒေသတွင်းသိုလှောင်မှုအသုံးမပြုဘဲ) ကို ဖယ်ရှားလိုက်သည်၊ စနစ်အချိန်ပြောင်းသွားပါက bootid မျိုးဆက်ကို ပြင်ဆင်ပြီးဖြစ်သည်၊ WSL1 နှင့် WSL2 ထောက်လှမ်းမှုကို မြှင့်တင်ပြီး လုပ်ဆောင်နိုင်စွမ်း၊ DrvFS မှတစ်ဆင့် တပ်ဆင်ထားသော Plan 9 တွင် ဒေတာဘေ့စ်တစ်ခုကို ဖွင့်ပြီးပါပြီ။
• စုစုပေါင်း၊ ဖိုင် 160 ခုတွင် ပြောင်းလဲမှု 57 ကျော် ပြုလုပ်ခဲ့ပြီး လိုင်းပေါင်း 5000 ကို ပေါင်းထည့်ကာ ~2500 ကို ဖျက်ခဲ့သည်။

လွန်ကဲစွာအသုံးပြုမှုအခြေအနေများတွင် စမ်းသပ်ရာတွင် ၎င်းတို့၏အကူအညီအတွက် Erigon ပရောဂျက်အဖွဲ့ (Ethereum ဂေဟစနစ်) ကို အထူးကျေးဇူးတင်ရှိပါသည်။ Erigon တပ်ဆင်မှုတစ်ခုစီတွင် 0.10.0-1 TB ရှိသော ဒေတာဘေ့စ်ပမာဏ 2-7 TB ရှိသော libmdbx vXNUMX ကို ထုတ်ပြန်ပြီးကတည်းက (Ethereum node များ၏ XNUMX% တွင်အသုံးပြုသည်) ဒေတာဘေ့စ်ခြစားမှု အစီရင်ခံစာ သုံးခုသာ လက်ခံရရှိခဲ့သည်မှာ ထင်ရှားပါသည်။ ပြင်ပအကြောင်းပြချက်ကြောင့်မဟုတ်ဘဲ ဆော့ဖ်ဝဲအမှားအယွင်းများကြောင့် ဖြစ်ပွားရခြင်းဖြစ်သည်- ကိစ္စနှစ်ခုတွင် အကြောင်းရင်းမှာ RAM ချို့ယွင်းမှုဖြစ်ပြီး တတိယမှာ BTRFS ကိုအသုံးပြုသည့် သိုလှောင်မှုစနစ်ခွဲစနစ်၏ သီးခြားဖွဲ့စည်းပုံတစ်ခုတွင် ဒေတာပြန်လည်သတ်မှတ်ခြင်းဆိုင်ရာ အမှားတစ်ခုဖြစ်သည်။

source: opennet.ru