LizardFS 3.13.0-rc2 အစုအဝေး ဖိုင်စနစ် အပ်ဒိတ်

တစ်နှစ်တာလုံး ဖွံ့ဖြိုးတိုးတက်လာပြီးနောက် ပြန်လည်စတင်ခဲ့သည်။ အမှား-ခံနိုင်ရည်ရှိသော ဖြန့်ဝေထားသော ဖိုင်စနစ်၏ ဌာနခွဲအသစ်တစ်ခုတွင် အလုပ်လုပ်သည်။ LizardF 3.13 и ပုံနှိပ်ထုတ်ဝေ ဒုတိယအကြိမ်လွှတ် တော်ကိုယ်စားလှယ်။ မကြာသေးမီက ဖြစ်ပွားခဲ့သည် LizardFS တီထွင်ထုတ်လုပ်နေသော ကုမ္ပဏီပိုင်ရှင်များ၏ အပြောင်းအလဲ၊ စီမံခန့်ခွဲမှုအသစ်ကို လက်ခံကျင့်သုံးပြီး developer များကို အစားထိုးခဲ့သည်။ လွန်ခဲ့သည့် နှစ်နှစ်တာကာလအတွင်း ပရောဂျက်ကို ရပ်ရွာမှ နုတ်ထွက်ခဲ့ပြီး ၎င်းကို လုံလောက်သော အာရုံစိုက်မှု မရှိခဲ့သော်လည်း အဖွဲ့သစ်သည် အသိုင်းအဝိုင်းနှင့် ယခင်ဆက်ဆံရေးကို ပြန်လည်အသက်သွင်းရန်နှင့် ၎င်းနှင့် နီးကပ်သော အပြန်အလှန်ဆက်ဆံရေးကို ထူထောင်ရန် ရည်ရွယ်ထားသည်။ ပရောဂျက်ကုဒ်ကို C နှင့် C++ ဘာသာစကားများဖြင့် ရေးသားထားသည်။ ဖြန့်ဝေသည် GPLv3 လိုင်စင်အောက်တွင်။

LizardFS ဒါဟာဖြစ်ပါသည် မတူညီသောဆာဗာများတစ်လျှောက် ဒေတာများကို ဖြန့်ဝေခွင့်ပြုသည့် ဖြန့်ဝေထားသော အစုအဖွဲ့ ဖိုင်စနစ်တစ်ခု၊ ၎င်းတို့အား ရိုးရာဒစ်ခ်အပိုင်းပိုင်းများနှင့် ဆင်တူသော နည်းလမ်းဖြင့် လုပ်ဆောင်သည့် ကြီးမားသော အပိုင်းတစ်ခု၏ ပုံစံဖြင့် ၎င်းတို့ထံ ဝင်ရောက်ခွင့်ပေးသည်။ LizardFS ပါသော တပ်ဆင်ထားသော အပိုင်းတစ်ခုသည် POSIX ဖိုင်အရည်အသွေးများ၊ ACLs၊ သော့ခတ်များ၊ ခြေစွပ်များ၊ ပိုက်များ၊ စက်ဖိုင်များ၊ သင်္ကေတနှင့် ခက်ခဲသောလင့်ခ်များကို ပံ့ပိုးပေးသည်။ စနစ်တွင် ချို့ယွင်းချက်တစ်ခုမျှမရှိပါ၊ အစိတ်အပိုင်းအားလုံးသည် မလိုအပ်တော့ပါ။ ဒေတာလုပ်ဆောင်မှုများကို ပြိုင်တူပြုလုပ်ခြင်းကို ပံ့ပိုးထားသည် (ဖောက်သည်များစွာသည် ဖိုင်များကို တစ်ပြိုင်နက် ဝင်ရောက်ကြည့်ရှုနိုင်သည်)။

အမှားအယွင်းခံနိုင်ရည်ရှိစေရန်အတွက်၊ ဒေတာကို ကွဲပြားသော node များပေါ်တွင် အထပ်အထပ်ရှိသော node များတစ်လျှောက် ဖြန့်ဝေပေးသည့်ပုံစံတူများ (မိတ္တူများစွာကို မတူညီသော node များတွင် ထားရှိသည်)၊ nodes သို့မဟုတ် drives များ ပျက်ကွက်ပါက၊ စနစ်သည် အချက်အလက်ဆုံးရှုံးမှုမရှိဘဲ ဆက်လက်လည်ပတ်နေပြီး ဒေတာကို အလိုအလျောက်ပြန်လည်ဖြန့်ဝေပေးပါသည်။ ကျန်ရှိသော node များကိုထည့်သွင်းစဉ်းစားပါ။ သိုလှောင်မှုကို ချဲ့ထွင်ရန်၊ ပြုပြင်ထိန်းသိမ်းမှုအတွက် အလုပ်မရပ်တန့်ဘဲ ၎င်းနှင့်ချိတ်ဆက်ရန် လုံလောက်သည် (စနစ်သည် ဒေတာအစိတ်အပိုင်းကို ဆာဗာအသစ်များသို့ ပုံတူပွားစေပြီး ဆာဗာအသစ်များကို ထည့်သွင်းတွက်ချက်ကာ သိုလှောင်မှုကို ချိန်ခွင်လျှာညှိပေးသည်)။ အစုအဝေး၏ အရွယ်အစားကို လျှော့ချရန် သင်သည် အလားတူ လုပ်ဆောင်နိုင်သည် - စနစ်မှ ဖယ်ရှားနေသည့် အသုံးမပြုတော့သော ပစ္စည်းများကို ရိုးရှင်းစွာ ပိတ်နိုင်သည်။

ဒေတာနှင့် မက်တာဒေတာကို သီးခြားစီ သိမ်းဆည်းထားသည်။ လုပ်ဆောင်ချက်အတွက်၊ master-slave မုဒ်တွင် လုပ်ဆောင်နေသော မက်တာဒေတာဆာဗာနှစ်ခုအပြင် အနည်းဆုံး ဒေတာသိုလှောင်မှုဆာဗာ (chunkserver) နှစ်ခုကို ထည့်သွင်းရန် အကြံပြုထားသည်။ ထို့အပြင်၊ မက်တာဒေတာကို အရန်ကူးရန်အတွက်၊ မက်တာဒေတာပြောင်းလဲမှုများနှင့်ပတ်သက်သည့် အချက်အလက်များကို သိမ်းဆည်းရန် လော့ဂ်ဆာဗာများကို အသုံးပြုနိုင်ပြီး ရှိပြီးသား မက်တာဒေတာဆာဗာများ ပျက်စီးသွားသည့်အခါတွင် လည်ပတ်ဆောင်ရွက်မှုကို ပြန်လည်ရယူရန် ခွင့်ပြုနိုင်သည်။ ဖိုင်တစ်ခုစီကို အရွယ်အစား 64 MB အထိ အတုံးများ (အတုံးများ) ခွဲခြားထားသည်။ ရွေးချယ်ထားသော ပုံတူကူးမုဒ်နှင့်အညီ သိုလှောင်မှုဆာဗာများကြားတွင် ပိတ်ဆို့မှုများကို ဖြန့်ဝေသည်- စံ (လမ်းညွှန်တစ်ခုချင်းစီနှင့် ဆက်စပ်၍ အပါအဝင် မတူညီသော node များတွင်ထားရှိရမည့် ကော်ပီအရေအတွက်ကို အတိအလင်းသတ်မှတ်ခြင်း - အရေးကြီးသောဒေတာအတွက် ကော်ပီအရေအတွက်ကို တိုးမြှင့်နိုင်ပြီး၊ အရေးမပါသောဒေတာ)၊ XOR (RAID5) နှင့် EC (RAID6) တို့ကို လျှော့ချထားသည်။

သိုလှောင်မှုအား petabyte အရွယ်အစားအထိ ချဲ့ထွင်နိုင်သည်။ အပလီကေးရှင်း၏ ဧရိယာများတွင် သိမ်းဆည်းခြင်း၊ virtual machine ပုံများကို သိမ်းဆည်းခြင်း၊ မာလ်တီမီဒီယာဒေတာ၊ မိတ္တူကူးခြင်း၊ DRC (Disaster Recovery Center) အဖြစ် အသုံးပြုခြင်းနှင့် စွမ်းဆောင်ရည်မြင့် ကွန်ပျူတာ အစုအဝေးများတွင် သိုလှောင်မှုအဖြစ် ပါဝင်သည်။ LizardFS သည် မည်သည့်အရွယ်အစားရှိ ဖိုင်များအတွက်မဆို အလွန်မြင့်မားသော ဖတ်ရှုနှုန်းကို ပေးစွမ်းနိုင်ပြီး စာရေးသည့်အခါတွင်၊ အဆက်မပြတ် ပြုပြင်မွမ်းမံခြင်း မရှိသည့်အခါ၊ အဖွင့်ဖိုင်များနှင့် ပြင်းထန်စွာ လုပ်ဆောင်မှုများ၊ တစ်ကြိမ်တည်း လုပ်ဆောင်မှုများဖြင့် တစ်ကြိမ်တည်း လုပ်ဆောင်မှုများ ပြုလုပ်သည့်အခါ စွမ်းဆောင်ရည် ကောင်းမွန်ကြောင်း ပြသသည်။ သေးငယ်သောဖိုင်များအစုအဝေး။

FS ၏အင်္ဂါရပ်များထဲတွင်၊ လျှပ်တစ်ပြက်ရိုက်ချက်များအတွက် ပံ့ပိုးမှုပါဝင်မှု၊ တစ်ချိန်တည်းတွင် ဖိုင်များ၏အခြေအနေကို ရောင်ပြန်ဟပ်ကာ၊ "ပြန်လည်အသုံးပြုသည့်ဘင်" ၏ထည့်သွင်းထားသည့် အကောင်အထည်ဖော်မှုကိုလည်း မှတ်သားနိုင်သည် (ဖိုင်များကို ချက်ခြင်းဖျက်ပစ်မည်မဟုတ်ပါ၊ အသုံးပြုနိုင်ပါသည် အချိန်အတိုင်းအတာတစ်ခုအထိ ပြန်လည်ကောင်းမွန်လာသည်။ အပိုင်းတစ်ခုသို့ ဝင်ရောက်ခွင့်ကို IP လိပ်စာ သို့မဟုတ် စကားဝှက် (NFS နှင့် ဆင်တူသည်) ဖြင့် ကန့်သတ်နိုင်သည်။ အသုံးပြုသူများ၏ အချို့သောအမျိုးအစားများအတွက် အရွယ်အစားနှင့် bandwidth ကို ကန့်သတ်ခွင့်ပြုသည့် ခွဲတမ်းနှင့် အရည်အသွေးရှိသော ဝန်ဆောင်မှုစီမံခန့်ခွဲမှု ယန္တရားများရှိပါသည်။ မတူညီသော ဒေတာစင်တာများတွင် တည်ရှိသော အစိတ်အပိုင်းများကို ပထဝီဝင်အနေအထားအရ ဖြန့်ဝေသိုလှောင်မှု အဆောက်အအုံများကို ဖန်တီးနိုင်သည်။

LizardFS ပရောဂျက်ကို လမ်းဆုံလမ်းခွအဖြစ် 2013 ခုနှစ်တွင် စတင်တည်ထောင်ခဲ့သည်။ MooseFSနှင့် Reed-Solomon အမှားပြင်ဆင်ခြင်းကုဒ်များ (အပျက်သဘောဆောင်သော raidzN) ကို အခြေခံ၍ အတုယူမုဒ်၊ တိုးချဲ့ ACL ပံ့ပိုးမှု၊ Windows ပလပ်ဖောင်းအတွက် ကလိုင်းယင့်တစ်ဦးရှိနေခြင်း၊ အပိုအကောင်းဆုံးပြင်ဆင်မှုများ (ဥပမာ၊ ကလိုင်းယင့်တစ်ဦးနှင့် ပေါင်းစပ်သည့်အခါ၊ သိုလှောင်မှုဆာဗာတစ်ခု၊ ဘလောက်များကို ဖြစ်နိုင်ပါက လက်ရှိ node ဖြင့် ပေးပို့ပြီး မက်တာဒေတာကို မမ်မိုရီတွင် သိမ်းဆည်းထားသည်)၊ ပိုလိုက်လျောညီထွေရှိသော ဖွဲ့စည်းမှုစနစ်၊ ဒေတာဖတ်ရှုခြင်းအတွက် ပံ့ပိုးမှု၊ လမ်းညွှန်ခွဲတမ်းများနှင့် ဌာနတွင်း ပြန်လည်လုပ်ဆောင်မှုများအတွက် ပံ့ပိုးမှု။

LizardFS 3.13.0 ကို ဒီဇင်ဘာလကုန်တွင် ထွက်ရှိရန် စီစဉ်ထားသည်။ LizardFS 3.13 ၏ အဓိက ဆန်းသစ်တီထွင်မှုသည် အမှားခံနိုင်ရည်ရှိစေရန် (ချို့ယွင်းမှုဖြစ်လျှင် မာစတာဆာဗာများကို ကူးပြောင်းခြင်း)၊ ဖေါင် (ယခင်က ကူးသန်းရောင်းဝယ်ရေး ထုတ်ကုန်များတွင် အသုံးပြုခဲ့သည့် ကျွန်ုပ်တို့၏ကိုယ်ပိုင် အကောင်အထည်ဖော်မှုကို အသုံးပြုသည်)။ uRaft ကိုအသုံးပြုခြင်းဖြင့် ဖွဲ့စည်းမှုပုံစံကို ရိုးရှင်းစေပြီး ချို့ယွင်းမှုပြန်လည်ရယူခြင်းနှောင့်နှေးမှုကို လျှော့ချပေးသည်၊ သို့သော် တစ်ခုသည် quorum အတွက်အသုံးပြုသည့် အနည်းဆုံး အလုပ်လုပ်သော node သုံးခုလိုအပ်ပါသည်။

အခြားပြောင်းလဲမှုများ- FUSE3 စနစ်ခွဲကိုအခြေခံ၍ ဖောက်သည်အသစ်တစ်ခု၊ အမှားပြင်ဆင်ခြင်းဆိုင်ရာ ပြဿနာများကိုဖြေရှင်းခြင်း၊ nfs-ganesha ပလပ်အင်ကို C ဘာသာစကားဖြင့် ပြန်လည်ရေးသားထားသည်။ အပ်ဒိတ် 3.13.0-rc2 သည် 3.13 ဌာနခွဲ၏ ယခင်စမ်းသပ်ထုတ်ဝေမှုများကို အသုံးမပြုနိုင်စေခဲ့သော အရေးကြီးသော ချို့ယွင်းချက်များစွာကို ပြုပြင်ပေးသည် (3.12 ဌာနခွဲအတွက် ပြင်ဆင်မှုများကို မထုတ်ဝေရသေးပါ၊ နှင့် 3.12 မှ 3.13 မှ အပ်ဒိတ်သည် ဒေတာဆုံးရှုံးမှုကို ပြီးမြောက်စေဆဲဖြစ်သည်)။

2020 တွင် ဖွံ့ဖြိုးတိုးတက်ရေးကို အာရုံစိုက်လုပ်ဆောင်သွားမည်ဖြစ်ပါသည်။
အဂါမာdeveloper များအဆိုအရ၊ ဌာနခွဲ 3.12 နှင့် နှိုင်းယှဉ်ပါက စွမ်းဆောင်ရည် သုံးဆတိုးလာမည့် လုံးဝပြန်လည်ရေးသားထားသော LizardFS kernel အသစ်ဖြစ်သည်။ Agama သည် အဖြစ်အပျက်ကို မောင်းနှင်သော ဗိသုကာတစ်ခု၊ အပြိုင်အဆိုင် ထည့်သွင်းခြင်း/အထွက်ကို အခြေခံသည့် အသွင်ကူးပြောင်းမှုတစ်ခုသို့ ကူးပြောင်းသွားပါမည်။ asioအသုံးပြုသူနေရာလွတ်တွင် အဓိကလုပ်ဆောင်ပါ (kernel caching ယန္တရားများအပေါ် မှီခိုမှုလျှော့ချရန်)။ ထို့အပြင်၊ အမှားရှာပြင်ခြင်းလုပ်ငန်းခွဲစနစ်အသစ်နှင့် စွမ်းဆောင်ရည်အလိုအလျောက်ချိန်ညှိခြင်းအတွက် ပံ့ပိုးပေးသည့် ကွန်ရက်လုပ်ဆောင်ချက်ခွဲခြမ်းစိတ်ဖြာကိရိယာကို ပေးဆောင်မည်ဖြစ်သည်။

LizardFS ဖောက်သည်သည် ဘေးအန္တရာယ်ပြန်လည်ရယူခြင်း၏ ယုံကြည်စိတ်ချရမှုကို ပိုမိုကောင်းမွန်စေမည့် ဗားရှင်းရေးသားခြင်းဆိုင်ရာ လုပ်ဆောင်ချက်များအတွက် အပြည့်အဝပံ့ပိုးမှုကို ပေါင်းထည့်မည်ဖြစ်ပြီး၊ မတူညီသောဖောက်သည်များက တူညီသောဒေတာကို အသုံးပြုခွင့်မျှဝေသည့်အခါ ဖြစ်ပေါ်လာသည့်ပြဿနာများကို ဖြေရှင်းပေးမည်ဖြစ်ပြီး သိသာထင်ရှားသောစွမ်းဆောင်ရည်မြှင့်တင်မှုများကို ခွင့်ပြုပေးမည်ဖြစ်သည်။ အသုံးပြုသူနေရာကို လည်ပတ်နေသော ၎င်း၏ကိုယ်ပိုင်ကွန်ရက်ခွဲစနစ်သို့ လွှဲပြောင်းပေးမည်ဖြစ်သည်။ Agama ကိုအခြေခံ၍ LizardFS ၏ပထမဆုံးလုပ်ဆောင်နေသောရှေ့ပြေးပုံစံကို 2020 ဒုတိယသုံးလပတ်တွင်အဆင်သင့်ဖြစ်စေရန်စီစဉ်ထားသည်။ တစ်ချိန်တည်းမှာပင်၊ ၎င်းတို့သည် Kubernetes ပလပ်ဖောင်းနှင့် LizardFS ပေါင်းစပ်ခြင်းအတွက် ကိရိယာများကို အကောင်အထည်ဖော်မည်ဟု ကတိပြုပါသည်။

source: opennet.ru