LizardFS 3.13.0-rc2 क्लस्टर फाइल प्रणाली अपडेट

एक वर्ष लामो विकास पछि पुन: सुरु भयो गल्ती-सहिष्णु वितरित फाइल प्रणालीको नयाँ शाखामा काम गर्दै LizardF 3.13 и प्रकाशित दोस्रो रिलीज उम्मेदवार। हालै भयो LizardFS विकास गर्ने कम्पनीका मालिकहरूको परिवर्तन, नयाँ व्यवस्थापन अपनाइयो र विकासकर्ताहरू प्रतिस्थापन गरियो। विगत दुई वर्षदेखि यो परियोजना समुदायबाट फिर्ता लिइएको र यसमा पर्याप्त ध्यान नदिए पनि नयाँ टोलीले समुदायसँगको विगतको सम्बन्धलाई पुनर्जीवित गरी घनिष्ट अन्तरक्रिया गर्ने योजना बनाएको छ । परियोजना कोड C र C++ भाषाहरूमा लेखिएको छ र द्वारा वितरित GPLv3 लाइसेन्स अन्तर्गत।

छेपारो एफएस यो छ एक वितरित क्लस्टर फाइल प्रणाली, जसले तपाईंलाई विभिन्न सर्भरहरूमा डाटा वितरण गर्न अनुमति दिन्छ, तर एकल ठूलो विभाजनको रूपमा तिनीहरूलाई पहुँच प्रदान गर्दछ, जुन परम्परागत डिस्क विभाजनहरूमा समान रूपमा काम गरिन्छ। LizardFS सँग माउन्ट गरिएको विभाजनले POSIX फाइल विशेषताहरू, ACLs, लकहरू, सकेटहरू, पाइपहरू, उपकरण फाइलहरू, प्रतीकात्मक र हार्ड लिङ्कहरूलाई समर्थन गर्दछ। प्रणालीमा विफलताको एकल बिन्दु छैन; सबै घटकहरू अनावश्यक छन्। डाटा अपरेशनको समानान्तरीकरण समर्थित छ (धेरै क्लाइन्टहरूले एकै साथ फाइलहरू पहुँच गर्न सक्छन्)।

गल्ती सहिष्णुता सुनिश्चित गर्न, डेटा प्रतिकृतिहरूमा विभाजित गरिएको छ, जुन रिडन्डन्सी (धेरै प्रतिलिपिहरू विभिन्न नोडहरूमा राखिएको छ) मा वितरित गरिन्छ; यदि नोडहरू वा ड्राइभहरू असफल भएमा, प्रणालीले सूचनाको हानि बिना काम गर्न जारी राख्छ र स्वचालित रूपमा डेटा पुन: वितरण गर्दछ। बाँकी नोडहरूलाई ध्यानमा राख्दै। भण्डारण विस्तार गर्न, मर्मतसम्भारको लागि काम नगरीकन यसमा नयाँ नोडहरू जडान गर्न पर्याप्त छ (प्रणाली आफैंले नयाँ सर्भरहरूमा डाटाको अंश प्रतिकृति गर्दछ र नयाँ सर्भरहरूलाई खातामा राखेर भण्डारणलाई सन्तुलनमा राख्छ)। तपाईले क्लस्टरको साइज घटाउनको लागि पनि गर्न सक्नुहुन्छ - तपाईले प्रणालीबाट हटाइएको अप्रचलित उपकरणहरूलाई असक्षम गर्न सक्नुहुन्छ।

डाटा र मेटाडेटा अलग-अलग भण्डारण गरिन्छ। सञ्चालनको लागि, मास्टर-स्लेभ मोडमा काम गर्ने दुई मेटाडेटा सर्भरहरू स्थापना गर्न सिफारिस गरिन्छ, साथै कम्तिमा दुई डेटा भण्डारण सर्भरहरू (chunkserver)। थप रूपमा, मेटाडेटा जगेडा गर्न, लग सर्भरहरू मेटाडाटामा भएका परिवर्तनहरू बारे जानकारी भण्डारण गर्न प्रयोग गर्न सकिन्छ र तपाईंलाई सबै अवस्थित मेटाडेटा सर्भरहरूमा क्षति भएको अवस्थामा सञ्चालन पुनर्स्थापना गर्न अनुमति दिन्छ। प्रत्येक फाइललाई 64 MB सम्मको आकारमा ब्लकहरू (खण्डहरूमा) विभाजित गरिएको छ। चयन गरिएको प्रतिकृति मोड अनुसार भण्डारण सर्भरहरू बीच ब्लकहरू वितरण गरिन्छ: मानक (विभिन्न नोडहरूमा राख्नु पर्ने प्रतिलिपिहरूको संख्याको स्पष्ट निर्धारण, व्यक्तिगत डाइरेक्टरीहरूको सम्बन्धमा - महत्त्वपूर्ण डेटाको लागि प्रतिलिपिहरूको संख्या बढाउन सकिन्छ, र यसको लागि। महत्वहीन डेटा घटाइयो, XOR (RAID5) र EC (RAID6)।

भण्डारणले पेटाबाइट साइजसम्म मापन गर्न सक्छ। अनुप्रयोगका क्षेत्रहरूमा संग्रह, भर्चुअल मेसिन छविहरूको भण्डारण, मल्टिमिडिया डाटा, ब्याकअपहरू, DRC (डिजास्टर रिकभरी सेन्टर) को रूपमा प्रयोग र उच्च प्रदर्शन कम्प्युटिङ क्लस्टरहरूमा भण्डारण समावेश छन्। LizardFS ले कुनै पनि साइजका फाइलहरूको लागि धेरै उच्च पढ्ने गति प्रदान गर्दछ, र लेख्दा, यसले सम्पूर्ण ठूला र मध्यम आकारका फाइलहरू लेख्दा राम्रो प्रदर्शन देखाउँदछ, जब त्यहाँ कुनै निरन्तर परिमार्जन हुँदैन, खुला फाइलहरूसँग गहन काम, र एक पटक सञ्चालन साना फाइलहरूको गुच्छा।

FS को विशेषताहरू मध्ये, कसैले स्न्यापशटहरूको लागि समर्थनको उपस्थितिलाई पनि नोट गर्न सक्छ, निश्चित समयमा फाइलहरूको अवस्था प्रतिबिम्बित गर्दछ, र "रिसाइकल बिन" को एक निर्मित कार्यान्वयन (फाइलहरू तुरुन्तै मेटाइँदैन र उपलब्ध छन्। केही समयको लागि रिकभरी)। विभाजनमा पहुँच IP ठेगाना वा पासवर्ड (NFS जस्तै) द्वारा सीमित गर्न सकिन्छ। त्यहाँ सेवा प्रबन्धन संयन्त्रहरूको कोटा र गुणस्तर छन् जसले तपाईंलाई प्रयोगकर्ताहरूको निश्चित वर्गहरूको लागि आकार र ब्यान्डविथ सीमित गर्न अनुमति दिन्छ। भौगोलिक रूपमा वितरित भण्डारण सुविधाहरू सिर्जना गर्न सम्भव छ, जसका खण्डहरू विभिन्न डाटा केन्द्रहरूमा अवस्थित छन्।

LizardFS परियोजना 2013 मा फोर्कको रूपमा स्थापित भएको थियो MooseFS, र मुख्यतया Reed-Solomon त्रुटि सुधार कोडहरू (raidzN को अनुरूप), विस्तारित ACL समर्थन, Windows प्लेटफर्मको लागि ग्राहकको उपस्थिति, अतिरिक्त अप्टिमाइजेसनहरू (उदाहरणका लागि, ग्राहक संयोजन गर्दा र भण्डारण सर्भर, ब्लकहरू, सम्भव भएमा, हालको नोडको साथ पठाइन्छ, र मेटाडेटा मेमोरीमा क्यास गरिएको छ), थप लचिलो कन्फिगरेसन प्रणाली, डाटा पढ्न अगाडि, डाइरेक्टरी कोटा र आन्तरिक पुन: कार्यको लागि समर्थन।

LizardFS 3.13.0 डिसेम्बरको अन्त्यमा रिलीज हुने तालिका छ। LizardFS 3.13 को मुख्य नवाचार त्रुटि सहिष्णुता सुनिश्चित गर्न एक सहमति एल्गोरिथ्मको प्रयोग हो (असफलताको अवस्थामा मास्टर सर्भरहरू स्विच गर्दै) Raft (उराफ्टको हाम्रो आफ्नै कार्यान्वयन प्रयोग गर्दछ, जुन पहिले व्यावसायिक उत्पादनहरूमा प्रयोग गरिएको थियो)। uRaft को प्रयोगले कन्फिगरेसनलाई सरल बनाउँछ र विफलता रिकभरी ढिलाइ कम गर्छ, तर कम्तिमा तीन कार्य नोडहरू चाहिन्छ, जसमध्ये एउटा कोरमको लागि प्रयोग गरिन्छ।

अन्य परिवर्तनहरू: FUSE3 उपप्रणालीमा आधारित नयाँ ग्राहक, त्रुटि सच्याउन समस्याहरू समाधान गर्दै, nfs-ganesha प्लगइन C भाषामा पुन: लेखिएको छ। अपडेट 3.13.0-rc2 ले 3.13 शाखाको अघिल्लो परीक्षण विज्ञप्तिहरूलाई प्रयोग गर्न नसक्ने बनाएका धेरै महत्वपूर्ण बगहरू फिक्स गर्दछ (3.12 शाखाका लागि समाधानहरू अझै प्रकाशित गरिएको छैन, र 3.12 देखि 3.13 सम्मको अद्यावधिकले अझै पनि पूर्ण डेटा हानिमा लैजान्छ)।

२०२० मा, काम विकासमा केन्द्रित हुनेछ
अगामा, नयाँ पूर्ण रूपमा पुन: लेखिएको LizardFS कर्नेल, जसले विकासकर्ताहरूको अनुसार, शाखा 3.12 को तुलनामा कार्यसम्पादनमा तीन गुणा वृद्धि प्रदान गर्नेछ। Agama घटना-संचालित वास्तुकला, एसिंक्रोनस इनपुट/आउटपुट आधारित मा संक्रमण हुनेछ asio, मुख्य रूपमा प्रयोगकर्ता स्पेसमा काम गर्नुहोस् (कर्नेल क्यासिङ मेकानिजमहरूमा निर्भरता कम गर्न)। थप रूपमा, एक नयाँ डिबगिङ सबसिस्टम र प्रदर्शन स्वत: ट्युनिङको लागि समर्थनको साथ नेटवर्क गतिविधि विश्लेषक प्रस्ताव गरिनेछ।

LizardFS क्लाइन्टले संस्करण लेखन कार्यहरूको लागि पूर्ण समर्थन थप्नेछ, जसले विपद् रिकभरीको विश्वसनीयता सुधार गर्नेछ, विभिन्न ग्राहकहरूले समान डेटामा पहुँच साझा गर्दा उत्पन्न हुने समस्याहरू समाधान गर्नेछ, र महत्त्वपूर्ण कार्यसम्पादन सुधारहरूको लागि अनुमति दिन्छ। ग्राहकलाई प्रयोगकर्ता स्पेसमा सञ्चालन गर्ने आफ्नै नेटवर्क सबसिस्टममा स्थानान्तरण गरिनेछ। Agama मा आधारित LizardFS को पहिलो काम गर्ने प्रोटोटाइप 2020 को दोस्रो क्वाटरमा तयार हुने योजना छ। एकै समयमा, तिनीहरूले Kubernetes प्लेटफर्मसँग LizardFS एकीकृत गर्न उपकरणहरू लागू गर्ने वाचा गर्छन्।

स्रोत: opennet.ru