Yandex ने SQL का समर्थन करने वाले वितरित DBMS YDB का कोड खोला

यैंडेक्स ने वितरित YDB DBMS के स्रोत पाठ प्रकाशित किए हैं, जो SQL बोली और ACID लेनदेन के लिए समर्थन को लागू करता है। DBMS को खरोंच से बनाया गया था और शुरू में दोष सहिष्णुता सुनिश्चित करने, विफलताओं और मापनीयता के मामले में स्वत: पुनर्प्राप्ति सुनिश्चित करने के लिए विकसित किया गया था। यह ध्यान दिया जाता है कि यैंडेक्स ने 10 हजार से अधिक नोड्स सहित काम कर रहे वाईडीबी क्लस्टर लॉन्च किए हैं, जो सैकड़ों पेटाबाइट्स डेटा संग्रहीत करते हैं और प्रति सेकंड लाखों वितरित लेनदेन की सेवा करते हैं। YDB का उपयोग मार्केट, क्लाउड, स्मार्ट होम, एलिस, मेट्रिका और Auto.ru जैसी यैंडेक्स परियोजनाओं में किया जाता है। कोड C/C++ में लिखा गया है और Apache 2.0 लाइसेंस के तहत वितरित किया गया है। परिचय और त्वरित लॉन्च के लिए, आप तैयार डॉकटर कंटेनर का उपयोग कर सकते हैं।

परियोजना की विशेषताएं:

• तालिकाओं के साथ संबंधपरक डेटा मॉडल का उपयोग करना। YQL (YDB क्वेरी लैंग्वेज) का उपयोग डेटा स्कीमा को क्वेरी और परिभाषित करने के लिए किया जाता है, जो बड़े वितरित डेटाबेस के साथ काम करने के लिए अनुकूलित SQL की एक बोली है। स्टोरेज स्कीम बनाते समय, टेबल के ट्री-जैसे ग्रुपिंग का समर्थन किया जाता है, जो फाइल सिस्टम में डायरेक्टरी जैसा दिखता है। JSON प्रारूप में डेटा के साथ काम करने के लिए एक एपीआई प्रदान की जाती है।
• डेटाबेस के खिलाफ विश्लेषणात्मक तदर्थ प्रश्नों को निष्पादित करने के लिए डिज़ाइन किए गए स्कैन प्रश्नों का उपयोग करके डेटा तक पहुँचने के लिए समर्थन, केवल-पढ़ने के लिए मोड में निष्पादित और एक जीआरपीसी स्ट्रीम लौटाता है।
• DBMS के साथ इंटरेक्शन और भेजने का अनुरोध कमांड लाइन इंटरफ़ेस, बिल्ट-इन वेब इंटरफ़ेस या YDB SDK का उपयोग करके किया जाता है, जो C ++, C # (.NET), Go, Java, Node.js के लिए लाइब्रेरी प्रदान करता है। PHP और पायथन।
• दोष-सहिष्णु कॉन्फ़िगरेशन बनाने की क्षमता जो व्यक्तिगत डिस्क, नोड्स, रैक और यहां तक ​​कि डेटा केंद्रों के विफल होने पर काम करना जारी रखती है। YDB किसी एक ज़ोन की विफलता की स्थिति में क्लस्टर के स्वास्थ्य को बनाए रखते हुए तीन उपलब्धता क्षेत्रों में परिनियोजन और तुल्यकालिक प्रतिकृति का समर्थन करता है।
• अनुप्रयोगों के लिए न्यूनतम देरी के साथ विफलताओं से स्वचालित रूप से पुनर्प्राप्त करें और डेटा संग्रहीत करते समय स्वचालित रूप से निर्दिष्ट अतिरेक बनाए रखें।
• प्राथमिक कुंजी पर अनुक्रमणिका का स्वत: निर्माण और मनमाना स्तंभों तक पहुँच की दक्षता में सुधार करने के लिए द्वितीयक अनुक्रमणिका को परिभाषित करने की क्षमता।
• क्षैतिज मापनीयता। जैसे-जैसे लोड और स्टोर किए गए डेटा का आकार बढ़ता है, नए नोड्स को जोड़कर क्लस्टर का विस्तार किया जा सकता है। कंप्यूट और स्टोरेज स्तरों को अलग-अलग किया जाता है, जिससे कंप्यूट और स्टोरेज स्केलिंग को अलग-अलग किया जा सकता है। DBMS स्वयं उपलब्ध हार्डवेयर संसाधनों को ध्यान में रखते हुए डेटा और लोड के समान वितरण की निगरानी करता है। दुनिया के विभिन्न हिस्सों में कई डेटा केंद्रों को कवर करने वाले भौगोलिक रूप से वितरित कॉन्फ़िगरेशन को तैनात करना संभव है।
• एकाधिक नोड्स और तालिकाओं में फैले प्रश्नों को संसाधित करते समय मजबूत स्थिरता मॉडल और एसीआईडी ​​​​लेनदेन के लिए समर्थन। प्रदर्शन में सुधार करने के लिए, आप चुनिंदा रूप से स्थिरता नियंत्रण को अक्षम कर सकते हैं।
• आकार या लोड बढ़ने पर स्वचालित डेटा प्रतिकृति, स्वचालित विभाजन (विभाजन, शार्डिंग), और नोड्स के बीच स्वचालित लोड और डेटा संतुलन।
• मूल PDisk घटक और VDisk परत का उपयोग करके डेटा को सीधे ब्लॉक उपकरणों पर संग्रहीत करना। VDsk के शीर्ष पर, DSProxy चलता है, जो समस्याओं का पता चलने पर उन्हें बाहर करने के लिए डिस्क की उपलब्धता और प्रदर्शन का विश्लेषण करता है।
• एक लचीला आर्किटेक्चर जो आपको वाईडीबी के शीर्ष पर, विभिन्न सेवाओं, आभासी ब्लॉक उपकरणों और लगातार कतारों (लगातार कतार) तक बनाने की अनुमति देता है। विभिन्न प्रकार के वर्कलोड, ओएलटीपी और ओएलएपी (विश्लेषणात्मक प्रश्न) के लिए आवेदन उपयुक्तता।
• बहु-उपयोगकर्ता (बहुपरत) और सर्वर रहित कॉन्फ़िगरेशन के लिए समर्थन। ग्राहकों को प्रमाणित करने की क्षमता। उपयोगकर्ता अपने स्वयं के वर्चुअल क्लस्टर और डेटाबेस एक सामान्य साझा बुनियादी ढांचे में बना सकते हैं, अनुरोधों की संख्या और डेटा आकार के स्तर पर संसाधन खपत को ध्यान में रखते हुए, या कुछ कंप्यूटिंग संसाधनों और भंडारण स्थान को किराए पर / आरक्षित करके।
• अप्रचलित डेटा को स्वत: हटाने के लिए रिकॉर्ड के जीवनकाल को समायोजित करने की संभावना।

स्रोत: opennet.ru