Yandex ने वितरित DBMS YDB चा कोड उघडला जो SQL चे समर्थन करतो

Yandex ने वितरित YDB DBMS चे स्त्रोत ग्रंथ प्रकाशित केले आहेत, जे SQL बोली आणि ACID व्यवहारांसाठी समर्थन लागू करते. डीबीएमएस सुरवातीपासून तयार केले गेले आणि सुरुवातीला दोष सहिष्णुता, अपयश आणि स्केलेबिलिटीच्या बाबतीत स्वयंचलित पुनर्प्राप्ती सुनिश्चित करण्यासाठी विकसित केले गेले. यांडेक्सने 10 हजाराहून अधिक नोड्ससह कार्यरत YDB क्लस्टर्स लाँच केल्याची नोंद आहे, शेकडो पेटाबाइट्स डेटा संग्रहित केला आहे आणि प्रति सेकंद लाखो वितरित व्यवहारांची सेवा दिली आहे. YDB चा वापर Yandex प्रकल्प जसे की Market, Cloud, Smart Home, Alice, Metrika आणि Auto.ru मध्ये केला जातो. कोड C/C++ मध्ये लिहिलेला आहे आणि Apache 2.0 लायसन्स अंतर्गत वितरित केला आहे. परिचय आणि द्रुत प्रक्षेपणासाठी, आपण तयार डॉकर कंटेनर वापरू शकता.

प्रकल्प वैशिष्ट्ये:

• टेबलसह रिलेशनल डेटा मॉडेल वापरणे. YQL (YDB Query Language) चा वापर डेटा स्कीमाची क्वेरी आणि व्याख्या करण्यासाठी केला जातो, जी SQL ची बोलीभाषा आहे जी मोठ्या वितरित डेटाबेससह कार्य करण्यासाठी अनुकूल आहे. स्टोरेज स्कीम तयार करताना, फाईल सिस्टीममधील डिरेक्टरी सारखी दिसणारी, टेबल्सची झाडासारखी गटबद्धता समर्थित असते. JSON फॉरमॅटमध्ये डेटासह कार्य करण्यासाठी API प्रदान केले आहे.
• डेटाबेस विरूद्ध विश्लेषणात्मक तदर्थ क्वेरी करण्यासाठी डिझाइन केलेल्या स्कॅन क्वेरी वापरून डेटा ऍक्सेस करण्यासाठी समर्थन, केवळ-वाचनीय मोडमध्ये कार्यान्वित केले जाते आणि एक grpc प्रवाह परत करते.
• कमांड लाइन इंटरफेस, बिल्ट-इन वेब इंटरफेस किंवा YDB SDK वापरून डीबीएमएसशी परस्परसंवाद आणि विनंत्या पाठवल्या जातात, जे C++, C# (.NET), Go, Java, Node.js, साठी लायब्ररी प्रदान करते. PHP आणि पायथन.
• दोष-सहिष्णु कॉन्फिगरेशन तयार करण्याची क्षमता जी वैयक्तिक डिस्क, नोड्स, रॅक आणि अगदी डेटा सेंटर अयशस्वी झाल्यावर कार्य करत राहते. YDB तीन उपलब्धता झोनमध्ये तैनाती आणि सिंक्रोनस प्रतिकृतीला समर्थन देते आणि झोनपैकी एक अयशस्वी झाल्यास क्लस्टरचे आरोग्य राखते.
• ऍप्लिकेशन्ससाठी कमीत कमी विलंबासह अपयशातून स्वयंचलितपणे पुनर्प्राप्त करा आणि डेटा संचयित करताना स्वयंचलितपणे निर्दिष्ट रिडंडंसी राखा.
• प्राथमिक की वर अनुक्रमणिकेची स्वयंचलित निर्मिती आणि अनियंत्रित स्तंभांमध्ये प्रवेशाची कार्यक्षमता सुधारण्यासाठी दुय्यम निर्देशांक परिभाषित करण्याची क्षमता.
• क्षैतिज स्केलेबिलिटी. लोड आणि संचयित डेटाचा आकार जसजसा वाढतो, क्लस्टर फक्त नवीन नोड्स जोडून विस्तारित केले जाऊ शकते. गणना आणि स्टोरेज टियर वेगळे केले जातात, ज्यामुळे स्वतंत्रपणे गणना आणि स्टोरेज स्केलिंग करता येते. DBMS स्वतः उपलब्ध हार्डवेअर संसाधने लक्षात घेऊन डेटा आणि लोडच्या समान वितरणाचे निरीक्षण करते. जगाच्या विविध भागांमध्ये अनेक डेटा सेंटर्स समाविष्ट करणारी भौगोलिकदृष्ट्या वितरीत कॉन्फिगरेशन तैनात करणे शक्य आहे.
• एकाधिक नोड्स आणि टेबल्सवर पसरलेल्या क्वेरींवर प्रक्रिया करताना मजबूत सुसंगतता मॉडेल आणि ACID व्यवहारांसाठी समर्थन. कार्यप्रदर्शन सुधारण्यासाठी, तुम्ही सातत्य नियंत्रण निवडकपणे अक्षम करू शकता.
• स्वयंचलित डेटा प्रतिकृती, स्वयंचलित विभाजन (विभाजन, शार्डिंग) जेव्हा आकार किंवा लोड वाढते आणि नोड्स दरम्यान स्वयंचलित लोड आणि डेटा संतुलन.
• नेटिव्ह PDisk घटक आणि VDisk स्तर वापरून थेट ब्लॉक उपकरणांवर डेटा संचयित करणे. VDisk च्या वर, DSProxy चालते, जे समस्या आढळल्यास डिस्क्सची उपलब्धता आणि कार्यप्रदर्शन यांचे विश्लेषण करते.
• एक लवचिक आर्किटेक्चर जे तुम्हाला YDB, विविध सेवा, व्हर्च्युअल ब्लॉक डिव्हाइसेस आणि पर्सिस्टंट क्यू (पर्सिस्टंट क्यू) वर तयार करण्याची परवानगी देते. विविध प्रकारच्या वर्कलोड, ओएलटीपी आणि ओएलएपी (विश्लेषणात्मक क्वेरी) साठी अर्जाची उपयुक्तता.
• मल्टी-यूजर (मल्टीटेनंट) आणि सर्व्हरलेस कॉन्फिगरेशनसाठी समर्थन. ग्राहकांना प्रमाणित करण्याची क्षमता. वापरकर्ते विनंत्यांच्या संख्येच्या आणि डेटाच्या आकाराच्या पातळीवर संसाधनांचा वापर लक्षात घेऊन किंवा विशिष्ट संगणकीय संसाधने आणि स्टोरेज स्पेस भाड्याने/आरक्षित करून, सामान्य सामायिक पायाभूत सुविधांमध्ये त्यांचे स्वतःचे आभासी क्लस्टर आणि डेटाबेस तयार करू शकतात.
• अप्रचलित डेटा स्वयंचलितपणे हटवण्यासाठी रेकॉर्डचे आयुष्यमान समायोजित करण्याची शक्यता.

स्त्रोत: opennet.ru