पेपाल ने जूनोडीबी डीबीएमएस कोड खोला

पेपैल ने जूनोडीबी के लिए स्रोत कोड खोला है, जो एक दोष-सहिष्णु डीबीएमएस है जो कुंजी-मूल्य प्रारूप में डेटा में हेरफेर करता है। सिस्टम को मूल रूप से उच्च सुरक्षा, क्षैतिज मापनीयता, दोष सहनशीलता और पूर्वानुमानित देरी को ध्यान में रखते हुए एक साथ सैकड़ों हजारों कनेक्शनों को संभालने की क्षमता के साथ डिजाइन किया गया था। PayPal में, उपयोगकर्ता लॉगिन से लेकर वित्तीय लेनदेन के प्रसंस्करण तक, लगभग सभी सेवाएँ, JunoDB से जुड़ी हुई हैं। प्रोजेक्ट कोड गो (जावा क्लाइंट लाइब्रेरी) में लिखा गया है और अपाचे 2.0 लाइसेंस के तहत वितरित किया गया है। आगे के विकास में, समुदाय से सुधार, सुधार और परिवर्तन स्वीकार किए जाएंगे।

जूनोडीबी आर्किटेक्चर एक लोड बैलेंसर के उपयोग पर आधारित है जो क्लाइंट अनुप्रयोगों से अनुरोध स्वीकार करता है और उन्हें प्रॉक्सी सर्वरों के बीच वितरित करता है जो अनुरोध किए जाने पर एक साथ स्टोरेज सर्वर के समूह तक पहुंचते हैं। प्रत्येक प्रॉक्सी एक साथ सभी स्टोरेज सर्वर से कनेक्शन स्थापित करती है और आदि कॉन्फ़िगरेशन के वितरित स्टोरेज सिस्टम में संग्रहीत विभाजन सूचकांक के आधार पर स्टोरेज सर्वर के एक समूह के अनुरोधों को रीडायरेक्ट करती है।

क्लस्टर में नोड्स के बढ़ने या सिकुड़ने पर डेटा की गति को कम करने के लिए हैशिंग का उपयोग करके डेटा को विभाजित किया जाता है और स्टोरेज नोड्स से जोड़ा जाता है। दोष सहनशीलता सुनिश्चित करने के लिए, डेटा के प्रत्येक भाग को कई स्टोरेज नोड्स पर दोहराया जाता है, जो आपको व्यक्तिगत सर्वर विफल होने पर जानकारी सहेजने की अनुमति देता है। भौगोलिक रूप से वितरित भंडारण के निर्माण का समर्थन किया जाता है, जिसमें नोड्स के समूह विभिन्न डेटा केंद्रों में स्थित होते हैं।

स्टोरेज नोड्स पर, डेटा को RAM या RocksDB लाइब्रेरी के आधार पर स्थानीय स्टोरेज में रखा जाता है। लगातार भंडारण के साथ, डेटा को एन्क्रिप्टेड रूप में संग्रहीत किया जाता है (एन्क्रिप्शन कुंजी क्लाइंट द्वारा निर्धारित की जा सकती है और प्रॉक्सी स्तर पर सेट की जा सकती है)।

अनुप्रयोगों से डेटाबेस तक पहुंचने के लिए, एक क्लाइंट लाइब्रेरी की आपूर्ति की जाती है जो जावा, गो और सी++ में अनुप्रयोगों के लिए एक एपीआई प्रदान करती है। क्लाइंट भाग को यथासंभव सरल बनाया गया है, और यदि संभव हो तो जटिल तर्क और सेटिंग्स को डीबीएमएस के किनारे ले जाया गया है। क्लाइंट और बैलेंसर या प्रॉक्सी के बीच बातचीत एक एन्क्रिप्टेड संचार चैनल के माध्यम से की जाती है। आप अनुरोधों को प्रबंधित करने और भेजने के लिए कमांड लाइन इंटरफ़ेस का उपयोग कर सकते हैं, जो क्लाइंट एपीआई की पूर्ण कार्यक्षमता की नकल करता है।

सिस्टम को पूर्वानुमानित कम विलंबता के साथ अनुरोधों को संसाधित करने के लिए डिज़ाइन किया गया है, उदाहरण के लिए, तीन स्टोरेज नोड्स और एक प्रॉक्सी का एक क्लस्टर, जो n1-हाईमेम -32 वातावरण (32 Intel Xeon 2.30GHz CPU, 214G RAM और 450G SSD-आधारित स्टोरेज) से बना है, एक साथ 2.5 हजार प्रसंस्करण करते समय 95% मामलों में 16 एमएस और 99% में 200 एमएस से अधिक नहीं निश्चित विलंबता प्रदान करने में सक्षम था। टीएलएस कनेक्शन और प्रति सेकंड 15 हजार अनुरोधों का प्रवाह (3000 एक साथ कनेक्शन और प्रति सेकंड 80 हजार अनुरोधों के प्रवाह के साथ, देरी 6% मामलों में 95 एमएस और 15% में 99 एमएस से अधिक नहीं थी)। PayPal पर, JunoDB-आधारित सेवाएँ प्रतिदिन लगभग 350 बिलियन अनुरोधों को पूरा करती हैं।

स्रोत: opennet.ru