PayPal ने JunoDB DBMS कोड उघडला

PayPal कडे ओपन-सोर्स्ड JunoDB आहे, ही एक फॉल्ट-टॉलरंट डेटाबेस मॅनेजमेंट सिस्टम आहे जी की-व्हॅल्यू डेटा व्यवस्थापित करते. ही सिस्टम सुरुवातीपासूनच उच्च सुरक्षा, क्षैतिज स्केलेबिलिटी, फॉल्ट टॉलरन्स आणि अंदाजे विलंबतेसह शेकडो हजारो समवर्ती कनेक्शन हाताळण्याची क्षमता यासाठी डिझाइन केली गेली होती. वापरकर्ता लॉगिनपासून ते आर्थिक व्यवहार प्रक्रियेपर्यंत जवळजवळ सर्व PayPal सेवा JunoDB वर अवलंबून असतात. प्रकल्पाचा कोड Go मध्ये लिहिलेला आहे (जावा क्लायंट लायब्ररीसह) आणि Apache 2.0 परवान्याअंतर्गत परवानाकृत आहे. पुढील विकासामध्ये दुरुस्त्या, सुधारणा आणि समुदायाकडून बदल समाविष्ट असतील.

जुनोडीबीची आर्किटेक्चर लोड बॅलेन्सरच्या वापरावर आधारित आहे जी क्लायंट अॅप्लिकेशन्सकडून विनंत्या स्वीकारते आणि त्यांना प्रॉक्सी सर्व्हरमध्ये वितरित करते जे एकाच वेळी एका गटात प्रवेश करतात. सर्व्हर विनंती कार्यान्वित करताना स्टोरेज. प्रत्येक प्रॉक्सी सर्व्हर एकाच वेळी त्या सर्वांशी कनेक्शन स्थापित करतो. सर्व्हर etcd वितरित कॉन्फिगरेशन स्टोरेज सिस्टममध्ये संग्रहित केलेल्या विभाजन निर्देशांकावर आधारित स्टोरेज आणि स्टोरेज सर्व्हरच्या गटाकडे विनंत्या रूट करते.

डेटाचे विभाजन केले जाते आणि हॅशिंग वापरून स्टोरेज नोड्सना नियुक्त केले जाते, ज्यामुळे क्लस्टरमधील नोड्स वाढवल्यावर किंवा कमी केल्यावर डेटाची हालचाल कमी होते. फॉल्ट टॉलरन्स सुनिश्चित करण्यासाठी, प्रत्येक डेटा भाग अनेक स्टोरेज नोड्समध्ये प्रतिकृती बनवला जातो, वैयक्तिक सर्व्हर अयशस्वी झाले तरीही माहिती जतन केली जाते. भौगोलिकदृष्ट्या वितरित स्टोरेज सिस्टम समर्थित आहेत, वेगवेगळ्या डेटा सेंटरमध्ये नोड्सचे गट आहेत.

रॉक्सडीबी लायब्ररी वापरून रॅममधील स्टोरेज नोड्सवर किंवा स्थानिक स्टोरेजमध्ये डेटा संग्रहित केला जातो. सतत स्टोरेजसाठी, डेटा एन्क्रिप्टेड संग्रहित केला जातो (एनक्रिप्शन की क्लायंटद्वारे परिभाषित केली जाऊ शकते किंवा प्रॉक्सी स्तरावर कॉन्फिगर केली जाऊ शकते).

अनुप्रयोगांमधून डेटाबेसमध्ये प्रवेश करण्यासाठी, क्लायंट लायब्ररी प्रदान केली जाते, जी जावा, गो आणि सी++ मध्ये लिहिलेल्या अनुप्रयोगांसाठी एक API प्रदान करते. क्लायंट बाजू शक्य तितकी सोपी केली जाते, जटिल लॉजिक आणि सेटिंग्ज शक्य तितक्या वेळा डीबीएमएस बाजूला हलवल्या जातात. क्लायंट आणि लोड बॅलेन्सर किंवा प्रॉक्सी यांच्यातील संप्रेषण एका एन्क्रिप्टेड कम्युनिकेशन चॅनेलद्वारे केले जाते. क्लायंट API च्या सर्व क्षमतांची प्रतिकृती बनवणारा कमांड-लाइन इंटरफेस, व्यवस्थापन आणि विनंत्या पाठवण्यासाठी वापरला जाऊ शकतो.

ही प्रणाली अंदाजे कमी विलंब असलेल्या विनंत्या प्रक्रिया करण्यासाठी डिझाइन केलेली आहे. उदाहरणार्थ, n1-highmem-32 वातावरणातून (32 Intel Xeon 2.30GHz CPUs, 214G RAM आणि 450G SSD स्टोरेज) तयार केलेले तीन स्टोरेज नोड्स आणि एक प्रॉक्सी यांचे क्लस्टर, 200 समवर्ती TLS कनेक्शन प्रक्रिया करताना 95% प्रकरणांमध्ये 2.5 ms पेक्षा जास्त नसलेली आणि 99% प्रकरणांमध्ये 16 ms आणि प्रति सेकंद 80 विनंत्यांचा प्रवाह प्रदान करण्यास सक्षम होते (3000 समवर्ती कनेक्शन आणि प्रति सेकंद 15 विनंत्यांचा प्रवाह असताना, विलंब 95% प्रकरणांमध्ये 6 ms आणि 99% मध्ये 15 ms पेक्षा जास्त नव्हते). PayPal च्या JunoDB-आधारित सेवा दररोज सुमारे 350 अब्ज विनंत्या हाताळतात.

स्त्रोत: opennet.ru