वितरित DBMS TiDB 3.0 का विमोचन

उपलब्ध एक वितरित DBMS का विमोचन टीआईडीबी 3.0, Google प्रौद्योगिकियों के प्रभाव में विकसित किया गया नापनेवाला и F1. TiDB हाइब्रिड HTAP (हाइब्रिड ट्रांजेक्शनल/एनालिटिकल प्रोसेसिंग) सिस्टम की श्रेणी से संबंधित है, जो वास्तविक समय लेनदेन (OLTP) प्रदान करने और विश्लेषणात्मक प्रश्नों को संसाधित करने में सक्षम है। प्रोजेक्ट गो और में लिखा गया है द्वारा वितरित अपाचे 2.0 के तहत लाइसेंस प्राप्त।

TiDB की विशेषताएं:

• SQL समर्थन और MySQL प्रोटोकॉल के साथ संगत क्लाइंट इंटरफ़ेस का प्रावधान, जो MySQL के लिए TiDB में लिखे गए मौजूदा अनुप्रयोगों के अनुकूलन को सरल बनाता है, और सामान्य क्लाइंट लाइब्रेरीज़ के उपयोग की भी अनुमति देता है। MySQL प्रोटोकॉल के अलावा, आप DBMS तक पहुंचने के लिए JSON-आधारित API और स्पार्क के लिए एक कनेक्टर का उपयोग कर सकते हैं।
• एसक्यूएल में इंडेक्स, एग्रीगेट फ़ंक्शंस, ग्रुप बाय, ऑर्डर बाय, डिस्टिंक्ट एक्सप्रेशन, मर्ज (लेफ्ट जॉइन / राइट जॉइन / क्रॉस जॉइन), व्यूज़, विंडो फ़ंक्शंस और सबक्वेरीज़ का समर्थन है। प्रदान की गई क्षमताएं PhpMyAdmin जैसे वेब अनुप्रयोगों के लिए TiDB के साथ काम को व्यवस्थित करने के लिए पर्याप्त हैं। Gogs और वर्डप्रेस;
• क्षैतिज मापनीयता और दोष सहनशीलता: केवल नए नोड्स को जोड़कर भंडारण आकार और प्रसंस्करण शक्ति को बढ़ाया जा सकता है। डेटा को अतिरेक के साथ नोड्स में वितरित किया जाता है, जिससे व्यक्तिगत नोड्स विफल होने पर ऑपरेशन जारी रखा जा सकता है। विफलताओं को स्वचालित रूप से नियंत्रित किया जाता है.
• सिस्टम निरंतरता की गारंटी देता है और क्लाइंट सॉफ़्टवेयर के लिए यह एक बड़े DBMS जैसा दिखता है, इस तथ्य के बावजूद कि वास्तव में, लेनदेन को पूरा करने के लिए कई नोड्स से डेटा आकर्षित होता है।
• नोड्स पर डेटा को भौतिक रूप से संग्रहीत करने के लिए, विभिन्न बैकएंड का उपयोग किया जा सकता है, उदाहरण के लिए, स्थानीय स्टोरेज इंजन GoLevelDB और BoltDB या हमारा अपना वितरित स्टोरेज इंजन TiKV.
• स्टोरेज स्कीमा को एसिंक्रोनस रूप से बदलने की क्षमता, आपको चल रहे संचालन के प्रसंस्करण को रोके बिना तुरंत कॉलम और इंडेक्स जोड़ने की अनुमति देती है।

मुख्य नवाचारों:

• उत्पादकता बढ़ाने के लिए कार्य किया गया है। सिस्बेंच परीक्षण में, चयन और अद्यतन संचालन करते समय रिलीज 3.0, 2.1 शाखा की तुलना में 1.5 गुना तेज है, और टीपीसी-सी परीक्षण में 4.5 गुना तेज है। अनुकूलन ने विभिन्न प्रकार की क्वेरीज़ को प्रभावित किया है, जिनमें IN, DO और NOT EXISTS सबक्वेरीज़, टेबल मर्जिंग (JOIN) ऑपरेशंस, इंडेक्स का उपयोग और बहुत कुछ शामिल हैं;
  

• एक नया TiFlash स्टोरेज इंजन जोड़ा गया है जो कॉलमर स्टोरेज की बदौलत विश्लेषणात्मक समस्याओं (OLAP) को हल करने में उच्च प्रदर्शन की अनुमति देता है। TiFlash पहले से पेश किए गए TiKV स्टोरेज का पूरक है, जो पंक्ति-वार डेटा को कुंजी/मूल्य प्रारूप में संग्रहीत करता है और लेनदेन प्रसंस्करण कार्यों (OLTP) के लिए अधिक आदर्श है। TiFlash TiKV के साथ कंधे से कंधा मिलाकर काम करता है और सर्वसम्मति निर्धारित करने के लिए Raft प्रोटोकॉल का उपयोग करने से पहले डेटा को TiKV में दोहराया जाता है, लेकिन Raft प्रतिकृतियों के प्रत्येक समूह के लिए एक अतिरिक्त प्रतिकृति बनाई जाती है जिसका उपयोग TiFlash में किया जाता है। यह दृष्टिकोण ओएलटीपी और ओएलएपी कार्यों के बीच बेहतर संसाधन साझा करने की अनुमति देता है, और विश्लेषणात्मक प्रश्नों के लिए लेनदेन डेटा को तुरंत उपलब्ध कराता है;
  

• एक वितरित कचरा संग्रहकर्ता लागू किया गया है, जो बड़े समूहों में कचरा संग्रहण की गति को काफी बढ़ा सकता है और स्थिरता में सुधार कर सकता है;
• भूमिका-आधारित अभिगम नियंत्रण (आरबीएसी) का एक प्रायोगिक कार्यान्वयन जोड़ा गया है। विश्लेषण, उपयोग, सेट ग्लोबल और शो प्रोसेसलिस्ट संचालन के लिए एक्सेस अधिकार सेट करना भी संभव है;
• लॉग से धीमी क्वेरी निकालने के लिए SQL अभिव्यक्तियों का उपयोग करने की क्षमता जोड़ी गई;
• हटाई गई तालिकाओं को शीघ्रता से पुनर्स्थापित करने के लिए एक तंत्र लागू किया गया है, जो आपको गलती से हटाए गए डेटा को पुनर्स्थापित करने की अनुमति देता है;
• रिकॉर्ड किए गए लॉग का प्रारूप एकीकृत किया गया है;
• निराशावादी लॉकिंग मोड के लिए समर्थन जोड़ा गया, जो लेनदेन प्रसंस्करण को MySQL के समान बनाता है;
• MySQL 8.0 के साथ संगत विंडो फ़ंक्शंस (विंडो फ़ंक्शंस या विश्लेषणात्मक फ़ंक्शंस) के लिए समर्थन जोड़ा गया। विंडो फ़ंक्शंस आपको अन्य पंक्तियों का उपयोग करके प्रत्येक क्वेरी पंक्ति के लिए गणना करने की अनुमति देते हैं। एग्रीगेट फ़ंक्शंस के विपरीत, जो पंक्तियों के समूहीकृत सेट को एक पंक्ति में समेट देता है, विंडो फ़ंक्शंस एक "विंडो" की सामग्री के आधार पर एकत्रित होते हैं, जिसमें परिणाम सेट से एक या अधिक पंक्तियाँ शामिल होती हैं। कार्यान्वित विंडो फ़ंक्शंस में से:
  NTILE, लीड, LAG, PERCENT_RANK, NTH_VALUE, CUME_DIST, FIRST_VALUE, LAST_VALUE, रैंक, DENSE_RANK और ROW_NUMBER;

• दृश्यों के लिए प्रयोगात्मक समर्थन जोड़ा गया (देखें);
• विभाजन प्रणाली में सुधार किया गया है, मानों या हैश की एक श्रृंखला के आधार पर डेटा को अनुभागों में वितरित करने की क्षमता जोड़ी गई है;
• प्लगइन्स विकसित करने के लिए एक रूपरेखा जोड़ी गई है, उदाहरण के लिए, आईपी श्वेतसूची का उपयोग करने या ऑडिट लॉग बनाए रखने के लिए प्लगइन्स पहले ही तैयार किए जा चुके हैं;
• SQL क्वेरी (SQL योजना प्रबंधन) के लिए निष्पादन योजना के निर्माण के लिए "व्याख्या विश्लेषण" फ़ंक्शन के लिए प्रायोगिक समर्थन प्रदान किया गया है;
• अगली पंक्ति की आईडी प्राप्त करने के लिए Next_row_id कमांड जोड़ा गया;
• नए अंतर्निहित फ़ंक्शन JSON_QUOTE, JSON_ARRAY_APPEND, JSON_MERGE_PRESERVE, बेंचमार्क, COALESCE और NAME_CONST जोड़े गए।

स्रोत: opennet.ru