रूसी भंडारण प्रणाली एयरोडिस्क: लोड परीक्षण। हम IOPS को निचोड़ते हैं

नमस्ते! जैसा कि वादा किया गया था, हम रूसी निर्मित डेटा स्टोरेज सिस्टम - एयरोडिस्क इंजन एन2 के लोड परीक्षण के परिणाम प्रकाशित कर रहे हैं।

पिछले लेख में, हमने स्टोरेज सिस्टम को तोड़ दिया था (अर्थात, हमने क्रैश टेस्ट किए थे) और क्रैश टेस्ट के परिणाम सकारात्मक थे (यानी, हमने स्टोरेज सिस्टम को नहीं तोड़ा था)। आप क्रैश टेस्ट परिणाम देख सकते हैं यहाँ.

पिछले लेख की टिप्पणियों में, अतिरिक्त, अधिक परिष्कृत क्रैश परीक्षणों के लिए अनुरोध किया गया था। हमने उन सभी को रिकॉर्ड कर लिया है और निश्चित रूप से उन्हें निम्नलिखित लेखों में से एक में लागू करेंगे। साथ ही, आप किसी भी समय मॉस्को में हमारी प्रयोगशाला में आ सकते हैं (पैदल आ सकते हैं या इंटरनेट के माध्यम से दूर से कर सकते हैं) और ये परीक्षण स्वयं कर सकते हैं (आप किसी विशिष्ट परियोजना के लिए परीक्षण भी कर सकते हैं :-))। हमें लिखें, हम सभी परिदृश्यों पर विचार करेंगे!

इसके अलावा, यदि आप मॉस्को में नहीं हैं, तब भी आप अपने निकटतम शहर के एक योग्यता केंद्र में निःशुल्क प्रशिक्षण कार्यक्रम में भाग लेकर हमारी भंडारण प्रणाली से अधिक परिचित हो सकते हैं।

नीचे आगामी कार्यक्रमों और योग्यता केंद्रों की परिचालन तिथियों की एक सूची दी गई है।

• येकातेरिनबर्ग. 16 मई 2019. प्रशिक्षण संगोष्ठी. आप लिंक का उपयोग करके पंजीकरण कर सकते हैं: https://aerodisk.promo/ekb/
• येकातेरिनबर्ग. 20 मई - 21 जून, 2019। योग्यता केंद्र. किसी भी कार्य समय पर एयरोडिस्क इंजन एन2 स्टोरेज सिस्टम के लाइव प्रदर्शन के लिए आएं। सटीक पता और पंजीकरण लिंक बाद में प्रदान किया जाएगा। जानकारी का पालन करें.
• नोवोसिबिर्स्क हमारी साइट या हबरा पर जानकारी का पालन करें।
  वर्ष का अक्टूबर 2019
• कज़ान. हमारी साइट या हबरा पर जानकारी का पालन करें।
  वर्ष का अक्टूबर 2019
• क्रास्नायार्स्क हमारी साइट या हबरा पर जानकारी का पालन करें।
  नवंबर 2019

हम एक और अच्छी खबर भी साझा करना चाहते हैं: आखिरकार हमें अपना मिल गया है यूट्यूब एक चैनल जहां आप पिछली घटनाओं के वीडियो देख सकते हैं। हम नियमित रूप से अपने प्रशिक्षण वीडियो वहां पोस्ट करते हैं।

परीक्षण स्टैंड

तो, परीक्षणों पर वापस। हमने अतिरिक्त एसएएस एसएसडी ड्राइव, साथ ही फ्रंट-एंड फाइबर चैनल 2जी एडाप्टर स्थापित करके अपने इंजन एन16 प्रयोगशाला भंडारण सिस्टम को अपग्रेड किया। सममित तरीके से, हमने सर्वर को अपग्रेड किया है जिससे हम एफसी 16जी एडाप्टर जोड़कर लोड चलाएंगे।

परिणामस्वरूप, हमारी प्रयोगशाला में हमारे पास 2 एसएएस एसएसडी 24 टीबी, 1,6 डीडब्ल्यूपीडी डिस्क के साथ 3-नियंत्रक भंडारण प्रणाली है, जो एफसी 16जी के माध्यम से एक भौतिक लिनक्स सर्वर से SAN स्विच के माध्यम से जुड़ा हुआ है।
परीक्षण बेंच आरेख नीचे दिए गए चित्र में दिखाया गया है।

परीक्षण पद्धति

ब्लॉक एक्सेस पर सर्वोत्तम प्रदर्शन के लिए, हम डीडीपी (डायनेमिक डिस्क पूल) पूल का उपयोग करेंगे, जिसे हमने एक बार विशेष रूप से ऑल-फ़्लैश सिस्टम के लिए बनाया था।
परीक्षण के लिए, हमने RAID-1 सुरक्षा स्तर के साथ प्रत्येक 10 टीबी की क्षमता वाले दो LUN बनाए। भंडारण प्रणाली में स्थापित प्रत्येक डिस्क की क्षमता का पूरी तरह से उपयोग करने के लिए हम प्रत्येक LUN को 12 डिस्क (कुल 24) में "फैलाएंगे"।

भंडारण संसाधनों का यथासंभव उपयोग करने के लिए हम विभिन्न नियंत्रकों के माध्यम से सर्वर पर LUN प्रस्तुत करते हैं।

प्रत्येक परीक्षण एक घंटे तक चलेगा, और परीक्षण फ्लेक्सिबल आईओ (एफआईओ) प्रोग्राम द्वारा किए जाएंगे; एफआईओ डेटा स्वचालित रूप से एक्सेल पर अपलोड किया जाएगा, जिसमें स्पष्टता के लिए ग्राफ पहले से ही बनाए गए हैं।

प्रोफ़ाइल लोड करें

कुल मिलाकर, हम तीन परीक्षण करेंगे, प्रत्येक एक घंटा, वार्म-अप समय को छोड़कर, जिसके लिए हम 15 मिनट आवंटित करेंगे (यह वास्तव में 24 एसएसडी ड्राइव की एक सरणी को गर्म करने के लिए कितना आवश्यक है)। ये परीक्षण सबसे अधिक बार सामने आने वाले लोड प्रोफाइल का अनुकरण करते हैं, विशेष रूप से ये कुछ डीबीएमएस, वीडियो निगरानी प्रणाली, मीडिया सामग्री प्रसारण और बैकअप हैं।

इसके अलावा, सभी परीक्षणों में, हमने जानबूझकर स्टोरेज सिस्टम और होस्ट पर रैम में कैश करने की क्षमता को अक्षम कर दिया है। बेशक, इससे परिणाम खराब होंगे, लेकिन, हमारी राय में, ऐसी स्थितियों में परीक्षण अधिक निष्पक्ष होगा।

परीक्षण के परिणाम

टेस्ट नंबर 1. छोटे ब्लॉकों में यादृच्छिक भार। एक उच्च-लोड ट्रांजेक्शनल डीबीएमएस का अनुकरण।

• ब्लॉक का आकार = 4k
• पढ़ें/लिखें = 70%/30%
• कार्यों की संख्या = 16
• कतार की गहराई = 32
• लोड वर्ण = पूर्ण यादृच्छिक

परीक्षण के परिणाम:

कुल मिलाकर, जूनियर मिड-रेंज इंजन एन2 सिस्टम के साथ हमें 438 मिलीसेकंड की विलंबता के साथ 2,6k IOPS प्राप्त हुआ। सिस्टम की श्रेणी को ध्यान में रखते हुए, हमारी राय में, परिणाम काफी अच्छा है। यह समझने के लिए कि क्या यह सिस्टम के लिए सीमा है, हम भंडारण नियंत्रकों के संसाधन उपयोग को देखेंगे।

हम मुख्य रूप से सीपीयू में रुचि रखते हैं, क्योंकि, जैसा कि ऊपर कहा गया है, हमने जानबूझकर रैम कैश को अक्षम कर दिया है ताकि परीक्षण के परिणाम विकृत न हों।

दोनों भंडारण नियंत्रकों पर हम लगभग एक ही चित्र देखते हैं।

यानी सीपीयू लोड 50% है। इससे पता चलता है कि यह इस भंडारण प्रणाली की सीमा से बहुत दूर है और इसे अभी भी आसानी से बढ़ाया जा सकता है। आइए थोड़ा आगे बढ़ें: निम्नलिखित सभी परीक्षणों में नियंत्रक प्रोसेसर पर लोड लगभग 50% दिखाया गया है, इसलिए हम उन्हें दोबारा सूचीबद्ध नहीं करेंगे।

हमारे प्रयोगशाला परीक्षणों के आधार पर, यदि हम 2k ब्लॉक पर यादृच्छिक IOPS की गणना करते हैं, तो AERODISK इंजन N4 सिस्टम की आरामदायक सीमा ~700 IOPS है। यदि यह पर्याप्त नहीं है और आपको लाख प्रयास करने की आवश्यकता है, तो हमारे पास पुराना मॉडल इंजन एन000 है।

यानी लाखों IOPS की कहानी है इंजन N4, और अगर एक मिलियन आपके लिए बहुत ज़्यादा है तो शांति से N2 का इस्तेमाल करें।

चलिए परीक्षणों पर वापस आते हैं।

टेस्ट नंबर 2. बड़े ब्लॉकों में अनुक्रमिक रिकॉर्डिंग. वीडियो निगरानी प्रणालियों का अनुकरण, विश्लेषणात्मक डीबीएमएस में डेटा लोड करना या बैकअप प्रतियां रिकॉर्ड करना।

इस परीक्षण में अब हमें IOPS में कोई दिलचस्पी नहीं है, क्योंकि जब क्रमिक रूप से बड़े ब्लॉकों में लोड किया जाता है तो उनका कोई मतलब नहीं होता है। हम मुख्य रूप से इसमें रुचि रखते हैं: लेखन प्रवाह (मेगाबाइट प्रति सेकंड) और देरी, जो निश्चित रूप से छोटे ब्लॉकों की तुलना में बड़े ब्लॉकों के साथ अधिक होगी।

• ब्लॉक का आकार = 128k
• पढ़ें/लिखें = 0%/100%
• कार्यों की संख्या = 16
• कतार की गहराई = 32
• लोड कैरेक्टर - अनुक्रमिक

कुल: हमारे पास ग्यारह मिलीसेकंड की देरी के साथ प्रति सेकंड साढ़े पांच गीगाबाइट की रिकॉर्डिंग है। जब इसकी निकटतम विदेशी प्रतिस्पर्धियों के साथ तुलना की जाती है, तो परिणाम, हमारी राय में, उत्कृष्ट है, और यह इंजन एन2 प्रणाली की सीमा भी नहीं है।

टेस्ट नंबर 3. बड़े ब्लॉकों में अनुक्रमिक पढ़ना। प्रसारण मीडिया सामग्री का अनुकरण, विश्लेषणात्मक डीबीएमएस से रिपोर्ट तैयार करना या बैकअप से डेटा पुनर्स्थापित करना।

पिछले परीक्षण की तरह, हम प्रवाह और विलंब में रुचि रखते हैं।

• ब्लॉक का आकार = 128k
• पढ़ें/लिखें = 100%/0%
• कार्यों की संख्या = 16
• कतार की गहराई = 32
• लोड कैरेक्टर - अनुक्रमिक

स्ट्रीमिंग पढ़ने का प्रदर्शन स्ट्रीमिंग लेखन प्रदर्शन की तुलना में अनुमानित रूप से थोड़ा बेहतर है।

दिलचस्प बात यह है कि विलंबता संकेतक पूरे परीक्षण (सीधी रेखा) में समान है। यह कोई त्रुटि नहीं है; बड़े ब्लॉकों में क्रमिक रूप से पढ़ते समय, हमारे मामले में यह एक सामान्य स्थिति है।

बेशक, अगर हम सिस्टम को कुछ हफ्तों के लिए इसी रूप में छोड़ दें, तो अंततः हम ग्राफ़ में समय-समय पर उछाल देखेंगे, जो बाहरी कारकों से जुड़ा होगा। लेकिन, सामान्य तौर पर, वे तस्वीर को प्रभावित नहीं करेंगे।

निष्कर्ष

दोहरे नियंत्रक एयरोडिस्क इंजन एन2 सिस्टम से, हम काफी गंभीर परिणाम (~438 आईओपीएस और ~000-5 गीगाबाइट प्रति सेकंड) प्राप्त करने में सक्षम थे। लोड परीक्षणों से पता चला कि हम निश्चित रूप से अपनी भंडारण प्रणाली से शर्मिंदा नहीं हैं। इसके विपरीत, संकेतक बहुत अच्छे हैं और एक अच्छी भंडारण प्रणाली के अनुरूप हैं।

हालाँकि, जैसा कि हमने ऊपर लिखा है, इंजन एन2 एक जूनियर मॉडल है, और इसके अलावा, इस लेख में दिखाए गए परिणाम इसकी सीमा नहीं हैं। बाद में हम अपने पुराने इंजन एन4 सिस्टम से एक समान परीक्षण प्रकाशित करेंगे।

स्वाभाविक रूप से, हम एक लेख के ढांचे के भीतर सभी संभावित परीक्षणों को कवर नहीं कर सकते हैं, इसलिए हम फिर से पाठकों से टिप्पणियों में भविष्य के परीक्षणों के लिए अपनी इच्छाओं को साझा करने का आग्रह करते हैं; हम निश्चित रूप से भविष्य के प्रकाशनों में उन्हें ध्यान में रखेंगे।

इसके अलावा, हम आपको याद दिलाते हैं कि इस वर्ष हम सक्रिय रूप से प्रशिक्षण में लगे हुए हैं, इसलिए हम आपको हमारे सक्षमता केंद्रों में आमंत्रित करते हैं, जहां आप एयरोडिस्क स्टोरेज सिस्टम पर प्रशिक्षण ले सकते हैं, और साथ ही एक दिलचस्प और मजेदार समय बिता सकते हैं।

मैं आगामी प्रशिक्षण कार्यक्रमों के बारे में जानकारी डुप्लिकेट करता हूं।

• येकातेरिनबर्ग. 16 मई 2019. प्रशिक्षण संगोष्ठी. आप लिंक का उपयोग करके पंजीकरण कर सकते हैं: https://aerodisk.promo/ekb/
• येकातेरिनबर्ग. 20 मई - 21 जून, 2019। योग्यता केंद्र. किसी भी कार्य समय पर एयरोडिस्क इंजन एन2 स्टोरेज सिस्टम के लाइव प्रदर्शन के लिए आएं। सटीक पता और पंजीकरण लिंक बाद में प्रदान किया जाएगा। जानकारी का पालन करें.
• नोवोसिबिर्स्क हमारी साइट या हबरा पर जानकारी का पालन करें।
  वर्ष का अक्टूबर 2019
• कज़ान. हमारी साइट या हबरा पर जानकारी का पालन करें।
  वर्ष का अक्टूबर 2019
• क्रास्नायार्स्क हमारी साइट या हबरा पर जानकारी का पालन करें।
  नवंबर 2019

स्रोत: www.habr.com