OceanStor Dorado V6 हे सर्वात जलद आणि सर्वात विश्वासार्ह स्टोरेज सोल्यूशन का आहे

कृपया शीर्षकाच्या आधारे निष्कर्षापर्यंत जाऊ नका! त्याचे समर्थन करण्यासाठी आमच्याकडे जोरदार युक्तिवाद आहेत आणि आम्ही ते शक्य तितक्या संक्षिप्तपणे पॅक केले आहेत. जानेवारी 2020 मध्ये रिलीज झालेल्या आमच्या नवीन डेटा स्टोरेज सिस्टमच्या संकल्पना आणि ऑपरेटिंग तत्त्वांबद्दलची एक पोस्ट आम्ही तुमच्या लक्षात आणून देत आहोत.

आमच्या मते, डोराडो व्ही 6 स्टोरेज सिस्टम कुटुंबाचा मुख्य स्पर्धात्मक फायदा शीर्षकामध्ये नमूद केलेल्या कामगिरी आणि विश्वासार्हतेद्वारे प्रदान केला जातो. होय, होय, हे अगदी सोपे आहे, परंतु आम्ही हे "साधे" साध्य करण्यात कोणत्या धूर्त आणि इतके धूर्त उपाय नाही याबद्दल धन्यवाद, आम्ही आज बोलू.

नवीन पिढीच्या सिस्टमची क्षमता अधिक चांगल्या प्रकारे प्रकट करण्यासाठी, आम्ही मॉडेल श्रेणीच्या जुन्या प्रतिनिधींबद्दल बोलू (मॉडेल 8000, 18000). अन्यथा नमूद केल्याशिवाय, या वापरलेल्या संज्ञा आहेत.

बाजाराबद्दल काही शब्द

बाजारपेठेतील Huawei सोल्यूशन्सचे स्थान अधिक चांगल्या प्रकारे समजून घेण्यासाठी, चला सिद्ध उपायाकडे वळूया - “जादू चतुर्थांश» गार्टनर. दोन वर्षांपूर्वी, सामान्य उद्देश डिस्क अॅरे सेक्टरमध्ये, आमची कंपनी आत्मविश्वासाने नेत्यांमध्ये होती, नेटअॅप आणि हेवलेट पॅकार्ड एंटरप्राइझनंतर दुसऱ्या क्रमांकावर होती. 2018 मध्ये सॉलिड-स्टेट स्टोरेज मार्केटमध्ये Huawei चे स्थान "चॅलेंजर" स्थितीने वैशिष्ट्यीकृत केले होते, परंतु नेतृत्व स्थान प्राप्त करण्यासाठी काहीतरी गहाळ होते.

2019 मध्ये, गार्टनरने, त्यांच्या संशोधनात, वर नमूद केलेल्या दोन्ही क्षेत्रांना एक - "कोअर स्टोरेज" मध्ये एकत्र केले. परिणामी, Huawei पुन्हा स्वतःला लीडर क्वाड्रंटमध्ये सापडले, IBM, Hitachi Vantara आणि Infinidat सारख्या पुरवठादारांच्या पुढे.

चित्र पूर्ण करण्यासाठी, आम्ही लक्षात घेतो की गार्टनर अमेरिकन बाजारपेठेतील विश्लेषणासाठी 80% डेटा गोळा करतो आणि यामुळे युनायटेड स्टेट्समध्ये चांगल्या प्रकारे प्रतिनिधित्व करणार्‍या कंपन्यांच्या बाजूने पूर्वाग्रह दिसून येतो. दरम्यान, युरोपियन आणि आशियाई बाजारांवर लक्ष केंद्रित करणारे पुरवठादार स्वत:ला निश्चितपणे कमी फायदेशीर स्थितीत शोधतात. आणि असे असूनही, गेल्या वर्षी Huawei उत्पादनांनी वरच्या उजव्या क्वाड्रंटमध्ये योग्य स्थान घेतले आणि गार्टनरच्या निर्णयानुसार, "वापरण्यासाठी शिफारस केली जाऊ शकते."

Dorado V6 मध्ये नवीन काय आहे

Dorado V6 उत्पादन लाइन, विशेषतः, एंट्री-लेव्हल 3000 मालिका प्रणालीद्वारे दर्शविली जाते. सुरुवातीला दोन नियंत्रकांसह सुसज्ज, ते क्षैतिजरित्या 16 नियंत्रक, 1200 डिस्क आणि 192 GB कॅशेपर्यंत विस्तारित केले जाऊ शकतात. प्रणाली बाह्य फायबर चॅनल (8/16/32 Gbit/s) आणि इथरनेट (1/10/25/40/100 Gbit/s) पोर्टसह सुसज्ज असेल.

लक्षात घ्या की व्यावसायिकदृष्ट्या यशस्वी नसलेल्या प्रोटोकॉलचा वापर आता टप्प्याटप्प्याने बंद केला जात आहे, म्हणून सुरुवातीला आम्ही इथरनेट (FCoE) आणि Infiniband (IB) वर फायबर चॅनेलसाठी समर्थन सोडून देण्याचा निर्णय घेतला. ते नंतरच्या फर्मवेअर आवृत्त्यांमध्ये जोडले जातील. NVMe over Fabric (NVMe-oF) समर्थन फायबर चॅनेलवर बॉक्सच्या बाहेर उपलब्ध आहे. पुढील फर्मवेअर, जूनमध्ये रिलीझसाठी अनुसूचित, इथरनेटवर NVMe चे समर्थन करेल. आमच्या मते, वरील संच बहुतेक Huawei ग्राहकांच्या गरजा पूर्ण करेल.

वर्तमान फर्मवेअर आवृत्तीमध्ये फाइल प्रवेश उपलब्ध नाही आणि वर्षाच्या अखेरीस पुढील अद्यतनांपैकी एकामध्ये दिसून येईल. अतिरिक्त उपकरणे न वापरता इथरनेट पोर्टसह स्वतः नियंत्रकांद्वारे अंमलबजावणी स्थानिक पातळीवर गृहीत धरली जाते.

Dorado V6 3000 मालिका आणि जुन्या मॉडेलमधील मुख्य फरक म्हणजे ते बॅकएंडवर एका प्रोटोकॉलला समर्थन देते - SAS 3.0. त्यानुसार, तेथील ड्राइव्हस् केवळ नामांकित इंटरफेससह वापरल्या जाऊ शकतात. आमच्या दृष्टिकोनातून, या प्रकारच्या उपकरणासाठी हे प्रदान केलेले कार्यप्रदर्शन पुरेसे आहे.

Dorado V6 5000 आणि 6000 मालिका प्रणाली मध्यम-श्रेणी उपाय आहेत. ते 2U फॉर्म फॅक्टरमध्ये देखील बनविलेले आहेत आणि दोन नियंत्रकांनी सुसज्ज आहेत. ते कार्यप्रदर्शन, प्रोसेसरची संख्या, डिस्कची कमाल संख्या आणि कॅशे आकारात एकमेकांपेक्षा भिन्न आहेत. तथापि, आर्किटेक्चरल आणि अभियांत्रिकीच्या दृष्टीने, Dorado V6 5000 आणि 6000 एकसारखे आहेत आणि सारखेच दिसतात.

हाय-एंड क्लासमध्ये 6 आणि 8000 मालिकेतील Dorado V18000 सिस्टीमचा समावेश आहे. 4U मानक आकारात बनवलेले, त्यांच्याकडे डिफॉल्टनुसार वेगळे आर्किटेक्चर आहे ज्यामध्ये कंट्रोलर आणि ड्राइव्ह वेगळे केले जातात. किमान कॉन्फिगरेशनमध्ये, ते केवळ दोन नियंत्रकांसह सुसज्ज देखील असू शकतात, जरी ग्राहक, नियम म्हणून, चार किंवा अधिक स्थापित करण्यास सांगतात.

Dorado V6 8000 क्षैतिजरित्या 16 कंट्रोलर्स पर्यंत स्केल करते आणि Dorado V6 18000 स्केल 32 पर्यंत. या सिस्टममध्ये वेगवेगळ्या कोर आणि कॅशे आकारांसह भिन्न प्रोसेसर आहेत. त्याच वेळी, मिड-एंड क्लास मॉडेल्सप्रमाणेच अभियांत्रिकी सोल्यूशन्सची ओळख जतन केली जाते.

ड्राईव्हसह 2U शेल्फ 100 Gbit/s च्या बँडविड्थसह RDMA द्वारे जोडलेले आहेत. जुन्या मालिकेतील Dorado V6 बॅकएंड देखील SAS 3.0 चे समर्थन करते, परंतु त्याऐवजी अशा इंटरफेससह SSD ड्राइव्हच्या किंमतीत लक्षणीय घट होते. मग कमी उत्पादकता लक्षात घेऊनही त्यांचा वापर करण्याची आर्थिक व्यवहार्यता असेल. याक्षणी, SAS आणि NVMe इंटरफेससह SSDs मधील किंमतीतील फरक इतका लहान आहे की आम्ही अशा उपायाची शिफारस करण्यास तयार नाही.

कंट्रोलरच्या आत

Dorado V6 नियंत्रक आमच्या स्वतःच्या घटक बेसवर बनवले जातात. इंटेल प्रोसेसर नाहीत, ब्रॉडकॉम एएसआयसी नाहीत. अशा प्रकारे, मदरबोर्डचा प्रत्येक घटक, तसेच मदरबोर्ड स्वतः, अमेरिकन कंपन्यांच्या प्रतिबंधांच्या दबावाशी संबंधित जोखमीच्या प्रभावापासून पूर्णपणे काढून टाकला जातो. ज्यांनी आमची कोणतीही उपकरणे त्यांच्या स्वत: च्या डोळ्यांनी पाहिली आहेत त्यांनी कदाचित लोगोखाली लाल पट्टे असलेली ढाल पाहिली असतील. याचा अर्थ असा की उत्पादनात अमेरिकन घटक नाहीत. हा Huawei चा अधिकृत कोर्स आहे - त्याच्या स्वतःच्या उत्पादनाच्या घटकांमध्ये संक्रमण किंवा, कोणत्याही परिस्थितीत, यूएस धोरण न पाळणाऱ्या देशांमध्ये उत्पादित.

कंट्रोलर बोर्डवर तुम्ही काय पाहू शकता ते येथे आहे.

• युनिव्हर्सल नेटवर्क इंटरफेस (हिसिलिकॉन 1822 चिप), फायबर चॅनल किंवा इथरनेटशी कनेक्ट करण्यासाठी जबाबदार.
• सिस्टमची रिमोट उपलब्धता सुनिश्चित करून, संपूर्ण वैशिष्ट्यीकृत रिमोट कंट्रोल आणि सिस्टमचे निरीक्षण करण्यासाठी BMC चिप, हिसिलिकॉन 1710. तत्सम आमच्या सर्व्हर आणि इतर उपायांमध्ये देखील वापरले जातात.
• सेंट्रल प्रोसेसर म्हणजे Huawei द्वारे उत्पादित Kunpeng 920 चिप, ARM आर्किटेक्चरवर तयार केली गेली आहे. हेच वरील आकृतीमध्ये दर्शविले आहे, जरी इतर नियंत्रकांमध्ये भिन्न कोर, भिन्न घड्याळ वारंवारता इत्यादीसह भिन्न मॉडेल स्थापित केले जाऊ शकतात. एका कंट्रोलरमधील प्रोसेसरची संख्या देखील मॉडेलनुसार बदलते. उदाहरणार्थ, जुन्या डोराडो V6 मालिकेत त्यापैकी चार एका बोर्डवर आहेत.
• SSD कंट्रोलर (हिसिलिकॉन 1812e चिप), जे SAS आणि NVMe दोन्ही ड्राइव्हला जोडण्यास समर्थन देते. चला हे जोडूया की Huawei स्वतंत्रपणे SSDs तयार करते, परंतु NAND सेल स्वतः तयार करत नाही, त्यांना न कापलेल्या सिलिकॉन वेफर्सच्या स्वरूपात जगातील चार सर्वात मोठ्या उत्पादकांकडून खरेदी करण्यास प्राधान्य देते. Huawei चिप्स स्वतंत्रपणे कापते, चाचणी करते आणि पॅकेज करते, त्यानंतर ते त्यांच्या स्वतःच्या ब्रँड अंतर्गत तयार करते.
• आर्टिफिशियल इंटेलिजेंस चिप Ascend 310 आहे. डीफॉल्टनुसार, ती कंट्रोलरवर नसते आणि वेगळ्या कार्डद्वारे माउंट केली जाते, जी नेटवर्क अडॅप्टरसाठी आरक्षित स्लॉटपैकी एक व्यापते. चिपचा वापर बुद्धिमान कॅशे वर्तन, कार्यप्रदर्शन व्यवस्थापन किंवा डुप्लिकेशन आणि कॉम्प्रेशन प्रक्रिया प्रदान करण्यासाठी केला जातो. ही सर्व कार्ये सेंट्रल प्रोसेसरद्वारे सोडविली जाऊ शकतात, परंतु एआय चिप आपल्याला हे अधिक कार्यक्षमतेने करण्याची परवानगी देते.

कुनपेंग प्रोसेसर बद्दल स्वतंत्रपणे

कुनपेंग प्रोसेसर ही एक चिप (SoC) वरील प्रणाली आहे, जिथे संगणकीय युनिट व्यतिरिक्त हार्डवेअर मॉड्यूल्स आहेत जे चेकसमची गणना करणे किंवा इरेजर कोडिंग कार्यान्वित करणे यासारख्या विविध प्रक्रियांना गती देतात. हे SAS, इथरनेट, DDR4 (सहा ते आठ चॅनेलपर्यंत) साठी हार्डवेअर समर्थन देखील लागू करते. हे सर्व Huawei ला स्टोरेज कंट्रोलर तयार करण्यास अनुमती देते जे क्लासिक इंटेल सोल्यूशन्सच्या कामगिरीमध्ये कमी नाहीत.

याव्यतिरिक्त, एआरएम आर्किटेक्चरवर आधारित स्वतःचे समाधान Huawei ला पूर्ण सर्व्हर सोल्यूशन्स तयार करण्याची आणि x86 चा पर्याय म्हणून त्यांच्या ग्राहकांना ऑफर करण्याची संधी देतात.

नवीन Dorado V6 आर्किटेक्चर…

जुन्या मालिकेतील Dorado V6 स्टोरेज सिस्टीमचे अंतर्गत आर्किटेक्चर चार मुख्य सबडोमेन (कारखाने) द्वारे दर्शविले जाते.

पहिले फॅब्रिक म्हणजे कॉमन फ्रंटएंड (SAN फॅब्रिक किंवा होस्टशी संवाद साधण्यासाठी जबाबदार नेटवर्क इंटरफेस).

दुसरा कंट्रोलरचा संच आहे, ज्यापैकी प्रत्येक RDMA प्रोटोकॉलद्वारे, कोणतेही फ्रंट-एंड नेटवर्क कार्ड आणि शेजारील "इंजिन" दोन्हीपर्यंत पोहोचू शकतो, जो चार नियंत्रकांसह एक बॉक्स आहे, तसेच सामान्य शक्ती आणि कूलिंग आहे. त्यांच्यासाठी युनिट्स. आता हाय-एंड डोराडो व्ही 6 मॉडेल दोन अशा "इंजिन" (अनुक्रमे आठ नियंत्रक) सुसज्ज केले जाऊ शकतात.

तिसरा फॅब्रिक बॅकएंडसाठी जबाबदार आहे आणि त्यात RDMA 100G नेटवर्क कार्ड्स असतात.

शेवटी, "हार्डवेअरमध्ये" चौथा कारखाना स्टोरेज उपकरणांसह कनेक्ट केलेल्या बुद्धिमान शेल्फद्वारे दर्शविला जातो.

ही सममितीय रचना NVMe तंत्रज्ञानाची पूर्ण क्षमता अनलॉक करते आणि उच्च कार्यक्षमता आणि विश्वासार्हतेची हमी देते. I/O प्रक्रिया प्रोसेसर आणि कोरमध्ये जास्तीत जास्त समांतर केली जाते, ज्यामुळे एकाधिक थ्रेड्सवर एकाच वेळी वाचन आणि लेखन करता येते.

...आणि तिने आम्हाला काय दिले

Dorado V6 सोल्यूशन्सची कमाल कार्यक्षमता मागील पिढीच्या (समान वर्गातील) प्रणालींपेक्षा अंदाजे तीन पट जास्त आहे आणि 20 दशलक्ष IOPS पर्यंत पोहोचू शकते.

हे या वस्तुस्थितीमुळे आहे की मागील पिढीच्या डिव्हाइसेसमध्ये, NVMe समर्थन फक्त ड्राइव्हसह संलग्न शेल्फवर विस्तारित होते. आता ते होस्टपासून SSD पर्यंत सर्व टप्प्यांवर उपस्थित आहे. बॅकएंड नेटवर्कमध्ये देखील बदल झाले आहेत: SAS/PCIe ने 2 Gbps च्या थ्रूपुटसह RoCEv100 ला मार्ग दिला आहे.

SSD फॉर्म फॅक्टर देखील बदलला आहे. पूर्वी प्रति 2U शेल्फ 25 ड्राइव्हस् असल्‍यास, आता ते 36 पाम-आकाराच्या फिजिकल फॉरमॅट ड्राइव्हस्पर्यंत वाढवले ​​आहे. याव्यतिरिक्त, शेल्फ् 'चे अव रुप अधिक स्मार्ट झाले आहेत. त्यांच्यापैकी प्रत्येकाकडे आता एआरएम चिप्सवर आधारित दोन नियंत्रकांची फॉल्ट-सहिष्णु प्रणाली आहे, जी मध्यवर्ती नियंत्रकांमध्ये स्थापित केलेल्या सारखीच आहे.

सध्या ते केवळ डेटा पुनर्रचना करण्यात गुंतलेले आहेत, परंतु नवीन फर्मवेअरच्या प्रकाशनासह, त्यात कॉम्प्रेशन आणि इरेजर कोडिंग जोडले जाईल, जे मुख्य नियंत्रकांवरील भार 15 ते 5% कमी करेल. काही कार्ये शेल्फमध्ये हलवल्याने अंतर्गत नेटवर्क बँडविड्थ देखील मुक्त होते. आणि हे सर्व सिस्टमची स्केलेबिलिटी क्षमता लक्षणीयरीत्या वाढवते.

स्टोरेज सिस्टमच्या मागील पिढीतील कॉम्प्रेशन आणि डुप्लिकेशन निश्चित लांबीच्या ब्लॉक्ससह केले गेले. आता व्हेरिएबल-लांबीच्या ब्लॉक्ससह कार्य करण्यासाठी एक मोड जोडला गेला आहे, जो सध्या जबरदस्तीने चालू करणे आवश्यक आहे. पुढील फर्मवेअर अद्यतने हे बदलू शकतात.

तसेच अपयश सहनशीलतेबद्दल थोडक्यात. दोन नियंत्रकांपैकी एक अयशस्वी झाल्यास Dorado V3 कार्यरत राहिले. Dorado V6 डेटा उपलब्धता सुनिश्चित करेल जरी आठ पैकी सात नियंत्रक क्रमशः अयशस्वी झाले किंवा एका "इंजिन" पैकी चार एकाच वेळी अयशस्वी झाले.

आर्थिक दृष्टिकोनातून विश्वासार्हता

अलीकडेच, Huawei ग्राहकांमध्‍ये एक सर्वेक्षण केले गेले होते की IT इन्फ्रास्ट्रक्चरच्या वैयक्तिक घटकांचा कंपनीला कोणत्या प्रकारचा डाउनटाइम मान्य आहे. बहुतेक भागांसाठी, प्रतिसादकर्ते अशा काल्पनिक परिस्थितीला सहन करत होते ज्यामध्ये अनुप्रयोग कित्येक शंभर सेकंदांसाठी प्रतिसाद देत नाही. ऑपरेटिंग सिस्टम किंवा होस्ट बस अॅडॉप्टरसाठी, गंभीर डाउनटाइम दहा सेकंदांचा होता (मूलत: रीबूट वेळ). ग्राहक नेटवर्कवर आणखी जास्त मागणी करतात: त्याची बँडविड्थ 10-20 सेकंदांपेक्षा जास्त काळ गमावू नये. तुम्ही अंदाज लावू शकता की, सर्वेक्षण केलेल्यांनी स्टोरेज सिस्टीमच्या अपयशांना सर्वात गंभीर मानले. व्यवसाय प्रतिनिधींच्या दृष्टिकोनातून, स्टोरेज डाउनटाइम ... प्रति वर्ष काही सेकंदांपेक्षा जास्त नसावा!

दुसऱ्या शब्दांत, जर बँकेच्या क्लायंट अनुप्रयोगाने 100 सेकंद प्रतिसाद दिला नाही, तर बहुधा यामुळे आपत्तीजनक परिणाम होणार नाहीत. परंतु जर स्टोरेज सिस्टम समान कालावधीसाठी कार्य करत नसेल तर व्यवसाय थांबेल आणि लक्षणीय आर्थिक नुकसान होण्याची शक्यता आहे.

वरील तक्त्यामध्ये दहा सर्वात मोठ्या बँकांसाठी एका तासाच्या कामाची किंमत दर्शविली आहे (फोर्ब्सकडून 2017 चा डेटा). सहमत आहे, जर तुमची कंपनी चिनी बँकांच्या आकाराच्या जवळ असेल तर, अनेक दशलक्ष डॉलर्ससाठी स्टोरेज सिस्टम खरेदी करण्याची आवश्यकता समायोजित करणे इतके अवघड होणार नाही. उलट विधान देखील सत्य आहे: जर व्यवसायाला डाउनटाइममुळे लक्षणीय नुकसान होत नसेल, तर हाय-एंड स्टोरेज सिस्टम खरेदी करण्याची शक्यता नाही. कोणत्याही परिस्थितीत, आपल्या वॉलेटमध्ये तयार होण्याचा धोका असलेल्या छिद्राच्या आकाराची कल्पना असणे महत्वाचे आहे जेव्हा सिस्टम प्रशासक डेटा स्टोरेज सिस्टमशी व्यवहार करतो ज्याने काम करण्यास नकार दिला आहे.

फेलओव्हर करण्यासाठी सेकंद

सोल्यूशन A मध्ये, वरील चित्रात, तुम्ही आमच्या मागील पिढीची Dorado V3 प्रणाली ओळखू शकता. त्याचे चार नियंत्रक जोड्यांमध्ये काम करतात आणि कॅशेच्या प्रती फक्त दोन नियंत्रकांमध्ये असतात. एका जोडीतील नियंत्रक लोडचे पुनर्वितरण करू शकतात. त्याच वेळी, जसे आपण पाहू शकता, येथे कोणतेही फ्रंट-एंड आणि बॅक-एंड "कारखाने" नाहीत, म्हणून प्रत्येक ड्राइव्ह शेल्फ विशिष्ट कंट्रोलर जोडीशी जोडलेले आहेत.

डायग्राम सोल्यूशन B सध्या बाजारात असलेल्या दुसर्‍या विक्रेत्याकडून एक उपाय दर्शवितो (तुम्हाला आढळले का?). येथे आधीच फ्रंट-एंड आणि बॅक-एंड कारखाने आहेत आणि ड्राइव्ह एकाच वेळी चार नियंत्रकांशी जोडलेले आहेत. खरे आहे, सिस्टमच्या अंतर्गत अल्गोरिदमच्या ऑपरेशनमध्ये काही बारकावे आहेत जे त्वरित स्पष्ट होत नाहीत.

उजवीकडे संपूर्ण अंतर्गत घटकांसह आमचे वर्तमान Dorado V6 स्टोरेज आर्किटेक्चर आहे. या प्रणाली एका विशिष्ट परिस्थितीत कशा टिकून राहतात याचा विचार करूया - एका नियंत्रकाचे अपयश.

क्लासिक सिस्टममध्ये, ज्यामध्ये डोराडो व्ही 3 समाविष्ट आहे, अयशस्वी झाल्यास लोडचे पुनर्वितरण करण्यासाठी आवश्यक कालावधी चार सेकंदांपर्यंत पोहोचतो. या काळात, I/O पूर्णपणे बंद आहे. आमच्या सहकाऱ्यांकडून सोल्यूशन बी मध्ये, अधिक आधुनिक आर्किटेक्चर असूनही, अपयशादरम्यानचा डाउनटाइम आणखी जास्त आहे - सहा सेकंद.

Dorado V6 स्टोरेज सिस्टम अयशस्वी झाल्यानंतर फक्त एका सेकंदात त्याचे कार्य पुनर्संचयित करते. हा परिणाम एकसंध अंतर्गत RDMA वातावरणामुळे प्राप्त झाला आहे, जो नियंत्रकास "विदेशी" मेमरीमध्ये प्रवेश करण्यास अनुमती देतो. दुसरी महत्त्वाची परिस्थिती म्हणजे फ्रंट-एंड कारखान्याची उपस्थिती, ज्यामुळे होस्टचा मार्ग बदलत नाही. पोर्ट समान राहते आणि ड्रायव्हर्स मल्टीपास करून लोड फक्त कार्यरत नियंत्रकांना पाठविला जातो.

Dorado V6 मधील दुसऱ्या कंट्रोलरच्या अपयशाची प्रक्रिया त्याच योजनेनुसार एका सेकंदात केली जाते. Dorado V3 ला सुमारे सहा सेकंद लागतात, तर दुसऱ्या विक्रेत्याच्या सोल्युशनला नऊ लागतात. बर्‍याच DBMS साठी, अशा मध्यांतरांना यापुढे स्वीकार्य मानले जाऊ शकत नाही, कारण या काळात सिस्टम स्टँडबाय मोडवर स्विच केली जाते आणि कार्य करणे थांबवते. हे प्रामुख्याने अनेक विभागांचा समावेश असलेल्या DBMS ला लागू होते.

सोल्यूशन ए तिसऱ्या कंट्रोलरच्या अपयशी टिकून राहू शकत नाही. फक्त डेटासह काही डिस्कवर प्रवेश गमावला आहे या वस्तुस्थितीमुळे. या बदल्यात, अशा परिस्थितीत सोल्यूशन बी कार्यक्षमता पुनर्संचयित करते, ज्यासाठी मागील प्रकरणाप्रमाणे, नऊ सेकंद आवश्यक असतात.

Dorado V6 मध्ये काय आहे? एक सेकंद.

तुम्ही एका सेकंदात काय करू शकता?

जवळजवळ काहीही नाही, परंतु आम्हाला याची आवश्यकता नाही. आपण पुन्हा एकदा पुनरावृत्ती करूया की Dorado V6 हाय-एंड क्लासमध्ये, फ्रंट-एंड फॅक्टरी कंट्रोलर फॅक्टरीमधून डीकपल केली जाते. याचा अर्थ असा की विशिष्ट नियंत्रकाशी संबंधित कोणतेही काटेकोरपणे नियुक्त केलेले पोर्ट नाहीत. फेलओव्हरचा अर्थ पर्यायी मार्ग शोधणे किंवा मल्टीपासिंग पुन्हा सुरू करणे असा होत नाही. प्रणाली जशी होती तशीच काम करत राहते.

एकाधिक अपयशांचा प्रतिकार

जुने Dorado V6 मॉडेल कोणत्याही "इंजिन" मधील कोणत्याही दोन (!) नियंत्रकांच्या एकाचवेळी अपयशी होऊ शकतात. सोल्यूशन आता कॅशेच्या तीन प्रती संग्रहित करते या वस्तुस्थितीमुळे हे शक्य झाले. म्हणून, दुहेरी अयशस्वी होऊनही, नेहमीच एक अखंड प्रत असेल.

एका "इंजिन" मधील सर्व चार नियंत्रकांच्या समकालिक अपयशामुळे देखील घातक परिणाम होणार नाहीत, कारण कॅशेच्या सर्व तीन प्रती कोणत्याही वेळी "इंजिन" मध्ये वितरीत केल्या जातात. सिस्टम स्वतः या ऑपरेटिंग लॉजिकच्या अनुपालनावर लक्ष ठेवते.

शेवटी, आठ पैकी सात नियंत्रकांचे अनुक्रमिक अपयश हे पूर्णपणे संभव नसलेली परिस्थिती आहे. शिवाय, कार्यक्षमता राखण्यासाठी वैयक्तिक अपयशांमधील किमान स्वीकार्य अंतर 15 मिनिटे आहे. या वेळी, स्टोरेज सिस्टम कॅशे स्थलांतरासाठी आवश्यक ऑपरेशन्स पूर्ण करण्यासाठी व्यवस्थापित करते.

शेवटचा कंट्रोलर स्टँडिंग डेटा स्टोअर चालवेल आणि पाच दिवसांसाठी कॅशे राखेल (डीफॉल्ट मूल्य, जे सेटिंग्जमध्ये सहजपणे बदलले जाऊ शकते). यानंतर, कॅशे अक्षम केले जाईल, परंतु स्टोरेज सिस्टम ऑपरेट करणे सुरू राहील.

त्रासदायक अद्यतने नाहीत

नवीन Dorado V6 OS तुम्हाला कंट्रोलर रीबूट न ​​करता स्टोरेज सिस्टम फर्मवेअर अपडेट करण्याची परवानगी देते.

ऑपरेटिंग सिस्टम, मागील सोल्यूशन्सच्या बाबतीत, लिनक्सवर आधारित आहे, परंतु बर्‍याच ऑपरेटिंग प्रक्रिया कर्नलमधून वापरकर्ता मोडमध्ये हलविल्या गेल्या आहेत. बहुतेक फंक्शन्स, जसे की डुप्लिकेशन आणि कॉम्प्रेशनसाठी जबाबदार, आता बॅकग्राउंडमध्ये चालणारे सामान्य डिमन आहेत. याबद्दल धन्यवाद, वैयक्तिक मॉड्यूल अद्यतनित करण्यासाठी संपूर्ण ऑपरेटिंग सिस्टम बदलण्याची आवश्यकता नाही. चला असे म्हणूया की नवीन प्रोटोकॉलसाठी समर्थन जोडण्यासाठी, तुम्हाला फक्त संबंधित सॉफ्टवेअर मॉड्यूल बंद करणे आणि नवीन लॉन्च करणे आवश्यक आहे.

हे स्पष्ट आहे की संपूर्ण सिस्टम अद्यतनित करण्याचा प्रश्न अद्याप शिल्लक आहे, कारण कर्नलमध्ये काही घटक असू शकतात ज्यांना अद्यतनाची आवश्यकता आहे. परंतु, आमच्या निरिक्षणानुसार, हे एकूण 6% पेक्षा कमी आहेत. हे नियंत्रकांना पूर्वीपेक्षा दहापट कमी वेळा रीबूट करण्यास अनुमती देते.

आपत्ती-सहनशील आणि उच्च-उपलब्धता (HA/DR) उपाय

Dorado V6 “आउट ऑफ द बॉक्स” भौगोलिक-वितरित उपाय, शहर-स्तरीय क्लस्टर्स (मेट्रो) आणि “तिहेरी” डेटा केंद्रांमध्ये एकत्रीकरणासाठी तयार आहे.

वरील चित्रात डावीकडे मेट्रो क्लस्टर अनेकांना आधीच परिचित आहे. दोन स्टोरेज सिस्टम एकमेकांपासून 100 किमी अंतरावर सक्रिय / सक्रिय मोडमध्ये कार्य करतात. ही पायाभूत सुविधा, एक किंवा अधिक कोरम सर्व्हरसह, आमच्या FusionSphere क्लाउड ऑपरेटिंग सिस्टीमसह विविध कंपन्यांच्या सोल्यूशन्सद्वारे समर्थित केली जाऊ शकते. अशा प्रकल्पांमध्ये, साइट्समधील चॅनेलची वैशिष्ट्ये विशेष महत्त्वाची असतात; आमच्या बाबतीत इतर सर्व कार्ये हायपरमेट्रो फंक्शनद्वारे घेतली जातात, जी पुन्हा बॉक्सच्या बाहेर उपलब्ध आहे. फायबर चॅनेल द्वारे एकत्रीकरण शक्य आहे, तसेच IP नेटवर्क्समध्ये iSCSI द्वारे, जर अशी गरज उद्भवली तर. यापुढे समर्पित "गडद" ऑप्टिक्सची आवश्यकता नाही, कारण सिस्टम विद्यमान चॅनेलद्वारे संप्रेषण करण्यास सक्षम आहे.

अशा सिस्टीम तयार करताना, स्टोरेज सिस्टमसाठी फक्त हार्डवेअरची आवश्यकता प्रतिकृतीसाठी पोर्टचे वाटप आहे. परवाना खरेदी करणे, कोरम सर्व्हर - भौतिक किंवा आभासी - लॉन्च करणे आणि नियंत्रकांना IP कनेक्टिव्हिटी प्रदान करणे पुरेसे आहे (10 Mbit/s, 50 ms).

हे आर्किटेक्चर तीन डेटा सेंटर्स असलेल्या सिस्टममध्ये सहजपणे हस्तांतरित केले जाऊ शकते (चित्राची उजवी बाजू पहा). उदाहरणार्थ, जेव्हा दोन डेटा केंद्रे मेट्रो क्लस्टर मोडमध्ये कार्य करतात आणि तिसरी साइट, 100 किमी पेक्षा जास्त अंतरावर असते, तेव्हा अॅसिंक्रोनस प्रतिकृती वापरते.

सिस्टीम विविध व्यवसाय परिस्थितींना तांत्रिकदृष्ट्या समर्थन देते जे मोठ्या प्रमाणावर अतिरिक्त झाल्यास लागू केले जातील.

अनेक अपयशांसह मेट्रो क्लस्टरचे अस्तित्व

वर आणि खाली दोन स्टोरेज सिस्टम आणि कोरम सर्व्हर असलेले क्लासिक मेट्रो क्लस्टर देखील दाखवतात. तुम्ही बघू शकता, नऊ पैकी सहा संभाव्य बहुविध अपयशी परिस्थितींमध्ये, आमची पायाभूत सुविधा कार्यरत राहील.

उदाहरणार्थ, दुसऱ्या परिस्थितीमध्ये, कोरम सर्व्हर अयशस्वी झाल्यास आणि साइट्समध्ये सिंक्रोनाइझेशन झाल्यास, सिस्टम उत्पादक राहते कारण दुसरी साइट काम करणे थांबवते. हे वर्तन आधीच अंगभूत अल्गोरिदममध्ये अंगभूत आहे.

तीन अयशस्वी झाल्यानंतरही, त्यांच्यामधील मध्यांतर किमान 15 सेकंद असल्यास माहितीचा प्रवेश राखला जाऊ शकतो.

स्लीव्ह वर नेहमीच्या निपुण

आम्हाला आठवू द्या की Huawei केवळ स्टोरेज सिस्टमच तयार करत नाही तर नेटवर्क उपकरणांची संपूर्ण श्रेणी देखील तयार करते. तुम्ही कोणताही स्टोरेज प्रदाता निवडलात, जर साइट्समध्ये WDM नेटवर्क वापरले असेल, तर 90% प्रकरणांमध्ये ते आमच्या कंपनीच्या सोल्यूशन्सवर तयार केले जाईल. एक तार्किक प्रश्न उद्भवतो: जेव्हा सर्व हार्डवेअर एकमेकांशी सुसंगत असण्याची हमी एका विक्रेत्याकडून मिळू शकते तेव्हा सिस्टमचे प्राणीसंग्रहालय का एकत्र करायचे?

कामगिरीच्या विषयावर

कदाचित, कोणालाही खात्री पटवून देण्याची गरज नाही की ऑल-फ्लॅश स्टोरेज सिस्टममध्ये संक्रमणामुळे पायाभूत सुविधांच्या देखभालीची किंमत लक्षणीयरीत्या कमी होऊ शकते, कारण सर्व नियमित ऑपरेशन्स अनेक पटींनी वेगाने केल्या जातात. अशा उपकरणांच्या सर्व पुरवठादारांद्वारे याचा पुरावा आहे. दरम्यान, जेव्हा विविध स्टोरेज सिस्टम ऑपरेटिंग मोड्स सक्षम केले जातात तेव्हा कार्यक्षमतेत घट येते तेव्हा बरेच विक्रेते विघटन करण्यास सुरवात करतात.

आमच्या उद्योगात, एक किंवा दोन दिवसांसाठी चाचणी ऑपरेशनसाठी स्टोरेज सिस्टम जारी करण्याचा सराव केला जातो. विक्रेता रिकाम्या प्रणालीवर 20-मिनिटांची चाचणी चालवतो, तारकीय कामगिरी क्रमांक मिळवतो. परंतु वास्तविक ऑपरेशनमध्ये, "अंडरवॉटर रेक" त्वरीत बाहेर येतात. एका दिवसात, सुंदर IOPS मूल्ये अर्ध्या किंवा तीन पटीने कमी होतात आणि जर स्टोरेज सिस्टम 80% भरले असेल तर ते आणखी कमी होतील. जेव्हा तुम्ही RAID 5 ऐवजी RAID 10 सक्षम करता, तेव्हा आणखी 10-15% गमावले जाते आणि मेट्रो क्लस्टर मोडमध्ये कार्यप्रदर्शन आणखी निम्मे होते.

वर सूचीबद्ध केलेली प्रत्येक गोष्ट डोराडो V6 बद्दल नाही. आमच्या ग्राहकांना आठवड्याच्या शेवटी किंवा किमान रात्रभर कामगिरीची चाचणी घेण्याची संधी आहे. नंतर कचरा संकलन कार्यात येते, आणि हे देखील स्पष्ट होते की विविध पर्याय सक्रिय करणे - जसे की स्नॅपशॉट्स आणि प्रतिकृती - प्राप्त केलेल्या IOPS च्या प्रमाणात कसा परिणाम होतो.

Dorado V6 मध्ये, स्नॅपशॉट्स आणि पॅरिटीसह RAID चा कार्यक्षमतेवर अक्षरशः कोणताही प्रभाव पडत नाही (3-5% ऐवजी 10-15%). 80% भरलेल्या स्टोरेज सिस्टमवर कचरा संकलन (शून्यांसह स्टोरेज सेल भरणे), कॉम्प्रेशन आणि डुप्लिकेशन नेहमी विनंती प्रक्रियेच्या एकूण गतीवर परिणाम करेल. परंतु हे Dorado V6 आहे जे त्यात मनोरंजक आहे, फंक्शन्स आणि संरक्षणात्मक यंत्रणेचे कोणतेही संयोजन आपण सक्रिय केले तरीही, अंतिम संचयन कार्यप्रदर्शन लोड न करता मिळवलेल्या आकृतीच्या 80% पेक्षा कमी होणार नाही.

लोड बॅलन्सिंग

Dorado V6 ची उच्च कार्यक्षमता प्रत्येक टप्प्यावर संतुलन साधून साध्य केली जाते, म्हणजे:

• मल्टिपासिंग;
• एका होस्टकडून अनेक कनेक्शन वापरणे;
• फ्रंट-एंड कारखान्याची उपस्थिती;
• स्टोरेज कंट्रोलर्सचे ऑपरेशन समांतर करणे;
• RAID 2.0+ स्तरावरील सर्व ड्राइव्हवर लोड वितरण.

तत्वतः, हे सामान्य सराव आहे. आजकाल, काही लोक त्यांचा सर्व डेटा एका LUN वर ठेवतात: प्रत्येकजण आठ, चाळीस किंवा त्याहून अधिक डेटा ठेवण्याचा प्रयत्न करतो. हा एक स्पष्ट आणि योग्य दृष्टीकोन आहे जो आम्ही सामायिक करतो. परंतु जर तुमच्या अर्जाला फक्त एक LUN आवश्यक असेल, ज्याची देखरेख करणे सोपे आहे, तर आमची आर्किटेक्चरल सोल्यूशन्स त्याला एकाधिक LUN सह उपलब्ध कामगिरीच्या 80% साध्य करण्यास अनुमती देतात.

डायनॅमिक CPU लोड शेड्युलिंग

आम्ही खालीलप्रमाणे एक LUN वापरताना प्रोसेसरवर लोड वितरण लागू करतो: LUN स्तरावरील कार्ये वेगळ्या लहान "शार्ड्स" मध्ये विभागली जातात, ज्यापैकी प्रत्येक "इंजिन" मधील विशिष्ट नियंत्रकास काटेकोरपणे नियुक्त केले जाते. हे असे केले जाते जेणेकरून सिस्टम विविध नियंत्रकांवर डेटाच्या या तुकड्यासह "उडी मारत असताना" कामगिरी गमावू नये.

उच्च कार्यप्रदर्शन राखण्यासाठी आणखी एक यंत्रणा म्हणजे डायनॅमिक शेड्युलिंग, ज्यामध्ये विशिष्ट प्रोसेसर कोर कार्यांच्या विविध पूलमध्ये वाटप केले जाऊ शकतात. उदाहरणार्थ, जर सिस्टम सध्या डुप्लिकेशन आणि कॉम्प्रेशन स्तरावर निष्क्रिय असेल, तर काही कोर I/O सर्व्हिसिंग प्रक्रियेत गुंतलेले असू शकतात. किंवा या उलट. हे सर्व वापरकर्त्यासाठी स्वयंचलितपणे आणि पारदर्शकपणे केले जाते.

प्रत्येक डोराडो व्ही 6 कोरच्या वर्तमान लोडबद्दलचा डेटा ग्राफिकल इंटरफेसमध्ये प्रदर्शित केला जात नाही, परंतु कमांड लाइनद्वारे तुम्ही कंट्रोलर ओएसमध्ये प्रवेश करू शकता आणि नेहमीच्या लिनक्स कमांडचा वापर करू शकता. अव्वल.

NVMe आणि RoCE समर्थन

आधीच नमूद केल्याप्रमाणे, Dorado V6 सध्या NVMe ला फायबर चॅनलवर बॉक्सच्या बाहेर पूर्णपणे समर्थन देते आणि कोणत्याही परवान्याची आवश्यकता नाही. वर्षाच्या मध्यभागी, इथरनेट मोडवर NVMe साठी समर्थन दिसून येईल. ते पूर्णपणे वापरण्यासाठी, तुम्हाला थेट मेमरी ऍक्सेस (DMA) आवृत्ती v2.0 सह इथरनेटसाठी समर्थन आवश्यक आहे, दोन्ही स्टोरेज सिस्टीममधून आणि स्विचेस आणि नेटवर्क अडॅप्टरमधून. उदाहरणार्थ, Mellanox ConnectX-4 किंवा ConnectX-5. तुम्ही आमच्या मायक्रोसर्किट्सच्या आधारे बनवलेले नेटवर्क कार्ड देखील वापरू शकता. ऑपरेटिंग सिस्टम स्तरावर RoCE समर्थन देखील लागू करणे आवश्यक आहे.

एकूणच, आम्ही Dorado V6 ला NVMe-केंद्रित प्रणाली मानतो. फायबर चॅनल आणि iSCSI साठी विद्यमान समर्थन असूनही, भविष्यात RDMA सह हाय-स्पीड इथरनेटवर स्विच करण्याची योजना आहे.

विपणन एक चिमूटभर

Dorado V6 सिस्टीम अयशस्वी होण्यास अत्यंत प्रतिरोधक आहे, क्षैतिजरित्या स्केल करते, विविध स्थलांतर तंत्रज्ञानांना समर्थन देते, इत्यादीमुळे, स्टोरेज सिस्टमचा सखोल वापर सुरू झाल्यानंतर त्याच्या संपादनाचा आर्थिक परिणाम स्पष्ट होतो. आम्ही प्रणालीची मालकी शक्य तितकी फायदेशीर बनवण्याचा प्रयत्न करत राहू, जरी ते पहिल्या टप्प्यावर स्पष्ट नसले तरीही.

विशेषतः, आम्ही फ्लॅश एव्हर प्रोग्राम तयार केला आहे, जो स्टोरेज सिस्टीमचे जीवन चक्र वाढवण्याशी संबंधित आहे आणि अपग्रेड करत असताना ग्राहकांना शक्य तितके आराम देण्यासाठी डिझाइन केले आहे.

या प्रोग्राममध्ये अनेक उपायांचा समावेश आहे:

• संपूर्ण उपकरणे (डोराडो व्ही 6 हाय-एंड सिस्टमसाठी) न बदलता हळूहळू कंट्रोलर आणि डिस्क शेल्फ्स नवीन आवृत्त्यांसह बदलण्याची क्षमता;
• फेडरेटेड स्टोरेजची शक्यता (एका हायब्रिड स्टोरेज क्लस्टरचा भाग म्हणून डोराडोच्या वेगवेगळ्या आवृत्त्या एकत्र करणे);
• स्मार्ट व्हर्च्युअलायझेशन (डोराडो सोल्यूशनचा भाग म्हणून तृतीय-पक्ष उपकरणे वापरण्याची क्षमता).

हे लक्षात घेण्यासारखे आहे की जगातील कठीण परिस्थितीचा नवीन प्रणालीच्या व्यावसायिक संभावनांवर फारसा प्रभाव पडला नाही. डोराडो व्ही 6 चे अधिकृत प्रकाशन जानेवारीमध्येच झाले असूनही, आम्हाला चीनमध्ये त्याची लक्षणीय मागणी दिसते आहे, तसेच आर्थिक क्षेत्र आणि सरकारी एजन्सींमधील रशियन आणि आंतरराष्ट्रीय भागीदारांकडून त्यात प्रचंड रस आहे.

इतर गोष्टींबरोबरच, साथीच्या रोगामुळे, तो कितीही काळ टिकला तरीही, रिमोट कर्मचार्‍यांना व्हर्च्युअल डेस्कटॉप प्रदान करण्याचा प्रश्न विशेषतः तीव्र होतो. या प्रक्रियेत Dorado V6 देखील अनेक प्रश्न सोडवू शकतो. हे साध्य करण्यासाठी, आम्ही VMware सुसंगतता सूचीमध्ये नवीन प्रणाली समाविष्ट करण्यास व्यावहारिकपणे सहमती देण्यासह सर्व आवश्यक प्रयत्न करत आहोत.

***

तसे, आमच्या असंख्य वेबिनारबद्दल विसरू नका, जे केवळ रशियन-भाषेच्या विभागातच नव्हे तर जागतिक स्तरावर देखील आयोजित केले जातात. एप्रिलसाठी वेबिनारची यादी येथे उपलब्ध आहे दुवा.

स्त्रोत: www.habr.com