रशियन स्टोरेज सिस्टम एरोडिस्क: लोड चाचणी. आम्ही IOPS पिळून काढतो

सर्वांना नमस्कार! वचन दिल्याप्रमाणे, आम्ही रशियन-निर्मित डेटा स्टोरेज सिस्टम - AERODISK ENGINE N2 च्या लोड चाचणीचे परिणाम प्रकाशित करत आहोत.

मागील लेखात, आम्ही स्टोरेज सिस्टम तोडली (म्हणजे, आम्ही क्रॅश चाचण्या केल्या) आणि क्रॅश चाचणीचे परिणाम सकारात्मक होते (म्हणजे आम्ही स्टोरेज सिस्टम खंडित केली नाही). तुम्ही क्रॅश चाचणी परिणाम पाहू शकता येथे.

मागील लेखावरील टिप्पण्यांमध्ये, अतिरिक्त, अधिक अत्याधुनिक क्रॅश चाचण्यांसाठी विनंत्या केल्या होत्या. आम्ही ते सर्व रेकॉर्ड केले आहे आणि पुढीलपैकी एका लेखात ते निश्चितपणे लागू करू. त्याच वेळी, तुम्ही आमच्या मॉस्कोमधील प्रयोगशाळेला कधीही भेट देऊ शकता (पायाने या किंवा इंटरनेटद्वारे दूरस्थपणे करू शकता) आणि या चाचण्या स्वतः करू शकता (तुम्ही विशिष्ट प्रकल्पासाठी चाचणी देखील करू शकता :-)). आम्हाला लिहा, आम्ही सर्व परिस्थितींचा विचार करू!

याव्यतिरिक्त, तुम्ही मॉस्कोमध्ये नसल्यास, तुमच्या जवळच्या शहरातील सक्षमता केंद्रात विनामूल्य प्रशिक्षण कार्यक्रमास उपस्थित राहून तुम्ही आमच्या स्टोरेज सिस्टमशी अधिक परिचित होऊ शकता.

खाली योग्यता केंद्रांच्या आगामी कार्यक्रमांची आणि ऑपरेटिंग तारखांची यादी आहे.

• एकटेरिनबर्ग. १६ मे २०१९. प्रशिक्षण सेमिनार. तुम्ही लिंक वापरून नोंदणी करू शकता: https://aerodisk.promo/ekb/
• एकटेरिनबर्ग. 20 मे - 21 जून 2019. सक्षमता केंद्र. कोणत्याही कामाच्या वेळी AERODISK ENGINE N2 स्टोरेज सिस्टमच्या थेट प्रात्यक्षिकासाठी या. अचूक पत्ता आणि नोंदणी लिंक नंतर प्रदान केली जाईल. माहितीचे अनुसरण करा.
• नोवोसिबिर्स्क आमच्या साइट किंवा हुब्रावरील माहितीचे अनुसरण करा.
  ऑक्टोबर २०२१
• कझान. आमच्या साइट किंवा हुब्रावरील माहितीचे अनुसरण करा.
  ऑक्टोबर २०२१
• क्रास्नोयार्स्क आमच्या साइट किंवा हुब्रावरील माहितीचे अनुसरण करा.
  नोव्हेंबर २०२२

आम्हाला आणखी एक चांगली बातमी सांगायची आहे: आम्हाला आमची अखेर मिळाली आहे YouTube वर एक चॅनेल जिथे तुम्ही मागील इव्हेंटमधील व्हिडिओ पाहू शकता. आम्ही नियमितपणे आमचे प्रशिक्षण व्हिडिओ तेथे पोस्ट करतो.

चाचणी स्टँड

तर, चाचण्यांकडे परत. आम्ही अतिरिक्त SAS SSD ड्राइव्हस्, तसेच फ्रंट-एंड फायबर चॅनल 2G अडॅप्टर्स स्थापित करून आमची ENGINE N16 प्रयोगशाळा स्टोरेज प्रणाली अपग्रेड केली. सममितीय पद्धतीने, आम्ही FC 16G अडॅप्टर जोडून सर्व्हर अपग्रेड केला आहे ज्यावरून आम्ही लोड चालवू.

परिणामी, आमच्या लॅबमध्ये आमच्याकडे 2 SAS SSD 24 TB, 1,6 DWPD डिस्क्स असलेली 3-कंट्रोलर स्टोरेज सिस्टीम आहे, जी SAN द्वारे FC 16G द्वारे फिजिकल लिनक्स सर्व्हरवर स्विच करते.
चाचणी बेंच आकृती खालील आकृतीमध्ये दर्शविली आहे.

चाचणी पद्धत

ब्लॉक ऍक्सेसवरील सर्वोत्तम कामगिरीसाठी, आम्ही DDP (डायनॅमिक डिस्क पूल) पूल वापरू, जे आम्ही एकदा विशेषतः ALL-FLASH सिस्टमसाठी तयार केले होते.
चाचणीसाठी, आम्ही RAID-1 संरक्षण पातळीसह प्रत्येकी 10 TB क्षमतेचे दोन LUN तयार केले. आम्ही प्रत्येक LUN ला 12 डिस्क्समध्ये (एकूण 24) स्टोरेज सिस्टीममध्ये स्थापित केलेल्या प्रत्येक डिस्कच्या संभाव्यतेचा पूर्णपणे वापर करण्यासाठी “पसरवू”.

स्टोरेज संसाधनांचा शक्य तितका वापर करण्यासाठी आम्ही वेगवेगळ्या कंट्रोलर्सद्वारे सर्व्हरवर LUN सादर करतो.

प्रत्येक चाचण्या एक तास चालतील, आणि चाचण्या लवचिक IO (FIO) प्रोग्रामद्वारे केल्या जातील; FIO डेटा स्वयंचलितपणे Excel वर अपलोड केला जाईल, ज्यामध्ये स्पष्टतेसाठी आलेख आधीच तयार केले आहेत.

प्रोफाइल लोड करा

एकूण, आम्ही तीन चाचण्या करू, प्रत्येकी एक तास, वॉर्म-अप वेळ वगळून, ज्यासाठी आम्ही 15 मिनिटे वाटप करू (24 एसएसडी ड्राइव्हच्या अ‍ॅरेला उबदार करण्यासाठी किती आवश्यक आहे). या चाचण्या सर्वाधिक वारंवार समोर आलेल्या लोड प्रोफाइलचे अनुकरण करतात, विशेषतः या काही डीबीएमएस, व्हिडिओ पाळत ठेवणे प्रणाली, मीडिया सामग्री प्रसारण आणि बॅकअप आहेत.

तसेच, सर्व चाचण्यांमध्ये, आम्ही स्टोरेज सिस्टम आणि होस्टवर RAM मध्ये कॅशे करण्याची क्षमता जाणूनबुजून अक्षम केली आहे. अर्थात, हे परिणाम खराब करेल, परंतु, आमच्या मते, अशा परिस्थितीत चाचणी अधिक निष्पक्ष असेल.

चाचणी निकाल

चाचणी क्रमांक १. लहान ब्लॉक्समध्ये यादृच्छिक भार. उच्च-लोड व्यवहार DBMS चे अनुकरण.

• ब्लॉक आकार = 4k
• वाचा/लिहा = ७०%/३०%
• कामांची संख्या = 16
• रांगेची खोली = 32
• लोड वर्ण = संपूर्ण यादृच्छिक

चाचणी निकाल:

एकूण, कनिष्ठ मध्यम-श्रेणी इंजिन N2 प्रणालीसह आम्हाला 438 मिलिसेकंदच्या विलंबासह 2,6k IOPS प्राप्त झाले. प्रणालीच्या वर्गाचा विचार करता, आमच्या मते, परिणाम अगदी सभ्य आहे. ही सिस्टीमची मर्यादा आहे की नाही हे समजून घेण्यासाठी, आम्ही स्टोरेज कंट्रोलर्सच्या संसाधनाचा वापर पाहू.

आम्हाला प्रामुख्याने CPU मध्ये स्वारस्य आहे, कारण, वर सांगितल्याप्रमाणे, चाचणी परिणाम विकृत होऊ नये म्हणून आम्ही जाणूनबुजून RAM कॅशे अक्षम केला आहे.

दोन्ही स्टोरेज कंट्रोलरवर आम्ही अंदाजे समान चित्र पाहतो.

म्हणजेच, CPU लोड 50% आहे. हे सूचित करते की हे या स्टोरेज सिस्टमच्या मर्यादेपासून खूप दूर आहे आणि तरीही ते सहजपणे मोजले जाऊ शकते. चला थोडे पुढे जाऊया: खालील सर्व चाचण्यांनी कंट्रोलर प्रोसेसरवरील भार सुमारे 50% असल्याचे देखील दर्शवले आहे, म्हणून आम्ही त्यांना पुन्हा सूचीबद्ध करणार नाही.

आमच्या प्रयोगशाळेच्या चाचण्यांवर आधारित, AERODISK Engine N2 प्रणालीची आरामदायी मर्यादा, जर आम्ही 4k ब्लॉक्सवर यादृच्छिक IOPS मोजले तर, ~700 IOPS आहे. जर हे पुरेसे नसेल आणि तुम्हाला एक दशलक्ष प्रयत्न करण्याची आवश्यकता असेल, तर आमच्याकडे जुने मॉडेल इंजिन N000 आहे.

म्हणजेच, लाखो IOPS बद्दलची कथा म्हणजे ENGINE N4, आणि जर एक दशलक्ष तुमच्यासाठी खूप जास्त असेल तर शांतपणे N2 वापरा.

चला चाचण्यांकडे परत जाऊया.

चाचणी क्रमांक 2. मोठ्या ब्लॉक्समध्ये अनुक्रमिक रेकॉर्डिंग. व्हिडिओ पाळत ठेवणे प्रणालीचे अनुकरण, विश्लेषणात्मक DBMS मध्ये डेटा लोड करणे किंवा बॅकअप प्रती रेकॉर्ड करणे.

या चाचणीमध्ये आम्हाला यापुढे IOPS मध्ये स्वारस्य नाही, कारण मोठ्या ब्लॉक्समध्ये क्रमाक्रमाने लोड केल्यावर त्यांना काही अर्थ नाही. आम्हाला प्रामुख्याने स्वारस्य आहे: लेखन प्रवाह (मेगाबाइट्स प्रति सेकंद) आणि विलंब, जे अर्थातच, लहान ब्लॉक्सपेक्षा मोठ्या ब्लॉक्ससह जास्त असेल.

• ब्लॉक आकार = 128k
• वाचा/लिहा = ७०%/३०%
• कामांची संख्या = 16
• रांगेची खोली = 32
• लोड वर्ण - अनुक्रमिक

एकूण: आमच्याकडे अकरा मिलिसेकंदांच्या विलंबासह साडेपाच गीगाबाइट्स प्रति सेकंद रेकॉर्डिंग आहे. त्याच्या जवळच्या परदेशी प्रतिस्पर्ध्यांशी तुलना केल्यास, परिणाम, आमच्या मते, उत्कृष्ट आहे, आणि इंजिन N2 सिस्टमची मर्यादा देखील नाही.

चाचणी क्रमांक 3. मोठ्या ब्लॉक्समध्ये अनुक्रमिक वाचन. प्रसारित मीडिया सामग्रीचे अनुकरण करणे, विश्लेषणात्मक DBMS वरून अहवाल तयार करणे किंवा बॅकअपमधून डेटा पुनर्संचयित करणे.

मागील चाचणीप्रमाणे, आम्हाला प्रवाह आणि विलंब यामध्ये रस आहे.

• ब्लॉक आकार = 128k
• वाचा/लिहा = ७०%/३०%
• कामांची संख्या = 16
• रांगेची खोली = 32
• लोड वर्ण - अनुक्रमिक

प्रवाहित वाचन कार्यप्रदर्शन प्रवाह लेखन कार्यप्रदर्शनापेक्षा किंचित चांगले आहे.

विशेष म्हणजे, लेटन्सी इंडिकेटर संपूर्ण चाचणीमध्ये सारखाच असतो (सरळ रेषा). ही त्रुटी नाही; मोठ्या ब्लॉक्समध्ये अनुक्रमे वाचताना, आमच्या बाबतीत ही एक सामान्य परिस्थिती आहे.

अर्थात, जर आम्ही या फॉर्ममध्ये काही आठवडे प्रणाली सोडली, तर आम्हाला कालांतराने आलेखांमध्ये नियतकालिक उडी दिसतील, जे बाह्य घटकांशी संबंधित असतील. परंतु, सर्वसाधारणपणे, ते चित्रावर परिणाम करणार नाहीत.

निष्कर्ष

ड्युअल-कंट्रोलर AERODISK ENGINE N2 सिस्टीममधून, आम्ही गंभीर परिणाम (~438 IOPS आणि ~000-5 गीगाबाइट्स प्रति सेकंद) प्राप्त करण्यात सक्षम होतो. लोड चाचण्यांनी दर्शविले की आम्हाला आमच्या स्टोरेज सिस्टमची लाज वाटत नाही. त्याउलट, निर्देशक अतिशय सभ्य आहेत आणि चांगल्या स्टोरेज सिस्टमशी संबंधित आहेत.

जरी, आम्ही वर लिहिल्याप्रमाणे, इंजिन N2 हे एक कनिष्ठ मॉडेल आहे आणि त्याशिवाय, या लेखात दर्शविलेले परिणाम त्याची मर्यादा नाहीत. नंतर आम्ही आमच्या जुन्या ENGINE N4 सिस्टीमवरून अशीच चाचणी प्रकाशित करू.

साहजिकच, आम्ही एका लेखाच्या चौकटीत सर्व संभाव्य चाचण्या कव्हर करू शकत नाही, म्हणून आम्ही वाचकांना भविष्यातील चाचण्यांसाठी त्यांच्या शुभेच्छा टिप्पण्यांमध्ये सामायिक करण्याची पुन्हा विनंती करतो; आम्ही त्यांना भविष्यातील प्रकाशनांमध्ये निश्चितपणे विचारात घेऊ.

याव्यतिरिक्त, आम्ही तुम्हाला आठवण करून देतो की या वर्षी आम्ही सक्रियपणे प्रशिक्षणात व्यस्त आहोत, म्हणून आम्ही तुम्हाला आमच्या सक्षमता केंद्रांमध्ये आमंत्रित करतो, जिथे तुम्ही AERODISK स्टोरेज सिस्टमवर प्रशिक्षण घेऊ शकता आणि त्याच वेळी एक मनोरंजक आणि मजेदार वेळ घालवू शकता.

मी आगामी प्रशिक्षण कार्यक्रमांची माहिती डुप्लिकेट करतो.

• एकटेरिनबर्ग. १६ मे २०१९. प्रशिक्षण सेमिनार. तुम्ही लिंक वापरून नोंदणी करू शकता: https://aerodisk.promo/ekb/
• एकटेरिनबर्ग. 20 मे - 21 जून 2019. सक्षमता केंद्र. कोणत्याही कामाच्या वेळी AERODISK ENGINE N2 स्टोरेज सिस्टमच्या थेट प्रात्यक्षिकासाठी या. अचूक पत्ता आणि नोंदणी लिंक नंतर प्रदान केली जाईल. माहितीचे अनुसरण करा.
• नोवोसिबिर्स्क आमच्या साइट किंवा हुब्रावरील माहितीचे अनुसरण करा.
  ऑक्टोबर २०२१
• कझान. आमच्या साइट किंवा हुब्रावरील माहितीचे अनुसरण करा.
  ऑक्टोबर २०२१
• क्रास्नोयार्स्क आमच्या साइट किंवा हुब्रावरील माहितीचे अनुसरण करा.
  नोव्हेंबर २०२२

स्त्रोत: www.habr.com