हमने मॉस्को कार्यालय में हुआवेई पर एक नया नेटवर्क कैसे डिज़ाइन और कार्यान्वित किया, भाग 3: सर्वर फ़ैक्टरी

पिछले दो भागों में (समय, два) हमने उन सिद्धांतों को देखा जिन पर नई कस्टम फैक्ट्री का निर्माण किया गया था, और सभी नौकरियों के प्रवासन के बारे में बात की। अब सर्वर फ़ैक्टरी के बारे में बात करने का समय आ गया है।

पहले, हमारे पास कोई अलग सर्वर इंफ्रास्ट्रक्चर नहीं था: सर्वर स्विच उपयोगकर्ता वितरण स्विच के समान कोर से जुड़े थे। वर्चुअल नेटवर्क (वीएलएएन) का उपयोग करके अभिगम नियंत्रण किया गया था, वीएलएएन रूटिंग एक बिंदु पर - कोर पर (सिद्धांत के अनुसार) किया गया था ढह गई रीढ़ की हड्डी).

पुराना नेटवर्क इंफ्रास्ट्रक्चर

नए कार्यालय नेटवर्क के साथ-साथ, हमने एक नया सर्वर रूम और इसके लिए एक अलग नई फैक्ट्री बनाने का निर्णय लिया। यह छोटा (तीन सर्वर कैबिनेट) निकला, लेकिन सभी सिद्धांतों के अनुपालन में: CE8850 स्विच पर एक अलग कोर, एक पूरी तरह से जालीदार (स्पाइन-लीफ) टोपोलॉजी, रैक के शीर्ष पर (ToR) CE6870 स्विच, एक अलग जोड़ी शेष नेटवर्क (सीमा पत्ते) के साथ इंटरफेस करने के लिए स्विचों की संख्या। संक्षेप में, पूर्ण कीमा।

नई सर्वर फ़ैक्टरी का नेटवर्क

हमने सर्वर को सीधे ToR स्विच से जोड़ने के पक्ष में सर्वर SCS को छोड़ने का निर्णय लिया। क्यों? हमारे पास पहले से ही दो सर्वर रूम हैं जो सर्वर एससीएस का उपयोग करके बनाए गए हैं, और हमें एहसास हुआ कि यह है:

• उपयोग करने में असुविधाजनक (कई पुन: कनेक्शन, आपको केबल लॉग को सावधानीपूर्वक अपडेट करने की आवश्यकता है);
• पैच पैनलों द्वारा घेरी गई जगह के मामले में महंगा;
• यह एक बाधा है जब सर्वर की कनेक्शन गति को बढ़ाना आवश्यक होता है (उदाहरण के लिए, तांबे पर 1 Gbit/s कनेक्शन से ऑप्टिकल पर 10 Gbit/s पर स्विच करना)।

एक नई सर्वर फ़ैक्टरी में जाते समय, हमने 1 Gbit/s की गति से कनेक्ट होने वाले सर्वर से दूर जाने की कोशिश की और खुद को 10 Gbit इंटरफ़ेस तक सीमित कर लिया। लगभग सभी पुराने सर्वर जो ऐसा नहीं कर सकते थे, उन्हें वर्चुअलाइज़ किया गया था, और बाकी को गीगाबिट ट्रांसीवर के माध्यम से 10 गीगाबिट पोर्ट से जोड़ा गया था। हमने गणित किया और निर्णय लिया कि यह उनके लिए अलग गीगाबिट स्विच स्थापित करने से सस्ता होगा।

टीओआर स्विच

इसके अलावा हमारे नए सर्वर रूम में, हमने 24 पोर्ट के साथ अलग-अलग आउट-ऑफ-बैंड मैनेजमेंट (ओओएम) स्विच स्थापित किए, प्रति रैक एक। यह विचार बहुत अच्छा निकला, लेकिन पर्याप्त पोर्ट नहीं थे, अगली बार हम 48 पोर्ट के साथ OOM स्विच स्थापित करेंगे।

हम सर्वर के दूरस्थ प्रबंधन के लिए इंटरफेस जैसे iLO, या Huawei शब्दावली में iBMC को OOM नेटवर्क से जोड़ते हैं। यदि सर्वर ने नेटवर्क से अपना मुख्य कनेक्शन खो दिया है, तो इस इंटरफ़ेस के माध्यम से उस तक पहुंचना संभव होगा। इसके अलावा, टीओआर स्विच, तापमान सेंसर, यूपीएस नियंत्रण इंटरफेस और अन्य समान उपकरणों के नियंत्रण इंटरफेस ओओएम स्विच से जुड़े हुए हैं। OOM नेटवर्क एक अलग फ़ायरवॉल इंटरफ़ेस के माध्यम से पहुंच योग्य है।

OOM नेटवर्क कनेक्शन

सर्वर और उपयोगकर्ता नेटवर्क को जोड़ना

एक कस्टम फैक्ट्री में, अलग-अलग उद्देश्यों के लिए अलग-अलग वीआरएफ का उपयोग किया जाता है - उपयोगकर्ता वर्कस्टेशन, वीडियो निगरानी प्रणाली, मीटिंग रूम में मल्टीमीडिया सिस्टम, स्टैंड और डेमो क्षेत्रों को व्यवस्थित करने आदि के लिए।

सर्वर फैक्ट्री में वीआरएफ का एक और सेट बनाया गया है:

• नियमित सर्वरों को जोड़ने के लिए जिन पर कॉर्पोरेट सेवाएँ तैनात हैं।
• एक अलग वीआरएफ, जिसके भीतर इंटरनेट से पहुंच वाले सर्वर तैनात हैं।
• डेटाबेस सर्वर के लिए एक अलग वीआरएफ जो केवल अन्य सर्वर (उदाहरण के लिए, एप्लिकेशन सर्वर) द्वारा एक्सेस किया जाता है।
• हमारे मेल सिस्टम के लिए अलग वीआरएफ (एमएस एक्सचेंज + बिजनेस के लिए स्काइप)।

इसलिए हमारे पास उपयोगकर्ता फ़ैक्टरी पक्ष पर वीआरएफ का एक सेट और सर्वर फ़ैक्टरी पक्ष पर वीआरएफ का एक सेट है। दोनों सेट कॉर्पोरेट फ़ायरवॉल (एफडब्ल्यू) क्लस्टर पर स्थापित हैं। एमई सर्वर फैब्रिक और यूजर फैब्रिक दोनों के बॉर्डर स्विच (बॉर्डर लीफ) से जुड़े होते हैं।

एमई - भौतिकी के माध्यम से कारखानों का इंटरफेसिंग

एमई के माध्यम से कारखानों को इंटरफेस करना - तर्क

प्रवासन कैसे हुआ?

माइग्रेशन के दौरान, हमने अस्थायी ट्रंक के माध्यम से डेटा लिंक स्तर पर नए और पुराने सर्वर कारखानों को जोड़ा। एक विशिष्ट वीएलएएन में स्थित सर्वरों को स्थानांतरित करने के लिए, हमने एक अलग ब्रिज डोमेन बनाया, जिसमें पुराने सर्वर फैक्ट्री का वीएलएएन और नए सर्वर फैक्ट्री का वीएक्सएलएएन शामिल था।

कॉन्फ़िगरेशन कुछ इस तरह दिखता है, अंतिम दो पंक्तियाँ कुंजी हैं:

bridge-domain 22
 vxlan vni 600022
 evpn 
  route-distinguisher 10.xxx.xxx.xxx:60022
  vpn-target 6xxxx:60022 export-extcommunity
  vpn-target 6xxxx:60022 import-extcommunity

interface Eth-Trunk1
 mode lacp-static
 dfs-group 1 m-lag 1

interface Eth-Trunk1.1022 mode l2
 encapsulation dot1q vid 22
 bridge-domain 22

आभासी मशीनों का स्थानांतरण

फिर, VMware vMotion का उपयोग करके, इस VLAN में वर्चुअल मशीनों को पुराने हाइपरवाइज़र (संस्करण 5.5) से नए (संस्करण 6.5) में स्थानांतरित कर दिया गया। उसी समय, हार्डवेयर सर्वरों को वर्चुअलाइज किया गया।

जब आप पुनः प्रयास करेंएमटीयू को पहले से कॉन्फ़िगर करें और बड़े पैकेटों के "अंत से अंत तक" मार्ग की जांच करें।

पुराने सर्वर नेटवर्क में, हमने VMware vShield वर्चुअल फ़ायरवॉल का उपयोग किया था। चूंकि VMware अब इस टूल का समर्थन नहीं करता है, इसलिए हमने उसी समय vShield से हार्डवेयर फ़ायरवॉल पर स्विच किया, जब हम नए वर्चुअल फ़ार्म पर माइग्रेट हुए।

पुराने नेटवर्क पर किसी विशेष वीएलएएन में कोई सर्वर नहीं बचे होने के बाद, हमने रूटिंग बदल दी। पहले, इसे पुराने कोर पर किया गया था, जिसे कोलैप्स्ड बैकबोन तकनीक का उपयोग करके बनाया गया था, और नए सर्वर कारखाने में हमने एनीकास्ट गेटवे तकनीक का उपयोग किया था।

रूटिंग बदलना

एक विशिष्ट वीएलएएन के लिए रूटिंग स्विच करने के बाद, इसे ब्रिज डोमेन से डिस्कनेक्ट कर दिया गया और पुराने और नए नेटवर्क के बीच ट्रंक से बाहर कर दिया गया, यानी, यह पूरी तरह से नए सर्वर फैक्ट्री में चला गया। इस प्रकार, हमने लगभग 20 वीएलएएन स्थानांतरित किए।

इसलिए हमने एक नया नेटवर्क, एक नया सर्वर और एक नया वर्चुअलाइजेशन फ़ार्म बनाया। निम्नलिखित लेखों में से एक में हम बात करेंगे कि हमने वाई-फ़ाई के साथ क्या किया।

मैक्सिम क्लोचकोव
नेटवर्क ऑडिट और जटिल परियोजना समूह के वरिष्ठ सलाहकार
नेटवर्क समाधान केंद्र
"जेट इन्फोसिस्टम्स"

स्रोत: www.habr.com