रशियन पोस्ट डेटा सेंटरसाठी नवीन आयटी पायाभूत सुविधा

मला खात्री आहे की सर्व Habr वाचकांनी किमान एकदा परदेशातील ऑनलाइन स्टोअरमधून वस्तू मागवल्या असतील आणि नंतर रशियन पोस्ट ऑफिसमध्ये पार्सल घेण्यासाठी गेले. लॉजिस्टिक्स आयोजित करण्याच्या दृष्टिकोनातून, या कार्याच्या प्रमाणाची आपण कल्पना करू शकता? खरेदीदारांची संख्या त्यांच्या खरेदीच्या संख्येने गुणाकार करा, आपल्या विशाल देशाच्या नकाशाची कल्पना करा आणि त्यावर 40 हजाराहून अधिक पोस्ट ऑफिस आहेत... तसे, 2018 मध्ये, रशियन पोस्टने 345 दशलक्ष आंतरराष्ट्रीय पार्सलवर प्रक्रिया केली.

या लेखात आम्‍ही तुम्‍हाला पोच्‍ताला कोणत्‍या प्रश्‍नांचा सामना करावा लागला आणि LANIT इंटिग्रेशन टीमने डेटा सेंटरसाठी नवीन IT इन्फ्रास्ट्रक्चर तयार करून ते कसे सोडवले ते सांगू.

रशियन पोस्टच्या आधुनिक लॉजिस्टिक केंद्रांपैकी एक
 

प्रकल्पापूर्वी

चीन, पश्चिम युरोप आणि उत्तर अमेरिकेतील परदेशी स्टोअरमधील पार्सलच्या संख्येत तीव्र वाढ झाल्यामुळे, रशियन पोस्टच्या लॉजिस्टिक सुविधांवरील भार वाढला आहे. म्हणून, नवीन पिढीची लॉजिस्टिक केंद्रे बांधली गेली, जी उच्च-कार्यक्षमता क्रमवारी लावणारी मशीन वापरतात. त्यांना संगणकीय पायाभूत सुविधांकडून समर्थन आवश्यक आहे.

डेटा सेंटरची पायाभूत सुविधा जुनी होती आणि एंटरप्राइझ माहिती प्रणालीच्या ऑपरेशनमध्ये आवश्यक कार्यप्रदर्शन आणि विश्वासार्हता प्रदान करत नाही. तसेच, रशियन पोस्टने नवीन सेवा सुरू करण्यासाठी संगणकीय शक्तीचा अभाव अनुभवला.
 

ग्राहक डेटा केंद्रे आणि त्यांच्या समस्या

रशियन पोस्ट डेटा केंद्रे 40 हून अधिक सुविधा आणि 000 प्रादेशिक विभागांना सेवा देतात. डेटा केंद्रे ई-कॉमर्स सेवांसह डझनभर 85/XNUMX व्यवसाय सेवा चालवतात.

आज, एंटरप्रायझेस बिग डेटा संचयित करण्यासाठी, विश्लेषण करण्यासाठी आणि प्रक्रिया करण्यासाठी सिस्टम वापरतात. अशा प्रणालींसाठी, कृत्रिम बुद्धिमत्ता आणि मशीन लर्निंग अल्गोरिदमचा वापर महत्त्वपूर्ण भूमिका बजावतो. आज, एंटरप्राइझसाठी सर्वात महत्वाच्या प्रकरणांपैकी एक म्हणजे लॉजिस्टिक प्रवाहाचे व्यवस्थापन आणि पोस्ट ऑफिसमध्ये ग्राहक सेवेला गती देणे.

आधुनिकीकरण प्रकल्प सुरू होण्यापूर्वी, मुख्य आणि बॅकअप डेटा केंद्रांमध्ये सुमारे 3000 आभासी मशीन्स होत्या, संग्रहित माहितीचे प्रमाण 2 पेटाबाइट्सपेक्षा जास्त होते. डेटा केंद्रांमध्ये सुरक्षा स्तरांनुसार विविध विभागांमध्ये विभागणीशी संबंधित एक जटिल रहदारी मार्ग रचना होती.

अनुप्रयोगांच्या विकासासह आणि नवीन सेवांचा परिचय करून, डेटा केंद्रांमधील नेटवर्क उपकरणांची विद्यमान बँडविड्थ अपुरी झाली आहे. नवीन गतीसह इंटरफेसमध्ये संक्रमण आवश्यक होते: 10 Gbit/s, प्रवेशावर 1 Gbit/s ऐवजी आणि 40 Gbit/s कोर स्तरावर, उपकरणे आणि संप्रेषण चॅनेलच्या पूर्ण रिडंडंसीसह.

माहिती सुरक्षा विभागाला ट्रॅफिक आणि अॅप्लिकेशन्स (पीएन - प्रायव्हेट नेटवर्क आणि डीएमझेड - डिमिलिटराइज्ड झोन) च्या उच्च स्तरीय माहिती सुरक्षिततेसह विभागांमध्ये पायाभूत सुविधांचे विभाजन करण्याची आवश्यकता प्राप्त झाली. ट्रॅफिक फायरवॉल (FWUs) मधून गेले ज्यांना फिल्टर करण्याची आवश्यकता नाही. या वाहतुकीसाठी स्विचेसवरील व्हीआरएफचा वापर करण्यात आला नाही. फायरवॉलवरील नियम सबऑप्टिमल होते (प्रत्येक डेटा सेंटरमध्ये हजारो नियम).

आयपी अॅड्रेस आणि कॉर्पोरेट डेटा नेटवर्क (CDN) सह विभागांमधील ट्रॅफिकसाठी इष्टतम मार्ग राखताना डेटा सेंटर्समध्ये व्हर्च्युअल मशिन्सचे (VMs) निर्बाध स्थलांतर करणे अशक्य होते.

MSTP बॅकअपसाठी वापरले होते; काही पोर्ट अवरोधित केले होते (हॉट स्टँडबाय). कोर आणि ऍक्सेस स्विचेस फेलओव्हर क्लस्टरमध्ये एकत्र केले गेले नाहीत आणि इंटरफेस एकत्रीकरण (LAG) वापरले गेले नाही.

तिसऱ्या डेटा सेंटरच्या आगमनाने, डेटा केंद्रांमधील रिंग ऑपरेट करण्यासाठी नवीन आर्किटेक्चर आणि उपकरणे कॉन्फिगरेशन आवश्यक होते (EVPN प्रस्तावित होते).

डेटा सेंटर्सच्या विकासासाठी कोणतीही एकीकृत संकल्पना नव्हती, प्रकल्पाच्या स्वरूपात दस्तऐवजीकरण केले गेले आणि ग्राहकांच्या सर्व विभागांशी सहमत झाले. वर्तमान नेटवर्क ऑपरेटिंग दस्तऐवजीकरण अपूर्ण आणि कालबाह्य होते.
 

ग्राहकांच्या अपेक्षा

प्रकल्प कार्यसंघाने खालील कार्ये केली:

• तिसऱ्या डेटा सेंटरचे नेटवर्क आणि सर्व्हर इन्फ्रास्ट्रक्चर तयार करण्यासाठी आर्किटेक्चर आणि विकास संकल्पना तयार करा;
• ग्राहकाच्या विद्यमान नेटवर्कचे ऑपरेशनल ऑडिट करा;
• नेटवर्क कोर क्षमता प्रत्येक डेटा सेंटरमध्ये 1500 10/40 Gbit/s इथरनेट पोर्ट्सपेक्षा जास्त वाढवा (एकूण 4500 पोर्ट);
• वेगवेगळ्या डेटा सेंटर्समधील ग्राहकाची संगणकीय संसाधने एकाच IT प्रणालीमध्ये एकत्रित करण्यासाठी प्रत्येक विभागामध्ये 80 Gbit/s पर्यंत वेग वाढवण्याच्या क्षमतेसह तीन डेटा केंद्रांमधील रिंगचे ऑपरेशन सुनिश्चित करा;
• 100% च्या पातळीवर लक्ष्य अपटाइम साध्य करण्यासाठी सर्व नेटवर्क घटकांचे 99,995% दुप्पट राखीव प्रदान करा;
• व्यवसाय अनुप्रयोगांना गती देण्यासाठी आभासी मशीन दरम्यान रहदारी विलंब कमी करा;
• आकडेवारी गोळा करा, विश्लेषण करा आणि डेटा सेंटरमध्ये रहदारी फिल्टरिंग नियमांचे त्यानंतरचे ऑप्टिमायझेशन करा (सुरुवातीला सुमारे 80 नियम होते);
• तीनपैकी कोणत्याही डेटा सेंटरमध्ये ग्राहकाच्या महत्त्वपूर्ण व्यवसाय अनुप्रयोगांचे अखंड स्थलांतर सुनिश्चित करण्यासाठी लक्ष्य आर्किटेक्चर विकसित करा.

त्यामुळे आम्हाला काहीतरी काम करायचे होते.

उपकरणे

आम्ही प्रकल्पात कोणती उपकरणे वापरली ते जवळून पाहू.

फायरवॉल (NGWF) USG9560:

• VSYS द्वारे विभागणी;
• 720 Gbps पर्यंत;
• 720 दशलक्ष एकाचवेळी सत्रांपर्यंत;
• 8 स्लॉट.

 
राउटर NE40E-X8:

• 7,08 Tbit/s स्विचिंग क्षमता पर्यंत;
• 2,880 Mpps फॉरवर्डिंग परफॉर्मन्स पर्यंत;
• लाइन कार्ड्ससाठी 8 स्लॉट (LPU);
• प्रति MPU 10M BGP IPv4 मार्गांपर्यंत;
• प्रति MPU 1500K OSPF IPv4 मार्गांपर्यंत;
• 3000K पर्यंत – IPv4 FIB (LPU वर अवलंबून).

CE12800 मालिका स्विचेस:

• डिव्हाइस व्हर्च्युअलायझेशन: VS (1:16 वर्च्युअलायझेशन), क्लस्टर स्विच सिस्टम (CSS), सुपर व्हर्च्युअल फॅब्रिक (SVF);
• नेटवर्क वर्च्युअलायझेशन: M-LAG, TRILL, VXLAN आणि VXLAN ब्रिजिंग, VXLAN मध्ये QinQ, EVN (इथरनेट व्हर्च्युअल नेटवर्क);
• VRP V2 पासून सुरू होऊन, EVPN समर्थन समाविष्ट आहे;
• M-LAG - सिस्को नेक्सससाठी vPC (व्हर्च्युअल पोर्ट चॅनेल) चे अॅनालॉग;
• व्हर्च्युअल स्पॅनिंग ट्री प्रोटोकॉल (VSTP) – Cisco PVST शी सुसंगत.

CE12804

CE12808

सॉफ्टवेअर

प्रकल्पात आम्ही वापरले:

• नवीन उपकरणांसाठी इतर विक्रेत्यांकडून फायरवॉल कॉन्फिगरेशन फाइल्सचे कमांड फॉरमॅटमध्ये कन्व्हर्टर;
• फायरवॉल कॉन्फिगरेशन ऑप्टिमाइझ आणि रूपांतरित करण्यासाठी मालकी स्क्रिप्ट.

कॉन्फिगरेशन फायली रूपांतरित करण्यासाठी कनवर्टरचे स्वरूप
 
डेटा सेंटर्स (EVPN VXLAN) दरम्यान संप्रेषण आयोजित करण्याची योजना
 

उपकरणे सेट करण्याच्या बारकावे

CE12808
 

• डेटा केंद्रांमधील संवादासाठी EVN (Huawei प्रोप्रायटरी) ऐवजी EVPN (मानक):

  ○ नियंत्रण विमानात iBGP वापरून L2 वर L3;
  ○ MAC प्रशिक्षण आणि iBGP EVPN फॅमिली द्वारे त्यांची जाहिरात (MAC मार्ग, प्रकार 2);
  ○ प्रसारण / अज्ञात युनिकास्ट रहदारीसाठी VXLAN बोगद्यांचे स्वयंचलित बांधकाम (समावेशक मल्टीकास्ट मार्ग, प्रकार 3).

• VS वर दोन विभाग मोड:

  ○ पोर्ट्सवर आधारित (पोर्ट-मोड पोर्ट) किंवा ASIC (पोर्ट-मोड ग्रुप, डिस्प्ले डिव्हाइस पोर्ट-मॅप) वर आधारित;
  ○ पोर्ट स्प्लिट डायमेंशन इंटरफेस 40GE फक्त Admin VS मध्ये कार्य करते (पोर्ट-मोडची पर्वा न करता).

USG9560
 

• VSYS द्वारे विभाजनाची शक्यता,
• व्हीएसवायएस दरम्यान डायनॅमिक राउटिंग आणि मार्ग गळती शक्य नाही!

CE12804
 
डेटा केंद्रांदरम्यान MAC VRRP फिल्टरिंगसह सर्व सक्रिय GW (VRRP मास्टर/मास्टर/मास्टर)
 
acl number 4000
  rule 5 deny source-mac 0000-5e00-0100 ffff-ffff-ff00
  rule 10 deny destination-mac 0000-5e00-0100 ffff-ffff-ff00
  rule 15 permit
 
interface Eth-Trunk1
  traffic-filter acl 4000 outbound

डेटा सेंटर्स (VXLAN EVPN आणि All Active GW) दरम्यान संसाधन परस्परसंवादाची योजना
 

प्रकल्पातील अडचणी

संगणकीय पायाभूत सुविधांचा वापर करून विद्यमान अनुप्रयोगांचा बॅकअप घेणे ही मुख्य अडचण होती. ग्राहकाकडे 100 पेक्षा जास्त भिन्न अनुप्रयोग होते, त्यापैकी काही जवळजवळ 10 वर्षांपूर्वी लिहिलेले होते. उदाहरणार्थ, जर यांडेक्ससाठी आपण अंतिम वापरकर्त्यांना हानी न करता अनेक शेकडो व्हर्च्युअल मशीन सहजपणे बंद करू शकता, तर रशियन पोस्टमध्ये अशा पद्धतीसाठी सुरवातीपासून अनेक अनुप्रयोगांचा विकास आणि एंटरप्राइझ माहिती प्रणालीच्या आर्किटेक्चरमध्ये बदल आवश्यक आहेत. आम्ही संगणकीय पायाभूत सुविधांच्या संयुक्त ऑडिटच्या टप्प्यावर स्थलांतर आणि ऑप्टिमायझेशन प्रक्रियेदरम्यान उद्भवलेल्या समस्यांचे निराकरण केले. एंटरप्राइझसाठी नवीन असलेल्या सर्व नेटवर्क तंत्रज्ञानाची (जसे की EVPN) प्रयोगशाळेत प्राथमिक चाचणी झाली आहे.
 

प्रकल्प परिणाम

प्रोजेक्ट टीममध्ये तज्ञांचा समावेश होता "LANIT-एकीकरण", संगणकीय पायाभूत सुविधांच्या ऑपरेशनमध्ये ग्राहक आणि त्याचे भागीदार. विक्रेत्यांकडून (चेक पॉइंट आणि हुआवेई) समर्पित समर्थन संघ देखील तयार केले गेले. प्रकल्पाला दोन वर्षे लागली. यावेळी ही कारवाई करण्यात आली.

• डेटा सेंटर्सचे नेटवर्क, कॉर्पोरेट डेटा नेटवर्क (CDTN) आणि डेटा सेंटर्समधील रिंग विकसित करण्यासाठी एक धोरण विकसित केले गेले आहे आणि ग्राहकांच्या सर्व विभागांशी सहमत आहे.
• सेवांची उपलब्धता वाढली आहे. हे ग्राहकाच्या व्यवसायाने लक्षात घेतले आणि नवीन सेवा सुरू केल्यामुळे रहदारीमध्ये आणखी वाढ झाली.
• 40 हून अधिक नियम FWSM/ASA वरून USG 000 मध्ये स्थलांतरित आणि ऑप्टिमाइझ केले गेले आहेत. UGG 9560 वरील भिन्न ASA संदर्भ एकाच सुरक्षा-धोरणात एकत्र केले गेले आहेत.
• CE1/CE10 च्या वापराद्वारे डेटा सेंटर पोर्टचे थ्रूपुट 40G वरून 12800/6850G पर्यंत वाढवले ​​गेले आहे. यामुळे इंटरफेस ओव्हरलोड्स आणि पॅकेट्सचे नुकसान दूर करणे शक्य झाले.
• वाहक-श्रेणीचे राउटर्स NE40E-X8 ने ग्राहकाच्या डेटा सेंटर आणि डेटा ट्रान्सफर सेंटरच्या गरजा पूर्ण केल्या, भविष्यातील व्यवसाय विकास लक्षात घेऊन.
• USG 9560 साठी आठ नवीन वैशिष्ट्य विनंत्या मागवण्यात आल्या आहेत. त्यापैकी सात आधीच लागू करण्यात आल्या आहेत आणि त्या VRP च्या वर्तमान आवृत्तीमध्ये समाविष्ट केल्या आहेत. 1 FR - Huawei R&D मध्ये अंमलबजावणीसाठी. हे आठ-चेसिस क्लस्टर आहे ज्यामध्ये सत्र सिंक्रोनाइझेशनशिवाय कॉन्फिगरेशन सिंक्रोनाइझेशनसाठी आवश्यक कार्यक्षमता कॉन्फिगर करण्याची क्षमता आहे. डेटा केंद्रांपैकी एकाकडे रहदारीचा विलंब खूप जास्त असल्यास (एडलर - मॉस्को मुख्य मार्गावर 1300 किमी आणि राखीव मार्गावर 2800 किमी) असल्यास हे आवश्यक आहे.

इतर रशियन पोस्टल कंपन्यांच्या तुलनेत प्रकल्पात कोणतेही analogues नाहीत.

डेटा सेंटर्सच्या नेटवर्क इन्फ्रास्ट्रक्चरच्या आधुनिकीकरणाने एंटरप्राइझसाठी डिजिटल सेवा विकसित करण्याच्या नवीन संधी उघडल्या आहेत.

• व्यक्ती आणि कायदेशीर संस्थांसाठी वैयक्तिक खाते आणि मोबाइल अनुप्रयोग प्रदान करणे.
• वस्तू वितरण सेवा प्रदान करण्यासाठी इलेक्ट्रॉनिक स्टोअरसह एकत्रीकरण.
• पूर्तता - वस्तूंचे संचयन, इलेक्ट्रॉनिक स्टोअरमधून ऑर्डर तयार करणे आणि वितरण.
• संलग्न नेटवर्क वापरण्यासह ऑर्डर पिक-अप पॉइंट्सचा विस्तार करणे.
• प्रतिपक्षांसह कायदेशीरदृष्ट्या महत्त्वपूर्ण दस्तऐवज प्रवाह. यामुळे कागदी दस्तऐवज पाठवण्याचे संथ आणि महागडेपणा दूर होईल.
• इलेक्ट्रॉनिक स्वरूपात नोंदणीकृत पत्रे इलेक्ट्रॉनिक आणि कागदाच्या स्वरूपात डिलिव्हरीसह स्वीकारणे (अंतिम प्राप्तकर्त्याच्या शक्य तितक्या जवळ असलेल्या वस्तूंच्या मुद्रणासह). सार्वजनिक सेवा पोर्टलवर इलेक्ट्रॉनिक नोंदणीकृत पत्रांची सेवा.
• टेलिमेडिसिन सेवा प्रदान करण्यासाठी प्लॅटफॉर्म.
• साध्या इलेक्ट्रॉनिक स्वाक्षरीचा वापर करून नोंदणीकृत मेलचे सरलीकृत रिसेप्शन आणि सुलभ वितरण.
• पोस्ट ऑफिस नेटवर्कचे डिजिटलायझेशन.
• स्वयं-सेवा सेवांची पुनर्रचना (टर्मिनल आणि पार्सल टर्मिनल).
• कुरिअर सेवा व्यवस्थापित करण्यासाठी डिजिटल प्लॅटफॉर्मची निर्मिती आणि कुरिअर सेवा ग्राहकांसाठी एक नवीन मोबाइल ऍप्लिकेशन.

आमच्यासोबत कामाला या!

• कॉर्पोरेट पायाभूत सुविधा अभियंता
• लीड लिनक्स/डेव्हऑप्स अभियंता

स्त्रोत: www.habr.com