🥇VxLAN फ़ैक्टरी। भाग 1 | प्रोहोस्टर

नमस्ते हबर. मैं वर्तमान में ओटीयूएस में नेटवर्क इंजीनियर पाठ्यक्रम के लिए पाठ्यक्रम नेता हूं।
पाठ्यक्रम के लिए नए नामांकन की शुरुआत की प्रत्याशा में "नेटवर्क इंजीनियर", मैंने VxLAN EVPN तकनीक पर लेखों की एक श्रृंखला तैयार की है।

VxLAN EVPN के संचालन पर भारी मात्रा में सामग्री उपलब्ध है, इसलिए मैं एक आधुनिक डेटा सेंटर में समस्याओं को हल करने के लिए विभिन्न कार्यों और प्रथाओं को एकत्र करना चाहता हूं।

VxLAN EVPN प्रौद्योगिकी चक्र के पहले भाग में, मैं एक नेटवर्क फ़ैक्टरी के शीर्ष पर होस्ट्स के बीच L2 कनेक्टिविटी को व्यवस्थित करने के तरीके पर विचार करना चाहता हूँ।

सभी उदाहरण सिस्को नेक्सस 9000v पर प्रदर्शित किए जाएंगे, जो स्पाइन-लीफ टोपोलॉजी में असेंबल किए गए हैं। हम इस लेख में अंडरले नेटवर्क स्थापित करने पर ध्यान नहीं देंगे।

बुनियाद नेटवर्क
बीजीपी पता-परिवार एल2वीपीएन ईवीपीएन की तलाश में है
एनवीई सेटअप
सप्रेस-एआरपी

बुनियाद नेटवर्क

प्रयुक्त टोपोलॉजी इस प्रकार है:

आइए सभी डिवाइस पर एड्रेसिंग सेट करें:

Spine-1 - 10.255.1.101
Spine-2 - 10.255.1.102

Leaf-11 - 10.255.1.11
Leaf-12 - 10.255.1.12
Leaf-21 - 10.255.1.21

Host-1 - 192.168.10.10
Host-2 - 192.168.10.20

आइए जांचें कि सभी उपकरणों के बीच आईपी कनेक्टिविटी है या नहीं:

Leaf21# sh ip route
<........>
10.255.1.11/32, ubest/mbest: 2/0                      ! Leaf-11 доступен чеерз два Spine
    *via 10.255.1.101, Eth1/4, [110/81], 00:00:03, ospf-UNDERLAY, intra
    *via 10.255.1.102, Eth1/3, [110/81], 00:00:03, ospf-UNDERLAY, intra
10.255.1.12/32, ubest/mbest: 2/0                      ! Leaf-12 доступен чеерз два Spine
    *via 10.255.1.101, Eth1/4, [110/81], 00:00:03, ospf-UNDERLAY, intra
    *via 10.255.1.102, Eth1/3, [110/81], 00:00:03, ospf-UNDERLAY, intra
10.255.1.21/32, ubest/mbest: 2/0, attached
    *via 10.255.1.22, Lo0, [0/0], 00:02:20, local
    *via 10.255.1.22, Lo0, [0/0], 00:02:20, direct
10.255.1.101/32, ubest/mbest: 1/0
    *via 10.255.1.101, Eth1/4, [110/41], 00:00:06, ospf-UNDERLAY, intra
10.255.1.102/32, ubest/mbest: 1/0
    *via 10.255.1.102, Eth1/3, [110/41], 00:00:03, ospf-UNDERLAY, intra

आइए जांचें कि वीपीसी डोमेन बनाया गया है और दोनों स्विच ने स्थिरता जांच पास कर ली है और दोनों नोड्स पर सेटिंग्स समान हैं:

Leaf11# show vpc 

vPC domain id                     : 1
Peer status                       : peer adjacency formed ok
vPC keep-alive status             : peer is alive
Configuration consistency status  : success
Per-vlan consistency status       : success
Type-2 consistency status         : success
vPC role                          : primary
Number of vPCs configured         : 0
Peer Gateway                      : Disabled
Dual-active excluded VLANs        : -
Graceful Consistency Check        : Enabled
Auto-recovery status              : Disabled
Delay-restore status              : Timer is off.(timeout = 30s)
Delay-restore SVI status          : Timer is off.(timeout = 10s)
Operational Layer3 Peer-router    : Disabled

vPC status
----------------------------------------------------------------------------
Id    Port          Status Consistency Reason                Active vlans
--    ------------  ------ ----------- ------                ---------------
5     Po5           up     success     success               1

बीजीपी झाँक रहा है

अंत में, हम ओवरले नेटवर्क को कॉन्फ़िगर करने के लिए आगे बढ़ सकते हैं।

लेख के भाग के रूप में, मेजबानों के बीच एक नेटवर्क को व्यवस्थित करना आवश्यक है, जैसा कि नीचे दिए गए चित्र में दिखाया गया है:

ओवरले नेटवर्क को कॉन्फ़िगर करने के लिए, आपको l2vpn evpn परिवार के समर्थन के साथ स्पाइन और लीफ स्विच पर BGP को सक्षम करना होगा:

feature bgp
nv overlay evpn

इसके बाद, आपको लीफ और स्पाइन के बीच बीजीपी पियरिंग को कॉन्फ़िगर करना होगा। कॉन्फ़िगरेशन को सरल बनाने और रूटिंग जानकारी के वितरण को अनुकूलित करने के लिए, हम स्पाइन को रूट-रिफ्लेक्टर सर्वर के रूप में कॉन्फ़िगर करते हैं। सेटिंग को अनुकूलित करने के लिए हम सभी लीफ को टेम्पलेट के माध्यम से कॉन्फ़िगरेशन में लिखेंगे।

तो स्पाइन पर सेटिंग्स इस तरह दिखती हैं:

router bgp 65001
  template peer LEAF 
    remote-as 65001
    update-source loopback0
    address-family l2vpn evpn
      send-community
      send-community extended
      route-reflector-client
  neighbor 10.255.1.11
    inherit peer LEAF
  neighbor 10.255.1.12
    inherit peer LEAF
  neighbor 10.255.1.21
    inherit peer LEAF

लीफ स्विच पर सेटअप समान दिखता है:

router bgp 65001
  template peer SPINE
    remote-as 65001
    update-source loopback0
    address-family l2vpn evpn
      send-community
      send-community extended
  neighbor 10.255.1.101
    inherit peer SPINE
  neighbor 10.255.1.102
    inherit peer SPINE

स्पाइन पर, सभी लीफ स्विच के साथ पियरिंग की जाँच करें:

Spine1# sh bgp l2vpn evpn summary
<.....>
Neighbor        V    AS MsgRcvd MsgSent   TblVer  InQ OutQ Up/Down  State/PfxRcd
10.255.1.11     4 65001       7       8        6    0    0 00:01:45 0
10.255.1.12     4 65001       7       7        6    0    0 00:01:16 0
10.255.1.21     4 65001       7       7        6    0    0 00:01:01 0

जैसा कि आप देख सकते हैं, बीजीपी के साथ कोई समस्या नहीं थी। आइए VxLAN की स्थापना के लिए आगे बढ़ें। आगे का कॉन्फ़िगरेशन केवल स्विच के लीफ साइड पर किया जाएगा। स्पाइन केवल नेटवर्क के मूल के रूप में कार्य करता है और केवल ट्रैफ़िक संचारित करने में शामिल होता है। सभी एनकैप्सुलेशन और पथ निर्धारण कार्य केवल लीफ स्विच पर होते हैं।

एनवीई सेटअप

एनवीई - नेटवर्क वर्चुअल इंटरफ़ेस

सेटअप शुरू करने से पहले, आइए कुछ शब्दावली का परिचय दें:

वीटीईपी - विज़ुअल टनल एंड पॉइंट, वह उपकरण जिस पर वीएक्सएलएएन सुरंग शुरू या समाप्त होती है। VTEP आवश्यक रूप से कोई नेटवर्क डिवाइस नहीं है। VxLAN तकनीक का समर्थन करने वाला सर्वर भी कार्य कर सकता है। हमारी टोपोलॉजी में, सभी लीफ स्विच वीटीईपी हैं।

वीएनआई - वर्चुअल नेटवर्क इंडेक्स - वीएक्सएलएएन के भीतर नेटवर्क पहचानकर्ता। आप वीएलएएन के साथ एक सादृश्य बना सकते हैं। हालाँकि, कुछ अंतर हैं। फैब्रिक का उपयोग करते समय, वीएलएएन केवल एक लीफ स्विच के भीतर अद्वितीय हो जाते हैं और नेटवर्क पर प्रसारित नहीं होते हैं। लेकिन प्रत्येक वीएलएएन को एक वीएनआई नंबर से जोड़ा जा सकता है जो पहले से ही नेटवर्क पर प्रसारित होता है। यह कैसा दिखता है और इसका उपयोग कैसे किया जा सकता है, इसकी चर्चा नीचे की जाएगी।

VxLAN तकनीक के काम करने की सुविधा और VLAN नंबरों को VNI नंबर के साथ जोड़ने की क्षमता सक्षम करें:

feature nv overlay
feature vn-segment-vlan-based

आइए NVE इंटरफ़ेस को कॉन्फ़िगर करें, जो VxLAN के संचालन के लिए ज़िम्मेदार है। यह इंटरफ़ेस VxLAN हेडर में फ़्रेम को इनकैप्सुलेट करने के लिए ज़िम्मेदार है। आप GRE के लिए टनल इंटरफ़ेस के साथ एक सादृश्य बना सकते हैं:

interface nve1
  no shutdown
  host-reachability protocol bgp ! используем BGP для передачи маршрутной информации
  source-interface loopback0    ! интерфейс  с которого отправляем пакеты loopback0

लीफ-21 स्विच पर, सब कुछ बिना किसी समस्या के बनाया जाता है। हालाँकि, यदि हम कमांड के आउटपुट की जाँच करते हैं show nve peers, तो यह खाली हो जाएगा. यहां आपको वीपीसी सेटअप पर वापस लौटना होगा। हम देखते हैं कि लीफ-11 और लीफ-12 एक वीपीसी डोमेन द्वारा युग्मित और एकजुट हैं। इसके परिणामस्वरूप निम्नलिखित स्थिति उत्पन्न होती है:

होस्ट-2 नेटवर्क पर होस्ट-21 को प्रसारित करने के लिए लीफ-1 को एक फ्रेम भेजता है। हालाँकि, लीफ-21 देखता है कि होस्ट-1 का मैक पता एक साथ दो वीटीईपी के माध्यम से उपलब्ध है। इस मामले में लीफ-21 को क्या करना चाहिए? आख़िरकार, इसका मतलब है कि नेटवर्क में एक लूप दिखाई दे सकता है।

इस स्थिति को हल करने के लिए, हमें लीफ-11 और लीफ-12 को भी कारखाने के भीतर एक उपकरण के रूप में कार्य करने की आवश्यकता है। इसे काफी सरलता से हल किया गया है। लूपबैक इंटरफ़ेस पर जिससे हम सुरंग बना रहे हैं, द्वितीयक पता जोड़ें। दोनों वीटीईपी पर द्वितीयक पता समान होना चाहिए।

interface loopback0
 ip add 10.255.1.10/32 secondary

इस प्रकार, अन्य वीटीईपी के दृष्टिकोण से, हमें निम्नलिखित टोपोलॉजी मिलती है:

यानी अब लीफ-21 के आईपी एड्रेस और दो लीफ-11 और लीफ-12 के बीच वर्चुअल आईपी के बीच सुरंग बनाई जाएगी. अब दो डिवाइस से मैक एड्रेस सीखने में कोई दिक्कत नहीं होगी और ट्रैफिक को एक वीटीईपी से दूसरे डिवाइस में ट्रांसफर किया जा सकेगा। दोनों वीटीईपी में से कौन ट्रैफिक को प्रोसेस करेगा, इसका निर्णय स्पाइन पर राउटिंग टेबल का उपयोग करके किया जाता है:

Spine1# sh ip route
<.....>
10.255.1.10/32, ubest/mbest: 2/0
    *via 10.255.1.11, Eth1/1, [110/41], 1d01h, ospf-UNDERLAY, intra
    *via 10.255.1.12, Eth1/2, [110/41], 1d01h, ospf-UNDERLAY, intra
10.255.1.11/32, ubest/mbest: 1/0
    *via 10.255.1.11, Eth1/1, [110/41], 1d22h, ospf-UNDERLAY, intra
10.255.1.12/32, ubest/mbest: 1/0
    *via 10.255.1.12, Eth1/2, [110/41], 1d01h, ospf-UNDERLAY, intra

जैसा कि आप ऊपर देख सकते हैं, पता 10.255.1.10 दो नेक्स्ट-हॉप के माध्यम से तुरंत उपलब्ध है।

इस स्तर पर, हमने बुनियादी कनेक्टिविटी का पता लगाया। आइए एनवीई इंटरफ़ेस स्थापित करने के लिए आगे बढ़ें:
हम तुरंत व्लान 10 को सक्षम करेंगे और इसे मेजबानों के लिए प्रत्येक लीफ पर वीएनआई 10000 के साथ जोड़ देंगे। मेजबानों के बीच एक L2 सुरंग स्थापित करें

vlan 10                 ! Включаем VLAN на всех VTEP подключенных к необходимым хостам
  vn-segment 10000      ! Ассоциируем VLAN с номер VNI 

interface nve1
  member vni 10000      ! Добавляем VNI 10000 для работы через интерфейс NVE. для инкапсуляции в VxLAN
    ingress-replication protocol bgp    ! указываем, что для распространения информации о хосте используем BGP

आइए अब बीजीपी ईवीपीएन के लिए एनवी साथियों और तालिका की जांच करें:

Leaf21# sh nve peers
Interface Peer-IP          State LearnType Uptime   Router-Mac
--------- ---------------  ----- --------- -------- -----------------
nve1      10.255.1.10      Up    CP        00:00:41 n/a                 ! Видим что peer доступен с secondary адреса

Leaf11# sh bgp l2vpn evpn

   Network            Next Hop            Metric     LocPrf     Weight Path
Route Distinguisher: 10.255.1.11:32777    (L2VNI 10000)        ! От кого именно пришел этот l2VNI
*>l[3]:[0]:[32]:[10.255.1.10]/88                                   ! EVPN route-type 3 - показывает нашего соседа, который так же знает об l2VNI10000
                      10.255.1.10                       100      32768 i
*>i[3]:[0]:[32]:[10.255.1.20]/88
                      10.255.1.20                       100          0 i
* i                   10.255.1.20                       100          0 i

Route Distinguisher: 10.255.1.21:32777
* i[3]:[0]:[32]:[10.255.1.20]/88
                      10.255.1.20                       100          0 i
*>i                   10.255.1.20                       100          0 i

ऊपर हम केवल ईवीपीएन मार्ग-प्रकार 3 मार्ग देखते हैं। इस प्रकार के मार्ग सहकर्मी (पत्ती) के बारे में बात करते हैं, लेकिन हमारे मेजबान कहां हैं?
और बात यह है कि मैक होस्ट के बारे में जानकारी ईवीपीएन रूट-टाइप 2 के माध्यम से प्रसारित की जाती है

हमारे होस्ट देखने के लिए, आपको ईवीपीएन रूट-टाइप 2 को कॉन्फ़िगर करना होगा:

evpn
  vni 10000 l2
    route-target import auto   ! в рамках данной статьи используем автоматический номер для route-target
    route-target export auto

आइए होस्ट-2 से होस्ट-1 पर पिंग करें:

Firewall2# ping 192.168.10.1
PING 192.168.10.1 (192.168.10.1): 56 data bytes
36 bytes from 192.168.10.2: Destination Host Unreachable
Request 0 timed out
64 bytes from 192.168.10.1: icmp_seq=1 ttl=254 time=215.555 ms
64 bytes from 192.168.10.1: icmp_seq=2 ttl=254 time=38.756 ms
64 bytes from 192.168.10.1: icmp_seq=3 ttl=254 time=42.484 ms
64 bytes from 192.168.10.1: icmp_seq=4 ttl=254 time=40.983 ms

और नीचे हम देख सकते हैं कि रूट-टाइप 2 होस्ट के मैक पते के साथ बीजीपी तालिका में दिखाई दिया - 5001.0007.0007 और 5001.0008.0007

Leaf11# sh bgp l2vpn evpn
<......>

   Network            Next Hop            Metric     LocPrf     Weight Path
Route Distinguisher: 10.255.1.11:32777    (L2VNI 10000)
*>l[2]:[0]:[0]:[48]:[5001.0007.0007]:[0]:[0.0.0.0]/216                      !  evpn route-type 2 и mac адрес хоста 1
                      10.255.1.10                       100      32768 i
*>i[2]:[0]:[0]:[48]:[5001.0008.0007]:[0]:[0.0.0.0]/216                      ! evpn route-type 2 и mac адрес хоста 2
* i                   10.255.1.20                       100          0 i
*>l[3]:[0]:[32]:[10.255.1.10]/88
                      10.255.1.10                       100      32768 i
Route Distinguisher: 10.255.1.21:32777
* i[2]:[0]:[0]:[48]:[5001.0008.0007]:[0]:[0.0.0.0]/216
                      10.255.1.20                       100          0 i
*>i                   10.255.1.20                       100          0 i

आगे आप अपडेट पर विस्तृत जानकारी देख सकते हैं, जिसमें आपको मैक होस्ट के बारे में जानकारी प्राप्त हुई है। नीचे कमांड का संपूर्ण आउटपुट नहीं है

Leaf21# sh bgp l2vpn evpn 5001.0007.0007

BGP routing table information for VRF default, address family L2VPN EVPN
Route Distinguisher: 10.255.1.11:32777        !  отправил Update с MAC Host. Не виртуальный адрес VPC, а адрес Leaf
BGP routing table entry for [2]:[0]:[0]:[48]:[5001.0007.0007]:[0]:[0.0.0.0]/216,
 version 1507
Paths: (2 available, best #2)
Flags: (0x000202) (high32 00000000) on xmit-list, is not in l2rib/evpn, is not i
n HW

  Path type: internal, path is valid, not best reason: Neighbor Address, no labe
led nexthop
  AS-Path: NONE, path sourced internal to AS
    10.255.1.10 (metric 81) from 10.255.1.102 (10.255.1.102)    ! с кем именно строим VxLAN тоннель
      Origin IGP, MED not set, localpref 100, weight 0
      Received label 10000         ! Номер VNI, который ассоциирован с VLAN, в котором находится Host
      Extcommunity: RT:65001:10000 SOO:10.255.1.10:0 ENCAP:8        ! Тут видно, что RT сформировался автоматически на основе номеров AS и VNI
      Originator: 10.255.1.11 Cluster list: 10.255.1.102
<........>

आइए देखें कि जब फ़्रेम को फ़ैक्टरी से गुजारा जाता है तो वे कैसे दिखते हैं:

सप्रेस-एआरपी

बढ़िया, हमारे मेजबानों के बीच L2 कनेक्शन है और यह इसका अंत हो सकता है। हालाँकि, सब कुछ इतना सरल नहीं है। जब तक हमारे पास कुछ मेज़बान हैं, कोई समस्या नहीं होगी। लेकिन आइए उन स्थितियों की कल्पना करें कि हमारे पास सैकड़ों और हजारों मेज़बान हैं। हमें किस समस्या का सामना करना पड़ सकता है?

यह समस्या BUM (ब्रॉडकास्ट, अननोन यूनिकास्ट, मल्टीकास्ट) ट्रैफ़िक है। इस लेख के ढांचे में, हम प्रसारण ट्रैफ़िक से निपटने के विकल्प पर विचार करेंगे।
ईथरनेट नेटवर्क में मुख्य प्रसारण जनरेटर ARP प्रोटोकॉल के माध्यम से स्वयं होस्ट होते हैं।

नेक्सस एआरपी अनुरोधों से निपटने के लिए निम्नलिखित तंत्र लागू करता है - सप्रेस-एआरपी।
यह फीचर इस तरह काम करता है:

होस्ट-1 अपने नेटवर्क के प्रसारण पते पर एक एपीआर अनुरोध भेजता है।
अनुरोध लीफ स्विच तक पहुंचता है और इस अनुरोध को होस्ट-2 की ओर फ़ैक्टरी में भेजने के बजाय, लीफ़ स्वयं उत्तर देता है और वांछित आईपी और मैक को इंगित करता है।

इस प्रकार, प्रसारण अनुरोध फ़ैक्टरी तक नहीं गया। लेकिन यह कैसे काम कर सकता है यदि लीफ केवल मैक पता जानता है?

सब कुछ काफी सरल है, ईवीपीएन रूट-टाइप 2, मैक पते के अलावा, एक मैक/आईपी बंडल संचारित कर सकता है। ऐसा करने के लिए, लीफ को वीएलएएन में एक आईपी पते के साथ कॉन्फ़िगर किया जाना चाहिए। सवाल उठता है कि कौन सा आईपी पूछा जाए? नेक्सस पर, सभी स्विचों पर एक वितरित (समान) पता बनाना संभव है:

feature interface-vlan

fabric forwarding anycast-gateway-mac 0001.0001.0001    ! задаем virtual mac для создания распределенного шлюза между всеми коммутаторами

interface Vlan10
  no shutdown
  ip address 192.168.10.254/24          ! на всех Leaf задаем одинаковый IP
  fabric forwarding mode anycast-gateway    ! говорим использовать Virtual mac

इस प्रकार, मेजबानों के दृष्टिकोण से, नेटवर्क इस तरह दिखेगा:

बीजीपी एल2रूट ईवीपीएन जांचें

Leaf11# sh bgp l2vpn evpn
<......>

   Network            Next Hop            Metric     LocPrf     Weight Path
Route Distinguisher: 10.255.1.11:32777    (L2VNI 10000)
*>l[2]:[0]:[0]:[48]:[5001.0007.0007]:[0]:[0.0.0.0]/216
                      10.255.1.21                       100      32768 i
*>i[2]:[0]:[0]:[48]:[5001.0008.0007]:[0]:[0.0.0.0]/216
                      10.255.1.10                       100          0 i
* i                   10.255.1.10                       100          0 i
* i[2]:[0]:[0]:[48]:[5001.0008.0007]:[32]:[192.168.10.20]/248
                      10.255.1.10                       100          0 i
*>i                   10.255.1.10                       100          0 i

<......>

Route Distinguisher: 10.255.1.21:32777
* i[2]:[0]:[0]:[48]:[5001.0008.0007]:[0]:[0.0.0.0]/216
                      10.255.1.20                       100          0 i
*>i                   10.255.1.20                       100          0 i
* i[2]:[0]:[0]:[48]:[5001.0008.0007]:[32]:[192.168.10.20]/248
*>i                   10.255.1.20                       100          0 i

<......>

कमांड के आउटपुट से यह देखा जा सकता है कि ईवीपीएन रूट-टाइप 2 में, मैक के अलावा, अब हम होस्ट का आईपी एड्रेस भी देखते हैं।

आइए सप्रेस-एआरपी सेटिंग पर वापस लौटें। यह सेटिंग प्रत्येक VNI के लिए अलग से सक्षम है:

interface nve1
  member vni 10000   
    suppress-arp

फिर कुछ कठिनाई है:

इस सुविधा के लिए टीसीएएम मेमोरी में स्थान की आवश्यकता होती है। मैं सप्रेस-एआरपी के लिए सेटिंग का एक उदाहरण दूंगा:

hardware access-list tcam region arp-ether 256

इस सेटअप के लिए डबल-वाइड की आवश्यकता होगी. यानी, यदि आप 256 सेट करते हैं, तो 512 को टीसीएएम में जारी किया जाना चाहिए। टीसीएएम की स्थापना इस लेख के दायरे से बाहर है, क्योंकि टीसीएएम की स्थापना केवल आपको सौंपे गए कार्य पर निर्भर करती है और एक नेटवर्क से दूसरे नेटवर्क में भिन्न हो सकती है।

सप्रेस-एआरपी का कार्यान्वयन सभी लीफ स्विच पर किया जाना चाहिए। हालाँकि, VPC डोमेन में स्थित लीफ जोड़े पर कॉन्फ़िगर करते समय जटिलता उत्पन्न हो सकती है। टीसीएएम बदलते समय, जोड़ियों के बीच की स्थिरता टूट जाएगी और एक नोड को सेवा से बाहर किया जा सकता है। इसके अतिरिक्त, टीसीएएम परिवर्तन सेटिंग लागू करने के लिए डिवाइस रीबूट की आवश्यकता हो सकती है।

परिणामस्वरूप, आपको सावधानीपूर्वक विचार करने की आवश्यकता है कि क्या, आपकी स्थिति में, इस सेटिंग को चालू कारखाने में लागू करना उचित है।

यह चक्र का पहला भाग समाप्त करता है। अगले भाग में, हम विभिन्न वीआरएफ में नेटवर्क पृथक्करण के साथ वीएक्सएलएएन फैक्ट्री के माध्यम से रूटिंग पर विचार करेंगे।

और अब मैं सभी को इसमें आमंत्रित करता हूं मुफ्त वेबिनारजिसमें मैं कोर्स के बारे में विस्तार से बात करूंगा। इस वेबिनार के लिए पंजीकरण करने वाले पहले 20 प्रतिभागियों को प्रसारण के 1-2 दिनों के भीतर ईमेल द्वारा डिस्काउंट प्रमाणपत्र प्राप्त होगा।

स्रोत: www.habr.com

वीएक्सएलएएन कारखाना। भाग 1

बुनियाद नेटवर्क

बीजीपी झाँक रहा है

एनवीई सेटअप

सप्रेस-एआरपी

एक टिप्पणी जोड़ें उत्तर रद्द