ProHoster > Blog > Lajmet e internetit > Projekti i konfliktit korporativ në lidhshmërinë rrjetore

Projekti i konfliktit korporativ në lidhshmërinë rrjetore

Projekti i konfliktit korporativ në lidhshmërinë rrjetore
Konflikti korporativ ndodhi më 10.06.2019 për shkak të rritjes së kostos së dërgimit të SMS-ve për përdoruesit e rrjetit Vimpelcom nga Mail.RU Group. Si masë ndëshkuese, Mail.RU Group ndaloi "shërbimin" e kanaleve të drejtpërdrejta IP-ruse në drejtim të rrjetit Vimpelcom.

Më poshtë është një analizë e shkurtër e situatës nga pozita e një inxhinieri rrjetesh.

PĂ«rditĂ«so: 14.06.2019 18:45 — theks mbi rrugĂ«t ruse nĂ« rrjetin Vimpelcom, janĂ« korrigjuar pĂ«rfundimet, Ă«shtĂ« shtuar njĂ« shpjegim. Sergio Kubasov (CIO i Vkontakte).
PĂ«rditĂ«so: 14.06.2019 19:48 — Ă«shtĂ« shtuar njĂ« pĂ«rshkrim i mĂ«nyrĂ«s sĂ« kufizimit tĂ« shpĂ«rndarjes sĂ« rrugĂ«ve pĂ«rmes rrugĂ«s "tĂ« shpejtĂ«" ruse pĂ«rmes Rostelecom, MTS, RETN.NET..


Hyrjet:
Vimpelcom ka njĂ« sistem autonom AS3216, tĂ« gjitha sistemet e tjera (8402 — interneti nĂ« shtĂ«pi, 16345 — interneti celular) ndodhen pas 3216.

Mail.RU Group — sistemet autonome AS47541, AS47542 dhe AS47764. Gjeneratori kryesor i pĂ«rmbajtjes Ă«shtĂ« 47542, i njohur si CDN VKONTAKTE (filma, muzikĂ«). TĂ« gjitha sistemet autonome janĂ« tĂ« pavarura nga njĂ«ra-tjetra (nga pozita e njĂ« sistemi autonom tĂ« jashtĂ«m).

Së pari, le të shohim situatën nga ana e rrjetit Vimpelcom. Këtë do ta ndihmojë Looking Glass Vimpelcom.

TĂ« shohim sistemin e parĂ« autonom — AS47541.

 2914 47541
    79.104.32.251 (metric 10500) (79.104.32.251)
      Origin IGP, metric 30, localpref 87, valid, internal, best, group-best, import-candidate, import suspect
      Received Path ID 0, Local Path ID 1, version 2865394342
      Community: 2914:410 2914:1214 2914:2213 2914:3200 3216:3000 3216:3103 47541:1 47541:40000 47541:50078

AS-PATH pĂ«rmban dy sisteme autonome — 2914 (NTT) dhe 47541 (VKONTAKTE-SPB-AS).
Metrika localpref është vendosur në 87, që sipas përshkrimit në RIPE DB për objektin AS3216 korrespondon me bashkëpunimin ndërkombëtar.



remarks: Rrugët e peer në nivel ndërkombëtar marrin preferencë lokale në
remarks: diapazonin 81-89.



KĂ«tĂ« informacion e konfirmojnĂ« edhe komunitetet 3216:3000 dhe 3216:3103 (burimi — RIPE DB pĂ«r AS3216):



remarks: 3216:3000 e marrë nga një lidhje ndërkombëtare ose peer, specifikisht:


remarks: 3216:3103 AMS-IX



Pra, rruga drejt Vkontakte Vimpelcom e sheh përmes pikës europiane.

TĂ« shikojmĂ« njĂ« tjetĂ«r autonomi tĂ« Vkontakte — 47542 (VKONTAKTE-MSK-CDN-AS).

Të gjitha janë në përputhje.

 2914 47541
    79.104.32.251 (metric 10500) (79.104.32.251)
      Origin IGP, metric 30, localpref 87, valid, internal, best, group-best, import-candidate, import suspect
      Received Path ID 0, Local Path ID 1, version 2865394338
      Community: 2914:410 2914:1214 2914:2213 2914:3200 3216:3000 3216:3103 47541:1 47541:40000 47541:50078

Por si qëndron situata me vetë Mail.ru? Le të shohim AS47764 (mailru-as).

 3356 47764
    194.67.0.215 (metric 10501) (194.67.0.215)
      Origin IGP, metric 0, localpref 77, valid, internal, best, group-best, import-candidate
      Received Path ID 0, Local Path ID 1, version 2867605667
      Community: 3216:3000 3216:3007 3356:2 3356:22 3356:100 3356:123 3356:519 3356:2094 47764:1 47764:40000 47764:50077

Vimpelcom e sheh Mail.ru përmes as3356 (uplink Level3, operator Tier1). Kjo informacion konfirmohet gjithashtu me localpref 77:



remarks: Rrugët e Uplink fitojnë preferencë lokale në mënyrë 71-79.
remarks: Përditësimi I Fundit: Shkurt 2012


dhe komuniteti (3216:3000 dhe 3216:3007):



remarks: 3216:3000 e marrë nga një lidhje ndërkombëtare ose peer, specifikisht:


remarks: 3216:3007 Level 3 Communications



Nga informacioni i marrë, duket se trafiku nga rrjeti Vimpelcom në VKontakte dhe Mail.ru shpërndahet përmes pikave evropiane sipas rrugëve të marra përmes protokollit BGP. Nuk ka rrugë alternative përmes pikave të brendshme ruse në Looking Glass. Nuk janë zbuluar masa për të drejtuar trafikun në mënyrë artificiale përmes rrugëve të njohura si më të këqia.

Si e sheh Mail.ru Group rrjetin e Vimpelcom?
Le të përdorim Looking Glass nga Mailat.

Nga routerët e AS47764 (mailru-as):

  Path #6: Marrë nga folësi 0
  Promovuar te kolegët (në grupe unike azhurnimi):
    188.93.60.188   
  1299 1299 1273 3216 3216
    217.20.147.250 (metrik 100) nga 217.20.147.250 (217.20.147.253)
      Origjina IGP, metrik 500, localpref 200, e vlefshme, e brendshme, më e mira, më e mira e grupit
      Marrë Path ID 0, Local Path ID 0, version 1172721494
      Komuniteti: 1299:20000 47764:701 47764:41100 47764:41108 47764:50077

AS-PATH përmban AS1299 (Telia, operator Tier1, uplink Mail.RU) dhe as1273 (Vodafone, operator Tier1, uplink Vimpelcom).

LocalPreference 200 — standard pĂ«r lidhjet e jashtme tĂ« Mail.ru (https://net.mail.ru/bgp.html), dhe MED 500 pĂ«rputhet me gjithçka qĂ« Ă«shtĂ« marrĂ« jo nga pika direkte, jo nga IX, jo nga ndarjet.

Por pse nuk ka rrugë lokale përmes operatorëve ruse të komunikimit???
Ka, por prioriteti i tyre është «jo standard»!
Ky është një rrugë përmes Rostelecom (as12389):

  Path #1: Marrë nga folësi 0
  Nuk është promovuar te asnjë koleg
  12389 3216
    46.61.178.149 nga 46.61.178.149 (213.59.207.79)
      Origjina IGP, metrik 500, localpref 199, e vlefshme, e jashtme
      Marrë Path ID 0, Local Path ID 0, version 0
      Komuniteti: 3216:2001 3216:2999 3216:4100 12389:5 12389:6 12389:1100 12389:1105 12389:1277 47764:701 47764:41100 47764:41104 47764:50077
      Vlefshmëria origjinë-AS: e pa gjetur

Ky është një rrugë përmes MegaFon (as31133):

  Path #2: Marrë nga folësi 0
  Nuk është promovuar te asnjë koleg
  31133 3216
    78.25.77.41 nga 78.25.77.41 (10.222.253.97)
      Origjina IGP, metrik 500, localpref 199, e vlefshme, e jashtme
      Marrë Path ID 0, Local Path ID 0, version 0
      Komuniteti: 3216:2001 3216:2999 3216:4100 31133:300 31133:46170 47764:701 47764:41100 47764:41105 47764:50077
      Vlefshmëria origjinë-AS: e pa gjetur

Ky është një rrugë përmes RETN.NET:

  Path #3: Marrë nga folësi 0
  Nuk është promovuar te asnjë koleg
  9002 9002 3216
    87.245.253.24 nga 87.245.253.24 (87.245.225.1)
      Origjina IGP, metrik 500, localpref 199, e vlefshme, e jashtme
      Marrë Path ID 0, Local Path ID 0, version 0
      Komuniteti: 9002:9002 9002:64667 47764:701 47764:41100 47764:41101 47764:50077
      Vlefshmëria origjinë-AS: e pa gjetur

Dhe madje përmes MTS!

  Path #5: Marrë nga folësi 0
  Nuk është promovuar te asnjë koleg
  8359 3216
    212.188.61.105 nga 212.188.61.105 (195.34.52.77)
      Origjina IGP, metrik 500, localpref 199, e vlefshme, e jashtme
      Marrë Path ID 0, Local Path ID 0, version 0
      Komuniteti: 8359:200 8359:609 8359:5012 47764:701 47764:41100 47764:41103 47764:50077
      Vlefshmëria origjinë-AS: e pa gjetur

Metrika localpref për këto ruta ruse është e ulët, që do të thotë se rutat janë përkeqësuar në krahasim me ato të huaja!

Për më tepër, nga ana e Mail.Ru Group ka ndalime për shpërndarjen e prefikseve të tij në Vympelcom përmes operatorëve rusë!

RETN.NET (http://lg.retn.net/):
Në njoftimet nga Mail.RU Group qëndron komuniteti 3216:65535.
Dalja nga LG RETN.NETinet.0: 762737 destinacione, 1734826 ruta (762708 aktive, 222780 të mbajtur, 277 të fshehura)
94.100.176.0/20 (1 hyrje, 1 e shpallur)
*Preferenca BGP: 170/-201




Rruga AS: 47764 I
Rruga AS: E regjistruar
Komunitetet: 3216:65535 9002:64667 9002:65530



Rutat që shënohen me këtë komunitet Vympelcom nuk i pranon në rrjetin e saj. Fragment nga RIPE DB për AS3216:
...
shënime: Komunitetet e brendshme duhet të caktohen vetëm brenda vetë organizatës.
shënime: Ato janë në rangun 3216:0000-3216:4999 dhe 3216:6000-3216:65535.
shënime: dhe gjithmonë fshihen nga azhurnimet që vijnë në kufi.
shënime: routerët.
...
Në drejtim të Rostelecom (http://lg.ip.rt.ru) Mail.RU Group jep rrugë të ngjashme me komunitetin 12389:8350.
Dalja nga LG Rostelecom94.100.176.0/20 përmes 217.107.65.1 në eth0.9 [sr2 2019-06-13] * (100/?) [AS47764i]
Tipi: BGP unicast univ
BGP.origin: IGP
BGP.as_path: 47764
BGP.next_hop: 213.59.207.78
BGP.med: 0
BGP.local_pref: 850
BGP.community: (12389,1) (12389,1100) (12389,1105) (12389,1277) (12389,8350) (12389,8380) (47764,1) (47764,40000) (47764,50077)
BGP.originator_id: 213.59.207.78
BGP.cluster_list: 95.167.88.79 95.167.88.49 95.167.88.17

Sipas regjistrimeve në RIPE DB për objektin as12389, ky komunitet do të thotë 'mos shpall në rrjetin as3216':...
komente: | 12389:835y Kur reklamoni te GoldenTelecom (AS3216) |
...
komente: | ...y=0 - mos reklamoni |
...
Po ashtu në drejtim të MTS (http://lg.mtu.ru):Dalja nga LG MTSHyrja në tabelën BGP për 94.100.176.0/20, version 161717219
Rrugët: (2 në dispozicion, më e mira #1, tabela default)
Multipath: eBGP
Kjo u shpall për grupet e përditësimeve:
6
47764, (pranuar & përdorur)
195.34.52.77 (metrika 16) nga 195.34.52.181 (195.34.52.181)
Origjina IGP, metrika 0, localpref 140, e vlefshme, e brendshme, më e mira
Komuniteti: 8359:2120 8359:2150 8359:5500 8359:55277
Origjinatori: 195.34.52.77, Lista e grupeve: 83.59.83.59
47764, (pranuar & përdorur)
195.34.52.77 (metrika 16) nga 195.34.52.182 (195.34.52.182)
Origjina IGP, metrika 0, localpref 140, e vlefshme, e brendshme
Komuniteti: 8359:2120 8359:2150 8359:5500 8359:55277
Origjinatori: 195.34.52.77, Lista e grupeve: 83.59.2.77

Komuniteti 8359:2120 do të thotë:...
vërejtje: 8359:212x kur shpallet te Sovam (Beeline)
...
vërejtje: x=0 - mos shpall
...
Nuk mund të shohim shpalljet e Mail.RU Group drejt MegaFon - ata nuk kanë Looking Glass.

TĂ« shohim AS47541 (VKONTAKTE-SPB-AS).

Dalja shumë e madhe.

 Router: a9922-e-5
Command: show ip bgp 81.211.56.202


Last switch-over Thu Apr  5 04:25:09 2018: 1 year, 10 weeks, 6 hours, 9 minutes ago

Fri Jun 14 10:34:20.791 MSK
BGP routing table entry for 81.211.0.0/17
Versions:
  Process           bRIB/RIB  SendTblVer
  Speaker          913059757   913059757
Last Modified: May 21 05:20:38.536 for 1y03w
Paths: (6 available, best #4)
  Advertised to update-groups (with more than one peer):
    0.2 
  Advertised to peers (in unique update groups):
    188.93.60.188   
  Path #1: Received by speaker 0
  Not advertised to any peer
  1299 1273 3216 3216
    87.240.191.235 (metric 31) from 87.240.191.235 (87.240.191.235)
      Origin IGP, metric 5000, localpref 150, valid, internal
      Received Path ID 0, Local Path ID 0, version 0
      Community: 1273:12752 1299:431 1299:4000 1299:20000 1299:20002 1299:20200 3216:2001 3216:2999 3216:4100 47541:701 47541:41100 47541:41111 47541:50078
  Path #2: Received by speaker 0
  Not advertised to any peer
  1299 1273 3216 3216
    87.240.191.248 (metric 31) from 87.240.191.248 (87.240.191.248)
      Origin IGP, metric 5000, localpref 150, valid, internal
      Received Path ID 0, Local Path ID 0, version 0
      Community: 1273:12752 1299:431 1299:4000 1299:20000 1299:20002 1299:20200 3216:2001 3216:2999 3216:4100 47541:701 47541:41100 47541:41111 47541:50078
  Path #3: Received by speaker 0
  Not advertised to any peer
  174 6762 3216 3216
    87.240.191.249 (metric 31) from 87.240.191.249 (87.240.191.249)
      Origin IGP, metric 5000, localpref 150, valid, internal
      Received Path ID 0, Local Path ID 0, version 0
      Community: 174:21100 174:22005 47541:701 47541:41100 47541:41108 47541:50078
  Path #4: Received by speaker 0
  Advertised to update-groups (with more than one peer):
    0.2 
  Advertised to peers (in unique update groups):
    188.93.60.188   
  174 6762 3216 3216
    149.6.169.113 from 149.6.169.113 (38.28.1.236)
      Origin IGP, metric 5000, localpref 150, valid, external, best, group-best
      Received Path ID 0, Local Path ID 0, version 913059757
      Community: 174:21100 174:22005 47541:701 47541:41100 47541:41108 47541:50078
      Origin-AS validity: not-found
  Path #5: Received by speaker 0
  Not advertised to any peer
  1273 1273 3216 3216
    195.89.114.197 from 195.89.114.197 (195.2.1.107)
      Origin IGP, metric 5005, localpref 150, valid, external
      Received Path ID 0, Local Path ID 0, version 0
      Community: 1273:12752 3216:2001 3216:2999 3216:4100 47541:701 47541:41100 47541:41110 47541:50078
      Origin-AS validity: not-found
  Path #6: Received by speaker 0
  Not advertised to any peer
  3356 3356 3216 3216 3216
    213.242.69.69 from 213.242.69.69 (4.69.177.130)
      Origin IGP, metric 5000, localpref 150, valid, external
      Received Path ID 0, Local Path ID 0, version 0
      Community: 3216:2001 3216:2999 3216:4100 3356:2 3356:22 3356:100 3356:123 3356:503 3356:2067 47541:701 47541:41100 47541:41107 47541:50078
      Origin-AS validity: not-found

AS-PATH tregon AS174 — Cogent (upstream Mail.RU, Tier1), pastaj AS6762 — Telecom Italia (upstream Vimpelcom). Preferenca Lokale nĂ« gjithĂ« vendet Ă«shtĂ« 150, por kĂ«shtu qĂ« tĂ« gjitha lidhjet e jashtme, pavarĂ«sisht nga politikave tĂ« shkruara.

Le të shohim AS47542 (VKONTAKTE-MSK-CDN-AS).

 Router: mx960-m9-0
Command: op lg-sh-bgp prefix 81.211.56.202


0.0.0.0/0                LP:151       MED:        NH:87.240.191.222  AS path: 47541 I
Communities: 
Accepted Best

 
0.0.0.0/0                LP:151       MED:        NH:95.142.204.251  AS path: 47541 I
Communities: 
Accepted
Inactive-reason: Interior > Exterior > Exterior via Interior

Dhe nga routeri i dytë:

 Router: mx960-m9-1
Command: op lg-sh-bgp prefix 81.211.56.202


0.0.0.0/0                LP:151       MED:        NH:87.240.191.224  AS path: 47541 I
Communities: 
Accepted Best

 
0.0.0.0/0                LP:151       MED:        NH:95.142.204.250  AS path: 47541 I
Communities: 
Accepted
Inactive-reason: Interior > Exterior > Exterior via Interior

Vetëm rrugët standard (0.0.0.0/0). Këtë situatë e shpjegoi një punonjës i Mail.RU Group lakmia, për të cilën ia vlen të falendërohet. Në përmbledhje: segmenti i rrjetit në Moskë i VKontakte është një server memorie (dhe jo gjenerues), qëllimi i të cilit është optimizimi i shpejtësisë së ngarkesës së përmbajtjes së njohur. Kujdesi për përdoruesit, po.

NĂ«se nuk ka rrugĂ« pĂ«r ndonjĂ« rrjet, atĂ«herĂ« ky rrjet nuk mbĂ«shtetet nga serverĂ«t e cache. Kjo do tĂ« thotĂ« se optimizimi i shpejtĂ«sisĂ« sĂ« ngarkesĂ«s nuk funksionon, dhe pĂ«rdoruesit vuajnĂ«. Por kĂ«tu duhet tĂ« theksohet – pĂ«rdoruesit jo vetĂ«m tĂ« tyre, por edhe tĂ« Vimpelcom.

PĂ«rfundimet:

  1. Nga ana e Vimpelcom, trafiku në drejtim të Mail.RU Group shpërndahet natyrshëm. Nuk janë vënë re trukime artificiale përmes manipulimeve të Preference Lokale.
  2. Nga ana e Mail.RU Group vërehen manipulime me prefiksat e Vimpelcom.. Prioritetet për rrugët ekzistuese drejt rrjetit Vimpelcom përmes operatorëve rusë janë të ulura në krahasim me rrugët përmes operatorëve të huaj Tier1.
  3. Për rrugët e dërguara operatorëve rusë (MTS, Rostelecom, RETN.NET) nga ana e Mail.RU Group janë shtuar komunitete BGP menaxhuese për të kufizuar shpërndarjen e tyre në drejtim të Vimpelcom.

Pse Mail.RU Group vendos rrugët përmes Europës si më prioritare? Pse Mail.RU Group ndalon lidhjen e shkurtër brenda Rusisë me Vimpelcom?

A Ă«shtĂ« mĂ« shpesh kĂ«shtu? TĂ« dĂ«rgohet trafiku pĂ«rmes kanaleve tĂ« huaja dhe tĂ« paguhet pĂ«r t’i dĂ«rguar nĂ« valuta?
Apo ka dëshirë të dërgojë trafikun sa më larg, për ta bërë më të vështirë kapjen e tij, apo?
Kjo nuk i dihet inxhinierit të rrjetit...

Burimi: habr.com

Blini hosting tĂ« besueshĂ«m pĂ«r faqe interneti me mbrojtje nga DDoS, serverĂ« VPS VDS đŸ”„ Blini hosting tĂ« besueshĂ«m pĂ«r faqe interneti me mbrojtje nga DDoS, serverĂ« VPS VDS | ProHoster