Ọnụ ọgụgụ nke netwọkụ Amazon Web Services bụ mpaghara 69 gburugburu ụwa na mpaghara 22: USA, Europe, Asia, Africa na Australia. Mpaghara ọ bụla nwere ihe ruru ebe data 8 - Ebe nhazi data. Ebe data ọ bụla nwere puku kwuru puku ma ọ bụ narị puku sava. Emebere netwọkụ ahụ n'ụzọ nke na-eburu n'uche ọnọdụ ọpụpụ niile na-atụghị anya ya. Dịka ọmụmaatụ, mpaghara niile dịpụrụ adịpụ site na ibe ha, a na-ekewakwa mpaghara nnweta n'ebe dị anya nke ọtụtụ kilomita. Ọbụna ma ọ bụrụ na ị na-ebipụ eriri ahụ, usoro ahụ ga-agbanwe na ọwa ndabere, na ọnwụ nke ozi ga-abụ ngwugwu data ole na ole. Vasily Pantyukhin ga-ekwu maka ụkpụrụ ndị ọzọ arụnyere netwọk ahụ na otu esi ahazi ya.
Vasily Pantyukhin malitere dị ka onye nchịkwa Unix na ụlọ ọrụ .ru, rụọ ọrụ na nnukwu Sun Microsystem ngwaike maka afọ 6, ma kwusaa ụwa data-centric maka afọ 11 na EMC. Ọ ghọrọ igwe ojii nkeonwe, wee gaa na nke ọha. Ugbu a, dị ka onye na-ese ụkpụrụ ụlọ ọrụ Weebụ Amazon, ọ na-enye ndụmọdụ teknụzụ iji nyere aka ibi ndụ na ịzụlite na igwe ojii AWS.
N'akụkụ nke gara aga nke trilogy AWS, Vasily abanyela n'ime nhazi nke sava anụ ahụ yana nhazi nchekwa data. Kaadị Nitro, hypervisor dabeere na KVM omenala, Amazon Aurora nchekwa data - gbasara ihe a niile na ihe "" Gụọ maka okirikiri ma ọ bụ lelee okwu.
Akụkụ a ga-elekwasị anya na nhazi netwọkụ, otu n'ime usoro mgbagwoju anya na AWS. The evolushọn si a larịị netwọk ka a Virtual Private Cloud na imewe ya, n'ime ime ọrụ nke Blackfoot na HyperPlane, nsogbu nke onye agbata obi mkpọtụ, na na njedebe - ọnụ ọgụgụ nke netwọk, ọkpụkpụ azụ na anụ ahụ cables. Banyere ihe a niile n'okpuru ịkpụ.
Disclaimer: ihe niile dị n'okpuru bụ echiche nke Vasily na ọ nwere ike ọ gaghị adaba na ọnọdụ Amazon Web Services.
Ntụle netwọkụ
A malitere igwe ojii AWS na 2006. Netwọk ya bụ ihe ochie - nwere usoro dị larịị. Ọnụ ọgụgụ adreesị nkeonwe bụ ndị niile bi n'igwe ojii na-ahụkarị. Mgbe ịmalite igwe mebere ọhụrụ, ị nwetara adreesị IP dị na nso nso a na mberede.
Ụzọ a dị mfe iji mejuputa, mana n'ụzọ bụ isi kpachiri ojiji igwe ojii. Karịsịa, ọ siri ezigbo ike ịmepụta ngwọta ngwakọ jikọtara netwọk nkeonwe na ala yana na AWS. Nsogbu a na-enwekarị bụ ịgbakọ ọnụ ọgụgụ adreesị IP.
Igwe ojii nkeonwe n'onwe
Ígwé ojii ahụ tụgharịrị bụrụ nke a na-achọsi ike. Oge eruola iche echiche banyere scalability na ohere nke iji ya mee ihe site na iri nde nde ndị nwe ụlọ. Netwọk dị larịị aghọwo nnukwu ihe mgbochi. Ya mere, anyị chere maka otu a ga-esi kewapụ ndị ọrụ na ibe ha na ọkwa netwọk ka ha nwee ike ịhọrọ oke IP n'onwe ha.
Kedu ihe mbụ na-abata n'uche mgbe ị na-eche maka ikewapụ netwọkụ? N'ezie VLAN и VRF - Virtual Routing na ebugharị.
N'ụzọ dị mwute, ọ naghị arụ ọrụ. VLAN ID bụ naanị 12 bits, nke na-enye anyị naanị 4096 dịpụrụ adịpụ. Ọbụna nnukwu ọkụ ọkụ nwere ike iji 1-2 puku VRF kacha elu. Iji VRF na VLAN ọnụ na-enye anyị naanị subnets nde ole na ole. Nke a ezughị ezu maka iri nde nde ndị bi n'ụlọ, nke ọ bụla n'ime ha ga-enwe ike iji ọtụtụ subnets.
Anyị enweghịkwa ike ịzụta ọnụ ọgụgụ buru ibu achọrọ, dịka ọmụmaatụ, site na Cisco ma ọ bụ Juniper. E nwere ihe abụọ kpatara ya: ọ dị oke ọnụ, anyị achọghịkwa ịnọ na ebere nke mmepe ha na patching atumatu.
Enwere naanị otu nkwubi okwu - mee ihe ngwọta nke gị.
Na 2009 anyị mara ọkwa VPC - Igwe ojii nkeonwe n'onwe. Aha ahụ rapaara ma ugbu a ọtụtụ ndị na-enye igwe ojii na-ejikwa ya.
VPC bụ netwọọdụ mebere SDN (Software Defined Network). Anyị kpebiri na anyị agaghị echepụta protocol pụrụ iche na ọkwa L2 na L3. Netwọk na-agba ọsọ na ọkọlọtọ Ethernet na IP. Maka nnyefe na netwọkụ, a na-etinye okporo ụzọ igwe mebere n'ime mkpuchi protocol nke anyị. Ọ na-egosi ID nke bụ nke VPC onye nwe ụlọ.
Dị mfe. Agbanyeghị, enwere ọtụtụ ihe ịma aka ọrụ aka siri ike nke kwesịrị imeri. Dịka ọmụmaatụ, ebe na otu esi echekwa data na maapụ adreesị MAC/IP mebere, VPC ID na MAC/IP anụ ahụ kwekọrọ. Na ọnụ ọgụgụ AWS, nke a bụ nnukwu tebụl kwesịrị ịrụ ọrụ na obere nkwụsịtụ ohere. Ọ bụ maka nke a ọrụ eserese, nke na-agbasa na obere oyi akwa na netwọk niile.
N'ime igwe ọgbọ ọhụrụ, kaadị Nitro na-arụ ọrụ mkpuchi na ọkwa ngwaike. N'oge ochie, encapsulation na decapsulation dabere na ngwanrọ.
Ka anyị chọpụta otú o si arụ ọrụ n'ozuzu okwu. Ka anyị jiri ọkwa L2 malite. Ka anyị were ya na anyị nwere igwe mebere IP 10.0.0.2 na sava anụ ahụ 192.168.0.3. Ọ na-eziga data na igwe mebere 10.0.0.3, nke dị ndụ na 192.168.1.4. A na-ewepụta arịrịọ ARP ma ziga ya na kaadị Nitro netwọk. Maka mfe, anyị na-eche na ma igwe mebere na-ebi n'otu VPC "acha anụnụ anụnụ".
Maapụ ahụ jiri nke ya dochie adreesị isi mmalite wee bufee etiti ARP na ọrụ eserese.
Ọrụ eserese ahụ na-eweghachi ozi dị mkpa maka nnyefe na netwọk anụ ahụ L2.
Kaadị Nitro dị na nzaghachi ARP dochie MAC na netwọk anụ ahụ na adreesị na VPC.
Mgbe ị na-ebufe data, anyị na-ekekọta MAC na IP ezi uche na ihe mkpuchi VPC. Anyị na-ebufe ihe a niile na netwọkụ anụ ahụ site na iji kaadị IP Nitro ebe kwesịrị ekwesị na ebe aga.
Igwe anụ ahụ nke etinyere ngwugwu ahụ na-eme nlele ahụ. Nke a dị mkpa iji gbochie ohere nke ịkwanye adreesị. Igwe ahụ na-eziga arịrịọ pụrụ iche na ọrụ maapụ wee jụọ: “Site na igwe anụ ahụ 192.168.0.3 enwetara m ngwugwu ezubere maka 10.0.0.3 na VPC na-acha anụnụ anụnụ. O ziri ezi?
Ọrụ eserese ahụ na-enyocha tebụl nkesa akụrụngwa ma nye ma ọ bụ gọnarị ngwugwu ahụ ka ọ gafere. N'ọnọdụ ọhụrụ niile, agbakwunyere nkwado na kaadị Nitro. Ọ gaghị ekwe omume ịgafe ya ọbụlagodi n'usoro iwu. Ya mere, ịkwanye akụrụngwa na VPC ọzọ agaghị arụ ọrụ.
Na-esote, a na-eziga data ahụ na igwe mebere nke ezubere ya.
Ọrụ nke eserese ahụ na-arụkwa ọrụ dị ka rawụta ezi uche maka ịnyefe data n'etiti igwe mebere na subnets dị iche iche. Ihe niile dị mfe nghọta, agaghị m abanye n'ime nkọwa.
Ọ na-apụta na mgbe ị na-ebufe ngwugwu ọ bụla, ndị sava na-atụgharị na ọrụ nkewa. Kedu ka esi emeso igbu oge a na-apụghị izere ezere? Na-echekwa, n'ezie.
Ihe mara mma bụ na ọ dịghị mkpa ka ị chekwaa nnukwu tebụl ahụ dum. Ihe nkesa anụ ahụ na-akwado igwe mebere site na ọnụọgụ VPC dị ntakịrị. Naanị ị ga-echekwa ozi gbasara VPC ndị a. Ịnyefe data na VPC ndị ọzọ na nhazi "ndabara" ka ezighi ezi. Ọ bụrụ na ejiri ọrụ dịka VPC-peering, mgbe ahụ, a na-etinyekwa ozi gbasara VPC kwekọrọ na cache.
Anyị hazie mbufe data na VPC.
Blackfoot
Kedu ihe ị ga-eme n'ọnọdụ ebe ọ dị mkpa ka ebufe okporo ụzọ n'èzí, dịka ọmụmaatụ na ịntanetị ma ọ bụ site na VPN n'ala? Na-enyere anyị aka ebe a Blackfoot - Ọrụ ime ime AWS. Ndị otu anyị South Africa mepụtara ya. Ọ bụ ya mere e ji kpọọ ọrụ ahụ aha penguin bi na South Africa.
Blackfoot na-ewepụ okporo ụzọ ma jiri ya mee ihe achọrọ. A na-eziga data na ịntanetị ka ọ dị.
A na-ewepụ data ahụ wee kechie ya na IPsec mgbe ị na-eji VPN.
Mgbe ị na-eji Direct Connect, a na-akpado okporo ụzọ ma ziga ya na VLAN kwesịrị ekwesị.
Hyperplane
Nke a bụ ọrụ njikwa eruba n'ime. Ọtụtụ ọrụ netwọk chọrọ nlebanya data eruba na-ekwu. Dịka ọmụmaatụ, mgbe ị na-eji NAT, njikwa mmiri ga-ahụrịrị na IP ọ bụla: ụzọ ọdụ ụgbọ mmiri nwere ọdụ ụgbọ mmiri pụrụ iche. N'ihe banyere onye nhazi NLB - Nhazi ibu netwọkụ, data eruba kwesịrị mgbe niile ka eduzi otu lekwasịrị mebere igwe. Otu nchekwa bụ firewall nwere steeti. Ọ na-enyocha okporo ụzọ na-abata ma meghee ọdụ ụgbọ mmiri n'ezoghị ọnụ maka ngwungwu na-apụ apụ.
N'ígwé ojii AWS, ihe achọrọ latency nnyefe dị oke elu. Ya kpatara Hyperplane dị oke egwu maka ịrụ ọrụ nke netwọkụ niile.
A na-arụ ụgbọ elu ụgbọ elu na igwe mebere EC2. Enweghị anwansi ebe a, naanị aghụghọ. Ihe aghụghọ a bụ na ndị a bụ igwe mebere nke nwere nnukwu RAM. A na-eme azụmahịa ma rụọ ya naanị na ebe nchekwa. Nke a na-enye gị ohere ị nweta igbu oge nke naanị iri iri nke microseconds. Ịrụ ọrụ na diski ahụ ga-egbu ọrụ niile.
Hyperplane bụ usoro kesara nke ukwuu nke igwe EC2 dị otú ahụ. Igwe mebere ọ bụla nwere bandwit nke 5 GB/s. N'ofe netwọk mpaghara niile, nke a na-enye terabits dị egwu nke bandwit ma na-enye ohere nhazi ọtụtụ nde njikọ kwa sekọnd.
HyperPlane na-arụ ọrụ naanị na iyi. VPC ngwugwu encapsulation bụ ihe doro anya maka ya. Ihe ọghọm nwere ike na ọrụ ime a ka ga-egbochi ikewapụ iche VPC. Ọkwa ndị dị n'okpuru bụ maka nchekwa.
Onye agbata obi na-eme mkpọtụ
A ka nwere nsogbu onye agbata obi na-eme mkpọtụ - onye agbata obi na-eme mkpọtụ. Ka anyị were na anyị nwere ọnụ 8. Ọnụ ụzọ ndị a na-ahazi ọsọ nke ndị ọrụ igwe ojii niile. Ihe niile dị ka ọ dị mma ma ekwesịrị kesaa ibu ahụ n'ofe ọnụ niile. Nodes dị ike nke ukwuu ma ọ na-esiri ike ibufe ha.
Mana anyị na-ewu ihe owuwu anyị dabere na ọnọdụ ndị na-atụghị anya ya.
Ohere dị ala apụtaghị agaghị ekwe omume.
Anyị nwere ike iche n'echiche ọnọdụ nke otu ma ọ bụ karịa ndị ọrụ ga-ebunye ibu dị ukwuu. Ọnụ ụzọ HyperPlane niile na-etinye aka n'ịhazi ibu a yana ndị ọrụ ndị ọzọ nwere ike ịnweta ụdị arụmọrụ ụfọdụ. Nke a na-agbaji echiche nke igwe ojii, nke ndị nwe ụlọ enweghị ike imetụta ibe ha.
Kedu ka esi edozi nsogbu nke onye agbata obi na-eme mkpọtụ? Ihe mbụ na-abata n'uche bụ sharding. A na-ekewa ọnụ ụzọ 8 anyị n'ụzọ ezi uche dị na ya na 4 shards nke ọnụ abụọ nke ọ bụla. Ugbu a onye agbata obi na-eme mkpọtụ ga-akpasu naanị otu ụzọ n'ụzọ anọ nke ndị ọrụ niile, mana ọ ga-ewute ha nke ukwuu.
Ka anyị mee ihe dị iche. Anyị ga-ekenye onye ọrụ ọ bụla naanị ọnụ ụzọ 3.
Aghụghọ a bụ inye ndị ọrụ dị iche iche ọnụ ọnụ na enweghị usoro. Na foto dị n'okpuru ebe a, onye ọrụ na-acha anụnụ anụnụ na-ejikọta ọnụ na otu n'ime ndị ọrụ abụọ ọzọ - akwụkwọ ndụ akwụkwọ ndụ na oroma.
Site na ọnụ ọnụ 8 na ndị ọrụ 3, ohere nke onye agbata obi na-eme mkpọtụ na-ejikọta otu n'ime ndị ọrụ bụ 54%. Ọ bụ na ihe gbasara nke a ka onye ọrụ na-acha anụnụ anụnụ ga-emetụta ndị nwe ụlọ ndị ọzọ. N'otu oge ahụ, ọ bụ naanị akụkụ nke ibu ya. N'ihe atụ anyị, mmetụta a ga-adị ma ọ dịkarịa ala, ọ bụghị onye ọ bụla ga-ahụ ya, kama ọ bụ naanị otu ụzọ n'ụzọ atọ nke ndị ọrụ niile. Nke a abụrụlarị nsonaazụ dị mma.
Ọnụọgụ ndị ọrụ ga-agafe
Enwere ike na pasent
0
18%
1
54%
2
26%
3
2%
Ka anyị mee ka ọnọdụ ahụ dịkwuo nso na eziokwu - ka anyị were 100 nodes na 5 ọrụ na 5 ọnụ. N'okwu a, ọ dịghị nke ọ bụla n'ime oghere ga-ejikọta na ihe gbasara nke 77%.
Ọnụọgụ ndị ọrụ ga-agafe
Enwere ike na pasent
0
77%
1
21%
2
1,8%
3
0,06%
4
0,0006%
5
0,00000013%
N'ọnọdụ dị adị, yana ọnụ ọgụgụ dị ukwuu nke oghere HyperPlane na ndị ọrụ, mmetụta nke onye agbata obi na-eme mkpọtụ na ndị ọrụ ndị ọzọ dị ntakịrị. A na-akpọ usoro a ịgwakọta sharding - shuffle sharding. Ọ na-ebelata mmetụta ọjọọ nke ọdịda ọnụ.
A na-ewu ọtụtụ ọrụ na ndabere HyperPlane: Network Load Balancer, NAT Gateway, Amazon EFS, AWS PrivateLink, AWS Transit Gateway.
Ọnụ ọgụgụ netwọkụ
Ugbu a, ka anyị kwuo banyere ọnụ ọgụgụ nke netwọk n'onwe ya. Maka Ọktoba 2019 AWS na-enye ọrụ ya na mpaghara 22, na 9 ọzọ na-eme atụmatụ.
- Mpaghara ọ bụla nwere ọtụtụ Mpaghara Nnweta. Enwere 69 n'ime ha gburugburu ụwa.
- AZ ọ bụla nwere ụlọ ọrụ nhazi data. Ọ dịghị ihe karịrị 8 n'ime ha na mkpokọta.
- Ebe data ahụ nwere ọtụtụ sava, ụfọdụ nwere ihe ruru 300.
Ugbu a, ka anyị gbakọọ ihe a niile, mụbaa ma nweta ọnụ ọgụgụ dị egwu nke na-egosipụta Igwe ojii nke Amazon.
Enwere ọtụtụ njikọ anya n'etiti Mpaghara nnweta na etiti data. N'otu n'ime mpaghara anyị kachasị ukwuu, ọwa 388 ka edobere naanị maka nkwurịta okwu AZ n'etiti ibe ya na ebe nkwurịta okwu na mpaghara ndị ọzọ (Ụlọ Ọrụ Transit). Na mkpokọta nke a na-enye ara 5000 Tbit.
Ewubere AWS azụ azụ kpọmkwem maka yana kachasị maka igwe ojii. Anyị na-ewu ya na ọwa 100 GB / s. Anyị na-achịkwa ha kpamkpam, ewezuga mpaghara na China. A naghị ekekọrịta okporo ụzọ na ibu nke ụlọ ọrụ ndị ọzọ.
N'ezie, ọ bụghị naanị anyị bụ ndị na-eweta igwe ojii nwere netwọk azụ azụ nkeonwe. Ọtụtụ nnukwu ụlọ ọrụ na-eso ụzọ a. Nke a kwadoro site na ndị nchọpụta onwe ha, dịka ọmụmaatụ site na .
Eserese na-egosi na òkè nke ndị na-eweta ọdịnaya na ndị na-eweta igwe ojii na-eto eto. N'ihi nke a, òkè nke okporo ụzọ Ịntanetị nke ndị na-enye ọkpụkpụ azụ na-ebelata mgbe niile.
Aga m akọwara ihe kpatara nke a ji eme. Na mbụ, ọtụtụ ọrụ weebụ na-enweta ma na-eri ya ozugbo site na ịntanetị. N'oge a, ọtụtụ sava na-adị na igwe ojii ma na-enweta ya site na CDN - Netwọk nkesa ọdịnaya. Iji nweta akụrụngwa, onye ọrụ na-aga na ịntanetị naanị na CDN PoP kacha nso - Ebe ọnụnọ. Ọtụtụ mgbe, ọ bụ ebe dị nso. Mgbe ahụ, ọ na-ahapụ ịntanetị ọha wee fega n'ọkpụkpụ azụ nke dị n'ofe Atlantic, dịka ọmụmaatụ, wee rute ozugbo na akụrụngwa.
M na-eche otú ịntanetị ga-esi gbanwee na afọ 10 ma ọ bụrụ na omume a na-aga n'ihu?
Ọwa anụ ahụ
Ndị ọkà mmụta sayensị achọpụtabeghị otú ha ga-esi na-amụba ọsọ nke ìhè na Eluigwe na Ala, ma ha enweela ọganihu dị ukwuu n'ụzọ e si ebufe ya site na eriri anya. Anyị na-eji eriri eriri 6912 ugbu a. Nke a na-enyere aka budata ebuli ọnụ ahịa nke nrụnye ha.
Na mpaghara ụfọdụ anyị ga-eji eriri pụrụ iche. Dịka ọmụmaatụ, na mpaghara Sydney, anyị na-eji eriri nwere mkpuchi pụrụ iche megide mgbụsị akwụkwọ.
Ọ dịghị onye na-egbochi nsogbu na mgbe ụfọdụ ọwa anyị na-emebi. Foto dị n'aka nri na-egosi eriri anya n'otu n'ime mpaghara America nke ndị ọrụ ụlọ dọwara. N'ihi ihe mberede ahụ, naanị ngwugwu data 13 furu efu, nke bụ ihe ijuanya. Ọzọkwa - naanị 13! Usoro ahụ gbanwere ozugbo na ọwa ndabere - ọnụ ọgụgụ ahụ na-arụ ọrụ.
Anyị na-enyocha ụfọdụ ọrụ na teknụzụ igwe ojii Amazon. Enwere m olileanya na ị nwere ma ọ dịkarịa ala ụfọdụ echiche nke ọnụ ọgụgụ nke ọrụ ndị injinia anyị ga-edozi. Onwe m, ahụrụ m nke a na-atọ m ụtọ.
Nke a bụ akụkụ ikpeazụ nke trilogy sitere na Vasily Pantyukhin gbasara ngwaọrụ AWS. N'ime akụkụ na-akọwa njikarịcha ihe nkesa na nhazi nchekwa data, yana n'ime - ọrụ enweghị ihe nkesa na Firecracker.
Na na Nọvemba Vasily Pantyukhin ga-ekekọrịta nkọwa ọhụrụ nke ngwaọrụ Amazon. Ọ banyere ihe kpatara ọdịda na nhazi nke usoro kesara na Amazon. October 24 ka ga-ekwe omume tiketi na ọnụ ahịa dị mma, ma kwụọ ụgwọ ma emechaa. Anyị na-eche gị na HighLoad++, bịa ka anyị kparịta ụka!
isi: www.habr.com