Oge okpomọkụ na Moscow nke afọ a bụ, n'eziokwu, ọ bụghị ezigbo mma. Ọ malitere n'oge na ngwa ngwa, ọ bụghị onye ọ bụla nwere oge iji meghachi omume na ya, ọ kwụsịrị ugbua na njedebe nke June. Ya mere, mgbe Huawei kpọrọ m ka m gaa China, n'obodo Chengdu, ebe etiti RnD ha dị, mgbe m lere anya ihu igwe nke + 34 degrees na ndò, ekwenyere m ozugbo. A sị ka e kwuwe, Abụghị m otu afọ ọzọ ma ọ dị m mkpa ka m kpoo ọkpụkpụ m ntakịrị. Ma ọ ga-amasị m ịmara na ọ ga-ekwe omume ikpo ọkụ ọ bụghị naanị ọkpụkpụ, kamakwa ime ụlọ, n'ihi na ógbè Sichuan, nke Chengdu dị n'ezie, bụ onye a ma ama maka ịhụnanya nke nri na-esi ísì ụtọ. Ma, nke a abụghị blọọgụ gbasara njem, yabụ ka anyị laghachi na ebumnuche nke njem anyị - usoro nchekwa nchekwa ọhụrụ - Huawei Dorado V6. Edemede a ga-efegharị gị ntakịrị site n'oge gara aga, n'ihi na ... edere ya tupu ọkwa ọkwa gọọmentị, mana e bipụtara ya naanị mgbe a tọhapụrụ ya. Ya mere, taa, anyị ga-elebakwu anya na ihe niile na-atọ ụtọ ma dị ụtọ nke Huawei kwadoro anyị.
A ga-enwe ụdị 5 n'ahịrị ọhụrụ. Ụdị niile ma e wezụga 3000V6 nwere ike ịnwe na nsụgharị abụọ - SAS na NVMe. Nhọrọ ahụ na-ekpebi interface nke diski ndị ị nwere ike iji na usoro a, ọdụ ụgbọ mmiri Back-End na ọnụ ọgụgụ nke draịva diski ị nwere ike ịwụnye na sistemụ. Maka NVMe, a na-eji SSD nke nkwụ, nke dị gịrịgịrị karịa 2.5 ″ SAS SSDs kpochapụrụ ma nwee ike itinye ya na iberibe 36. Ahịrị ọhụrụ a bụ All Flash na enweghị nhazi nwere diski.
Palm NVMe SSD
N'uche nke m, Dorado 8000 na 18000 dị ka ụdị ndị na-adọrọ mmasị. Huawei na-edobe ha dị ka usoro dị elu, na, ekele maka ọnụahịa ọnụahịa nke Huawei, ọ na-eme ka ụdị ndị a dị n'etiti etiti na akụkụ nke asọmpi. Ọ bụ ụdị ndị a ka m ga-elekwasị anya na nyocha m taa. Aga m achọpụta ozugbo na n'ihi njirimara haziri, sistemụ nchịkwa abụọ nke obere nwere ihe owuwu dịtụ iche, dị iche na Dorado 8000 na 18000, yabụ na ọ bụghị ihe niile m ga-ekwu maka taa na-emetụta ụdị obere.
Otu n'ime ihe ndị bụ isi nke usoro ọhụrụ ahụ bụ iji ọtụtụ ibe, mepụtara n'ime ụlọ, nke ọ bụla n'ime ha na-enye gị ohere ikesa ibu ezi uche site na nhazi etiti nke onye na-ahụ maka njikwa ma gbakwunye ọrụ dị iche iche.
Obi nke usoro ọhụrụ a bụ Kunpeng 920 processors, nke emepụtara na teknụzụ ARM na nke Huawei rụpụtara n'onwe ya. Dabere na ihe nlereanya ahụ, ọnụ ọgụgụ cores, ugboro ole ha na ọnụ ọgụgụ ndị nrụpụta arụnyere na njikwa ọ bụla dịgasị iche:
Huawei Dorado V6 8000 - 2CPU, isi 64
Huawei Dorado V6 18000 - 4CPU, isi 48
Huawei mepụtara ihe nrụpụta a na ụkpụrụ ụlọ ARM, yana dịka m maara, na mbụ zubere ịwụnye ya naanị na ụdị Dorado 8000 na 18000 ochie, dị ka ọ dịlarịrị na ụfọdụ ụdị V5, mana mmachi mere mgbanwe na echiche a. N'ezie, ARM kwukwara banyere ịjụ ịkwado Huawei n'oge ntinye nke mmachi, ma ebe a ọnọdụ dị iche na Intel. Huawei na-emepụta ibe ndị a n'onwe ya, ọ nweghị mmachi nwere ike ịkwụsị usoro a. Ịwepụ mmekọrịta na ARM na-eyi naanị mfu nke ịnweta mmepe ọhụrụ. Banyere arụmọrụ, ọ ga-ekwe omume ikpe ikpe naanị mgbe emechara ule onwe. Ọ bụ ezie na ahụrụ m ka e si wepụ 18000M IOPS na usoro Dorado 1 na-enweghị nsogbu ọ bụla, ruo mgbe m jiri aka m megharịa ya na akwa m, agaghị m ekweta. Mana enwere ike dị ukwuu na njikwa. Ụdị ochie na-eji njikwa 4, nke ọ bụla nwere nhazi 4, na-enye ngụkọta nke cores 768.
Ma m ga-ekwu maka cores ọbụna mgbe e mesịrị, mgbe anyị na-ele anya na nhazi nke usoro ọhụrụ, ma ugbu a, ka anyị laghachi na mgbawa ọzọ arụnyere na usoro. Ihe mgbawa ahụ dị ka ihe ngwọta na-adọrọ mmasị nke ukwuu (Dị ka m ghọtara, nwanne nke obere nke Ascend 910, nke ewepụtara ọha na nso nso a). Ọrụ ya bụ iji nyochaa ihe mgbochi data na-abanye n'ime usoro ahụ iji mee ka ọnụọgụgụ gụọ. O siri ike ikwu otú ọ ga-esi arụ ọrụ, n'ihi na ... Taa ọ na-arụ ọrụ naanị dịka ndebiri enyere ma enweghị ikike ịmụta na ọnọdụ ọgụgụ isi. A na-ekwe nkwa ọdịdị nke ọnọdụ nwere ọgụgụ isi na firmware n'ọdịnihu, ikekwe n'isi afọ na-abịa.
Ka anyị gaa n'ihu na architecture. Huawei gara n'ihu na-emepụta teknụzụ Smart Matrix nke ya, nke na-emejuputa usoro ntupu zuru oke na njikọ njikọ. Mana ọ bụrụ na V5 nke a bụ naanị maka ịnweta ndị njikwa na diski, ugbu a ndị njikwa niile nwere ohere ịnweta ọdụ ụgbọ mmiri niile na ma Back-End na Front-End.
Ekele maka ụlọ ọrụ microservice ọhụrụ, nke a na-enyekwa ohere ịhazi nha n'etiti ndị na-ahụ maka njikwa niile, ọbụlagodi na enwere naanị otu ọnwa. Emepụtara os maka ahịrị usoro a site na ala gbagote, ọ bụghịkwa naanị maka iji draịva Flash. N'ihi n'eziokwu na ndị njikwa anyị niile nwere ohere ịbanye n'otu ọdụ ụgbọ mmiri ahụ, ma ọ bụrụ na nchịkwa nchịkwa ma ọ bụ reboot, onye ọbịa anaghị efunahụ otu ụzọ na usoro nchekwa nchekwa, a na-eme mgbanwe n'ụzọ na ọkwa usoro nchekwa. Agbanyeghị, iji UltraPath na onye ọbịa adịghị mkpa nke ukwuu. Ọzọ "ichekwa" mgbe ị na-etinye usoro ahụ bụ ọnụ ọgụgụ dị nta nke njikọ dị mkpa. Ma ọ bụrụ na usoro "oge gboo" maka ndị na-ahụ maka 4 anyị ga-achọ njikọ 8 site na ụlọ ọrụ 2, mgbe ahụ n'ihe banyere Huawei ọbụna 2 ga-ezuru (Anaghị m ekwu ugbu a banyere izu oke nke ntinye nke otu njikọ).
Dị ka ọ dị na ụdị nke gara aga, a na-eji cache zuru ụwa ọnụ nwere mirroring. Nke a na-enye gị ohere ida ihe ruru njikwa abụọ n'otu oge ma ọ bụ njikwa atọ n'usoro n'usoro na-emetụtaghị nnweta. Mana ọ dị mma ịmara na anyị ahụghị nguzozi ibu zuru oke n'etiti ndị njikwa 3 fọdụrụnụ ma ọ bụrụ na otu ọdịda na ngosipụta ngosi. Otu n'ime ndị fọdụrụ weghaara ibu nke njikwa dara ada kpamkpam. O kwere omume na maka nke a ọ dị mkpa ikwe ka usoro ahụ rụọ ọrụ ogologo oge na nhazi a. N'ọnọdụ ọ bụla, m ga-enyocha nke a n'ụzọ zuru ezu site na iji ule nke m.
Huawei na-edobe usoro ọhụrụ ahụ dị ka sistemụ NVMe ngwụcha-na-ọgwụgwụ, mana taa NVMeOF akwadobeghị na njedebe ihu, naanị FC, iSCSI ma ọ bụ NFS. Na ngwụcha nke a ma ọ bụ mmalite nke na-esote, dị ka njirimara ndị ọzọ, ekwere anyị nkwa nkwado RoCE.
A na-ejikọta shelves na ndị na-ahụ maka njikwa site na iji RoCE, ma enwere otu ndọghachi azụ metụtara nke a - enweghị njikọ "loopback" nke shelves, dịka ọ dị na SAS. N'uche nke m, nke a ka bụ nnukwu ihe ndọghachi azụ ma ọ bụrụ na ị na-eme atụmatụ nnukwu usoro. Nke bụ eziokwu bụ na a na-ejikọta shelves niile n'usoro, na ọdịda nke otu n'ime shelves na-eme ka enweghị ike ịnweta ndị ọzọ niile na-esote ya. N'okwu a, iji hụ na nnabata mmejọ, anyị ga-ejikọta shelves niile na ndị na-ahụ maka njikwa, nke gụnyere mmụba nke ọnụ ọgụgụ ọdụ ụgbọ mmiri azụ azụ na sistemụ.
Otu ihe ọzọ kwesịrị ịkọwa bụ mmelite na-adịghị emebi emebi (NDU). Dị ka m kwuru n'elu, Huawei emejuputa atumatu a akpa obibia na-arụ ọrụ OS maka ọhụrụ Dorado akara, a na-enye gị ohere imelite na Malitegharịa ekwentị ọrụ na-enweghị mkpa kpamkpam reboot njikwa. Ọ bara uru ịkọwa ozugbo na ụfọdụ mmelite ga-enwe mmelite kernel, na nke a, a ka na-achọgharị nrụpụta nke ndị njikwa oge ụfọdụ n'oge mmelite, mana ọ bụghị mgbe niile. Nke a ga-ebelata mmetụta nke ọrụ a na usoro mmepụta ihe.
N'ime ngwa agha anyị, ọnụ ọgụgụ ka ukwuu n'usoro sitere na NetApp. Ya mere, echere m na ọ ga-abụ ihe ezi uche dị na ya ma ọ bụrụ na m mee ntakịrị ntụnyere na usoro nke m ga-eji rụọ ọrụ nke ukwuu. Nke a abụghị mgbalị iji chọpụta onye ka mma na onye ka njọ ma ọ bụ onye nhazi ya ka mma. M ga-agbalị iji uche na-enweghị mmasị na-atụnyere ụzọ abụọ dị iche iche iji dozie otu nsogbu site n'aka ndị na-ere ahịa dị iche iche. Ee, n'ezie, na nke a, anyị ga-atụle usoro Huawei na "echiche" na m ga-ahụ iche iche isi ihe ndị e mere atụmatụ na-emejuputa atumatu na n'ọdịnihu firmware nsụgharị. Kedu uru m na-ahụ ugbu a:
- Ọnụọgụ nke draịva NVMe akwadoro. NetApp nwere ugbu a 288 n'ime ha, ebe Huawei nwere 1600-6400, dabere na ụdị. N'otu oge ahụ, ike iji Huawei's Max bụ 32PBe, dị ka usoro NetApp (iji bụrụ nke ziri ezi, ha nwere 31.64PBe). Na nke a n'agbanyeghị eziokwu na draịva nke otu olu na-akwado (ruo 15Tb). Huawei na-akọwa eziokwu a dị ka ndị a: ha enweghị ohere iji kpọkọta ihe nkwụnye ka ukwuu. Na tiori, ha enweghị oke olu, mana ha enwebeghị ike ịnwale eziokwu a. Mana ebe a, ọ dị mma ịmara na ikike nke draịva flash taa dị oke elu, na n'ihe banyere sistemụ NVMe anyị na-eche ihu n'eziokwu na draịva 24 zuru oke iji sistemụ njikwa 2-ọgwụgwụ. N'ihi ya, mmụba ọzọ na ọnụ ọgụgụ diski dị na usoro ahụ agaghị enye naanị mmụba arụmọrụ, ma ọ ga-enwekwa mmetụta ọjọọ na IOPS / Tb ratio. N'ezie, ọ bara uru ịhụ ole draịva nke sistemụ njikwa 4 8000 na 16000 nwere ike ijikwa, n'ihi na ... Ike na ikike nke Kunpeng 920 ka edochaghị anya.
- Ọnụnọ Lun dị ka onye nwe sistemụ NetApp. Ndị ahụ. Naanị otu onye njikwa nwere ike iji ọnwa rụọ ọrụ, ebe nke abụọ na-agafe IO naanị n'onwe ya. Sistemụ Huawei, n'ụzọ megidere nke ahụ, enweghị ndị nwe ya yana arụ ọrụ nwere ngọngọ data (mkpakọ, deduplication) nke ndị njikwa ọ bụla nwere ike ịrụ ya, yana dee ya na diski.
- Ọ nweghị ọdụ ụgbọ mmiri na-ada mgbe otu n'ime ndị njikwa ada ada. Maka ụfọdụ, oge a dị oke egwu. Isi ala bụ na ịgbanye n'ime usoro nchekwa ahụ kwesịrị ime ngwa ngwa karịa n'akụkụ ndị ọbịa. Ma ọ bụrụ na n'ihe banyere otu NetApp, na omume, anyị hụrụ ifriizi ihe dị ka 5 sekọnd mgbe ị na-ewepụ onye njikwa na ịgbanwe ụzọ, mgbe ahụ site na ịtụgharị na Huawei anyị ka ga-eme ya.
- Ọ dịghị mkpa ịmalitegharịa njikwa mgbe ị na-emelite. Nke a malitere ichegbu onwe m na mwepụta nke ụdị ọhụrụ yana alaka firmware maka NetApps ugboro ugboro. Ee, ụfọdụ mmelite maka Huawei ka ga-achọ ịmalitegharị, mana ọ bụghị ihe niile.
- 4 Ndị na-ahụ maka Huawei maka ọnụ ahịa njikwa NetApp abụọ. Dịka m kwuru n'elu, ekele maka amụma ọnụahịa Huawei, ọ nwere ike ịsọ mpi n'etiti etiti ya na ụdị ya dị elu.
- Ọnụnọ nke ibe ndị ọzọ na ndị na-ahụ maka shelf na kaadị ọdụ ụgbọ mmiri, nke nwere ike ime ka ọ dị mma maka sistemụ arụmọrụ.
ọghọm na nchegbu n'ozuzu:
- Njikọ kpọmkwem nke shelves na ndị na-ahụ maka njikwa ma ọ bụ mkpa maka ọnụ ọgụgụ dị ukwuu nke ọdụ ụgbọ mmiri azụ iji jikọọ shelves niile na njikwa.
- ARM architecture na ọnụnọ nke ọnụ ọgụgụ buru ibu nke ibe - kedu ka ọ ga-esi rụọ ọrụ nke ọma, yana arụmọrụ ahụ ga-ezu?
Enwere ike iwepụ ọtụtụ nchegbu na egwu site na nyocha onwe onye nke ahịrị ọhụrụ ahụ. Enwere m olileanya na n'oge na-adịghị anya mgbe a tọhapụrụ ha, ha ga-apụta na Moscow ma a ga-ezuru ha iji nweta ngwa ngwa maka ule nke gị. Ka ọ dị ugbu a, anyị nwere ike ikwu na n'ozuzu ụzọ ụlọ ọrụ ahụ na-ele anya na-adọrọ mmasị, na ahịrị ọhụrụ ahụ na-elekwa anya nke ọma ma e jiri ya tụnyere ndị asọmpi ya. Mmezu ikpeazụ na-ewelite ọtụtụ ajụjụ, n'ihi na Anyị ga-ahụ ọtụtụ ihe naanị na njedebe nke afọ, yana ikekwe naanị na 2020.
isi: www.habr.com