{"id":97824,"date":"2020-10-22T14:42:26","date_gmt":"2020-10-22T12:42:26","guid":{"rendered":"https:\/\/prohoster.info\/blog\/administrirovanie\/huawei-oceanstor-dorado-18000-v6-v-chyom-eyo-haj-endovost"},"modified":"2020-11-18T00:58:50","modified_gmt":"2020-11-17T22:58:50","slug":"huawei-oceanstor-dorado-18000-v6-v-chyom-eyo-haj-endovost","status":"publish","type":"post","link":"https:\/\/prohoster.info\/et\/blog\/administrirovanie\/huawei-oceanstor-dorado-18000-v6-v-chyom-eyo-haj-endovost","title":{"rendered":"Huawei OceanStor Dorado 18000 V6: mis teeb selle k\u00f5rgtehnoloogiliseks","gt_translate_keys":[{"key":"rendered","format":"text"}]},"content":{"rendered":"

P\u00f5hjendame p\u00f5hjalikult, miks OceanStor Dorado 18000 V6 on t\u00f5eliselt tipptasemel andmesalvestuss\u00fcsteem, mis on valmis tulevikuks. Samuti hajutame levinud muresid All-Flash salvestuss\u00fcsteemide osas ja n\u00e4itame, kuidas Huawei neist maksimumi v\u00e4lja pigistab: end-to-end NVMe, t\u00e4iendav vahem\u00e4lu SCM-is ja terve hulk muid lahendusi.
\n\"Huawei
\n<\/a><\/noindex>
\n\"Huawei
\n<\/p>\n

Uus andmelandschaft \u2014 uus andmesalvestus<\/h2>\n

\nAndmete kasutamise intensiivsus t\u00f5useb k\u00f5ikides valdkondades. Pangandussektor on selle parim n\u00e4ide. Viimastel aastatel on pangatehingute arv suurenenud enam kui k\u00fcmme korda. Nagu n\u00e4itab BCG uuring<\/a><\/noindex>, n\u00e4itavad vaid Venemaal 2010. ja 2018. aasta jooksul, et kaardiga tehtud kontaktivabad tehingud on suurenenud enam kui kolmek\u00fcmne korra \u2014 5,8-lt 172-ni aastas \u00fche inimese kohta. P\u00f5hjus on eelk\u00f5ige mikropayments'i triumfis: enamus meist on harjunud internetipangandusega ja pank on meil n\u00fc\u00fcd k\u00e4ep\u00e4rast \u2014 telefonis.<\/p>\n

IT-infrastruktuur krediidiinstitutsioonis peab olema valmis selliseks v\u00e4ljakutseks. Ja see on t\u00f5epoolest v\u00e4ljakutse. Lisaks peavad pangad n\u00fc\u00fcd tagama andmete k\u00e4ttesaadavuse 24\/7, kui varasemalt oli see vajalik vaid t\u00f6\u00f6aegadel. Veel hiljuti peeti 5 ms viivitust vastuv\u00f5etavaks normiks, aga n\u00fc\u00fcd? Isegi 1 ms on liiga palju. Kaasaegse andmesalvestuss\u00fcsteemi sihtv\u00e4\u00e4rtus on 0,5 ms.<\/p>\n

Sama kehtib usaldusv\u00e4\u00e4rsuse kohta: 2010. aastatel kujunes v\u00e4lja vaistlik arusaam, et piisab, kui viia usaldusv\u00e4\u00e4rsuse tase \u2018viie kuue\u2019 tasemele \u2013 99,999%. T\u00f5si, see arusaam on juba aegunud. 2020. aastal on \u00e4ri jaoks t\u00e4iesti normaalne n\u00f5uda 99,9999% salvesti ning 99,99999% arhitektuurilise lahenduse korral. Ja see ei ole sugugi kapriis, vaid h\u00e4davajalik: kas infrastruktuuri hooldusakna pole \u00fcldse, v\u00f5i on see \u00e4\u00e4rmiselt v\u00e4ike.<\/p>\n

\"Huawei
\n
\nSelgitatavalt on mugav projitseerida neid n\u00e4itajaid rahaga seotud konteksti. Lihtsaim on teha see rahandussektori n\u00e4itel. \u00dclaltoodud diagrammil on n\u00e4idatud, kui palju teenivad 10 suurimat panka maailmas tunni jooksul. Ainult Hiina T\u00f6\u00f6stus- ja Kaubapank teenib kokku $5 miljonit. Just nii palju maksab Hiina suurima krediidiasutuse IT-infrastruktuuri \u00fche tunni seiskumine (ja arvestuses on kaalutud ainult saamata j\u00e4\u00e4nud kasum!). Sellise vaatenurgaga on selge, et seisaku v\u00e4hendamine ja usaldusv\u00e4\u00e4rsuse t\u00f5stmine ei ole \u00f5igustatud mitte ainult osaj\u00e4rgu protsentides, vaid ka murdosades. See pole mitte ainult konkurentsiv\u00f5ime t\u00f5stmise seisukohalt m\u00f5istlik, vaid ka turupositsioonide s\u00e4ilitamise t\u00f5ttu.<\/p>\n

Sarnased muudatused toimuvad ka teistes valdkondades. N\u00e4iteks \u00f5hutranspordis: enne pandeemiat kasvas lennuliiklus aastast aastasse kiiresti ning paljud hakkasid seda kasutama peaaegu nagu taksot. Kuidas tarbijate harjumused, siis on \u00fchiskonnas juurdunud harjumus teenuste igak\u00fclgse kergesti k\u00e4ttesaadavuse suhtes: lennujaama saabudes vajame Wi-Fi \u00fchendust, juurdep\u00e4\u00e4su maksete teenustele, kaardile jne. Selle tulemusel on infrastruktuuri ja teenuste koormus avalikes kohtades korduvkasvanud. Ja need l\u00e4henemised, mida me pidime infrastruktuuri loomisel vastuv\u00f5etavaks isegi aasta tagasi, on kiiresti vananenud.<\/p>\n

\"Huawei
\n<\/p>\n

Kas on liiga vara All-Flash'ile \u00fcle minna?<\/h2>\n

\n\u00dcks paremaid lahendusi eespool mainitud \u00fclesannete t\u00e4itmiseks AFA - all-flash arrays, ehk t\u00e4iesti flash-p\u00f5hised massiivid. Siiski, kuni viimase ajani p\u00fcsisid kahtlused, kas need on usaldusv\u00e4\u00e4rsuse poolest v\u00f5rreldavad HDD-p\u00f5histe ja h\u00fcbriidsete lahendustega. L\u00f5ppude l\u00f5puks on tahkisloomine m\u00e4lupulgal selline parameeter nagu keskmine t\u00f6\u00f6aeg t\u00f5rkeeni, ehk MTBF (mean time between failures). Kahjuks on m\u00e4lurakkude halvenemine sisse- ja v\u00e4ljundoperatsioonide t\u00f5ttu reaalsus.<\/p>\n

Seega varjutas All-Flash tulevikku k\u00fcsimus, kuidas v\u00e4ltida andmete kadumist juhul, kui SSD l\u00f5petab t\u00f6\u00f6tamise. Varundamine on tuttav lahendus, vaid taasteaeg oleks vastavalt kaasaegsetele n\u00f5udmistele vastuv\u00f5etamatu. Teine v\u00f5imalus on luua teise taseme salvestus ketasp\u00f5histes seadmetes, kuid sellise skeemiga kaotatakse osa \u201epuhtalt flash\u201c-s\u00fcsteemi eeliseid.<\/p>\n

Entretanto, num\u00e9ricas falam de maneira diferente: a estat\u00edstica dos gigantes da economia digital, incluindo o Google, nos \u00faltimos anos mostra que os dispositivos flash s\u00e3o significativamente mais confi\u00e1veis do que os discos r\u00edgidos. E isso se aplica tanto a curto quanto a longo prazo: em m\u00e9dia, os dispositivos flash duram de quatro a seis anos antes de falhar. Em termos de confiabilidade no armazenamento de dados, eles n\u00e3o ficam atr\u00e1s dos dispositivos com discos magn\u00e9ticos de spindle, e, em alguns casos, at\u00e9 superam esses \u00faltimos.<\/p>\n

\"Huawei
\n
\nOutro argumento tradicional a favor dos dispositivos com discos de spindle \u00e9 a sua acessibilidade em pre\u00e7o. Sem d\u00favida, o custo de armazenamento de um terabyte em um disco r\u00edgido ainda \u00e9 relativamente baixo. E se considerarmos apenas os custos de equipamentos, manter um terabyte em um dispositivo de spindle \u00e9 mais barato do que em um SSD. No entanto, ao considerar o planejamento financeiro, n\u00e3o \u00e9 apenas o pre\u00e7o do dispositivo que conta, mas tamb\u00e9m qual \u00e9 o custo total de propriedade ao longo do tempo \u2014 de tr\u00eas a sete anos.<\/p>\n

Sellest nurkast vaadatuna on k\u00f5ik hoopis teistsugune. Isegi kui j\u00e4tta k\u00f5rvale dedupeerimine ja kompressioon, mida tavaliselt rakendatakse m\u00e4lupulkadel ja mis muudab nende kasutamise majanduslikult tulusamaks, j\u00e4\u00e4vad alles sellised omadused nagu riiulil ruumi n\u00f5udmine, soojus\u00fclekanne ja energiatarbimine. Nende osas on flash eeliseid eelk\u00e4ijate ees. Tulemuseks on, et flash-p\u00f5histe andmesalvestuss\u00fcsteemide TCO, arvestades k\u00f5iki parameetreid, on sageli peaaegu kaks korda madalam kui spindelplaatide v\u00f5i h\u00fcbriidide puhul.<\/p>\n

ESG agentuuri aruannete kohaselt on All-Flash andmesalvestuss\u00fcsteemidel Dorado V6 v\u00f5imalik saavutada omamiskulude v\u00e4henemine kuni 78% viie aasta jooksul \u2014 sealhulgas t\u00f5husa dedupeerimise ja kompressiooni ning madala energiatarbimise ja soojus\u00fclekande t\u00f5ttu. Saksa anal\u00fc\u00fctikafirma DCIG soovitab samuti neid kasutada, kuna need on TCO osas praegu saadaval olevatest k\u00f5ige optimaalsemad.<\/i><\/p><\/blockquote>\n

Tahketehnoloogiliste salvestite kasutamine v\u00f5imaldab s\u00e4\u00e4sta kasulikku ruumi, v\u00e4hendab riketest tingitud probleeme, l\u00fchendab hooldusaega ning alandab energiatarbimist ja soojustootmist. T\u00f5epoolest, AFA on majanduslikult v\u00e4hemalt v\u00f5rreldav traditsiooniliste ketaste s\u00fcsteemidega ning sageli \u00fcletab neid.<\/p>\n

\"Huawei
\n<\/p>\n

Royal Flush Huawei'lt<\/h2>\n

\nMeie All-Flash salvestite seas on juhtiv koht hi-end s\u00fcsteem OceanStor Dorado 18000 V6. Ja mitte ainult meie seas: terve t\u00f6\u00f6stuse tasemel hoiab see kiiruserekordi \u2014 kuni 20 miljonit IPOS maksimaalses konfiguratsioonis. Lisaks on see \u00e4\u00e4rmiselt usaldusv\u00e4\u00e4rne: isegi kui kaks kontrollerit t\u00f5rkuvad korraga, v\u00f5i kuni seitse kontrollerit j\u00e4rjestikku, v\u00f5i terve mootor \u2014 andmed j\u00e4\u00e4vad alles. \u201eKahenebakak\u00fcmne tuhande\u201c eeliseid toob endaga kaasa ka sisseehitatud tehisintellekt, sealhulgas paindlikkus sisemiste protsesside juhtimisel. Vaatame, kuidas see k\u00f5ik saavutatakse.<\/p>\n

\"Huawei
\n
\nSuurt osa Huawei toodetest on sellised, et ettev\u00f5te on ainus turul, kes toodab andmesalvestuss\u00fcsteeme t\u00e4ielikult ise. Meil on oma skeemitehnika, oma mikrokood ja oma teenindus.<\/p>\n

OceanStor Dorado s\u00fcsteemides olev kontroller p\u00f5hineb Huawei enda arendatud ja toodetud protsessoril - Kunpeng 920. Sellel on kasutusel Intelligent Baseboard Management Controller (iBMC) haldusmoodul, mis on samuti meie toodang. Tehisintellekti kiibid, nagu n\u00e4iteks Ascend 310, optimeerivad t\u00f5rgete ennustamist ja pakuvad seadistuste soovitusi, on samuti Huawei toodang, sama kehtib ka sisend-v\u00e4ljundplaatide kohta - Smart I\/O moodul. L\u00f5puks on ka tahkete k\u00f5vaketta kontrollereid kujundanud ja valmistanud meie meeskond. K\u00f5ik see andis aluse integreeritud tasakaalustatud ja k\u00f5rge j\u00f5udlusega lahenduse loomiseks.<\/p>\n

\"Huawei
\n<\/p>\n

Viimase aasta jooksul oleme teinud projekti, et rakendada seda, meie k\u00f5ige arenenumat salvestuss\u00fcsteemi, \u00fches suurimas Venemaa Pangas. Tulemuseks on \u00fcle 40 OceanStor Dorado 18000 V6 seadme metroo-klusteris, mis n\u00e4itab stabiilset j\u00f5udlust: iga s\u00fcsteem suudab genereerida \u00fcle miljoni IOPS-i, arvestades viivitusi vahemaa t\u00f5ttu.<\/p><\/blockquote>\n

\"Huawei
\n<\/p>\n

L\u00e4biv NVMe<\/h2>\n

\nHuawei uusimad andmesalvestuss\u00fcsteemid toetavad end-to-end NVMe, millele me \u00f5igustatult t\u00e4helepanu p\u00f6\u00f6rame. Traditsiooniliselt kasutatavad salvestusprotokollid on v\u00e4lja t\u00f6\u00f6tatud ammu ajaloos: nende aluseks on SCSI k\u00e4sud (tervitus, 1980ndad!), mis toovad endaga kaasa hulga funktsioone tagasip\u00f6\u00f6ramise \u00fchilduvuse tagamiseks. \u00dcksk\u00f5ik, millist juurdep\u00e4\u00e4su viisit valida, on protseduuriline overhead tohutu. Tulemuseks on, et salvestuss\u00fcsteemide, mis kasutavad SCSI-p\u00f5hiseid protokolle, sisendi ja v\u00e4ljundi viivitus ei saa olla madalam kui 0,4\u20130,5 ms. NVMe - Non-Volatile Memory Express - on protokoll, mis on loodud t\u00f6\u00f6tamiseks flash-m\u00e4lu jaoks ja ei kannata tagasiulatuva \u00fchilduvuse koormust, v\u00e4hendades latentsust 0,1 ms-ni, mitte ainult salvestuss\u00fcsteemides, vaid kogu stack'is, alates hostist kuni salvestusseadmeteni. Pole \u00fcllatav, et NVMe on andmesalvestuste arengusuundade keskmes l\u00e4hitulevikus. Otsustasime NVMe kasuks ja liigume j\u00e4rk-j\u00e4rgult eemale SCSI-st. K\u00f5ik t\u00e4nap\u00e4eval toodetavad Huawei andmesalvestuss\u00fcsteemid, sealhulgas Dorado seeria, toetavad NVMe-d (kuid end-to-end rakendatakse ainult seeria Dorado V6 tippmudelitel).<\/p>\n

\"Huawei
\n<\/p>\n

FlashLink: peot\u00e4is tehnoloogiaid<\/h2>\n

\nOceanStor Dorado t\u00e4ieliku tootevaliku jaoks on p\u00f5hit\u00f5de tehnoloogia FlashLink. T\u00f5epoolest, see termin h\u00f5lmab integreeritud tehnoloogiate kogumit, mis tagab k\u00f5rge j\u00f5udluse ja usaldusv\u00e4\u00e4rsuse. Siia kuuluvad deduplication ja kompressioonitehnoloogiad, RAID 2.0+ andmete jaotuss\u00fcsteem, \u00abk\u00fclmade\u00bb ja \u00abkuumade\u00bb andmete eristamine, andmete tervikstroopimise j\u00e4rjestikune kirjutamine (juhuslikud kirjed, kus uued ja muudetud andmed kogutakse suurde virna ja kirjutatakse j\u00e4rjestikku, mis suurendab lugemise ja kirjutamise kiirus).<\/p>\n

Lisaks sisaldab FlashLink kahte olulist koostisosade \u2014 Wear Leveling ja Global Garbage Collection. Nendele tasub eraldi t\u00e4helepanu p\u00f6\u00f6rata.<\/p>\n

Sisuliselt on iga tahkeline k\u00f5vaketas - miniatuurne andmesalvestuss\u00fcsteem, millel on palju m\u00e4lublokke ja kontroller, mis tagab andmete k\u00e4ttesaadavuse. Selle tagab muu hulgas see, et kahjustatud m\u00e4lurakendest saadud andmed liigutatakse tervele \u00fclej\u00e4\u00e4nud alale. Nii tagatakse, et neid saab lugeda. Selliste edastuste jaoks on olemas erinevaid algoritme. \u00dcldiselt p\u00fc\u00fcab kontroller tasakaalustada k\u00f5igi m\u00e4lublokkide kulumist. Sellel l\u00e4henemisel on siiski puudus. Kui SSD sees andmeid liigutatakse, v\u00e4henevad sisend- ja v\u00e4ljundoperatsioonide arv drastiliselt. Praegu on see v\u00e4ltimatu kurjus.<\/p>\n

Seet\u00f5ttu, kui s\u00fcsteemis on palju tahkeketasid, ilmub selle j\u00f5udluse graafikule \"saag\" teravate t\u00f5usudega ja langustega. Probleem on selles, et m\u00f5ni \u00fcksik seade r\u00fchmas v\u00f5ib andmete migreerimise algatada igal hetkel, samas kui \u00fcldine j\u00f5udlus m\u00f5\u00f5detakse korraga k\u00f5igilt SSD-delt eemaldatud andmetest. Kuid Huawei insenerid leidsid, kuidas v\u00e4ltida \"sae\" tekkimist.<\/p>\n

Nii andmed kui ka salvestuskontroller ning mikrokood Huawei'lt on \"oma\", need protsessid OceanStor Dorado 18000 V6 k\u00e4ivituvad tsentraliseeritult, s\u00fcnkroonselt k\u00f5igis p\u00f6\u00f6rdlustes. Seejuures k\u00e4ivitab seda salvestuss\u00fcsteemi kontroller ning just siis, kui ei ole suurt koormust sisendi-ja v\u00e4ljundi osas.<\/p>\n

Tehisintellekti kiip osaleb samuti \u00f5ige hetke valimises andmete edastamiseks: varasemate kuude statistika p\u00f5hjal on tal \u00e4\u00e4rmiselt suur t\u00f5en\u00e4osus prognoosida, kas j\u00e4rgmise paari p\u00e4eva jooksul on oodata aktiivset sisendi-ja v\u00e4ljundi toimingut, ja kui vastus on eitav ning s\u00fcsteem ei ole hetkel \u00fclekoormatud, siis annab kontroller k\u00e4su k\u00f5igile salvestusseadmetele: kellel on vaja kulumiste tasakaalustamist, teha see korraga ja s\u00fcnkroonselt.<\/p><\/blockquote>\n

Lisaks on s\u00fcsteemi kontrolleril \u00fclevaade sellest, mis toimub iga salvestusseadmestiku rakus, erinevalt konkurentide salvestuss\u00fcsteemidest: need on sunnitud ostma tahkete salvestusseadmete tootjatelt, mist\u00f5ttu rakutasandi detaili j\u00e4lgimine nende salvestuss\u00fcsteemide kontrolleritele ei ole kergesti k\u00e4ttesaadav.<\/p>\n

OceanStor Dorado 18000 V6-l on v\u00e4ga l\u00fchike j\u00f5udluse kadumise periood Wear Leveling operatsioonide k\u00e4igus, mis toimub peamiselt siis, kui see ei sega muid protsesse. See tagab k\u00f5rge ja stabiilse j\u00f5udluse pidevalt.<\/p>\n

\"Huawei
\n<\/p>\n

Millele tugineb OceanStor Dorado 18000 V6 usaldusv\u00e4\u00e4rsus<\/h2>\n

\nKaasaegsetes andmesalvestuss\u00fcsteemides eristatakse nelja usaldusv\u00e4\u00e4rsuse taset:<\/p>\n