{"id":97824,"date":"2020-10-22T14:42:26","date_gmt":"2020-10-22T12:42:26","guid":{"rendered":"https:\/\/prohoster.info\/blog\/administrirovanie\/huawei-oceanstor-dorado-18000-v6-v-chyom-eyo-haj-endovost"},"modified":"2020-11-18T00:58:50","modified_gmt":"2020-11-17T22:58:50","slug":"huawei-oceanstor-dorado-18000-v6-v-chyom-eyo-haj-endovost","status":"publish","type":"post","link":"https:\/\/prohoster.info\/et\/blog\/administrirovanie\/huawei-oceanstor-dorado-18000-v6-v-chyom-eyo-haj-endovost","title":{"rendered":"Huawei OceanStor Dorado 18000 V6: mis on selle tipptaseme saladus","gt_translate_keys":[{"key":"rendered","format":"text"}]},"content":{"rendered":"

\u00dcksikasjalikult p\u00f5hjendame, miks OceanStor Dorado 18000 V6 on t\u00f5eliselt tipptasemel andmete salvestuss\u00fcsteem, millel on tugev alusp\u00f5hi j\u00e4rgnevateks aastateks. Samuti hajutame levinud mured All-Flash-salvestuslahenduste \u00fcmber ja n\u00e4itame, kuidas Huawei neist maksimumi v\u00e4lja pigistab: end-to-end NVMe, t\u00e4iendav vahem\u00e4lu SCM-l ja terve hulk muid lahendusi.
\n\"Huawei
\n<\/a><\/noindex>
\n\"Huawei
\n<\/p>\n

Uus andmelanscape \u2014 uus andmete salvestamine<\/h2>\n

\nAndmete t\u00f6\u00f6tlemise intensiivsus kasvab k\u00f5igis valdkondades. Pangandussektor on sellest k\u00f5ige ilmsem n\u00e4ide. Viimase paari aasta jooksul on pangatehingute arv suurenenud rohkem kui k\u00fcmme korda. Kuidas n\u00e4itab BCG uuring<\/a><\/noindex>, vaid Venemaal on 2010. aastast 2018. aastani tehtud kaardiga maksete arv kasvanud rohkem kui kolmk\u00fcmmend korda \u2014 5,8-lt 172-ni inimese kohta aastas. Peamine p\u00f5hjus on v\u00e4iksemate maksete triumf: enamik meist on harjunud veebipangandusega, ja pank on n\u00fc\u00fcd meie k\u00e4eulatuses \u2014 telefonis.<\/p>\n

Krediidiasutuse IT-infrastruktuur peab olema valmis selliseks v\u00e4ljakutseks. See on t\u00f5eliselt v\u00e4ljakutsuv \u00fclesanne. Lisaks on olukord muutunud: kui varem pidi pank tagama andmete k\u00e4ttesaadavuse ainult oma t\u00f6\u00f6aegadel, siis n\u00fc\u00fcd \u2014 24\/7. Veel hiljuti peeti 5 ms vastuv\u00f5etavaks viivituse normiks, ja kuidas n\u00fc\u00fcd? Praegu peetakse isegi 1 ms liialduseks. Kaasaegse andmete salvestuss\u00fcsteemi sihttase on 0,5 ms.<\/p>\n

Sama kehtib usaldusv\u00e4\u00e4rsuse kohta: 2010. aastatel tekkis empiiriline arusaam, et piisab, kui j\u00f5uda tasemeni \u00abviis kuusk\u00bb \u2014 99,999%. T\u00f5si, see arusaam on ajale jalgu j\u00e4\u00e4nud. 2020. aastal on ettev\u00f5tte jaoks t\u00e4iesti normaalne n\u00f5uda 99,9999% salvestusseadmest ja 99,99999% arhitektuuri lahendusest \u00fcldiselt. Ja see pole sugugi kapriis, vaid h\u00e4davajalik vajadus: kas hooldusaegade aknad ei eksisteeri v\u00f5i on need minimeeritud.<\/p>\n

\"Huawei
\n
\nKasutajamugavuse huvides on mugav projekteerida neid n\u00e4itajaid rahanduse tasandile. Lihtsaim on tutvustada seda finantsorganisatsioonide n\u00e4itel. \u00dclaltoodud diagrammil on n\u00e4idatud, kui palju teenib iga k\u00fcmne suurima panganduse maailma panga nimi tunnis. Ainu\u00fcksi Hiina T\u00f6\u00f6stus- ja Kaubanduspangale t\u00f5ukab see mitte midagi muud kui 5 miljonit dollarit. Just nii palju maksab Hiina m\u00e4\u00e4ratlemata krediidiasutuse IT-infrastruktuuri \u00fche tunni seiskumine (kuid arvestus sisaldab ainult saamata j\u00e4\u00e4nud kasumit!). Selle nurga alt on selgelt n\u00e4ha, et seisaku v\u00e4hendamine ja usaldusv\u00e4\u00e4rsuse t\u00f5stmine ei ole mitte ainult protsentide \u00fcksusi, vaid ka isegi protsentide osas t\u00e4ielikult ratsionaalne. Mitte ainult konkurentsiv\u00f5ime t\u00f5stmise kaalutlustest, vaid ka lihtsalt turupositsioonide hoidmise nimel.<\/p>\n

V\u00f5rdv\u00e4\u00e4rseid muutusi on toimunud ka teistes t\u00f6\u00f6stusharudes. N\u00e4iteks \u00f5hutranspordis: enne pandeemiat kasvas \u00f5hutransport aasta-aastalt, ja paljud hakkasid seda kasutama peaaegu taksina. Mis puudutab tarbijapatrone, siis on \u00fchiskonnas juurdunud harjumus teenuste totaalsete k\u00e4ttesaadavuste j\u00e4rele: lennujaama saabumisel vajame Wi-Fi-\u00fchendust, juurdep\u00e4\u00e4su makses\u00fcsteemidele, kaardile jne. Seet\u00f5ttu on infrastruktuuri ja teenuste koormus avalikes ruumides kasvanud mitmekordselt. Ja need l\u00e4henemisviisid, millega me arvasime, et need on aktsepteeritavad isegi aasta tagasi, vananevad kiiresti.<\/p>\n

\"Huawei
\n<\/p>\n

Kas ei ole liiga vara minna All-Flashile?<\/h2>\n

\n\u00dclaltoodud \u00fclesannete lahendamiseks, mis on seotud j\u00f5udlusega, sobivad AFA - all-flash arrays, ehk t\u00e4ielikult flashil p\u00f5hinevad andmemassiivid, nagu ei midagi muud. Ainult seni on olnud kahtlusi selle \u00fcle, kas need on usaldusv\u00e4\u00e4rsuses v\u00f5rreldavad HDD-p\u00f5histe ja h\u00fcbriidsetega. L\u00f5ppude l\u00f5puks on tahkete m\u00e4lude puhul selline n\u00e4itaja nagu keskmine t\u00f6\u00f6aeg rikki minemiseni, ehk MTBF (mean time between failures). Toodete degradatsioon sisendi ja v\u00e4ljundi toimingute t\u00f5ttu, kahjuks, on reaalsus.<\/p>\n

Seega All-Flash'i tulevikku varjutas k\u00fcsimus, kuidas ennetada andmete kadu juhul, kui SSD l\u00f5petab t\u00f6\u00f6. Varundamine on tuttav variant, kuid taastusaja pikkus oleks kaasaegsete n\u00f5udmiste j\u00e4rgi vastuv\u00f5etamatu. Teine v\u00f5imalus on luua teise tasandi salvestamine ketastele, kuid sellise skeemi korral kaotatakse osa \"puhtalt flash\" s\u00fcsteemi eelistest.<\/p>\n

Kuid numbrid r\u00e4\u00e4givad muud: digitaalmajanduse hiiglite, sealhulgas Google'i statistika viimastel aastatel n\u00e4itab, et flash on mitmekordselt usaldusv\u00e4\u00e4rsem kui k\u00f5vakettad. Ja seda nii l\u00fchikeses kui ka pikemas perspektiivis: keskmiselt kulub flash-m\u00e4luseadmete rikkimiseks neli kuni kuus aastat. Andmete s\u00e4ilitamise usaldusv\u00e4\u00e4rsuses ei j\u00e4\u00e4 nad ketastele sugugi alla, vaid isegi \u00fcletavad neid.<\/p>\n

\"Huawei
\n
\nVeel \u00fcks traditsiooniline argument k\u00f5vakettade kasuks on nende hinnaodavus. T\u00f5siseks on, et k\u00f5vaketta terabaidi salvestamise hind on endiselt suhteliselt v\u00e4ike. Ja kui arvestada vaid seadme ostukulusid, on terabaidi hoidmine k\u00f5vakettal odavam kui tahkisketasel. K\u00fcll aga on rahanduse planeerimise seisukohalt oluline, kui palju maksis konkreetne seade, aga ka see, milline on selle kokkuv\u00f5ttev omamiskulu pikas perspektiivis \u2014 kolm kuni seitse aastat.<\/p>\n

Sellest vaatenurgast on k\u00f5ik hoopis teistmoodi. I isegi kui j\u00e4tta k\u00f5rvale deduplication ja kompressioon, mida tavaliselt rakendatakse flash-m\u00e4lu s\u00fcsteemides ja mis muudab nende kasutamise majanduslikult kasulikumaks, j\u00e4\u00e4vad alles sellised omadused nagu seadme ruumi h\u00f5ivamine rack'is, soojuse hajumine ja energiatarbimine. Ja nendes aspektides on flash eelistes oma eelk\u00e4ijatest. Tulemuseks on see, et flash'i andmesalvestuss\u00fcsteemide TCO, arvestades k\u00f5iki parameetreid, on sageli peaaegu kaks korda madalam kui ketaste s\u00fcsteemidel v\u00f5i h\u00fcbriididel.<\/p>\n

ESG agentuuri aruannete kohaselt on All-Flash andmesalvestuss\u00fcsteemide Dorado V6 abil v\u00f5imalik saavutada omaniku kogukulu v\u00e4henemine kuni 78% viie aasta jooksul \u2014 sealhulgas efektiivse deduplikeerimise ja tihendamise, samuti madala energiakasutuse ja soojusproduktiivuse t\u00f5ttu. Saksa anal\u00fc\u00fcsifirma DCIG soovitab neid kasutada kui TCO m\u00f5ttes parimaid praegu saadaval olevaid lahendusi.<\/i><\/p><\/blockquote>\n

Tahkete salvestusseadmete kasutamine v\u00f5imaldab kokku hoida v\u00e4\u00e4rtuslikku ruumi, v\u00e4hendab t\u00f5rgete arvu, l\u00fchendab hoolduse aega ning alandab salvestuss\u00fcsteemide energiatarvet ja soojusproduktiivsust. Selgub, et AFA on majanduslikult v\u00e4hemalt v\u00f5rdne traditsiooniliste spindli-rahadesse salvestuss\u00fcsteemidega ja sageli isegi parem.<\/p>\n

\"Huawei
\n<\/p>\n

Huawei Royal Flash<\/h2>\n

\nMeie All-Flash andmesalvestustes kuulub juhtiv koht tipptasemel s\u00fcsteemile OceanStor Dorado 18000 V6. Ja mitte ainult meie omades: kogu t\u00f6\u00f6stuse tasemel hoiab see kiiruserekordit \u2014 kuni 20 miljonit IPOS maksimaalses konfiguratsioonis. Lisaks on see \u00e4\u00e4rmiselt usaldusv\u00e4\u00e4rne: isegi kui kaks kontrollerit rikki l\u00e4hevad, v\u00f5i seitse kontrollerit j\u00e4rjestikku, v\u00f5i isegi terve mootori \u2014 andmed j\u00e4\u00e4vad alles. Suuri eeliseid annab \u201ekaheksateist tuhandes\u201c sisse ehitatud tehisintellekt, sealhulgas paindlikkus siseprotsesside juhtimisel. Vaadakem, kuidas seda k\u00f5ike saavutatakse.<\/p>\n

\"Huawei
\n
\nHuawei\u2019l on m\u00e4rkimisv\u00e4\u00e4rne \u00fcleolek, kuna ta on ainus tootja turul, kes tohib andmesalvestuss\u00fcsteeme t\u00e4ielikult ise valmistada. Meil on oma skeemitehnika, oma mikrokood ja oma teenindus.<\/p>\n

OceanStor Dorado s\u00fcsteemides on kontroller ehitatud Huawei enda v\u00e4ljat\u00f6\u00f6tatud ja valmistatud protsessorile \u2014 Kunpeng 920. Sellel on Intelligent Baseboard Management Controller (iBMC), samuti meie oma. Tehisintellekti kiibid, nimelt Ascend 310, mis optimeerivad t\u00f5rkeennustusi ja annavad seadistuste soovitusi, on samuti Huawei omad, samuti sisend-v\u00e4ljundplaatide modulid \u2014 Smart I\/O. L\u00f5puks on ka tahkete salvestusseadmete kontrollerid kavandatud ja valmistatud meie poolt. K\u00f5ik see on andnud aluse tasakaalustatud ja k\u00f5rge j\u00f5udlusega lahenduse loomiseks.<\/p>\n

\"Huawei
\n<\/p>\n

Eelmisel aastal viisasime projekti, et rakendada meie parimat, tipptasemel andmesalvestuss\u00fcsteemi \u00fches suuremas Venemaa pangas. Tulemuseks on rohkem kui 40 OceanStor Dorado 18000 V6 \u00fcksust metroo-klusteris, mis n\u00e4itab stabiilset j\u00f5udlust: igast s\u00fcsteemist \u00f5nnestub v\u00e4lja v\u00f5tta \u00fcle miljoni IOPS, arvestades viivitusi, mis tulenevad kaugusest.<\/p><\/blockquote>\n

\"Huawei
\n<\/p>\n

L\u00e4biv NVMe<\/h2>\n

\nHuawei uusimad andmesalvestuss\u00fcsteemid toetavad l\u00f5pust l\u00f5puni NVMe, millele me \u00f5igustatult r\u00f5hku paneme. Traditsiooniliselt kasutatud salvestusprotokollid on loodud ammusest IT ajaloost: nende aluseks on SCSI k\u00e4sklused (tere, 1980-ndad!), mis t\u00f5mbavad endaga kaasa hulga funktsioone, et tagada tagurpidi \u00fchilduvus. \u00dcksk\u00f5ik millist ligip\u00e4\u00e4suteed v\u00f5tta, on protokolli \u00fclehead tohutu. Selle tulemusena on salvestuss\u00fcsteemide, mis kasutavad SCSI-protokollidele tuginevaid lahendusi, sisendi-v\u00e4ljundi latentsus madalam kui 0,4-0,5 ms. Omakorda on NVMe \u2014 Non-Volatile Memory Express \u2014 protokoll, mis on loodud t\u00f6\u00f6tama m\u00e4lukaartidega ja vabanenud tugifunktsioonidest tagurpidi \u00fchilduvuse nimel, v\u00e4hendades latentsust 0,1 ms-ni, mitte ainult salvestuss\u00fcsteemis, vaid kogu virnas, alates hostist kuni salvestusseadmeteni. Pole \u00fcllatav, et NVMe on andmesalvestuse arengusuundade keskmes l\u00e4hitulevikus. Oleme samuti panustanud NVMe-ed ja liigume tasapisi kaugemale SCSI-st. K\u00f5ik t\u00e4nap\u00e4eval toodetud Huawei andmesalvestuss\u00fcsteemid, sealhulgas Dorado seeria, toetavad NVMe-d (t\u00f5si, kui l\u00f5pust l\u00f5puni on see rakendatud ainult edasij\u00f5udnud Dorado V6 seeria mudelites).<\/p>\n

\"Huawei
\n<\/p>\n

FlashLink: peot\u00e4is tehnoloogiaid<\/h2>\n

\nKogu OceanStor Dorado seeria nurgakivi tehnoloogia on FlashLink. T\u00e4psemalt on see m\u00f5isted, mis \u00fchendab integreeritud tehnoloogiate koosseisu, mis tagavad k\u00f5rge j\u00f5udluse ja usaldusv\u00e4\u00e4rsuse. Siia kuuluvad dedupeerimise ja kokkusurumise tehnoloogiad, RAID 2.0+ andmete jaotuss\u00fcsteemi toimimine, \u201ek\u00fclmade\u201d ja \u201ekuumade\u201d andmete eristamine, andmete pidev riba j\u00e4rgi kirjutamine (juhuslikud kirjed, koos uute ja muudetud andmetega, koondatakse suureks virnaks ja kirjutatakse j\u00e4rjestikku, mis suurendab lugemise-kirjutamise kiirus).<\/p>\n

Lisaks sisaldab FlashLink kahte olulist elementi \u2014 Wear Leveling ja Global Garbage Collection. Need v\u00e4\u00e4rivad eraldi k\u00e4sitlemist.<\/p>\n

Tegelikult on iga tahkkettaga salvesti miniatuurne andmesalvestus\u00fcsteem, kus on palju plokke ja kontroller, mis tagab andmete k\u00e4ttesaadavuse. Seda tagatakse sealhulgas sellega, et \"rikkis\" m\u00e4lurakud kantakse \u00fcle \"rikkumatutele\". Sellega tagatakse, et neid saab lugeda. On erinevaid algoritme selliseks \u00fclekandeks. \u00dcldjuhul \u00fcritab kontroller tasakaalustada k\u00f5ikide salvesti rakude kulumist. Sellel l\u00e4henemisel on oma puudus. Kui SSD sees toimub andmete liikumine, v\u00e4henevad tema sisendi- ja v\u00e4ljundioperatsioonide arv j\u00e4rsult. Praegu on see v\u00e4ltimatu kurbus.<\/p>\n

Seega, kui s\u00fcsteemis on palju tahkkettaga salvestusi, ilmneb selle j\u00f5udluse graafikule \"saag\", teravate t\u00f5usude ja langustega. Probleem on selles, et m\u00f5ni konkreetne salvesti selliste hulka v\u00f5ib igal ajal andmete migratsiooni alustama, kuid kogu j\u00f5udlus m\u00f5\u00f5detakse k\u00f5igist SSD-dest samal ajal. Kuid Huawei insenerid on leidnud viisi \"saag\" tekkimise v\u00e4ltimiseks.<\/p>\n

\u00d5nneks on salvestite kontrollerid, salvestuse kontroller ja Huawei mikrokood \"kodu\", need protsessid OceanStor Dorado 18000 V6-s k\u00e4ivitatakse keskse, samasuguse ajaga k\u00f5ikides massiivi salvestites. Ja t\u00e4pselt siis, kui salvestuss\u00fcsteemi kontroller annab k\u00e4su ning kui Ei ole suurt sisendi- ja v\u00e4ljundi koormust.<\/p>\n

Tehisintellekti kiip osaleb samuti \u00f5ige hetke valimise protsessis andmete edastamiseks: l\u00e4htuvalt eelmise kuue kuu statistika p\u00f5hjal suudab ta v\u00e4ga suure t\u00f5en\u00e4osusega prognoosida, kas l\u00e4hitulevikus toimub aktiivset sisendi- ja v\u00e4ljundoperatsiooni, ja kui vastus on negatiivne, olles s\u00fcsteemi koormus praegu madal, k\u00e4sib kontroller k\u00f5igile salvestitele: kellel on vajalik Wear Leveling, teha seda korraga ja s\u00fcnkroonselt.<\/p><\/blockquote>\n

Lisaks sellele n\u00e4eb s\u00fcsteemi kontroller, mis iga m\u00e4lurakus toimub, erinevalt konkurentide andmemagasinest: need on sunnitud ostma tahkkeedisalvestisi kolmandatelt tootjatelt, mist\u00f5ttu selliste salvestite kontrolleritele pole rakutasandiline detailide n\u00e4gemine v\u00f5imalik.<\/p>\n

Seet\u00f5ttu on OceanStor Dorado 18000 V6-l v\u00e4ga l\u00fchike j\u00f5udluse kadumise periood Wear Leveling operatsioonide k\u00e4igus, mis toimub peamiselt siis, kui see ei h\u00e4iri muid protsesse. See tagab pideva k\u00f5rge s\u00f5ltumatuse j\u00f5udluse.<\/p>\n

\"Huawei
\n<\/p>\n

Mist\u00e4 koosneb OceanStor Dorado 18000 V6 usaldusv\u00e4\u00e4rsus<\/h2>\n

\nKaasaegsetes andmesalvestuss\u00fcsteemides eristatakse nelja usaldusv\u00e4\u00e4rsuse taset:<\/p>\n