Shpjegojmë hollësisht se çfarë e bën OceanStor Dorado 18000 V6 një sistem ruajtjeje të të dhënave me të vërtetë të nivelit të lartë, me një përgatitje të mirë për vitet e ardhshme. Po ashtu, shfuqizojmë shqetësimet e zakonshme në lidhje me ruajtjet All-Flash dhe tregojmë se si Huawei shfrytëzon maksimumin nga to: end-to-end NVMe, caching të shtuar në SCM dhe një mori zgjidhjesh të tjera.
Pejzaazhi i ri i tĂ« dhĂ«nave â ruajtje e re e tĂ« dhĂ«nave
Intensiteti i punĂ«s me tĂ« dhĂ«nat po rritet nĂ« tĂ« gjitha sektorĂ«t. Sektori bankar Ă«shtĂ« iluzionet mĂ« tĂ« dukshme pĂ«r kĂ«tĂ«. GjatĂ« viteve tĂ« fundit, numri i transaksioneve bankare Ă«shtĂ« rritur mĂ« shumĂ« se dhjetĂ«fish. Siç tregon , vetĂ«m nĂ« Rusi, nĂ« periudhĂ«n nga 2010 deri nĂ« 2018, numri i transaksioneve pa para me karta plastike tregoi njĂ« rritje mĂ« shumĂ« se tridhjetĂ«fish â nga 5,8 nĂ« 172 pĂ«r njĂ« person nĂ« vit. Kjo ndodhi kryesisht pĂ«r shkak tĂ« triumfit tĂ« mikro-pagesave: shumica nga ne jemi mĂ«suar me bankat online, dhe banka tani Ă«shtĂ« nĂ« dorĂ«n tonĂ« â nĂ« telefon.
Infrastruktura IT e njĂ« institucioni financiar duhet tĂ« jetĂ« e pĂ«rgatitur pĂ«r njĂ« sfidĂ« tĂ« tillĂ«. Dhe kjo Ă«shtĂ« vĂ«rtet njĂ« sfidĂ«. PĂ«rveç tĂ« gjitha, nĂ«se mĂ« parĂ« banka duhej tĂ« garantonte aksesin nĂ« tĂ« dhĂ«na vetĂ«m gjatĂ« orĂ«ve tĂ« saj tĂ« punĂ«s, tani â 24/7. Disa kohĂ« mĂ« parĂ«, 5 ms konsideroheshin njĂ« normĂ« e pranueshme e vonesĂ«s, dhe çfarĂ« ndodhi? Tani madje 1 ms Ă«shtĂ« shumĂ«. PĂ«r njĂ« sistem modern tĂ« ruajtjes sĂ« tĂ« dhĂ«nave, vlera objektive Ă«shtĂ« 0,5 ms.
E njĂ«jta gjĂ« vlen edhe pĂ«r besueshmĂ«rinĂ«: nĂ« vitet 2010, u formua njĂ« kuptim empirik se ishte e mjaftueshme tĂ« arrinim nivelin e saj nĂ« "pesĂ« dhjetĂ«" â 99,999%. MegjithatĂ«, kjo kuptim ka mbetur prapa. NĂ« vitin 2020, pĂ«r biznesin Ă«shtĂ« krejtĂ«sisht normale tĂ« kĂ«rkohet 99,9999% pĂ«r ruajtjen dhe 99,99999% pĂ«r zgjidhjen arkitekturore nĂ« pĂ«rgjithĂ«si. Dhe kjo nuk Ă«shtĂ« aspak njĂ« kapric; Ă«shtĂ« njĂ« nevojĂ« themelore: ose nuk ka dritare pĂ«r mirĂ«mbajtjen e infrastrukturĂ«s, ose ajo Ă«shtĂ« shumĂ« e vogĂ«l.
Për ilustërim, është e lehtë të projektehen këto tregues në një plan financiar. Më lehtë është me shembujt e organizatave financiare. Në diagramin më sipër, është treguar sa para fiton çdo njëri nga 10 bankat më të mëdha në botë në një orë. Vetëm Banka Industrial dhe Komerciale e Kinës e fiton plot $5 milion. Kjo është gjithashtu shuma që do të përballonte ndalesa një-orëshe e infrastrukturës IT të institucioneve më të mëdha financiare në Kinë (dhe kjo vlen vetëm për fitimin e humbur!). Nga ky këndvështrim, është e qartë se reduktimi i kohës së ndaljes dhe rritja e besueshmërisë është jo vetëm racionalisht e arsyetuar, por edhe plotësisht e nevojshme për ruajtjen e pozitat në treg.
Ndryshime të krahasueshme po ndodhin edhe në industri të tjera. Për shembull, në transportin ajror: para pandemisë, fluturimet po rriteshin nga viti në vit dhe shumë njerëz filluan t'i trajtojnë ato pothuajse si taksi. Sa i përket modeleve të konsumit, shoqëria ka krijuar një zakon të aksesit total në shërbime: sapo mbërrijmë në aeroport na nevojitet lidhje Wi-Fi, akses në shërbimet e pagesës, në hartën e zonës etj. Si pasojë, ngarkesa në infrastrukturë dhe shërbime në hapësirat publike është rritur shumëfish. Dhe ato qasje për ndërtimin e infrastrukturës që i konsideronim të pranueshme edhe një vit më parë, po plaken me shpejtësi.
A është herët për t'u kaluar në All-Flash?
PĂ«r tĂ« zgjidhur problemet e pĂ«rmendura mĂ« sipĂ«r, pĂ«r sa i pĂ«rket performancĂ«s AFA â arrays me tĂ«rĂ«si flash, qĂ« do tĂ« thotĂ« se janĂ« ndĂ«rtuar plotĂ«sisht mbi flash â janĂ« mĂ«se tĂ« pĂ«rshtatshme. MegjithatĂ«, deri kohĂ«t e fundit kishte dyshime nĂ«se ishin tĂ« krahasueshme pĂ«r nga qĂ«ndrueshmĂ«ria me ato tĂ« ndĂ«rtuara mbi HDD dhe ato hibride. NĂ« fund tĂ« fundit, kujtesa flash ka njĂ« tregues siç Ă«shtĂ« koha mesatare deri nĂ« dĂ«shtim, apo MTBF (mean time between failures). Degjenerimi i qelizave pĂ«r shkak tĂ« operacioneve tĂ« hyrje-daljeve, fatkeqĂ«sisht, Ă«shtĂ« njĂ« realitet.
Pra, perspektivat e All-Flash janë errësuar nga pyetja se si të parandalohet humbja e të dhënave në rast se SSD-ja nuk funksionon më. Backup-i është një mundësi e zakonshme, por koha e rikuperimit do të ishte tepër e gjatë duke marrë parasysh kërkesat moderne. Një zgjidhje tjetër është të krijoni një nivel të dytë ruajtjeje mbi disqet mekanike, megjithatë, në këtë skemë humben disa nga përfitimet e sistemit 'plotësisht flash'.
Megjithatë, numrat flasin ndryshe: statistikat e gjigantëve të ekonomisë digjitale, përfshirë Google, tregojnë se për vitet e fundit, flash është shumë më i besueshëm se disqet e forta. Kjo është e vërtetë si në periudha të shkurtra, ashtu edhe në ato afatgjata: mesatarisht, deri sa Flash të dështojë kalojnë katër deri në gjashtë vjet. Sa i përket besueshmërisë së ruajtjes së të dhënave, ato nuk i japin aspak pas disqeve magnetike standarde dhe madje i tejkalojnë ato.
Një tjetër argument tradicional në favor të disqeve magnetike është çmimi i tyre tërheqës. Pa dyshim, kostot e ruajtjes së një terabaiti në një disk të fortë janë ende relativisht të ulëta. Dhe nëse shikojmë vetëm shpenzimet për pajisjen, mbajtja e një terabaiti në një disk magnetik është më e lirë se sa në një SSD. Megjithatë, në aspektin e planifikimit financiar, ka rëndësi jo vetëm çmimi i blerjes së pajisjes, por gjithashtu çfarë është kostoja totale e pronësisë së saj në një periudhë të gjatë - nga tri deri në shtatë vjet.
Nga ky këndvështrim, gjithçka është ndryshe. Edhe nëse e lëmë mënjanë deduplikimin dhe kompresimin, që zakonisht aplikohet në masat flash dhe e bën përdorimin e tyre më ekonomike, mbeten karakteristika të tilla si hapësira e zënë në raft, shkarkimi termik dhe konsumimi i energjisë. Në lidhje me këto, flash-i fiton ndaj paraardhësve të tij. Si rezultat, TCO e sistemeve të ruajtjes së të dhënave në flash, duke marrë parasysh të gjitha parametrat, shpesh është gati dy herë më e ulët se ajo e masave me disqe rotative ose hibridëve.
Sipas raporteve tĂ« agjencisĂ« ESG, nĂ« sistemet e ruajtjes tĂ« dhĂ«nash All-Flash Dorado V6 Ă«shtĂ« e mundur tĂ« arrihet njĂ« reduktim i kostove tĂ« pronĂ«sisĂ« deri nĂ« 78% brenda pesĂ« vjetĂ«sh â pĂ«rfshirĂ« falĂ« deduplikimit dhe kompresimit efikas dhe pĂ«r shkak tĂ« konsumit tĂ« ulĂ«t tĂ« energjisĂ« dhe shkarkimit termik. Kompania analitike gjermane DCIG gjithashtu rekomandon pĂ«rdorimin e tyre si optimale nĂ« lidhje me TCO ndĂ«r opsionet qĂ« janĂ« nĂ« dispozicion sot.
Përdorimi i disqeve të ngurta SSD ofron mundësinë për të kursyer hapësirën e dobishme, ul numrin e dështimeve, shkurton kohën e mirëmbajtjes së zgjidhjeve, dhe redukton konsumimin e energjisë dhe nxehjen e sistemit. Në fakt, AFA është ekonomikisht të paktën në nivel të njëjtë me sistemet tradicionale me disqe me rrotullim, dhe shpesh i kalon ato.
Royal Flash nga Huawei
NĂ« mesin e ruajtjeve tona All-Flash, vendi kryesor i takon sistemit hi-end OceanStor Dorado 18000 V6. Jo vetĂ«m qĂ« Ă«shtĂ« e para nĂ« ofertĂ«n tonĂ«, por gjithashtu mban rekordin e shpejtĂ«sisĂ« nĂ« tĂ« gjithĂ« industrinĂ« â deri nĂ« 20 milion IPOS nĂ« konfigurimin maksimal. PĂ«r mĂ« tepĂ«r, Ă«shtĂ« jashtĂ«zakonisht e besueshme: madje, edhe nĂ«se dĂ«shtojnĂ« dy kontrolerĂ« njĂ«kohĂ«sisht, ose deri nĂ« shtatĂ« kontrolerĂ« njĂ« pas tjetĂ«r, ose njĂ« motor i tĂ«rĂ« â tĂ« dhĂ«nat do tĂ« mbijetojnĂ«. Avantazhet e konsiderueshme tĂ« 'tĂ« tetmbĂ«dhjetĂ« mijĂ«' i jep inteligjenca artificiale e integruar, pĂ«rfshirĂ« fleksibilitetin nĂ« menaxhimin e proceseve tĂ« brendshme. Le tĂ« shohim se si arrijmĂ« gjithĂ« kĂ«tĂ«.
Një pjesë e madhe e avantazhit të kompanisë Huawei vjen nga fakti se ajo është një prodhues i vetëm në treg që krijon sisteme ruajtjeje të dhënash plotësisht e vetë. Ne kemi skemën tonë teknologjike, mikrokodin tonë dhe shërbimin tonë të mbështetjes.
Kontrolluesi nĂ« sistemet OceanStor Dorado bazohet nĂ« procesorin e zhvilluar dhe prodhuar nga Huawei â Kunpeng 920. Ai pĂ«rfshin modul menaxhimi Intelligent Baseboard Management Controller (iBMC), gjithashtu tonin. Ăipat e AI, tĂ« quajtur Ascend 310, qĂ« optimizojnĂ« parashikimet pĂ«r dĂ«shtimin dhe ofrojnĂ« rekomandime pĂ«r konfigurimet, janĂ« gjithashtu nga Huawei, si dhe kartat e hyrjes dhe daljes â moduli Smart I/O. SĂ« fundi, kontrolluesit nĂ« njĂ«sitĂ« e ruajtjes SSD janĂ« projektuar dhe prodhuar nga forcat tona. TĂ« gjitha kĂ«to kanĂ« krijuar bazĂ«n pĂ«r njĂ« zgjidhje tĂ« integruar dhe tĂ« balancuar me performancĂ« tĂ« lartĂ«.
Gjatë vitit të kaluar, ne realizuam një projekt për zbatimin e kësaj, më të avancuarës tonë, SAN në një nga bankat e mëdha ruse. Si rezultat, më shumë se 40 njësi OceanStor Dorado 18000 V6 në metro-klaster demonstrojnë performancë stabil: nga çdo sistem arrijmë të nxjerrim më shumë se një milion IOPS, dhe kjo duke marrë parasysh vonesat për shkak të distancës.
NVMe i plotë
Sistemet e reja tĂ« ruajtjes sĂ« tĂ« dhĂ«nave tĂ« Huawei mbĂ«shtesin NVMe nga fundi nĂ« fund, njĂ« theks nĂ« tĂ« cilin ne nuk e kemi rastĂ«sishĂ«m. Protokollat tradicionale tĂ« qasjes nĂ« ruajtje janĂ« zhvilluar nĂ« era tĂ« lashta IT: baza e tyre janĂ« komandat SCSI (pĂ«rshĂ«ndetje, vitet 1980!), qĂ« tĂ«rheqin njĂ« sĂ«rĂ« funksionesh pĂ«r tĂ« siguruar pĂ«rputhshmĂ«rinĂ« prapa. Ădo metodĂ« qasjeje qĂ« tĂ« marrĂ«sh, overhead-i protokollor Ă«shtĂ« kolosal. Si rezultat, ruajtjet qĂ« pĂ«rdorin protokolle tĂ« lidhura me SCSI nuk mund ta kenĂ« vonesĂ«n e hyrjes-daljes nĂ«n 0,4â0,5 ms. Nga ana tjetĂ«r, duke qenĂ« njĂ« protokoll i krijuar pĂ«r tĂ« punuar me memorie flash dhe pa pengesat e pĂ«rputhshmĂ«risĂ« sĂ« njohur, NVMe â Non-Volatile Memory Express â e ul vonesĂ«n nĂ« 0,1 ms, dhe kjo jo vetĂ«m nĂ« SCSI, por nĂ« tĂ« gjithĂ« stackun, nga hosti tek ruajtĂ«sit. Nuk Ă«shtĂ« e çuditshme qĂ« NVMe Ă«shtĂ« nĂ« pĂ«rputhje me trendet e zhvillimit tĂ« ruajtjeve tĂ« tĂ« dhĂ«nave pĂ«r tĂ« ardhmen e afĂ«rt. Ne gjithashtu kemi investuar nĂ« NVMe â dhe gradualisht po largohemi nga SCSI. TĂ« gjitha sistemet e ruajtjes sĂ« tĂ« dhĂ«nave tĂ« prodhuara sot nga Huawei, duke pĂ«rfshirĂ« linjĂ«n Dorado, mbĂ«shtesin NVMe (nĂ« fakt, si fund nĂ« fund realizohet vetĂ«m nĂ« modelet pĂ«rparimtare tĂ« serisĂ« Dorado V6).
FlashLink: një grusht teknologjish
GjithĂ« linjat e OceanStor Dorado mbĂ«shteten nĂ« teknologjinĂ« gjegjĂ«se â FlashLink. Kjo Ă«shtĂ« njĂ« termin qĂ« bashkon njĂ« grup teknologjish tĂ« integruara, tĂ« cilat sigurojnĂ« performancĂ« tĂ« lartĂ« dhe besueshmĂ«ri. KĂ«tu pĂ«rfshihen teknologjitĂ« e deduplikimit dhe kompresimit, funksionimi i sistemit tĂ« shpĂ«rndarjes sĂ« tĂ« dhĂ«nave RAID 2.0+, ndarjen e "tĂ« dhĂ«nave tĂ« ftohta" dhe "tĂ« nxehta", si dhe shkrimin e tĂ« dhĂ«nave nĂ« njĂ« mĂ«nyrĂ« tĂ« vazhdueshme me grumbullim (shkrimet rastĂ«sore, me tĂ« dhĂ«na tĂ« reja dhe tĂ« modifikuara, grumbullohen nĂ« njĂ« stek tĂ« madh dhe shkruhen nĂ« mĂ«nyrĂ« tĂ« vazhdueshme, duke rritur shpejtĂ«sinĂ« e leximit-shkrimit).
PĂ«rveç tĂ« gjitha kĂ«tyre, FlashLink pĂ«rfshin dy komponente tĂ« rĂ«ndĂ«sishme â Wear Leveling dhe Global Garbage Collection. KĂ«to meritojnĂ« njĂ« vĂ«mendje tĂ« veçantĂ«.
Praktikisht çdo memorie e ngurtë është një sistem ruajtjeje i miniaturizuar, me një numër të madh bllokesh dhe një kontrollues që siguron aksesin në të dhëna. Kjo arrihet gjithashtu duke transferuar të dhënat nga qelizat "të dëmtuara" në ato "të padëmtuara". Kështu garantohet mundësia për t'i lexuar ato. Ekzistojnë algoritme të ndryshme për këtë transferim. Në përgjithësi, kontrolluesi përpiqet të balancojë konsumimin e të gjithave qelizave të memories. Ky qasje ka një mungesë. Kur në brendësi të SSD ndodhin lëvizje të të dhënave, numri i operacioneve të hyrjes-daljes që realizohet zvogëlohet ndjeshëm. Aktualisht, kjo është një e keqe e pashmangshme.
Pra, nëse në sistem ka shumë memorie të ngurtë, në grafikun e performancës së tij paraqitet një "sawtooth", me ngritje dhe rënie të shkurtër. Problemi është se ndonjë memorie nga grupi mund të fillojë migruese të të dhënave në çdo moment, ndërsa performanca e përgjithshme merret njëherazi nga të gjitha SSD-të në grup. Por inxhinierët e Huawei kanë gjetur një mënyrë për të shmangur shfaqjen e "sawtooth".
Të mirat dhe kontrolluesit në ruajtësit, si dhe kontrolluesi i magazinës, dhe mikrokodi te Huawei janë "origjinalë"; këto procese në OceanStor Dorado 18000 V6 aktivizohen në mënyrë qendrore, sinkronizuar në të gjitha ruajtësit e grupit. Kjo ndodh me urdhrin e kontrolluesit të SHT, vetëm kur nuk ka ngarkesë të madhe në hyrje-dalje.
Ăipi i inteligjencĂ«s artificiale gjithashtu merr pjesĂ« nĂ« zgjedhjen e momentit tĂ« duhur pĂ«r transferimin e tĂ« dhĂ«nave: duke u bazuar nĂ« statistikat e kĂ«rkesave nga muajt e mĂ«parshĂ«m, ai ka njĂ« probabilitet shumĂ« tĂ« lartĂ« pĂ«r tĂ« parashikuar nĂ«se do tĂ« ketĂ« hyrje-dalje aktive nĂ« periudhĂ«n e afĂ«rt; dhe nĂ«se pĂ«rgjigja Ă«shtĂ« negative, e ngarkesa nĂ« sistem aktualisht Ă«shtĂ« e vogĂ«l, atĂ«herĂ« kontrolluesi jep urdhĂ«r tĂ« gjithĂ« ruajtĂ«sve: pĂ«r ata qĂ« nevojitet Wear Leveling, ta kryejnĂ« atĂ« njĂ« herĂ« dhe nĂ« mĂ«nyrĂ« sinkronizuar.
Për më tepër, kontrolluesi i sistemit sheh se çfarë ndodh në secilën qelizë të ruajtësit, ndryshe nga sistemet e ruajtjes së prodhuesve konkurrentë: ata janë të detyruar të blejnë ruajtës të çipave të qëndrueshëm nga furnizues të tretë, duke bërë që detajimi në nivel qelize të mos jetë i aksesueshëm për kontrolluesit e atyre ruajtësve.
Si pasojë, OceanStor Dorado 18000 V6 ka një periudhë shumë të shkurtër humbjeje të performancës gjatë operacionit të Wear Leveling, i cili kryhet kryesisht kur nuk ndikon në proceset e tjera. Kjo ofron një performancë të lartë dhe të qëndrueshme në mënyrë konsistente.
ĂfarĂ« ndikon nĂ« besueshmĂ«rinĂ« e OceanStor Dorado 18000 V6
NĂ« sistemet moderne tĂ« ruajtjes sĂ« tĂ« dhĂ«nave, ĐČŃЎДлŃŃŃŃŃ katĂ«r nivele besueshmĂ«rie:
- në nivelin e harduerit;
- në nivelin e arkitekturës;
- arkitektura së bashku me komponentin softuerik;
- mbledhëse, e lidhur me zgjidhjen si një tërë.
Duke iu rikujtuar, të gjitha komponentët e sistemit të ruajtjes ne i projektomë dhe prodhojmë vetë, ne sigurojmë besueshmëri në çdo prej katër niveleve, me mundësinë për të ndjekur me saktësi se çfarë po ndodh në çdo moment.
Besnikëria e disqeve garantizohet kryesisht nga Wear Leveling dhe Global Garbage Collection të përshkruara më parë. Kur SSD duket si një kuti e zezë për sistemin, nuk e di se si saktësisht po konsumohen qelizat brenda tij. Për OceanStor Dorado 18000 V6, disqet janë të dukshme, duke mundësuar një balancim të barabartë në të gjitha disqet e arrays. Kështu, është e mundur të zgjatet ndjeshëm jeta e SSD-së dhe të sigurohet një nivel i lartë i besueshmërisë së funksionimit të tyre.
Gjithashtu, besueshmërinë e disqit e ndikojnë edhe qelizat e tepërta brenda tij. Dhe përveç rezervave të thjeshta në ruajtjen e informacionit, përdoren të ashtuquajtura DIF-qeliza, ku përmbahen shumica e kontrollit, si dhe kode të tjera shtesë që ndihmojnë në mbrojtjen e çdo blloku nga gabimet e vetme, përveç mbrojtjes në nivelin e RAID-array.
Garancia e qëndrueshmërisë së arkitekturës është zgjidhja SmartMatrix. Në thelb, kjo përfshin katër kontrolle, të cilat janë të vendosura në një backplane pasiv si pjesë e një motori (engine). Dy nga këta motora, përkatësisht me tetë kontrolle, janë të lidhur me raftet e përbashkëta me ruhaj. Me SmartMatrix, edhe nëse nuk funksionojnë shtatë kontrolle nga tetë, qasja në të dhëna do të mbetet e mundur si për lexim ashtu edhe për shk writing. Dhe me humbjen e gjashtë kontrolleve nga tetë, është e mundur të vazhdojmë operacionet e keqkuptimit.
Të gjitha kartat e hyrjes dhe daljes në atë backplane pasiv janë në dispozicion për të gjitha kontrollet, si nga fronti ashtu edhe nga mbrapa. Me këtë skemë të lidhjes full-mesh, çfarëdo që të dështojë, qasja në ruajtje gjithmonë ruhet.
Më së miri, qëndrueshmëria e arkitekturës është për t'u diskutuar në kontekstin e mundësive të dështimeve, mbrojtjen nga të cilat sistemi i ruajtjes së të dhënave është në gjendje ta ofrojë.
Storage will survive the situation without loss if two controllers, including simultaneously, fail. This resilience is achieved because any cache block has at least two copies on different controllers, meaning it exists in a total of three copies. At least one of these is on another engine. Thus, even if the engine itself fails entirelyâwith all four of its controllersâguaranteed preservation of all information in the cache memory occurs, as at least one controller from the remaining engine will have the cache duplicated. Finally, through sequential connection, up to seven controllers can fail, and even if they fail in pairs, all input-output and cache memory data will still be preserved.
Kur krahasohet me magazinat e klasës hi-end të prodhuesve të tjerë, është e qartë se vetëm Huawei siguron mbrojtje të plotë të të dhënave dhe disponibilitet të plotë edhe pas dështimit të dy kontrolleve ose të gjithë motorit. Shumica e furnizuesve përdorin një skemë me çifte kontrollorësh, të cilëve iu bashkohen disqet. Fatkeqësisht, në një konfigurim të tillë, në rast se dështojnë dy kontrollet, ka rrezik për humbjen e aksesit në diskun përmes hyrjes dhe daljes.
Fatke, ndodhur qĂ« objekti i vetĂ«m tĂ« dĂ«shtojĂ« nuk Ă«shtĂ« e pĂ«rjashtuar. NĂ« njĂ« rast tĂ« tillĂ«, performanca do tĂ« bie pĂ«r njĂ« kohĂ« tĂ« shkurtĂ«r: Ă«shtĂ« e nevojshme qĂ« tĂ« pĂ«rshtaten rrugĂ«t dhe tĂ« rinovohet aksesin pĂ«r operacionet e hyrje-daljes nĂ« lidhje me ato blloqe qĂ« ose janĂ« dĂ«rguar pĂ«r tĂ« shkruar, por ende nuk janĂ« shkruar, ose janĂ« kĂ«rkuar pĂ«r tĂ« lexuar. NĂ« OceanStor Dorado 18000 V6, koha mesatare e pĂ«rshtatjes Ă«shtĂ« rreth njĂ« sekondĂ« â shumĂ« mĂ« e shkurtĂ«r se nĂ« analogĂ«t mĂ« tĂ« afĂ«rt nĂ« industri (4 sekonda). Kjo arrihet falĂ« atij pasiv ndĂ«rmjetĂ«s: kur kontrolluesi dĂ«shtojnĂ«, tĂ« tjerĂ«t menjĂ«herĂ« e shohin hyrje-daljen e tij, dhe nĂ« veçanti njĂ« bllok tĂ« dhĂ«nash qĂ« nuk Ă«shtĂ« shkruar plotĂ«sisht; si rezultat, kontrolluesi mĂ« i afĂ«rt merr pĂ«rsipĂ«r procesin. Prandaj, mundĂ«sia pĂ«r tĂ« rinovuar performancĂ«n Ă«shtĂ« dosido vetĂ«m brenda njĂ« sekondĂ«. Duhet shtuar se intervali Ă«shtĂ« stabil: njĂ« sekondĂ« pĂ«r çdo kontrollues, njĂ« sekondĂ« pĂ«r njĂ« tjetĂ«r e kĂ«shtu me radhĂ«.
Në pasivin backend të OceanStor Dorado 18000 V6, të gjitha kartat janë të disponueshme për të gjithë kontrolluesit pa ndonjë adresim të shtuar. Kështu, çdo kontrollues është në gjendje të kapë hyrje-daljet nga çdo port. Pavarësisht nga porti i frontend ku vjen hyrja-dalje, kontrolluesi do të jetë i gatshëm ta përpunojë atë. Kështu, numri i brendshëm i transferimeve është minimal dhe balansimi është i thjeshtë.
Balancimi në frontend kryhet me ndihmën e drejtuesit multipathing, dhe përveç kësaj, përmirësohet balancimi brenda sistemit vetë, duke pasur parasysh që të gjithë kontrolluesit shohin të gjitha portet e hyrje-daljeve.
Tradicionalisht, të gjitha grumbujt Huawei janë ndërtuar në një mënyrë që nuk kanë një pikë të vetme dështimi. Të gjithë komponentët e saj, përfshirë kontrolluesit, modulët e energjisë, modulët e ftohjes dhe kartat e hyrje-daljeve, mund të zëvendësohen 'në nxehtë', pa e rinisur sistemin.
Një teknologji që rrit besueshmërinë e sistemit në tërësi është RAID-TP. Ky është emri i grupit RAID që lejon mbështetje në rastin e dështimit të tre disqeve të njëkohshme. Për më tepër, riabilitimi për 1 TB stabilisht zgjat më pak se 30 minuta. Rezultati më të mirë të regjistruar janë deri në tetë herë më të shpejtë se me të njëjtin volum të dhënash në një disk mekanik. kështu, ka mundësinë për të përdorur disqe jashtëzakonisht të mëdhenj, për shembull, 7.68 ose madje 15 TB, pa u shqetësuar për besueshmërinë e sistemit.
ĂshtĂ« e rĂ«ndĂ«sishme qĂ« rindĂ«rtimi tĂ« bĂ«het jo nĂ« njĂ« disq tĂ« rezervuar, por nĂ« hapĂ«sirĂ«n e rezervuar â kapacitetin rezervĂ«. Ădo disk ka njĂ« pjesĂ« tĂ« dedikuar pĂ«r rikuperimin e tĂ« dhĂ«nave pas njĂ« dĂ«shtimi. KĂ«shtu, rikuperimi nuk bĂ«het sipas skemĂ«s "shumĂ« nĂ« njĂ«", por sipas skemĂ«s "shumĂ« nĂ« shumĂ«", gjĂ« qĂ« e bĂ«n procesin tĂ« shpejtĂ«. Dhe pĂ«r sa kohĂ« qĂ« ka hapĂ«sirĂ« tĂ« lirĂ«, rikuperimi mund tĂ« vazhdojĂ«.
TĂ« pĂ«rmendet veçmas besueshmĂ«ria e zgjidhjes me disa ruajtje â nĂ« metro-klaster, ose, nĂ« terminologjinĂ« Huawei, HyperMetro. KĂ«to skema mbĂ«shteten nĂ« tĂ« gjithĂ« gamĂ«n e sistemet tona tĂ« ruajtjes dhe lejojnĂ« funksionimin me akses tĂ« skedarĂ«ve dhe akses bllok. Edhe akses bllok funksionon pĂ«rmes Fibre Channel, ashtu si edhe pĂ«rmes Ethernet (pĂ«rfshirĂ« iSCSI).
Në thelb, bëhet fjalë për replikimin dyanshëm nga një ruajtje në tjetrën, ku LUN-i i replikueshëm merr të njëjtin LUN-ID si ai primar. Teknologjia punon kryesisht falë konsistencës së caches nga dy sisteme të ndryshme. Kështu, për hostin, nuk ka rëndësi se nga ana ku ndodhet: ai sheh të njëjtin disk logjik si në njërën anë ashtu edhe në tjetrën. Si pasojë, asgjë nuk e pengon ndërtimin e një klasteri të qëndrueshmërisë ndaj dështimit, të shtrirë në dy lokacione.
Për kvorumin, përdoret një makinë fizike ose virtuale Linux. Ajo mund të vendoset në një lokacion të tretë, dhe kërkesat për burimet e saj janë të vogla. Një skenar i zakonshëm është të japësh me qira një lokacion virtual ekskluzivisht për vendosjen e VM-së kvoru.
Teknologjia lejon gjithashtu zgjerimin: dy ruajtje - në një metro-klaster, me një lokacion shtesë të përfshirë me replikim asinkron.
Historikisht, shumë klientë formojnë një «zoo magazinimi»: një grumbull sistemesh ruajtjeje nga prodhues të ndryshëm, modele të ndryshme, dhe breza të ndryshëm, me funksionalitete të ndryshme. Njëkohësisht, numri i host-eve mund të jetë impozant dhe shpesh ato virtualizohen. Në këto kushte, një nga detyrat prioritare të administratës është të ofrojë shpejt, njëtrajtshëm dhe me lehtësi disqe logjike për host-et, sa më shumë që të jetë e mundur pa u futur në hollësi se ku gjenden fizikisht këto disqe. Prandaj është zhvilluar zgjidhja jonë software, OceanStor DJ, e cila menaxhon sistemet e ndryshme të ruajtjes së të dhënave në mënyrë të unifikuar dhe ofron shërbime nga ato pa u lidhur me një model të veçantë ruajtjeje.
Të njëjtat dhe AI
Siç u tha më parë, OceanStor Dorado 18000 V6 ka të integruar procesorët me algoritme të inteligjencës artificiale - Ascend. Këta përdoren, së pari, për parashikimin e defekteve dhe, së dyti, për formimin e rekomandimeve për konfigurimin, gjë që gjithashtu rrit performancën dhe besueshmërinë e ruajtjes.
Horizon i parashikimeve â dy muaj: Mekanizmi i AI parashikon me njĂ« probabilitet tĂ« lartĂ« se do tĂ« ndodhin ngjarje gjatĂ« kĂ«saj periudhe, a nuk Ă«shtĂ« koha tĂ« bĂ«jmĂ« zgjerime, tĂ« ndryshojmĂ« politikĂ«n e aksesit etj. KĂ«shillat japin paraprakisht, duke lejuar planifikimin e dritareve pĂ«r mirĂ«mbajtjen e sistemit.
Faza e ardhshme e zhvillimit tĂ« AI nga Huawei parashikon njĂ« nivel global. GjatĂ« shĂ«rbimit tĂ« mirĂ«mbajtjes â trajtimi i dĂ«shtimeve ose rekomandimeve â Huawei agregon informacion nga sistemet e logimit tĂ« tĂ« gjitha depozitat e klientĂ«ve tanĂ«. NĂ« bazĂ« tĂ« tĂ« dhĂ«nave tĂ« mbledhura, analizohen dĂ«shtimet e ndodhur ose ato qĂ« mund tĂ« ndodhin dhe jepen rekomandime globale â jo vetĂ«m nga funksionimi i njĂ« sistemi tĂ« caktuar tĂ« depozitimit, por duke u mbĂ«shtetur nĂ« atĂ« qĂ« ndodh dhe ka ndodhur me mijĂ«ra pajisje tĂ« tilla. Mostra Ă«shtĂ« e madhe, dhe me mbĂ«shtetje nĂ« tĂ«, algoritmet e AI fillojnĂ« tĂ« mĂ«sojnĂ« shumĂ« shpejt, duke pĂ«rmirĂ«suar ndjeshĂ«m saktĂ«sinĂ« e parashikimeve.
Përputhshmëria
NĂ« vitet 2019â2020 u shfaqĂ«n shumĂ« insinuata rreth bashkĂ«punimit tĂ« pajisjeve tona me produktet VMware. PĂ«r tĂ« ndalur pĂ«rfundimisht kĂ«to thashetheme, deklarojmĂ« me pĂ«rgjegjĂ«si: VMware Ă«shtĂ« partner i Huawei. JanĂ« kryer tĂ« gjitha testet e mundshme pĂ«r ndĂ«rshtim tĂ« pajisjeve tona me softuerin e saj, dhe pĂ«rfundimisht nĂ« vendin e VMware nĂ« listĂ«n e kompatibilitetit tĂ« harduerit janĂ« renditur tĂ« dhĂ«nat e depozitimit tĂ« prodhimit tonĂ« pa asnjĂ« rezervĂ«. Me fjalĂ« tĂ« tjera, me ambientin softuerik VMware mund tĂ« pĂ«rdoren magazinat Huawei, duke pĂ«rfshirĂ« Dorado V6, me mbĂ«shtetje tĂ« plotĂ«.
E njĂ«jta gjĂ« vlen pĂ«r bashkĂ«punimin tonĂ« me Brocade. Ne vazhdojmĂ« tĂ« bashkĂ«punojmĂ« dhe tĂ« realizojmĂ« teste pĂ«r ndĂ«rshtim tĂ« produkteve tona â dhe nĂ« pĂ«rputhje me rezultatet e kĂ«tyre testeve, ne pohojmĂ« me besim tĂ« plotĂ« se sistemet tona tĂ« ruajtjes sĂ« tĂ« dhĂ«nave janĂ« plotĂ«sisht tĂ« ndĂ«rshtueshme me ndSwitch-at mĂ« tĂ« fundit tĂ« FC tĂ« Brocade.
ĂfarĂ« ndodh mĂ« tej?
Ne vazhdojmë të zhvillojmë dhe përmirësojmë procesorët tanë: ata bëhen më të shpejtë, më të besueshëm dhe rritet performanca e tyre. Po ashtu, po përmirësojmë çipat e AI - mbi to, në një farë mase, prodhohen module që përshpejtojnë deduplikimin dhe kompresimin. Ata që kanë akses në konfiguruesin tonë kanë mundur të vërejnë se në modelet Dorado V6 këto karta janë tashmë të disponueshme për porositje.
Kështu që po lëvizim drejt një ruajtjeje shtesë në Memory Class Storage - një memorie që nuk humbet energjinë me vonesa jashtëzakonisht të ulëta, rreth dhjetë mikrosekondash për lexim. Përveç të gjithave, SCM ofron një rritje në performancë, kryesisht gjatë punës me big data dhe në zgjidhjen e detyrave OLTP. Pas përditësimit të radhës, kartat SCM pritet të bëhen të disponueshme për porositje.
Dhe sigurisht, funksionaliteti i aksesit në skedar do të zgjerohet në tërë gamën e modeleve të ruajtjes së të dhënave Huawei - qëndroni të informuar për azhurnimet tona.
Burimi: habr.com
