Programmide määratletud andmesalvestus või mis hävitas dinosaurusd?

Kordagi nad olid toiduahela tipus. Tuhandet aastat. Siis juhtus midagi mõeldamatut: taevas kattis pilved ja nad lõpetasid olemise. Teises maailma otsas toimusid sündmused, mis muutsid kliimat: pilvisus suurenes. Dinosaurusid muutusid liiga suurteks ja aeglasteks: nende ellujäämise katsed olid määratud ebaõnnestuma. Kõrgeimad kiskjad valitsesid Maal 100 miljonit aastat, kasvades järjest suuremaks ja muutudes järjest tugevamaks. Nad arenesid selleks, mis näis olevat ideaalne olend toiduahela tipus, kuid Universum muutis hetkega meie planeedi nägu.

Kohutava juhus, et just pilved pühkisid dinosaurused Maalt 66 miljonit aastat tagasi. Samamoodi hävitavad pilved täna traditsioonilisi andmesalvestussüsteeme, mis asuvad "toiduahelas" tipus. Mõlemal juhul ei olnud probleemiks pilved ise, vaid kohanemise võime muutuva maailma tingimustega. Dinosauruste puhul juhtus kõik kiiresti: pilvede hävitav mõju ilmus päevade või nädalatega pärast meteoriidi langemist (või vulkaani purse - teooria valik on teie). Traditsiooniliste andmesalvestusseadmete puhul kestab protsess aastaid, kuid see on kindlasti pöördumatu.

Triiassaeg: suurte raua ajastu ja rändavate rakenduste tekkimine

Mis siis juhtus? Loode ökosüsteemis eksisteeris algtaseme ja keskastme andmesalvestussüsteeme, ettevõtete Taseme süsteeme ja otsese ühenduse andmesalvestusseadmeid (DAS). Need kategooriad määratlesid analüütikud, omasid oma turuosasi, maksumusnäitajaid, usaldusväärsust, jõudlust ja skaleeritavust. Ja siis juhtus midagi kummalist.

Virtuaalmasinate ilmumine tähendas, et ühel serveril sai korraga käima panna mitmeid rakendusi, tõenäoliselt mitme omaniku poolt – need muutused panid kohe kahtlema otseühendussüsteemide tulevikku. Peagi asusid suurimad hüpermatige infrastruktuuride omanikud (hüperkaalud): Facebook, Google, eBay jne, kes olid väsinud maksma suuri summasid, looma oma rakendusi, tagades andmete kättesaadavuse tavalistes serverites, mitte suurtes „rauda” süsteemides. Siis tutvustas Amazon turule midagi kummalist, mida nimetatakse Simple Storage Service (lihtne andmete salvestamise teenus) või S3. See ei olnud ei plokk, ei fail, vaid midagi põhimõtteliselt uut: süsteemi ostmine muutus võimatuks, nüüd sai osta vaid teenust. Oodake, mis see ereda valgus seal taevas on? Veel üks asteroid?

Jurassic periood: „hästi head dinosaurused“

Oleme sisenenud andmesalvestuse arendamise faasi, kus ideoloogia on "piisavalt hea". Kliendid, kes kasutavad andmesalvestust, on märganud, et hüpereskaleerijad on hakanud seama kahtluse alla kümnete ja isegi sadade korralike lisade väärtuse, mida nad oma ettevõtte andmesalvestusele maksma pidid. Keskmise taseme masinad on hakanud võtma turuosa kõrge klassi süsteemidelt. Sellised tooted nagu HPE 3PAR on näidanud kiiret kasvu. EMC Symmetrix, kunagi domineeriv ettevõtte tasandi andmesalvestus (sõnast "massiivne"), hoidis endiselt mingit ala, kuid see kahanes kiiresti. Paljud kasutajad on hakanud oma andmeid AWS-i kolima.

Teisalt on innovaatorid SХD-lt hakanud laenama ideid hüperkaalujatest, kasutades hajutatud horisontaalselt skaleeritavate süsteemide tehnoloogiaid – ideaal, mis on vastupidine vertikaalsele skaleerimisele. Oodatakse, et uus SХD tarkvara saab töötada tavalistel serveritel, just nagu hüperkaalujatel. Rohkem mitte 10-100 kordseid hindade ületavaid kulusid varustuse enda hinnale. Teoreetiliselt saab kasutada ükskõik milliseid servereid – valik sõltub teie eelistustest. Programmipõhiste SХD (SDS) ajastu on alanud: pilved on sulgenud taeva, temperatuur on langenud ja ülemate kiskjate populatsioon on hakanud vähenema.

Kriidiperiood: programmipõhiste SХD-e evolutsiooni algus

Prognoositud andmekeskuste varajased päevad olid tõeliselt keerulised. Palju lubati, ent vähe toodi välja. Samal ajal toimus oluline tehnoloogiline muutus: NAND tüüpi mäludest sai moodsam alternatiiv mehaanilistele kõvaketastele (HDD). See oli aeg, mil tekkis palju andmekeskuse idufirmasid ja vedasid kergesti leitud riskikapitali. Kõik oleks olnud suurepärane, kui mitte üks probleem: andmete salvestamine nõuab tõsist tähelepanu. Klientidele meeldivad nende andmed. Kui nad kaotavad neile juurdepääsu, või terabaitides andmete seas leitakse paar vale bitti, muretsevad nad ja muretsevad väga tugevalt. Enamik idufirmadest ei suutnud ellu jääda. Tellijad saadi väga head funktsionaalsust, kuid kõik ei olnud hästi põhivahenditega. Halbad retsept.

Kainosoikum: andmekeskuse massiivid domineerivad

Vähemt räägitakse sellest, mis pärast juhtus, sest see ei ole just kõige huvitavam – kliendid jätkavad samade klassikaliste mäluseadmete ostmist. Loomulikult need, kes on oma rakendused pilve viinud, on sinna viinud ka andmed. Kuid enamik tellijaid, kes ei soovi täielikult pilve minna või ei soovi üldse minna, on endiselt Hewlett Packard Enterprise'i klassikalised mäluseadmed.

Elame 2019. aastas, miks siis ikka veel eksisteerib miljardite dollarite suurune mäluseadmete äri, mis põhineb Y2K ajastu tehnoloogiatel? Sest need töötavad! Lihtsalt öeldes ei ole kriitiliste rakenduste nõudmisi rahuldanud tooted, mis on loodud hype'iga. Sellised tooted nagu HPE 3PAR on jäänud parimateks valikuteks ettevõtete tellijatele, ja HPE 3PAR arhitektuuri uus areng – HPE Primera – tõestab vaid seda.

Programmeeritavalt määratletud andmesalvestuse võimalused olid suurepärased: horisontaalne skaleeritavus, standardserverite kasutamine... Kuid selle hinna eest tuli maksta: ebastabiilne kättesaadavus, ettearvamatu jõudlus ja spetsiifilised skaleerimisreeglid.

Kliendi nõudmiste keerukus seisneb selles, et need ei muudatu kunagi lihtsamaks. Keegi ei ütle, et andmete terviklikkuse kaotamine või seisakuaegade pikenemine on vastuvõetav. Seetõttu on andmesalvestuse arhitektuur äärmiselt oluline, et see vastaks tänapäeva kiiresti arenevate andmekeskuste nõudmistele, säilitades samas ettevõtlusklassile iseloomulikke omadusi.

Kolmas periood: uue elu vormide ilmumine

Vaatame, kuidas suutis Datera, üks nooremaid mängijaid andmemagasiini turul, toime tulla keeruliste ja ajalooliselt ja uus nõudmistega andmemagasiinile. Peamiselt saavutati see arhitektuuri rakendamise kaudu, mis on suunatud eespool kirjeldatud dilemmani. Vanade arhitektuuride kohandamine kaasaegsete andmekeskuste nõudmiste täitmiseks on sama keeruline, nagu keskmise programmipõhise andmemagasiini arhitektuuri kohandamine suurettevõtte tasemele: dinosaurused ei muutunud imetajateks, kuna temperatuur langes.

Lahenduse loomine, mis vastab ettevõtte tasemel andmemagasiini nõuetele ja samas arvestab tänapäeva andmekeskuste dünaamilisuse väärtust, on keeruline ülesanne, kuid just seda Datera kavatses teha. Datera spetsialistid töötasid selle kallal viis aastat ja leidis retsepti ettevõtte tasemel programmipõhise andmemagasiini "valmistamiseks."

Datera peamine väljakutse oli kasutada loogilist operaatorit "AND" asemel oluliselt lihtsamat "OR". Stabiilne kättesaadavus, "AND" ennustatav jõudlus, "AND" arhitektuuriline skaleeritavus, "AND" orkestreerimine-kui-kood, "AND" standardiseeritud riistvara, "AND" halduse poliitikate rakendamine, "AND" paindlikkus, "AND" analüütikapõhine juhtimine, "AND" turvalisus, "AND" integreerimine avatud ökosüsteemidega. Loogiline operaator "AND" on ühe tähe võrra pikem kui "OR" – see on peamine erinevus.

Kvartaarperiood: kaasaegsed andmesaalid ja kliimamuutused määravad tarkvara määratletud andmesalvestuse arengu.

Kuidas Datera lõi arhitektuuri, mis vastab traditsiooniliste ettevõtte klassi andmesalvestuse nõudmistele ja rahuldab samal ajal kaasaegse andmesaali vajadusi? Kõik viib tagasi sellele tüütule operaatorile "AND".

Ei olnud mõtet lahendada ükshaaval ülesandeid, mis rahuldaksid erisoove. Selliste elementide summa ei muutu tervikuks. Nagu iga keerulise süsteemi puhul, oli oluline hoolikalt töödelda kogu tasakaalustatud kompromisside kompleksi. Datera spetsialistid lähtusid arendamisel kolmest põhialusest:

• rakenduste spetsiifikat arvestav juhtimine;
• andmete paindlikkuse tagamise ühtne mehhanism;
• kõrge töötlusvõime madalamate kulude arvelt.

Nende põhimõtete ühine omadus on lihtsus. Süsteemi lihtne haldamine, andmete lihtne haldamine ühtse elegantse mehhanismi abil ning prognoositava (ja kõrge) töötlusvõime tagamine kulude minimeerimise kaudu. Miks on lihtsus nii oluline? Kogenud spetsialistid andmete salvestamise maailmas teavad, et ei saa tagada moodsatele dünaamilistele andmekeskustele esitatavate nõuete täitmist vaid granulaarsest juhtimisest, paljusid andmehaldusvahendeid ja hüperoptimeerimise kaudu sooritusvõime kasvu. Selliste meetodite kogumit tuntakse juba kui andmete salvestamise dinosauruseid.

Nende põhimõtetega tutvumine on Datera jaoks head vilja kandnud. Nende loodud arhitektuur pakub ühtaegu tänapäevase ettevõtte tasemel andmekeskuse ligipääsetavust, jõudlust ja skaleeritavust, samuti paindlikkust ja kiirus, mis on vajalikud kaasaegses tarkvaradefineeritud andmekeskuses.

Datera ligi pääs Venemaal

Datera on Hewlett Packard Enterprise'i globaalne tehnoloogiapartner. Datera tooted on testitud ühilduvuse ja jõudluse osas erinevate serverimudelitega. HPE ProLiant.

Datera arhitektuuri kohta saate rohkem teada HPE veebinaril 31. oktoobril.

Allikas: habr.com