Тэд нэг удаа хүнсний сүлжээний дээд хэсгийг эзэлж байсан. Олон мянган жилийн турш. Дараа нь төсөөлшгүй зүйл тохиолдов: тэнгэр үүлсээр бүрхэгдэж, тэд оршин тогтнохоо болив. Дэлхийн нөгөө талд уур амьсгалыг өөрчилсөн үйл явдлууд болсон: үүлэрхэг байдал нэмэгдэв. Үлэг гүрвэлүүд хэтэрхий том, хэтэрхий удаан болсон: тэдний амьд үлдэх оролдлого бүтэлгүйтсэн. Оройн махчин амьтад дэлхийг 100 сая жилийн турш захирч, улам бүр томорч, хүчирхэгжиж байв. Тэд хүнсний гинжин хэлхээний дээд хэсэгт орших төгс амьтан болон хувирсан ч орчлон ертөнц манай гаригийн нүүр царайг гэнэт өөрчилсөн.
Хачирхалтай нь 66 сая жилийн өмнө үлэг гүрвэлүүдийг устгасан үүл юм. Үүнтэй адилаар өнөөдөр үүл хүнсний сүлжээний дээд хэсэгт байрлах сонгодог өгөгдөл хадгалах системийг устгаж байна. Аль ч тохиолдолд асуудал нь үүл өөрсдөө биш, харин өөрчлөгдөж буй ертөнцөд дасан зохицох чадвар байсан юм. Үлэг гүрвэлийн хувьд бүх зүйл хурдан болсон: үүлний хор хөнөөлийн нөлөө нь солир унаснаас хойш хэдэн өдөр эсвэл долоо хоногийн дотор үүссэн (эсвэл галт уулын дэлбэрэлт - онолыг сонгох нь таных). Сонгодог өгөгдлийн агуулахын хувьд процесс нь олон жил шаардагддаг боловч энэ нь мэдээжийн хэрэг эргэлт буцалтгүй юм.
Триасын үе: том төмрийн эрин үе ба нүүдлийн хэрэглээ бий болсон
Тэгээд юу болсон бэ? Одоо байгаа экосистемд анхан шатны болон дунд түвшний хадгалах систем, аж ахуйн нэгжийн түвшний систем, шууд хавсаргасан хадгалалт (DAS) багтсан. Эдгээр ангиллыг шинжээчид тодорхойлсон бөгөөд өөрсдийн зах зээлийн хэмжээ, өртөг, найдвартай байдал, гүйцэтгэл, өргөтгөх чадвар зэрэг үзүүлэлтүүдтэй байв. Тэгээд нэг хачирхалтай зүйл болов.
Виртуал машинууд гарч ирснээр олон програмууд нэг сервер дээр, магадгүй олон эзэмшигчид нэгэн зэрэг ажиллах боломжтой болсон бөгөөд энэ нь шууд хавсаргасан санах ойн ирээдүйг шууд эргэлзээтэй болгосон өөрчлөлт юм. Дараа нь Facebook, Google, eBay гэх мэт хамгийн том хэмжээний дэд бүтцийн эзэд хадгалалтын системд асар их мөнгө төлөхөөс залхаж, том хэмжээний "техник хангамж" хадгалахын оронд ердийн серверүүд дээр өгөгдөл ашиглах боломжтой болсон өөрсдийн програмуудыг боловсруулсан. системүүд. Дараа нь Amazon зах зээлд Энгийн Хадгалах Үйлчилгээ буюу S3 хэмээх хачирхалтай зүйлийг нэвтрүүлсэн. Блок биш, файл биш, гэхдээ цоо шинэ зүйл: систем худалдаж авах боломжгүй болж, зөвхөн үйлчилгээг худалдаж авах боломжтой болсон. Түр хүлээнэ үү, тэнгэрт харагдах тэр тод гэрэл юу вэ? Өөр нэг астероид уу?
Юрийн галав: "хангалттай сайн савруудын" эрин үе
Бид "хангалттай сайн" гэсэн үзэл баримтлалтайгаар агуулахын хөгжлийн үе шатанд орсон. Хадгалах үйлчлүүлэгчид гиперскатеруудын юу хийснийг анзаарч, байгууллагынхаа хадгалах системд төлж буй техник хангамжаас арав, бүр зуу дахин их зардал гарах нь шударга эсэхэд эргэлзэж эхлэв. Дунд түвшний массивууд дээд түвшний системүүдээс зах зээлд эзлэх байр суурийг эзэлж эхлэв. зэрэг бүтээгдэхүүнүүд хурдацтай өсөлтийг харуулсан. Нэгэн цагт давамгайлж байсан аж ахуйн нэгжийн ангиллын массив EMC Symmetrix тодорхой хэмжээний газар нутгийг эзэмшсэн хэвээр байсан ч хурдацтай хумигдаж байв. Олон хэрэглэгчид өөрсдийн мэдээллээ AWS руу шилжүүлж эхэлсэн.
Нөгөөтэйгүүр, хадгалалтын шинийг санаачлагчид босоо масштабын эсрэг үзэл суртал болох тархсан хэвтээ масштабтай системүүдийн технологийг ашиглан хэт масштаблагчаас санаа авч эхлэв. Шинэ хадгалах программ хангамж нь hyperscaler шиг ердийн серверүүд дээр ажиллах боломжтой байх төлөвтэй байна. Тоног төхөөрөмжийн өөрийн өртөгөөс 10-100 дахин их зардал гарахгүй. Онолын хувьд та ямар ч сервер ашиглаж болно - сонголт нь таны сонголтоос хамаарна. Програм хангамжаар тодорхойлсон хадгалалтын (SDS) эрин үе эхэллээ: үүл тэнгэрийг бүрхэж, температур буурч, оройн махчин амьтдын тоо толгой буурч эхлэв.
Цэрдийн галавын үе: програм хангамжаар тодорхойлогдсон хадгалах системийн хувьслын эхлэл
Програм хангамжаар тодорхойлогдсон хадгалалтын эхний өдрүүд хэцүү байсан. Маш их зүйл амласан ч биелүүлсэн нь бага. Үүний зэрэгцээ технологийн чухал өөрчлөлт гарсан: флаш санах ой нь зэвийг эргүүлэх (HDD) орчин үеийн хувилбар болсон. Энэ нь олон хадгалалтын стартапууд болон удирдахад хялбар венчур капиталын мөнгө байсан үе байсан. Нэг асуудал байхгүй бол бүх зүйл сайхан байх болно: өгөгдөл хадгалах нь нухацтай авч үзэх шаардлагатай. Үйлчлүүлэгчид өгөгдөлдөө дуртай байдаг нь харагдаж байна. Хэрэв тэд үүнд хандах эрхээ алдвал эсвэл терабайт өгөгдөлд хэд хэдэн муу бит олдвол тэд маш их санаа зовж, санаа зовдог. Ихэнх стартапууд оршин тогтнож чадаагүй. Үйлчлүүлэгчид гайхалтай функцийг хүлээн авсан боловч үндсэн хэрэгслүүдийн хувьд бүх зүйл сайн байсангүй. Муу жор.
Кайнозойн үе: агуулах массивууд давамгайлдаг
Дараа нь юу болсныг цөөхөн хүн ярьдаг, учир нь энэ нь тийм ч сонирхолтой биш юм - үйлчлүүлэгчид ижил сонгодог хадгалах массив худалдаж авсаар байна. Мэдээж хэрэг, програмуудаа үүлэнд шилжүүлсэн хүмүүс мөн мэдээллээ тэнд шилжүүлсэн. Гэхдээ үүлэн системд бүрэн шилжихийг хүсдэггүй эсвэл огт шилжихийг хүсдэггүй хэрэглэгчдийн дийлэнх нь Hewlett Packard Enterprise сонгодог массивуудыг санал болгосоор байна.
Бид 2019 онд ирлээ, яагаад Y2K технологид суурилсан олон тэрбум долларын хадгалалтын бизнес байсаар байна вэ? Учир нь тэд ажилладаг! Энгийнээр хэлэхэд, шуугиан дэгдээсэн бүтээгдэхүүнүүд чухал ач холбогдолтой хэрэглээний шаардлагыг биелүүлээгүй. HPE 3PAR зэрэг бүтээгдэхүүнүүд нь аж ахуйн нэгжийн хэрэглэгчдийн хувьд хамгийн сайн сонголт хэвээр байгаа бөгөөд HPE 3PAR архитектурын шинэ хувьсал нь - энэ нь зөвхөн үүнийг баталж байна.
Хариуд нь програм хангамжаар тодорхойлсон хадгалалтын системүүдийн чадавхи маш сайн байсан: хэвтээ өргөтгөх чадвар, стандарт серверийн хэрэглээ... Гэхдээ үүний үнэ нь: тогтворгүй хүртээмж, урьдчилан таамаглах боломжгүй гүйцэтгэл, өргөтгөх чадварын тодорхой дүрмүүд байв.
Хэрэглэгчийн шаардлагын нарийн төвөгтэй байдал нь тэд хэзээ ч хялбаршдаггүй явдал юм. Мэдээллийн бүрэн бүтэн байдал алдагдах эсвэл сул зогсолтыг нэмэгдүүлэх нь хүлээн зөвшөөрөгдөхүйц гэж хэн ч хэлэхгүй. Тийм ч учраас орчин үеийн хурдацтай хөгжиж буй мэдээллийн төвүүдийн шаардлагыг нэгэн зэрэг хангаж, буулт хийхдээ аж ахуйн нэгжийн түвшний хадгалах системийн үндсэн шинж чанаруудаас ангид байдаггүй архитектур нь хадгалах системд маш чухал юм.
Гуравдагч үе: амьдралын шинэ хэлбэр үүсэх
Хадгалалтын зах зээлд шинээр ирсэн хүмүүсийн нэг Datara нь хадгалалтын системд тавигдах түүхэн болон шинэ шаардлагуудын ийм хэцүү хольцыг хэрхэн даван туулж чадсаныг олж мэдэхийг хичээцгээе. Юуны өмнө дээр дурдсан бэрхшээлийг шийдвэрлэхэд чиглэсэн архитектурыг хэрэгжүүлэх замаар. Байгууллагын түвшний системийн шаардлагад нийцүүлэхийн тулд програм хангамжаар тодорхойлогдсон дундаж хадгалалтын архитектурыг өөрчлөх боломжгүйтэй адил орчин үеийн мэдээллийн төвийн сорилтыг даван туулахын тулд хуучин архитектурыг өөрчлөх боломжгүй юм: үлэг гүрвэлүүд хөхтөн амьтан болоогүй, учир нь температур нь унасан.
Орчин үеийн дата төвийн авхаалж самбааг бүрэн ашиглахын зэрэгцээ аж ахуйн нэгжийн түвшний хадгалалтын шаардлагад нийцсэн шийдлийг бий болгох нь тийм ч амар ажил биш боловч Датера яг үүнийг хийхээр зорьсон юм. Datara-ийн мэргэжилтнүүд үүн дээр таван жилийн турш ажиллаж байгаа бөгөөд аж ахуйн нэгжийн түвшний програм хангамжаар тодорхойлсон хадгалах "хоол хийх" жорыг олсон.
Datara-д тулгарсан гол бэрхшээл бол илүү энгийн "OR"-ын оронд "AND" логик операторыг ашиглах явдал байв. Тогтмол хүртээмжтэй байдал, урьдчилан таамаглах боломжтой гүйцэтгэл, архитектурын өргөтгөх чадвар, код болгон зохион байгуулах, стандартчилагдсан техник хангамж, бодлогын хэрэгжилт, уян хатан байдал, аналитикт суурилсан удирдлага, "БА" аюулгүй байдал, нээлттэй экосистемтэй "БА" нэгтгэх. "AND" логик оператор нь "OR" -оос нэг тэмдэгтээс урт байдаг - энэ бол гол ялгаа юм.
Дөрөвдөгчийн үе: орчин үеийн мэдээллийн төвүүд болон уур амьсгалын гэнэтийн өөрчлөлтүүд нь програм хангамжаар тодорхойлогдсон хадгалах системийн хөгжлийг урьдчилан тодорхойлдог.
Тэгвэл Datara хэрхэн орчин үеийн дата төвийн эрэлт хэрэгцээг хангахын зэрэгцээ уламжлалт аж ахуйн нэгжийн хадгалалтын шаардлагад нийцсэн архитектурыг бий болгосон бэ? Энэ бүхэн дахиад л тэр уйтгартай "БА" оператор дээр бууж байна.
Хувь хүний шаардлагыг нэг нэгээр нь шийдэх нь утгагүй байсан. Ийм элементүүдийн нийлбэр нь нэг бүхэл болохгүй. Аливаа нарийн төвөгтэй тогтолцооны нэгэн адил тэнцвэртэй буулт хийх бүхэл бүтэн цогцолборыг анхааралтай авч үзэх нь чухал байв. Датерагийн мэргэжилтнүүдийг боловсруулахдаа гурван үндсэн зарчмыг баримталсан.
- хэрэглээний тусгай удирдлага;
- мэдээллийн уян хатан байдлыг хангах нэгдсэн механизм;
- нэмэлт зардал багассан учир өндөр гүйцэтгэлтэй.
Эдгээр зарчмуудын нийтлэг шинж чанар нь энгийн байдал юм. Системээ хялбархан удирдаж, өгөгдлөө ганц, гоёмсог хөдөлгүүрээр хялбархан удирдаж, зардлыг бууруулахын зэрэгцээ урьдчилан таамаглах боломжтой (болон өндөр) гүйцэтгэлийг үзүүлээрэй. Энгийн байдал яагаад ийм чухал вэ? Хадгалалтын ертөнцийн ухаалаг мэргэжилтнүүд өнөөгийн динамик дата төвийн хадгалалтын шаардлагыг хангах нь зөвхөн нарийн удирдлага, олон тооны өгөгдлийн удирдлагын хэрэгсэл, гүйцэтгэлийг нэмэгдүүлэхийн тулд хэт оновчтой болгох замаар хүрэх боломжгүй гэдгийг мэддэг. Ийм техникүүдийн цогцолбор нь үлэг гүрвэлийн хадгалалтын систем гэдгээрээ бидэнд аль хэдийн танил болсон.
Эдгээр зарчмуудтай танилцсан нь Датерад сайнаар нөлөөлсөн. Тэдний боловсруулсан архитектур нь нэг талаас орчин үеийн аж ахуйн нэгжийн түвшний хадгалалтын системийн хүртээмж, гүйцэтгэл, өргөтгөх боломжтой, нөгөө талаас орчин үеийн програм хангамжаар тодорхойлогддог дата төвд шаардлагатай уян хатан байдал, хурдыг агуулдаг.
ОХУ-д Datara-ийн бэлэн байдал
Datara бол Hewlett Packard Enterprise-ийн дэлхийн технологийн түнш юм. Datara бүтээгдэхүүнийг серверийн янз бүрийн загвартай нийцтэй байдал, гүйцэтгэлийн хувьд туршиж үздэг .
Та Datara архитектурын талаар илүү ихийг мэдэх боломжтой 31 аравдугаар сар.
Эх сурвалж: www.habr.com