소프트웨어 정의 스토리지 시스템, 아니면 무엇이 공룡을 죽였습니까?

그들은 한때 먹이사슬의 꼭대기를 차지했습니다. 수천년 동안. 그리고 나서 상상할 수 없는 일이 일어났습니다. 하늘이 구름으로 뒤덮이고 구름은 더 이상 존재하지 않게 되었습니다. 지구 반대편에서는 기후를 변화시키는 사건이 발생했습니다. 구름이 증가했습니다. 공룡은 너무 커지고 너무 느려졌습니다. 생존하려는 그들의 시도는 실패할 운명이었습니다. 최상위 포식자들은 100억년 동안 지구를 지배하며 점점 더 커지고 강해졌습니다. 그들은 먹이사슬의 꼭대기에 있는 완벽한 존재로 진화했지만, 우주는 갑자기 우리 행성의 모습을 바꾸어 놓았습니다.

아이러니하게도 66만년 전 공룡을 멸종시킨 것은 구름이었다. 마찬가지로 오늘날의 클라우드는 먹이 사슬의 최상위에 있는 기존 데이터 저장 시스템을 파괴하고 있습니다. 두 경우 모두 문제는 클라우드 자체가 아니라 변화하는 세상에 적응하는 능력이었습니다. 공룡의 경우 모든 것이 빠르게 일어났습니다. 구름의 파괴적인 효과는 운석이 떨어진 후(또는 화산 폭발 - 이론 선택은 귀하의 몫입니다) 며칠 또는 몇 주 이내에 발생했습니다. 기존 데이터 웨어하우스의 경우 프로세스에 수년이 걸리지만 물론 되돌릴 수 없습니다.

트라이아스기: 철의 시대와 철새의 출현

그래서 무슨 일이 일어났나요? 기존 에코시스템에는 보급형 및 중급 스토리지 시스템, 엔터프라이즈급 시스템, DAS(직접 연결 스토리지)가 포함되었습니다. 이러한 범주는 분석가에 의해 결정되었으며 자체 시장 규모, 비용 지표, 안정성, 성능 및 확장성을 갖고 있었습니다. 그리고 이상한 일이 일어났습니다.

가상 머신의 출현은 여러 애플리케이션이 여러 소유자에 걸쳐 단일 서버에서 동시에 실행될 수 있음을 의미했습니다. 이는 직접 연결 스토리지의 미래에 대한 의문을 즉시 불러일으키는 변화였습니다. 그런 다음 가장 큰 하이퍼스케일 인프라(하이퍼스케일러)의 소유자인 Facebook, Google, eBay 등은 스토리지 시스템에 막대한 돈을 지불하는 데 지쳐서 대규모 "하드웨어" 스토리지 대신 일반 서버에서 데이터 가용성을 보장하는 자체 애플리케이션을 개발했습니다. 시스템. 그런 다음 Amazon은 Simple Storage Service(S3)라는 이상한 제품을 시장에 출시했습니다. 블록이나 파일이 아니라 근본적으로 새로운 것입니다. 시스템 구매가 불가능해졌고 서비스만 구매가 가능해졌습니다. 잠깐만요, 하늘에 보이는 저 밝은 빛은 뭘까요? 또 다른 소행성?

쥬라기: "충분히 좋은 공룡"의 시대

우리는 '충분히 좋다'는 이념을 가지고 스토리지 개발 단계에 들어섰습니다. 하이퍼스케일러가 수행한 작업을 알아차린 스토리지 고객은 기업 스토리지 시스템에 지불하는 하드웨어에 대한 추가 비용의 XNUMX배, 심지어 XNUMX배에 대한 공정성에 의문을 제기하기 시작했습니다. 중간 수준 어레이가 최상위 시스템에서 시장 점유율을 확보하기 시작했습니다. 다음과 같은 제품 HPE 3PAR 빠른 성장을 보였습니다. 한때 지배적인 엔터프라이즈급 어레이였던 EMC Symmetrix는 여전히 어느 정도 영역을 차지하고 있었지만 급속도로 축소되고 있었습니다. 많은 사용자가 데이터를 AWS로 마이그레이션하기 시작했습니다.

반면, 스토리지 혁신가들은 수직적 확장과 반대되는 이데올로기인 분산형 수평 확장형 시스템 기술을 사용하여 하이퍼스케일러로부터 아이디어를 차용하기 시작했습니다. 새로운 스토리지 소프트웨어는 하이퍼스케일러처럼 일반 서버에서 실행될 수 있을 것으로 예상됩니다. 장비 자체 비용의 10-100배는 더 이상 발생하지 않습니다. 이론적으로는 어떤 서버든 사용할 수 있습니다. 선택은 선호도에 따라 다릅니다. 소프트웨어 정의 스토리지(SDS) 시대가 시작되었습니다. 구름이 하늘을 가리고 기온이 떨어지며 정점 포식자의 개체수가 감소하기 시작했습니다.

백악기: 소프트웨어 정의 스토리지 시스템 진화의 시작

소프트웨어 정의 스토리지의 초기 시절은 열광적이었습니다. 많은 것을 약속했지만 전달된 것은 거의 없었습니다. 동시에 중요한 기술 변화가 일어났습니다. 플래시 메모리가 회전 녹(HDD)의 현대적인 대안이 되었습니다. 이 시기는 스토리지 스타트업이 많이 생겨나고 벤처 캐피탈 자금이 쉽게 모이던 시기였습니다. 한 가지 문제만 아니라면 모든 것이 좋을 것입니다. 데이터 저장에는 진지한 고려가 필요합니다. 고객은 자신의 데이터를 좋아하는 것으로 나타났습니다. 액세스 권한을 잃거나 테라바이트 규모의 데이터에서 몇 개의 잘못된 비트가 발견되면 그들은 매우 걱정하고 걱정합니다. 대부분의 스타트업은 살아남지 못했습니다. 고객은 멋진 기능을 받았지만 기본 도구의 모든 것이 좋지는 않았습니다. 나쁜 요리법.

신생대: 저장 덩어리가 지배적

그다지 흥미롭지 않기 때문에 이후에 무슨 일이 일어났는지 이야기하는 사람은 거의 없습니다. 고객은 동일한 클래식 스토리지 어레이를 계속 구매합니다. 물론 애플리케이션을 클라우드로 옮긴 사람들도 데이터를 클라우드로 옮겼습니다. 그러나 클라우드로 완전히 전환하고 싶지 않거나 전혀 전환하고 싶지 않은 대다수의 고객을 위해 동일한 Hewlett Packard Enterprise는 계속해서 클래식 어레이를 제공했습니다.

2019년에도 Y2K 기술을 기반으로 하는 수십억 달러 규모의 스토리지 사업이 여전히 존재하는 이유는 무엇일까요? 그들은 일하기 때문에! 간단히 말해서, 과대 광고에 맞춰 만들어진 제품에서는 미션 크리티컬 애플리케이션의 요구 사항이 실현되지 않았습니다. HPE 3PAR과 같은 제품은 엔터프라이즈 고객을 위한 최고의 옵션으로 남아 있으며 HPE 3PAR 아키텍처의 새로운 발전은 HPE 프리메라 – 이것만 확인하면 됩니다.

결과적으로, 소프트웨어 정의 스토리지 시스템의 기능은 탁월했습니다. 수평 확장성, 표준 서버 사용... 그러나 이에 대한 대가는 불안정한 가용성, 예측할 수 없는 성능 및 특정 확장성 규칙이었습니다.

고객 요구 사항의 복잡성은 결코 단순해질 수 없다는 것입니다. 데이터 무결성 손실이나 가동 중지 시간 증가가 허용된다고 말하는 사람은 아무도 없습니다. 그렇기 때문에 빠르게 진화하는 현대 데이터 센터의 요구 사항을 동시에 충족하고 절충안을 모색할 때 엔터프라이즈급 스토리지 시스템의 주요 특성이 결여되지 않은 아키텍처가 스토리지 시스템에 매우 중요합니다.

제XNUMX기: 새로운 생명체의 출현

스토리지 시장에 새로 진출한 업체 중 하나인 Datera가 스토리지 시스템에 대해 역사적으로 확립된 요구 사항과 새로운 요구 사항이 혼합된 어려운 상황에 어떻게 대처했는지 알아 보겠습니다. 우선, 위에서 설명한 딜레마를 해결하는 데 중점을 둔 아키텍처 구현을 통해. 엔터프라이즈급 시스템의 요구 사항을 충족하기 위해 평균적인 소프트웨어 정의 스토리지 아키텍처를 수정하는 것이 불가능한 것처럼 현대 데이터 센터의 과제를 해결하기 위해 레거시 아키텍처를 수정하는 것도 불가능합니다. 공룡은 온도 때문에 포유류가 되지 않았습니다. 떨어졌다.

최신 데이터 센터의 민첩성을 최대한 활용하면서 엔터프라이즈급 스토리지 요구 사항을 충족하는 솔루션을 구축하는 것은 쉬운 작업이 아니지만 이것이 바로 Datera가 시작한 일입니다. Datera 전문가들은 XNUMX년 동안 이 분야에 종사해 왔으며 엔터프라이즈급 소프트웨어 정의 스토리지를 "요리"하는 방법을 찾았습니다.

Datera가 직면한 가장 큰 어려움은 훨씬 단순한 "OR" 대신 논리 연산자 "AND"를 사용해야 한다는 것이었습니다. 일관된 가용성, 예측 가능한 성능, 아키텍처 확장성, 코드형 조정, 표준화된 하드웨어, 정책 시행, 유연성, 분석 기반 관리, "AND" 보안, 개방형 생태계와의 "AND" 통합. 논리 연산자 "AND"는 "OR"보다 한 문자 더 깁니다. 이것이 주요 차이점입니다.

제XNUMX기: 최신 데이터 센터와 급격한 기후 변화로 인해 소프트웨어 정의 스토리지 시스템 개발이 미리 결정됩니다.

그렇다면 Datera는 어떻게 기존 엔터프라이즈 스토리지의 요구 사항을 충족하는 동시에 최신 데이터 센터의 요구 사항도 충족하는 아키텍처를 만들었을까? 모든 것은 다시 성가신 “AND” 연산자로 귀결됩니다.

개별 요구 사항을 하나씩 해결하는 것은 의미가 없습니다. 그러한 요소들의 합은 하나의 전체가 될 수 없습니다. 여느 복잡한 시스템과 마찬가지로 균형 잡힌 타협의 전체 복합체를 신중하게 고려하는 것이 중요했습니다. 개발 시 Datera 전문가는 세 가지 주요 원칙을 따릅니다.

• 애플리케이션별 관리;
• 데이터 유연성을 보장하기 위한 통합 메커니즘;
• 간접비 감소로 인한 고성능.

이러한 원칙의 공통적인 특징은 단순성입니다. 시스템을 쉽게 관리하고, 우아한 단일 엔진으로 데이터를 쉽게 관리하며, 비용을 절감하면서 예측 가능한(그리고 높은) 성능을 제공합니다. 단순함이 왜 그렇게 중요한가요? 스토리지 업계의 숙련된 전문가들은 세분화된 관리, 다양한 데이터 관리 도구, 성능 향상을 위한 고도의 최적화만으로는 오늘날의 동적 데이터 센터의 스토리지 요구 사항을 충족할 수 없다는 것을 알고 있습니다. 그러한 기술의 복합체는 공룡 보관 시스템으로서 이미 우리에게 친숙합니다.

이러한 원칙을 잘 아는 것은 Datera에게 큰 도움이 되었습니다. 그들이 개발한 아키텍처는 한편으로는 최신 엔터프라이즈급 스토리지 시스템의 가용성, 성능 및 확장성을 갖추고 있고, 다른 한편으로는 최신 소프트웨어 정의 데이터 센터에 필요한 유연성과 속도를 갖추고 있습니다.

러시아에서의 Datera 가용성

Datera는 Hewlett Packard Enterprise의 글로벌 기술 파트너입니다. Datera 제품은 다양한 서버 모델과의 호환성 및 성능 테스트를 거쳤습니다. HPE 프로라이언트.

Datera 아키텍처에 대한 자세한 내용은 다음에서 확인할 수 있습니다. HPE 웹 세미나 10 월 31.

출처 : habr.com