Chúng tôi tranh luận chi tiết điều gì làm cho OceanStor Dorado 18000 V6 trở thành một hệ thống lưu trữ thực sự cao cấp với khả năng dự trữ kha khá cho những năm tới. Đồng thời, chúng tôi xua tan những lo ngại chung về lưu trữ All-Flash và chỉ ra cách Huawei tận dụng tối đa những điều đó: NVMe đầu cuối, bộ nhớ đệm bổ sung trên SCM và một loạt giải pháp khác.
Bối cảnh dữ liệu mới - lưu trữ dữ liệu mới
Cường độ dữ liệu đang gia tăng trên tất cả các ngành. Và lĩnh vực ngân hàng là một minh chứng rõ nét cho điều này. Trong vài năm qua, số lượng giao dịch ngân hàng đã tăng hơn mười lần. Như cho thấy , chỉ ở Nga trong giai đoạn từ 2010 đến 2018, số lượng giao dịch không dùng tiền mặt sử dụng thẻ nhựa đã tăng hơn ba mươi lần - từ 5,8 lên 172 mỗi người mỗi năm. Trước hết, chiến thắng của các khoản thanh toán vi mô: hầu hết chúng ta đã trở nên quen thuộc với ngân hàng trực tuyến và ngân hàng hiện nằm trong tầm tay của chúng ta - trên điện thoại.
Cơ sở hạ tầng CNTT của một tổ chức tín dụng phải sẵn sàng cho một thách thức như vậy. Và đây thực sự là một thử thách. Trong số những thứ khác, nếu trước đó ngân hàng chỉ cần đảm bảo tính khả dụng của dữ liệu trong giờ làm việc, thì bây giờ là 24/7. Cho đến gần đây, 5 mili giây được coi là tốc độ trễ có thể chấp nhận được, vậy thì sao? Bây giờ thậm chí 1 ms là quá mức cần thiết. Đối với hệ thống lưu trữ hiện đại, mục tiêu là 0,5 mili giây.
Điều tương tự với độ tin cậy: trong những năm 2010, một hiểu biết thực nghiệm đã được hình thành rằng chỉ cần đưa mức của nó lên “năm chục” - 99,999%. Đúng, sự hiểu biết này đã trở nên lỗi thời. Vào năm 2020, việc một doanh nghiệp yêu cầu 99,9999% cho dung lượng lưu trữ và 99,99999% cho kiến trúc tổng thể là điều hoàn toàn bình thường. Và đây hoàn toàn không phải là một ý thích bất chợt, mà là một nhu cầu cấp thiết: hoặc không có cửa sổ thời gian để bảo trì cơ sở hạ tầng, hoặc nó rất nhỏ.
Để rõ ràng, sẽ thuận tiện khi chiếu các chỉ báo này lên mặt phẳng tiền tệ. Cách dễ nhất là lấy ví dụ về các tổ chức tài chính. Biểu đồ trên cho thấy mỗi ngân hàng trong số 10 ngân hàng hàng đầu thế giới kiếm được bao nhiêu mỗi giờ. Đối với riêng Ngân hàng Công thương Trung Quốc, con số này không dưới 5 triệu USD. tính toán!). Từ quan điểm này, rõ ràng là việc giảm thời gian ngừng hoạt động và tăng độ tin cậy, không chỉ một vài phần trăm, mà thậm chí chỉ bằng một phần trăm, là hoàn toàn hợp lý. Không chỉ vì lý do tăng khả năng cạnh tranh, mà chỉ đơn giản là vì mục đích duy trì vị trí trên thị trường.
Những thay đổi có thể so sánh được đang diễn ra trong các ngành công nghiệp khác. Ví dụ, trong lĩnh vực vận tải hàng không: trước đại dịch, việc di chuyển bằng đường hàng không chỉ phát triển mạnh từ năm này qua năm khác và nhiều người bắt đầu sử dụng nó gần giống như taxi. Đối với mô hình người tiêu dùng, thói quen về sự sẵn có của các dịch vụ đã bắt nguồn từ xã hội: khi đến sân bay, chúng ta cần kết nối Wi-Fi, truy cập dịch vụ thanh toán, truy cập bản đồ khu vực, v.v. dẫn đến tải trọng cho cơ sở hạ tầng và dịch vụ tại các không gian công cộng tăng lên gấp nhiều lần. Và những cách tiếp cận cơ sở hạ tầng, xây dựng, mà chúng tôi coi là chấp nhận được thậm chí một năm trước, đang nhanh chóng trở nên lỗi thời.
Có quá sớm để chuyển sang All-Flash không?
Để giải quyết các vấn đề được đề cập ở trên, về hiệu suất, AFA - mảng toàn flash, tức là mảng được xây dựng hoàn toàn trên flash - là phù hợp nhất. Trừ khi, cho đến gần đây, vẫn còn nghi ngờ về việc liệu chúng có thể so sánh về độ tin cậy với những thiết bị được lắp ráp trên cơ sở ổ cứng và ổ lai hay không. Xét cho cùng, bộ nhớ flash thể rắn có một số liệu gọi là thời gian trung bình giữa các lần hỏng hoặc MTBF (thời gian trung bình giữa các lần hỏng). Than ôi, sự xuống cấp của các ô do hoạt động I / O là điều hiển nhiên.
Vì vậy, triển vọng cho All-Flash đã bị lu mờ bởi câu hỏi làm thế nào để ngăn ngừa mất dữ liệu trong trường hợp SSD tồn tại trong một thời gian dài. Sao lưu là một tùy chọn quen thuộc, chỉ là thời gian khôi phục sẽ lớn không thể chấp nhận được dựa trên các yêu cầu hiện đại. Một cách khác là thiết lập mức lưu trữ thứ hai trên các ổ trục chính, tuy nhiên, với sơ đồ như vậy, một số ưu điểm của hệ thống "flash nghiêm ngặt" sẽ bị mất đi.
Tuy nhiên, những con số lại nói khác: số liệu thống kê của những gã khổng lồ trong nền kinh tế kỹ thuật số, bao gồm cả Google, trong những năm gần đây cho thấy flash đáng tin cậy hơn nhiều lần so với ổ cứng. Hơn nữa, cả trong thời gian ngắn và trong thời gian dài: trung bình, bốn đến sáu năm trôi qua trước khi ổ đĩa flash bị hỏng. Về độ tin cậy lưu trữ dữ liệu, chúng không thua kém gì các ổ đĩa trên đĩa từ trục chính, thậm chí vượt qua chúng.
Một lập luận truyền thống khác ủng hộ truyền động trục chính là khả năng chi trả của chúng. Không còn nghi ngờ gì nữa, chi phí lưu trữ một terabyte trên ổ cứng vẫn còn tương đối thấp. Và nếu bạn chỉ tính đến chi phí thiết bị, thì việc giữ một terabyte trên ổ trục chính sẽ rẻ hơn so với trên SSD. Tuy nhiên, trong bối cảnh lập kế hoạch tài chính, vấn đề không chỉ là số tiền mua một thiết bị cụ thể mà còn là tổng chi phí để sở hữu nó trong một thời gian dài - từ ba đến bảy năm.
Từ góc độ này, nó hoàn toàn khác. Ngay cả khi chúng ta bỏ qua tính năng chống trùng lặp và nén, theo quy luật, được sử dụng trên các mảng đèn flash và giúp hoạt động của chúng mang lại lợi nhuận kinh tế cao hơn, thì vẫn có những đặc điểm như không gian giá đỡ bị phương tiện chiếm dụng, tản nhiệt và mức tiêu thụ điện năng. Và theo họ, tuôn ra vượt trội so với những người tiền nhiệm của nó. Do đó, TCO của hệ thống lưu trữ flash, có tính đến tất cả các tham số, thường chỉ bằng một nửa so với trường hợp mảng trên ổ trục chính hoặc ổ lai.
Theo báo cáo của ESG, hệ thống lưu trữ Dorado V6 All-Flash có thể giảm chi phí sở hữu lên tới 78% trong khoảng thời gian XNUMX năm, bao gồm thông qua nén và sao chép hiệu quả, đồng thời do mức tiêu thụ điện năng và tản nhiệt thấp. Công ty phân tích DCIG của Đức cũng khuyến nghị sử dụng chúng như là tốt nhất về TCO hiện có.
Việc sử dụng ổ đĩa trạng thái rắn giúp tiết kiệm không gian sử dụng, giảm số lần hỏng hóc, giảm thời gian bảo trì giải pháp, giảm mức tiêu thụ điện năng và tản nhiệt của hệ thống lưu trữ. Và hóa ra AFA ít nhất có thể so sánh về mặt kinh tế với các mảng truyền thống trên các ổ trục chính và thậm chí thường vượt qua chúng.
Huawei Royal Flush
Trong số các kho chứa All-Flash của chúng tôi, vị trí dẫn đầu thuộc về hệ thống hi-end OceanStor Dorado 18000 V6. Và không chỉ trong số chúng tôi: nói chung, trong ngành, nó giữ kỷ lục về tốc độ - lên tới 20 triệu IPOS ở cấu hình tối đa. Ngoài ra, nó cực kỳ đáng tin cậy: ngay cả khi hai bộ điều khiển bay cùng một lúc hoặc tối đa bảy bộ điều khiển nối tiếp nhau hoặc toàn bộ động cơ cùng một lúc, dữ liệu sẽ tồn tại. AI được kết nối với nó mang lại những lợi thế đáng kể, bao gồm cả tính linh hoạt trong việc quản lý các quy trình nội bộ. Hãy xem làm thế nào điều này đạt được.
Phần lớn, Huawei đã đi trước vì đây là nhà sản xuất duy nhất trên thị trường tự sản xuất hệ thống lưu trữ - hoàn toàn và hoàn chỉnh. Chúng tôi có mạch riêng, vi mã riêng, dịch vụ riêng.
Bộ điều khiển trong các hệ thống OceanStor Dorado được xây dựng trên bộ xử lý do chính Huawei thiết kế và sản xuất - Kunpeng 920. Bộ điều khiển này sử dụng mô-đun điều khiển Bộ điều khiển quản lý bảng điều khiển thông minh (iBMC), cũng là của chúng tôi. Các chip AI, cụ thể là Ascend 310, giúp tối ưu hóa các dự đoán lỗi và đưa ra các đề xuất cho cài đặt, cũng là của Huawei, cũng như các bảng I / O - mô-đun I / O thông minh. Cuối cùng, bộ điều khiển trong SSD được thiết kế và sản xuất bởi chúng tôi. Tất cả điều này cung cấp cơ sở để tạo ra một giải pháp hiệu suất cao và cân bằng toàn diện.
Trong năm qua, chúng tôi đã thực hiện một dự án để giới thiệu hệ thống lưu trữ hàng đầu này, hệ thống lưu trữ cao cấp nhất của chúng tôi, tại một trong những ngân hàng lớn nhất của Nga. Do đó, hơn 40 thiết bị OceanStor Dorado 18000 V6 trong cụm tàu điện ngầm cho thấy hiệu suất ổn định: hơn một triệu IOPS có thể được loại bỏ khỏi mỗi hệ thống và điều này có tính đến độ trễ do khoảng cách.
NVMe đầu cuối
Các hệ thống lưu trữ mới nhất của Huawei hỗ trợ NVMe đầu cuối, điều mà chúng tôi nhấn mạnh là có lý do. Các giao thức được sử dụng truyền thống để truy cập các ổ đĩa được phát triển từ thời CNTT cổ xưa: chúng dựa trên các lệnh SCSI (xin chào, những năm 1980!), Giao thức này có rất nhiều chức năng để đảm bảo khả năng tương thích ngược. Dù bạn sử dụng phương pháp truy cập nào, chi phí giao thức trong trường hợp này là rất lớn. Do đó, đối với các kho lưu trữ sử dụng giao thức gắn với SCSI, độ trễ I/O không được thấp hơn 0,4–0,5 ms. Đổi lại, là một giao thức được thiết kế để hoạt động với bộ nhớ flash và được giải phóng khỏi nạng vì khả năng tương thích ngược nổi tiếng, NVMe - Non-Volatile Memory Express - giảm độ trễ xuống 0,1 ms, hơn nữa, không phải trên hệ thống lưu trữ, mà trên toàn bộ ngăn xếp, từ máy chủ đến các ổ đĩa. Không ngạc nhiên khi NVMe phù hợp với xu hướng phát triển lưu trữ dữ liệu trong tương lai gần. Chúng tôi cũng dựa vào NVMe - và đang dần rời xa SCSI. Tất cả các hệ thống lưu trữ Huawei được sản xuất hiện nay, bao gồm cả dòng Dorado, đều hỗ trợ NVMe (tuy nhiên, với tư cách là đầu cuối, nó chỉ được triển khai trên các kiểu máy tiên tiến của dòng Dorado V6).
FlashLink: Một nắm công nghệ
Công nghệ nền tảng cho toàn bộ dòng OceanStor Dorado là FlashLink. Chính xác hơn, đó là một thuật ngữ kết hợp một bộ công nghệ không thể thiếu nhằm đảm bảo hiệu suất và độ tin cậy cao. Điều này bao gồm các công nghệ nén và sao chép, hoạt động của hệ thống phân phối dữ liệu RAID 2.0+, tách dữ liệu "lạnh" và "nóng", ghi dữ liệu tuần tự đầy đủ (ghi ngẫu nhiên, với dữ liệu mới và thay đổi, được tổng hợp thành một ngăn xếp lớn và được viết tuần tự, giúp tăng tốc độ đọc-ghi).
Trong số những thứ khác, FlashLink bao gồm hai thành phần quan trọng - Cân bằng hao mòn và Thu gom rác toàn cầu. Họ nên được xử lý riêng.
Trên thực tế, bất kỳ ổ đĩa trạng thái rắn nào cũng là một hệ thống lưu trữ thu nhỏ, với số lượng lớn các khối và bộ điều khiển đảm bảo tính khả dụng của dữ liệu. Và nó được cung cấp, trong số những thứ khác, do dữ liệu từ các ô "đã bị giết" được chuyển sang ô "không bị giết". Điều này đảm bảo rằng chúng có thể được đọc. Có nhiều thuật toán khác nhau để chuyển như vậy. Trong trường hợp chung, bộ điều khiển cố gắng cân bằng độ hao mòn của tất cả các ô lưu trữ. Cách tiếp cận này có một nhược điểm. Khi dữ liệu được di chuyển bên trong SSD, số lượng thao tác I/O mà nó thực hiện sẽ giảm đáng kể. Hiện tại, đó là một điều ác cần thiết.
Do đó, nếu có nhiều ổ SSD trong hệ thống, biểu đồ hiệu suất sẽ xuất hiện một "cưa" với những thăng trầm rõ rệt. Vấn đề là một ổ đĩa từ nhóm có thể bắt đầu di chuyển dữ liệu bất kỳ lúc nào và hiệu suất tổng thể bị loại bỏ cùng lúc khỏi tất cả các ổ SSD trong mảng. Nhưng các kỹ sư của Huawei đã tìm ra cách để tránh bị "cưa".
May mắn thay, cả bộ điều khiển trong ổ đĩa, bộ điều khiển lưu trữ và phần sụn của Huawei đều là “bản địa”, các quy trình này trong OceanStor Dorado 18000 V6 được khởi chạy tập trung, đồng bộ trên tất cả các ổ đĩa trong mảng. Ngoài ra, theo lệnh của bộ điều khiển lưu trữ và chính xác khi không có tải I/O nặng.
Chip trí tuệ nhân tạo cũng tham gia vào việc chọn thời điểm thích hợp để truyền dữ liệu: dựa trên số liệu thống kê về số lần truy cập trong vài tháng trước, nó có thể dự đoán với xác suất cao nhất liệu I / O có hoạt động trong tương lai gần hay không và nếu câu trả lời là phủ định và tải trên hệ thống tại thời điểm hiện tại là nhỏ, thì bộ điều khiển sẽ ra lệnh cho tất cả các ổ đĩa: những người cần Cân bằng hao mòn nên thực hiện ngay lập tức và đồng bộ.
Ngoài ra, bộ điều khiển hệ thống nhìn thấy những gì đang xảy ra trong mỗi ô của ổ đĩa, không giống như hệ thống lưu trữ của các nhà sản xuất cạnh tranh: họ buộc phải mua phương tiện thể rắn từ các nhà cung cấp bên thứ ba, đó là lý do tại sao không có thông tin chi tiết ở cấp độ ô. các bộ điều khiển của các kho như vậy.
Do đó, OceanStor Dorado 18000 V6 có thời gian suy giảm hiệu suất rất ngắn đối với hoạt động Cân bằng hao mòn và nó được thực hiện chủ yếu khi nó không can thiệp vào bất kỳ quy trình nào khác. Điều này mang lại hiệu suất ổn định cao trên cơ sở liên tục.
Điều gì khiến OceanStor Dorado 18000 V6 trở nên đáng tin cậy
Có bốn mức độ tin cậy trong các hệ thống lưu trữ dữ liệu hiện đại:
- phần cứng, ở cấp độ ổ đĩa;
- kiến trúc, ở cấp độ thiết bị;
- phần kiến trúc và phần mềm;
- tích lũy, liên quan đến giải pháp nói chung.
Vì, chúng tôi nhớ lại, công ty chúng tôi tự thiết kế và sản xuất tất cả các thành phần của hệ thống lưu trữ, chúng tôi cung cấp độ tin cậy ở mỗi cấp độ trong số bốn cấp độ, với khả năng giám sát kỹ lưỡng những gì đang xảy ra tại thời điểm đó.
Độ tin cậy của các ổ đĩa được đảm bảo chủ yếu bởi Bộ sưu tập rác toàn cầu và San lấp mặt bằng hao mòn đã mô tả trước đó. Khi SSD trông giống như một hộp đen đối với hệ thống, nó không biết chính xác các tế bào trong đó hao mòn như thế nào. Đối với OceanStor Dorado 18000 V6, các ổ đĩa trong suốt, giúp có thể cân bằng đồng đều trên tất cả các ổ đĩa trong mảng. Do đó, nó kéo dài đáng kể tuổi thọ của SSD và đảm bảo mức độ tin cậy cao cho hoạt động của chúng.
Ngoài ra, độ tin cậy của ổ đĩa bị ảnh hưởng bởi các ô dự phòng bổ sung trong đó. Và cùng với một dự trữ đơn giản, hệ thống lưu trữ sử dụng cái gọi là các ô DIF, chứa các tổng kiểm tra, cũng như các mã bổ sung để bảo vệ mỗi khối khỏi một lỗi duy nhất, ngoài khả năng bảo vệ ở cấp độ mảng RAID.
Chìa khóa cho độ tin cậy của kiến trúc là giải pháp SmartMatrix. Nói tóm lại, đây là bốn bộ điều khiển nằm trên một bảng nối đa năng thụ động như một phần của một động cơ (động cơ). Hai trong số các động cơ này - tương ứng, với tám bộ điều khiển - được kết nối với các kệ chung bằng ổ đĩa. Nhờ SmartMatrix, ngay cả khi bảy trong số tám bộ điều khiển ngừng hoạt động, quyền truy cập vào tất cả dữ liệu, cả để đọc và ghi, sẽ vẫn còn. Và với việc mất sáu trong số tám bộ điều khiển, thậm chí có thể tiếp tục các hoạt động lưu vào bộ nhớ đệm.
Các bảng I/O trên cùng một bảng nối đa năng thụ động có sẵn cho tất cả các bộ điều khiển, cả trên giao diện người dùng và trên phần phụ trợ. Với sơ đồ kết nối toàn lưới như vậy, cho dù có lỗi gì xảy ra, quyền truy cập vào các ổ đĩa luôn được bảo toàn.
Điều thích hợp nhất là nói về độ tin cậy của một kiến trúc trong bối cảnh các chế độ lỗi mà hệ thống lưu trữ có thể bảo vệ chống lại.
Bộ lưu trữ sẽ tồn tại trong tình huống mà không bị mất nếu hai bộ điều khiển “rơi ra”, kể cả cùng một lúc. Sự ổn định như vậy đạt được do thực tế là bất kỳ khối bộ đệm nào chắc chắn có thêm hai bản sao trên các bộ điều khiển khác nhau, nghĩa là tổng cộng nó tồn tại trong ba bản sao. Và ít nhất một là trên một động cơ khác. Do đó, ngay cả khi toàn bộ động cơ ngừng hoạt động - với cả bốn bộ điều khiển của nó - thì đảm bảo rằng tất cả thông tin có trong bộ nhớ đệm sẽ được lưu lại, vì bộ đệm sẽ được sao chép trong ít nhất một bộ điều khiển từ động cơ còn lại. Cuối cùng, với kết nối nối tiếp, bạn có thể mất tối đa bảy bộ điều khiển và ngay cả khi chúng bị loại bỏ thành hai khối - và một lần nữa, tất cả I / O và tất cả dữ liệu từ bộ đệm sẽ được giữ nguyên.
Khi so sánh với bộ lưu trữ hi-end của các nhà sản xuất khác, có thể thấy chỉ có Huawei mới cung cấp khả năng bảo vệ dữ liệu đầy đủ và đầy đủ tính sẵn sàng kể cả sau khi khai tử XNUMX bộ điều khiển hoặc toàn bộ động cơ. Hầu hết các nhà cung cấp sử dụng sơ đồ với cái gọi là cặp bộ điều khiển mà các ổ đĩa được kết nối. Thật không may, trong cấu hình này, nếu hai bộ điều khiển bị lỗi, sẽ có nguy cơ mất quyền truy cập I/O vào ổ đĩa.
Than ôi, lỗi của một thành phần duy nhất không bị loại trừ một cách khách quan. Trong trường hợp này, hiệu suất sẽ giảm trong một thời gian: cần phải xây dựng lại các đường dẫn và tiếp tục truy cập vào các hoạt động I / O đối với các khối đã được ghi nhưng chưa được ghi hoặc đã được yêu cầu ghi được đọc. OceanStor Dorado 18000 V6 có thời gian xây dựng lại trung bình khoảng một giây, ít hơn đáng kể so với thiết bị tương tự gần nhất trong ngành (4 giây). Điều này đạt được nhờ vào bảng nối đa năng thụ động tương tự: khi bộ điều khiển bị lỗi, phần còn lại sẽ ngay lập tức nhìn thấy đầu vào / đầu ra của nó và cụ thể là khối dữ liệu nào chưa được ghi vào; kết quả là bộ điều khiển gần nhất sẽ chọn quy trình. Do đó khả năng khôi phục hiệu suất chỉ trong một giây. Tôi phải nói thêm, khoảng thời gian ổn định: một giây cho một bộ điều khiển, một giây cho bộ điều khiển khác, v.v.
Trong bảng nối đa năng thụ động OceanStor Dorado 18000 V6, tất cả các bảng đều có sẵn cho tất cả các bộ điều khiển mà không cần thêm bất kỳ địa chỉ nào. Điều này có nghĩa là bất kỳ bộ điều khiển nào cũng có thể nhận I/O trên bất kỳ cổng nào. Bất kể cổng I/O giao diện người dùng nào đi vào, bộ điều khiển sẽ sẵn sàng xử lý nó. Do đó - số lần chuyển nội bộ tối thiểu và sự đơn giản hóa đáng chú ý của việc cân bằng.
Cân bằng giao diện người dùng được thực hiện bằng trình điều khiển đa đường và cân bằng bổ sung được thực hiện trong chính hệ thống, vì tất cả các bộ điều khiển đều nhìn thấy tất cả các cổng I / O.
Theo truyền thống, tất cả các mảng của Huawei đều được thiết kế theo cách mà chúng không có một điểm lỗi nào. Trao đổi nóng, mà không cần khởi động lại hệ thống, tự cho mượn tất cả các thành phần của nó: bộ điều khiển, mô-đun nguồn, mô-đun làm mát, bảng I / O, v.v.
Nâng cao độ tin cậy của toàn bộ hệ thống và công nghệ như RAID-TP. Đây là tên của một nhóm RAID, cho phép bạn đảm bảo chống lại sự cố đồng thời của tối đa ba ổ đĩa. Và quá trình xây dựng lại 1 TB luôn mất chưa đến 30 phút. Kết quả tốt nhất được ghi lại nhanh hơn tám lần so với cùng một lượng dữ liệu trên ổ đĩa trục chính. Do đó, có thể sử dụng các ổ đĩa cực kỳ dung lượng, chẳng hạn như 7,68 hoặc thậm chí 15 TB mà không phải lo lắng về độ tin cậy của hệ thống.
Điều quan trọng là việc xây dựng lại không được thực hiện trong một ổ đĩa dự phòng, mà trong một không gian trống - dung lượng dự trữ. Mỗi ổ đĩa có không gian dành riêng được sử dụng để khôi phục dữ liệu sau khi hỏng. Do đó, việc khôi phục được thực hiện không theo sơ đồ “nhiều đối một”, mà theo sơ đồ “nhiều đối nhiều”, nhờ đó có thể tăng tốc đáng kể quá trình. Và miễn là còn dung lượng trống, quá trình phục hồi có thể tiếp tục.
Chúng ta cũng nên đề cập đến độ tin cậy của một giải pháp từ một số kho lưu trữ - trong một cụm thành phố lớn, hay theo thuật ngữ của Huawei là HyperMetro. Các lược đồ như vậy được hỗ trợ trên toàn bộ phạm vi mô hình của các hệ thống lưu trữ dữ liệu của chúng tôi và cho phép truy cập cả tệp và khối. Hơn nữa, trên một khối, nó hoạt động qua cả Kênh sợi quang và Ethernet (bao gồm cả qua iSCSI).
Về bản chất, chúng ta đang nói về việc sao chép hai chiều từ hệ thống lưu trữ này sang hệ thống lưu trữ khác, trong đó LUN được sao chép được cung cấp LUN-ID giống như LUN-ID chính. Công nghệ này hoạt động chủ yếu nhờ tính nhất quán của bộ đệm từ hai hệ thống khác nhau. Do đó, đối với máy chủ, nó ở bên nào không quan trọng: cả ở đây và ở đó, nó đều nhìn thấy cùng một ổ đĩa logic. Do đó, không có gì ngăn cản bạn triển khai cụm chuyển đổi dự phòng trên hai trang web.
Đối với đại biểu, một máy Linux vật lý hoặc ảo được sử dụng. Nó có thể được đặt trên trang thứ ba và các yêu cầu đối với tài nguyên của nó là nhỏ. Một tình huống phổ biến là thuê một trang web ảo dành riêng cho việc lưu trữ một máy ảo đại biểu.
Công nghệ này cũng cho phép mở rộng: hai kho lưu trữ - trong một cụm thành phố lớn, một trang web bổ sung - với bản sao không đồng bộ.
Trong lịch sử, nhiều khách hàng đã hình thành một "vườn thú lưu trữ": một loạt các hệ thống lưu trữ từ các nhà sản xuất khác nhau, kiểu máy khác nhau, thế hệ khác nhau, với chức năng khác nhau. Tuy nhiên, số lượng máy chủ có thể rất ấn tượng và chúng thường được ảo hóa. Trong những trường hợp như vậy, một trong những ưu tiên của quản trị là cung cấp các đĩa logic một cách nhanh chóng, thống nhất và thuận tiện cho các máy chủ, tốt nhất là theo cách không đi sâu vào vị trí thực của các đĩa này. Đó là mục đích mà giải pháp phần mềm OceanStor DJ của chúng tôi được thiết kế, có thể đồng nhất quản lý các hệ thống lưu trữ khác nhau và cung cấp dịch vụ từ chúng mà không bị ràng buộc với một mô hình lưu trữ cụ thể.
AI giống nhau
Như đã đề cập, OceanStor Dorado 18000 V6 có bộ xử lý tích hợp với thuật toán trí tuệ nhân tạo - Ascend. Thứ nhất, chúng được sử dụng để dự đoán lỗi và thứ hai, để hình thành các đề xuất điều chỉnh, điều này cũng làm tăng hiệu suất và độ tin cậy của bộ lưu trữ.
Khoảng thời gian dự đoán là hai tháng: Máy móc AI giả định điều gì sẽ xảy ra với xác suất cao trong thời gian này, liệu đã đến lúc mở rộng, thay đổi chính sách truy cập, v.v. Các đề xuất được đưa ra trước, cho phép bạn lên kế hoạch trước cho các cửa sổ để bảo trì hệ thống của thời gian.
Giai đoạn phát triển AI tiếp theo của Huawei là đưa nó lên cấp độ toàn cầu. Trong quá trình bảo trì dịch vụ - chuyển đổi dự phòng hoặc đề xuất - Huawei tổng hợp thông tin từ các hệ thống ghi nhật ký từ kho lưu trữ của tất cả các khách hàng của chúng tôi. Dựa trên thông tin thu thập được, một phân tích về các lỗi đã xảy ra hoặc tiềm ẩn được thực hiện và các khuyến nghị toàn cầu được đưa ra - không dựa trên hoạt động của một hệ thống lưu trữ cụ thể hoặc thậm chí hàng tá, mà dựa trên những gì đang xảy ra và đã xảy ra với hàng nghìn hệ thống lưu trữ như vậy. thiết bị. Mẫu rất lớn và dựa trên nó, các thuật toán AI bắt đầu học cực kỳ nhanh, đó là lý do tại sao độ chính xác của các dự đoán tăng lên đáng kể.
Khả năng tương thích
Trong năm 2019-2020, đã có rất nhiều thông tin ám chỉ về sự tương tác giữa thiết bị của chúng tôi với các sản phẩm của VMware. Để cuối cùng ngăn chặn chúng, chúng tôi tuyên bố một cách có trách nhiệm: VMware là đối tác của Huawei. Tất cả các thử nghiệm có thể tưởng tượng được đã được thực hiện để kiểm tra tính tương thích của phần cứng của chúng tôi với phần mềm của nó và kết quả là trên trang web của VMware, trang tính tương thích của phần cứng liệt kê các hệ thống lưu trữ hiện có do sản xuất của chúng tôi cung cấp mà không cần đặt trước. Nói cách khác, với môi trường phần mềm VMware, bạn có thể sử dụng bộ lưu trữ Huawei, bao gồm Dorado V6, với sự hỗ trợ đầy đủ.
Điều tương tự cũng xảy ra với sự hợp tác của chúng tôi với Brocade. Chúng tôi tiếp tục tương tác và kiểm tra tính tương thích của các sản phẩm và có thể tự tin tuyên bố rằng hệ thống lưu trữ của chúng tôi hoàn toàn tương thích với các thiết bị chuyển mạch Brocade FC mới nhất.
Cái gì tiếp theo?
Chúng tôi tiếp tục phát triển và cải thiện bộ vi xử lý của mình: chúng trở nên nhanh hơn, đáng tin cậy hơn, hiệu suất của chúng tăng lên. Chúng tôi cũng đang cải tiến chip AI - dựa trên chúng, các mô-đun cũng được sản xuất để tăng tốc độ sao chép và nén. Những người có quyền truy cập vào trình cấu hình của chúng tôi có thể nhận thấy rằng các thẻ này đã có sẵn để đặt hàng trong các mẫu Dorado V6.
Chúng tôi cũng đang hướng tới bộ nhớ đệm bổ sung trên Bộ nhớ lớp lưu trữ - bộ nhớ ổn định với độ trễ đặc biệt thấp, khoảng mười micro giây mỗi lần đọc. Trong số những thứ khác, SCM giúp tăng hiệu suất, chủ yếu khi làm việc với dữ liệu lớn và khi giải quyết các tác vụ OLTP. Sau lần cập nhật tiếp theo, thẻ SCM sẽ có sẵn để đặt hàng.
Và tất nhiên, chức năng truy cập tệp sẽ được mở rộng trên toàn bộ phạm vi lưu trữ dữ liệu của Huawei - hãy chú ý theo dõi các bản cập nhật của chúng tôi.
Nguồn: www.habr.com