Những kho lưu trữ mới nào sẽ cung cấp cho hệ thống AI và ML

MAX Data sẽ được kết hợp với Optane DC để hoạt động hiệu quả với hệ thống AI và ML.

Những kho lưu trữ mới nào sẽ cung cấp cho hệ thống AI và ML
Фото - Hitesh Choudhary - Bỏ qua

Trên cho Theo nghiên cứu của MIT Sloan Management Review và The Boston Consulting Group, 85% trong số ba nghìn nhà quản lý được khảo sát tin rằng hệ thống AI sẽ giúp công ty của họ đạt được lợi thế cạnh tranh trên thị trường. Tuy nhiên, chỉ có 39% công ty cố gắng triển khai điều gì đó tương tự trên thực tế.

Một trong những nguyên nhân dẫn đến tình trạng này là việc làm việc hiệu quả với dữ liệu và tối ưu hóa việc sử dụng năng lượng cho các tác vụ machine learning không phải là công việc dễ dàng. Tại IDC ăn mừng, rằng một công nghệ mới dựa trên bộ nhớ vĩnh viễn (Bộ nhớ liên tục, PMEM) có thể giải quyết tình huống này.

Công nghệ này được NetApp và Intel đề xuất, đoàn kết Dữ liệu tăng tốc bộ nhớ NetApp (MAX) và Bộ nhớ liên tục Intel Optane DC dành cho sản phẩm lưu trữ bộ nhớ liên tục cục bộ.

Làm thế nào nó hoạt động

MAX Data là công nghệ máy chủ giúp cải thiện hiệu suất ứng dụng thông qua việc sử dụng PMEM hoặc DRAM nhưng không yêu cầu thay đổi kiến ​​trúc phần mềm.

Nó thực hiện các nguyên tắc lưu trữ đa cấp tự động, phân phối dữ liệu giữa các cấp và lưu trữ tùy thuộc vào tần suất sử dụng - bộ nhớ dễ tiếp cận hơn được sử dụng cho dữ liệu “lạnh” và dữ liệu được sử dụng thường xuyên là “trong tầm tay” - trong Bộ nhớ liên tục, trong đó giảm thiểu độ trễ khi làm việc với dữ liệu đó.

Phiên bản 1.1 sử dụng bộ nhớ DRAM và NVDIMM. Cả hai cách triển khai đều có nhược điểm—tương ứng là giảm hiệu quả tương đối và chi phí bộ nhớ cao—so với Optane DCPMM. Một biểu đồ đưa ra ước tính so sánh về độ trễ được trình bày đây (trang 4).

Технология ủng hộ и POSIX và làm việc với ngữ nghĩa của hệ thống khối hoặc tệp. Bảo vệ và phục hồi dữ liệu ở cấp độ lưu trữ được triển khai bằng cách sử dụng MAX Snap và MAX Recovery. Những công nghệ này sử dụng ảnh chụp nhanh, công cụ SnapMirror và các cơ chế bảo mật ONTAP khác.

Sơ đồ thực hiện trông như thế này:

Những kho lưu trữ mới nào sẽ cung cấp cho hệ thống AI và ML

Chưa có PMEM trên mạch này, nhưng các nhà phát triển hứa sẽ bổ sung hỗ trợ cho loại bộ nhớ này vào cuối năm nay. Cho đến nay, Max Data hoạt động với DRAM và DIMM.

Tiềm năng giải pháp

Tại IDC yêu cầu bồi thườngrằng trong những năm tới sẽ có nhiều sự phát triển hơn như MAX Data, vì khối lượng dữ liệu của công ty không ngừng tăng lên và các công ty không có đủ năng lực để xử lý dữ liệu đó một cách hiệu quả. Công nghệ có thể hữu ích trong môi trường đám mây quy mô lớn và để làm việc với các tác vụ sử dụng nhiều tài nguyên như đào tạo mạng lưới thần kinh. Nó sẽ tìm thấy ứng dụng trên các nền tảng giao dịch, hệ thống bảo mật thông tin và bất kỳ sản phẩm phần mềm nào khác yêu cầu truy cập liên tục và nhanh chóng vào khối lượng thông tin lớn.

Cũng có khả năng công nghệ này sẽ không có mặt trên thị trường ngay lập tức. Như chúng tôi đã lưu ý ở trên, chỉ một phần ba số công ty trên thế giới làm việc với hệ thống AI ở dạng này hay dạng khác. Từ quan điểm này, nhiều người có thể coi sự xuất hiện của MAX Data là quá sớm và sẽ tập trung sự chú ý vào cơ sở hạ tầng dễ tiếp cận hơn để cho phép họ giải quyết các vấn đề hiện tại.

Các tài liệu khác của chúng tôi về cơ sở hạ tầng CNTT:

Nguồn: www.habr.com

Thêm một lời nhận xét