AI 和 ML 系统的新存储库将提供什么?

MAX Data 将与 Optane DC 相结合,以有效地与 AI 和 ML 系统协同工作。

AI 和 ML 系统的新存储库将提供什么?
Фото— Hitesh Choudhary — 不飞溅

数据 根据《麻省理工斯隆管理评论》和波士顿咨询集团的研究,接受调查的三千名经理中有 85% 认为人工智能系统将帮助他们的公司在市场上获得竞争优势。 然而,只有 39% 的公司尝试在实践中实施类似的措施。

造成这种情况的原因之一是,有效地处理数据和优化机器学习任务的能力使用并不是一件容易的事。 在国际数据中心 标记一种基于持久内存(Persistent Memory,PMEM)的新技术可以解决这个问题。

该技术由 NetApp 和 Intel 提出, 汇集 NetApp Memory Accelerated (MAX) Data 和 Intel Optane DC Persistent Memory 用于基于持久内存的本地存储产品。

怎么开动这个

MAX Data 是一种服务器技术,可通过使用 PMEM 或 DRAM 提高应用程序性能,但不需要重新构建软件架构。

它实现了自动分层存储的原则,根据使用频率将数据分配到级别和存储中——对于“冷”数据,使用更易访问的存储,经常使用的存储在“手边”——在持久内存中,这最大限度地减少了使用此类数据时的延迟。

1.1 版使用 DRAM 和 NVDIMM. 与 Optane DCPMM 相比,这两种实现都有其缺点 - 分别是效率的相对损失和内存的高成本。 提供了对延迟进行比较评估的图表 这里 (p.4)。

技术 支持 и POSIX 并使用块或文件系统的语义。 存储级数据保护和恢复是通过 MAX Snap 和 MAX Recovery 实现的。 这些技术使用快照、SnapMirror 工具和其他 ONTAP 安全机制。

从原理上讲,实现如下所示:

AI 和 ML 系统的新存储库将提供什么?

目前还没有针对该方案的 PMEM,但开发人员承诺会在年底前增加对此类内存的支持。 到目前为止,Max Data 适用于 DRAM 和 DIMM。

解决方案潜力

在国际数据中心 要求未来几年将会有更多像 MAX Data 这样的发展,因为企业数据量在不断增长,而企业没有足够的能力来有效地处理这些数据。 技术 может 在大规模云环境和处理资源密集型任务(如训练神经网络)中很有用。 它将应用于交易平台、信息安全系统和任何其他需要持续快速访问大量信息的软件产品。

该技术也有一定程度的可能性不会立即在市场上扎根。 如上所述,全球只有三分之一的公司以一种或另一种形式使用人工智能系统。 从这个角度来看,MAX Data 的出现可能被许多人认为为时过早,并将他们的注意力集中在一个更易于访问的基础设施上,使他们能够解决当前的问题。

我们关于 IT 基础架构的其他材料:

来源: habr.com

添加评论