MAX Data se combinará con Optane DC para trabajar eficazmente con sistemas de IA y ML.
Фото - — Desechar
En Según un estudio del MIT Sloan Management Review y The Boston Consulting Group, el 85% de los tres mil directivos encuestados cree que los sistemas de IA ayudarán a sus empresas a obtener una ventaja competitiva en el mercado. Sin embargo, sólo el 39% de las empresas intentó implementar algo similar en la práctica.
Una de las razones de esta situación es que trabajar eficazmente con datos y optimizar el uso de la energía para tareas de aprendizaje automático no es una tarea fácil. En IDC , que una nueva tecnología basada en la memoria permanente (Persistent Memory, PMEM) podría resolver la situación.
Esta tecnología fue propuesta por NetApp e Intel, Datos acelerados de memoria de NetApp (MAX) y memoria persistente Intel Optane DC para un producto de almacenamiento de memoria persistente local.
¿Cómo funciona esto
MAX Data es una tecnología de servidor que mejora el rendimiento de las aplicaciones mediante el uso de PMEM o DRAM, pero no requiere cambios en la arquitectura del software.
Implementa los principios del almacenamiento automatizado de múltiples niveles, distribuyendo datos entre niveles y almacenando según la frecuencia de uso (se utiliza un almacenamiento más accesible para datos "fríos" y los datos de uso frecuente están "a mano") en la memoria persistente, que Minimiza la latencia cuando se trabaja con dichos datos.
La versión 1.1 utiliza memoria DRAM y . Ambas implementaciones tienen sus inconvenientes (pérdida relativa de eficiencia y altos costos de memoria, respectivamente) en comparación con Optane DCPMM. Se presenta un gráfico que ofrece una estimación comparativa de la latencia. (p. 4).
Tecnología и y trabajar con la semántica de sistemas de bloques o archivos. La protección y recuperación de datos a nivel de almacenamiento se implementa utilizando MAX Snap y MAX Recovery. Estas tecnologías utilizan instantáneas, la herramienta SnapMirror y otros mecanismos de seguridad de ONTAP.
Esquemáticamente la implementación se ve así:
Todavía no hay PMEM en este circuito, pero los desarrolladores prometen agregar soporte para este tipo de memoria antes de fin de año. Hasta ahora, Max Data funciona con DRAM y DIMM.
Potencial de solución
En IDC que en los próximos años habrá más desarrollos como MAX Data, ya que el volumen de datos corporativos crece constantemente y las empresas no tienen la capacidad suficiente para procesarlos de forma eficaz. Tecnología útil en un entorno de nube a gran escala y para trabajar con tareas que consumen muchos recursos, como el entrenamiento de redes neuronales. Encontrará aplicación en plataformas comerciales, sistemas de seguridad de la información y cualquier otro producto de software que requiera un acceso rápido y constante a grandes volúmenes de información.
También existe la posibilidad de que la tecnología no se arraigue inmediatamente en el mercado. Como señalamos anteriormente, sólo un tercio de las empresas de todo el mundo trabajan con sistemas de IA de una forma u otra. Desde este punto de vista, muchos pueden considerar prematura la aparición de MAX Data y centrarán su atención en una infraestructura más accesible que les permita solucionar los problemas actuales.
Nuestros otros materiales sobre infraestructura de TI:
Fuente: habr.com