MAX Data se fusionará con Optane DC para un funcionamiento eficiente con sistemas de IA y ML.
Foto — — Unsplash
Por investigaciones de MIT Sloan Management Review y The Boston Consulting Group, el 85% de los tres mil gerentes encuestados creen que los sistemas de IA ayudarán a sus empresas a obtener una ventaja competitiva en el mercado. Sin embargo, solo el 39% de las empresas han intentado implementar algo similar en la práctica.
Una de las razones de la situación actual es que el trabajo efectivo con datos y la optimización del uso de capacidades para tareas de aprendizaje automático no es sencillo. En IDC , se señala que una nueva tecnología basada en memoria persistente (Persistent Memory, PMEM) podría resolver la situación.
Esta tecnología fue propuesta por NetApp e Intel, NetApp Memory Accelerated (MAX) Data y Intel Optane DC Persistent Memory, para obtener un producto de almacenamiento local de datos basado en memoria no volátil.
¿Cómo funciona?
MAX Data es una tecnología de servidor que permite mejorar el rendimiento de aplicaciones mediante el uso de PMEM o DRAM, pero que no requiere la reestructuración de la arquitectura del software.
Implementa principios de almacenamiento jerárquico automatizado, distribuyendo datos a través de niveles y almacenes según la frecuencia de uso; para datos 'fríos' se utiliza almacenamiento más accesible, mientras que los utilizados con frecuencia se mantienen 'a mano' en la memoria persistente, minimizando la latencia en el manejo de tales datos.
La versión 1.1 utiliza memoria DRAM y . Ambas implementaciones tienen sus desventajas: la pérdida relativa de eficiencia y el alto costo de la memoria, respectivamente, en comparación con Optane DCPMM. Se presenta un diagrama que proporciona una evaluación comparativa de la latencia (pág. 4).
Tecnología y y el trabajo con la semántica de sistemas de bloques o de archivos. La protección y recuperación de datos a nivel de almacenamiento se realiza mediante MAX Snap y MAX Recovery. Estas tecnologías utilizan instantáneas, la herramienta SnapMirror y otros mecanismos de protección de ONTAP.
Esquemáticamente, la implementación se ve de la siguiente manera:
En este esquema aún no hay PMEM, pero los desarrolladores prometen agregar soporte para este tipo de memoria antes de fin de año. Por ahora, Max Data funciona con DRAM y DIMM.
Potencial de la solución
En IDC , se establece que en los próximos años habrá más desarrollos como MAX Data, ya que los volúmenes de datos corporativos siguen creciendo y las empresas carecen de capacidades para procesarlos de manera efectiva. Tecnología ser útil en un entorno de nube a gran escala y para trabajar con tareas intensivas en recursos, como el entrenamiento de redes neuronales. Se aplicará en plataformas de trading, sistemas de información de seguridad y en cualquier otro producto de software donde se requiera acceso continuo y rápido a grandes volúmenes de información.
También existe la posibilidad de que la tecnología no se adopte de inmediato en el mercado. Como mencionamos anteriormente, solo un tercio de las empresas en todo el mundo trabaja de alguna manera con sistemas de inteligencia artificial. Desde esta perspectiva, muchos pueden considerar la aparición de MAX Data como prematura y centrar su atención en infraestructuras más accesibles que permiten resolver problemas actuales.
Nuestros otros materiales sobre infraestructura de TI:
Fuente: habr.com
