MAX Data s'associera à Optane DC pour un fonctionnement efficace avec les systèmes d'IA et de ML.
Photo — — Unsplash
Selon des études de MIT Sloan Management Review et du Boston Consulting Group, 85 % des trois mille dirigeants interrogés estiment que les systèmes d'IA aideront leurs entreprises à obtenir un avantage concurrentiel sur le marché. Cependant, seulement 39 % des entreprises ont tenté de mettre cela en pratique.
Une des raisons de cette situation est que travailler efficacement avec les données et optimiser l'utilisation des ressources pour les tâches d'apprentissage automatique n'est pas une tâche facile. Dans IDC , une nouvelle technologie basée sur la mémoire persistante (Persistent Memory, PMEM) pourrait résoudre la situation.
Cette technologie a été proposée par NetApp et Intel, NetApp Memory Accelerated (MAX) Data et Intel Optane DC Persistent Memory, afin d'obtenir un produit de stockage local basé sur une mémoire non volatile.
Comment cela fonctionne
MAX Data est une technologie serveur qui permet d'améliorer les performances des applications grâce à l'utilisation de PMEM ou DRAM, sans nécessiter de restructuration de l'architecture logicielle.
Elle met en œuvre les principes de stockage automatisé en plusieurs niveaux, distribuant les données selon des niveaux et des stockages en fonction de la fréquence d'utilisation — pour les données « froides », un stockage moins coûteux est utilisé, tandis que les données fréquemment utilisées sont rapidement accessibles — en mémoire persistante, qui minimise la latence lors du traitement de ces données.
La version 1.1 utilise la mémoire DRAM et . Les deux mises en œuvre ont leurs inconvénients — la perte relative d'efficacité et le coût élevé de la mémoire, respectivement — comparé à l'Optane DCPMM. Le diagramme, qui fournit une évaluation comparative de la latence, est présenté (p. 4).
Technologie et et le travail avec la sémantique des systèmes de fichiers ou de blocs. La protection et la récupération des données au niveau du stockage sont réalisées à l'aide de MAX Snap et MAX Recovery. Ces technologies utilisent des instantanés, l'outil SnapMirror et d'autres mécanismes de protection ONTAP.
La mise en œuvre schématique ressemble à ceci :

Ce schéma ne montre pas encore le PMEM, mais les développeurs promettent d'ajouter la prise en charge de ce type de mémoire d'ici la fin de l'année. Actuellement, Max Data fonctionne avec DRAM et DIMM.
Le potentiel de la solution
Dans IDC , dans les années à venir, il y aura davantage de développements comme MAX Data, car les volumes de données d'entreprise continuent d'augmenter et les entreprises manquent de ressources pour les traiter efficacement. La technologie sera utile dans un environnement cloud à grande échelle et pour des tâches gourmandes en ressources telles que la formation de réseaux neuronaux. Elle trouvera son application sur des plateformes de trading, dans des systèmes de sécurité de l'information et dans tous les autres produits logiciels nécessitant un accès constant et rapide à de grands volumes d'informations.
Il y a aussi une probabilité que la technologie ne s'implante pas rapidement sur le marché. Comme nous l'avons mentionné précédemment, seulement un tiers des entreprises dans le monde travaillent avec des systèmes d'IA, sous une forme ou une autre. Sous cet angle, l'apparition de MAX Data pourrait sembler prématurée, et beaucoup pourraient se concentrer sur une infrastructure plus accessible qui permet de résoudre des problèmes actuels.
Nos autres matériaux sur l'infrastructure IT :
Source : habr.com
