Qu'offriront les nouveaux référentiels pour les systèmes d'IA et de ML ?

MAX Data sera combiné avec Optane DC pour fonctionner efficacement avec les systèmes d'IA et de ML.

Qu'offriront les nouveaux référentiels pour les systèmes d'IA et de ML ?
Фото - Hitesh Choudhary - sans éclaboussures

Sur Selon Selon une étude du MIT Sloan Management Review et du Boston Consulting Group, 85 % des trois mille managers interrogés pensent que les systèmes d'IA aideront leurs entreprises à acquérir un avantage concurrentiel sur le marché. Cependant, seulement 39% des entreprises ont essayé de mettre en œuvre quelque chose de similaire dans la pratique.

L'une des raisons de cette situation est que travailler efficacement avec des données et optimiser l'utilisation des capacités pour les tâches d'apprentissage automatique n'est pas une tâche facile. Chez IDC célébrerqu'une nouvelle technologie basée sur la mémoire persistante (Persistent Memory, PMEM) pourrait résoudre la situation.

Cette technologie a été proposée par NetApp et Intel, réunissant NetApp Memory Accelerated (MAX) Data et Intel Optane DC Persistent Memory pour un produit de stockage local basé sur la mémoire persistante.

Comment ça marche

MAX Data est une technologie de serveur qui améliore les performances des applications grâce à l'utilisation de PMEM ou de DRAM, mais ne nécessite pas de réarchitecturer le logiciel.

Il implémente les principes de stockage hiérarchisé automatisé, répartissant les données en niveaux et stockages en fonction de la fréquence d'utilisation - pour les données "froides", un stockage plus accessible est utilisé, et ceux fréquemment utilisés sont "à portée de main" - dans la mémoire persistante, qui minimise le délai lorsque vous travaillez avec de telles données.

La version 1.1 utilise la DRAM et NVDIMM. Les deux implémentations ont leurs inconvénients - la perte relative d'efficacité et le coût élevé de la mémoire, respectivement - par rapport à Optane DCPMM. Un graphique donnant une appréciation comparative du retard est présenté ici (p. 4).

Technologie soutient le и POSIX et travailler avec la sémantique des systèmes de blocs ou de fichiers. La protection et la récupération des données au niveau du stockage sont mises en œuvre avec MAX Snap et MAX Recovery. Ces technologies utilisent des instantanés, l'outil SnapMirror et d'autres mécanismes de sécurité ONTAP.

Schématiquement, l'implémentation ressemble à ceci :

Qu'offriront les nouveaux référentiels pour les systèmes d'IA et de ML ?

Il n'y a pas encore de PMEM sur ce schéma, mais les développeurs promettent d'ajouter le support de ce type de mémoire avant la fin de l'année. Jusqu'à présent, Max Data fonctionne avec DRAM et DIMM.

Potentiel de solution

Chez IDC argumenterque dans les années à venir, il y aura plus de développements comme MAX Data, car le volume de données d'entreprise ne cesse de croître et les entreprises n'ont pas suffisamment de capacité pour les traiter efficacement. Technologie может utile dans un environnement cloud à grande échelle et pour travailler avec des tâches gourmandes en ressources telles que la formation de réseaux de neurones. Il trouvera une application sur les plateformes de trading, les systèmes de sécurité de l'information et tout autre produit logiciel nécessitant un accès constant et rapide à de grandes quantités d'informations.

Il est également probable que la technologie ne s'implantera pas immédiatement sur le marché. Comme nous l'avons noté ci-dessus, seul un tiers des entreprises dans le monde travaillent avec des systèmes d'IA sous une forme ou une autre. De ce point de vue, l'émergence de MAX Data peut être considérée comme prématurée par beaucoup et concentrera leur attention sur une infrastructure plus accessible qui leur permettra de résoudre les problèmes actuels.

Nos autres documents sur l'infrastructure informatique :

Source: habr.com

Ajouter un commentaire