{"id":96141,"date":"2020-10-08T19:42:37","date_gmt":"2020-10-08T17:42:37","guid":{"rendered":"https:\/\/prohoster.info\/blog\/administrirovanie\/promyshlennye-tendenczii-v-oblasti-massovyh-sistem-hraneniya-dannyh"},"modified":"2020-10-08T19:42:37","modified_gmt":"2020-10-08T17:42:37","slug":"promyshlennye-tendenczii-v-oblasti-massovyh-sistem-hraneniya-dannyh","status":"publish","type":"post","link":"https:\/\/prohoster.info\/fr\/blog\/administrirovanie\/promyshlennye-tendenczii-v-oblasti-massovyh-sistem-hraneniya-dannyh","title":{"rendered":"Tendances industrielles dans le domaine des syst\u00e8mes de stockage de donn\u00e9es massives","gt_translate_keys":[{"key":"rendered","format":"text"}]},"content":{"rendered":"

Aujourd'hui, nous allons parler de la meilleure fa\u00e7on de stocker des donn\u00e9es dans un monde o\u00f9 les r\u00e9seaux de cinqui\u00e8me g\u00e9n\u00e9ration, les scanners de g\u00e9nomes et les voitures autonomes produisent plus de donn\u00e9es en une journ\u00e9e que l'ensemble de l'humanit\u00e9 n'en a g\u00e9n\u00e9r\u00e9 depuis la r\u00e9volution industrielle.<\/p>\n

\"Tendances
\n<\/a><\/noindex><\/p>\n

Notre monde g\u00e9n\u00e8re de plus en plus d'informations. Une partie de celle-ci est \u00e9ph\u00e9m\u00e8re et est perdue aussi rapidement qu'elle est collect\u00e9e. D'autres doivent \u00eatre stock\u00e9es plus longtemps, tandis que certaines sont con\u00e7ues pour 'des si\u00e8cles' \u2014 du moins, c'est ainsi que nous le percevons aujourd'hui. Les flux d'informations s'accumulent dans les centres de donn\u00e9es \u00e0 un rythme tel que toute nouvelle approche, toute nouvelle technologie destin\u00e9e \u00e0 satisfaire cette 'demande' infinie, obsol\u00e8te rapidement.<\/p>\n

\"Tendances
\n<\/p>\n

40 ans de d\u00e9veloppement des syst\u00e8mes de stockage distribu\u00e9s<\/h2>\n

\nLes premiers syst\u00e8mes de stockage en r\u00e9seau, sous la forme que nous connaissons aujourd'hui, sont apparus dans les ann\u00e9es 1980. Beaucoup d'entre vous ont probablement entendu parler de NFS (Network File System), AFS (Andrew File System) ou Coda. Une d\u00e9cennie plus tard, la mode et la technologie ont chang\u00e9, et les syst\u00e8mes de fichiers distribu\u00e9s ont c\u00e9d\u00e9 la place aux syst\u00e8mes de stockage en cluster bas\u00e9s sur GPFS (General Parallel File System), CFS (Clustered File Systems) et StorNext. Des syst\u00e8mes de stockage par blocs de l'architecture classique ont \u00e9t\u00e9 utilis\u00e9s comme base, sur laquelle une couche logicielle cr\u00e9ait un syst\u00e8me de fichiers unique. Ces solutions et d'autres similaires sont encore appliqu\u00e9es, occupent leur niche et sont assez demand\u00e9es.<\/p>\n

\u00c0 la fin du mill\u00e9naire, la paradigme des syst\u00e8mes de stockage distribu\u00e9s a quelque peu \u00e9volu\u00e9, et des syst\u00e8mes avec une architecture SN (Shared-Nothing) ont pris la t\u00eate. Il y a eu un passage du stockage en cluster au stockage sur des n\u0153uds individuels, qui \u00e9taient g\u00e9n\u00e9ralement des serveurs classiques dot\u00e9s d'un logiciel garantissant une conservation s\u00fbre ; des syst\u00e8mes comme HDFS (Hadoop Distributed File System) et GFS (Global File System) ont \u00e9t\u00e9 construits sur ces principes.<\/p>\n

Vers 2010, les concepts fondamentaux des syst\u00e8mes de stockage distribu\u00e9s ont commenc\u00e9 \u00e0 se refl\u00e9ter de plus en plus dans des produits commerciaux complets, tels que VMware vSAN, Dell EMC Isilon et notre Huawei OceanStor<\/a><\/noindex>. Derri\u00e8re ces plateformes, il n'y a plus une communaut\u00e9 d'enthousiastes, mais des fournisseurs concrets qui assurent la fonctionnalit\u00e9, le support, le service du produit et garantissent son d\u00e9veloppement futur. De telles solutions sont les plus demand\u00e9es dans plusieurs domaines.<\/p>\n

\"Tendances
\n<\/p>\n

Op\u00e9rateurs de t\u00e9l\u00e9communications<\/h2>\n

\nSans aucun doute, l'un des plus anciens consommateurs de syst\u00e8mes de stockage distribu\u00e9s sont les op\u00e9rateurs de t\u00e9l\u00e9communications. Le sch\u00e9ma montre quels groupes d'applications g\u00e9n\u00e8rent le volume principal de donn\u00e9es. OSS (Syst\u00e8mes de Support d'Op\u00e9rations), MSS (Services de Support de Gestion) et BSS (Syst\u00e8mes de Support d'Affaires) repr\u00e9sentent trois couches logicielles compl\u00e9mentaires n\u00e9cessaires pour fournir le service aux abonn\u00e9s, pour la comptabilit\u00e9 financi\u00e8re du fournisseur et pour le support op\u00e9rationnel des ing\u00e9nieurs de l'op\u00e9rateur.<\/p>\n

Souvent, les donn\u00e9es de ces couches sont fortement m\u00e9lang\u00e9es entre elles, et pour \u00e9viter l'accumulation de copies inutiles, on utilise justement des stockages distribu\u00e9s qui accumulent tout le volume d'information provenant du r\u00e9seau en fonctionnement. Les stockages sont regroup\u00e9s dans un pool commun, auquel tous les services acc\u00e8dent.<\/p>\n

Nos calculs montrent que le passage des syst\u00e8mes de stockage classiques aux syst\u00e8mes en blocs permet d'\u00e9conomiser jusqu'\u00e0 70 % du budget uniquement en renon\u00e7ant \u00e0 des syst\u00e8mes de stockage d\u00e9di\u00e9s de classe hi-end et en utilisant des serveurs classiques de l'architecture traditionnelle (g\u00e9n\u00e9ralement x86), fonctionnant avec un logiciel sp\u00e9cialis\u00e9. Les op\u00e9rateurs de t\u00e9l\u00e9communications ont d\u00e9j\u00e0 commenc\u00e9 \u00e0 acqu\u00e9rir de telles solutions en quantit\u00e9s consid\u00e9rables depuis un certain temps. En particulier, les op\u00e9rateurs russes utilisent de tels produits de Huawei depuis plus de six ans.<\/p>\n

Oui, certaines t\u00e2ches ne peuvent pas \u00eatre r\u00e9alis\u00e9es avec des syst\u00e8mes distribu\u00e9s. Par exemple, en cas d\u2019exigences accrues en mati\u00e8re de performance ou de compatibilit\u00e9 avec d'anciens protocoles. Mais au moins 70 % des donn\u00e9es trait\u00e9es par l'op\u00e9rateur peuvent tout \u00e0 fait \u00eatre plac\u00e9es dans un pool distribu\u00e9.<\/p>\n

\"Tendances
\n<\/p>\n

Secteur bancaire<\/h2>\n

\nDans chaque banque coexistent de nombreux syst\u00e8mes informatiques h\u00e9t\u00e9rog\u00e8nes, allant du traitement \u00e0 un syst\u00e8me bancaire automatis\u00e9. Cette infrastructure traite aussi un immense volume d'informations, la plupart des t\u00e2ches ne requ\u00e9rant pas de performances \u00e9lev\u00e9es ni une fiabilit\u00e9 accrue des syst\u00e8mes de stockage, par exemple le d\u00e9veloppement, les tests, l'automatisation des processus de bureau, etc. L'utilisation des syst\u00e8mes de stockage classiques est possible ici, mais elle devient de moins en moins rentable chaque ann\u00e9e. De plus, dans ce cas, il n'y a pas de flexibilit\u00e9 dans l'utilisation des ressources, dont la performance est calcul\u00e9e sur la base de la charge de pic.<\/p>\n

Lors de l'utilisation de syst\u00e8mes de stockage distribu\u00e9s, leurs n\u0153uds, qui sont en fait des serveurs ordinaires, peuvent \u00e0 tout moment \u00eatre convertis, par exemple, en ferme de serveurs et utilis\u00e9s comme plateforme de calcul.<\/p>\n

\"Tendances
\n<\/p>\n

Lacs de donn\u00e9es<\/h2>\n

\nDans le sch\u00e9ma ci-dessus, vous trouverez une liste des consommateurs typiques des services data lake<\/a><\/noindex>. Cela peut inclure des services de gouvernement \u00e9lectronique (par exemple, \u00ab Services publics \u00bb), des entreprises ayant fait l'objet d'une num\u00e9risation, des institutions financi\u00e8res, etc. Tous n\u00e9cessitent de travailler avec de grands volumes d'informations h\u00e9t\u00e9rog\u00e8nes. <\/p>\n

L'exploitation des syst\u00e8mes de stockage classiques pour r\u00e9soudre de telles t\u00e2ches est inefficace, car un acc\u00e8s performant aux bases de donn\u00e9es en block ainsi qu'un acc\u00e8s ordinaire aux biblioth\u00e8ques de documents num\u00e9ris\u00e9s, conserv\u00e9s sous forme d'objets, sont n\u00e9cessaires. Un syst\u00e8me de commande via un portail web peut \u00e9galement y \u00eatre associ\u00e9. Pour r\u00e9aliser tout cela sur une plateforme de syst\u00e8me de stockage classique, un ensemble important de mat\u00e9riel sera requis pour diff\u00e9rentes t\u00e2ches. Un seul syst\u00e8me de stockage horizontal universel peut tr\u00e8s bien couvrir toutes les t\u00e2ches pr\u00e9c\u00e9demment \u00e9num\u00e9r\u00e9es : il suffira de cr\u00e9er plusieurs pools avec diff\u00e9rentes caract\u00e9ristiques de stockage.<\/p>\n

\"Tendances
\n<\/p>\n

G\u00e9n\u00e9rateurs de nouvelles informations<\/h2>\n

\nLa quantit\u00e9 d'informations stock\u00e9es dans le monde augmente d'environ 30 % par an. C'est une bonne nouvelle pour les fournisseurs de syst\u00e8mes de stockage, mais quelle est la principale source de ces donn\u00e9es et quelle sera-t-elle \u00e0 l'avenir ?<\/p>\n

Il y a dix ans, les r\u00e9seaux sociaux sont devenus de tels g\u00e9n\u00e9rateurs, ce qui a n\u00e9cessit\u00e9 la cr\u00e9ation d'un grand nombre de nouveaux algorithmes, de solutions mat\u00e9rielles, etc. \u00c0 pr\u00e9sent, trois principaux moteurs de croissance des volumes de stockage se distinguent. Le premier est l'informatique en nuage. Actuellement, environ 70 % des entreprises utilisent d'une mani\u00e8re ou d'une autre des services cloud. Cela comprend des syst\u00e8mes de messagerie \u00e9lectronique, des sauvegardes et d'autres entit\u00e9s virtualis\u00e9es.
\nLe deuxi\u00e8me moteur est constitu\u00e9 par les r\u00e9seaux de cinqui\u00e8me g\u00e9n\u00e9ration. Ce sont de nouvelles vitesses et de nouveaux volumes de transmission de donn\u00e9es. Selon nos pr\u00e9visions, la large diffusion de la 5G entra\u00eenera une baisse de la demande en cartes m\u00e9moire Flash. Peu importe combien de m\u00e9moire un t\u00e9l\u00e9phone poss\u00e8de, elle finit toujours par se remplir, et avec un canal de 100 m\u00e9gabits dans l'appareil, il n'est plus n\u00e9cessaire de stocker des photos localement.<\/p>\n

La troisi\u00e8me cat\u00e9gorie de raisons pour lesquelles la demande de syst\u00e8mes de stockage augmente comprend le d\u00e9veloppement rapide de l'intelligence artificielle, le passage \u00e0 l'analyse des grandes donn\u00e9es et la tendance \u00e0 l'automatisation g\u00e9n\u00e9ralis\u00e9e de tout ce qui peut l'\u00eatre.<\/p>\n

Une caract\u00e9ristique du \"nouveau trafic\" est son non-structuration<\/a><\/noindex>. Nous devons stocker ces donn\u00e9es sans d\u00e9finir leur format. Celui-ci n'est n\u00e9cessaire que lors de la lecture ult\u00e9rieure. Par exemple, un syst\u00e8me de scoring bancaire pour d\u00e9terminer le montant de cr\u00e9dit disponible examinera les photos que vous avez publi\u00e9es sur les r\u00e9seaux sociaux, d\u00e9terminant \u00e0 quelle fr\u00e9quence vous allez \u00e0 la mer et dans les restaurants, tout en analysant en m\u00eame temps les extraits m\u00e9dicaux qui lui sont accessibles. Ces donn\u00e9es, d'une part, sont exhaustives, mais d'autre part, elles manquent d'homog\u00e9n\u00e9it\u00e9.<\/p>\n

\"Tendances
\n<\/p>\n

L'oc\u00e9an des donn\u00e9es non structur\u00e9es<\/h2>\n

\nQuelles sont donc les probl\u00e8mes li\u00e9s \u00e0 l'\u00e9mergence des \"nouvelles donn\u00e9es\" ? La plus pressante d'entre elles est bien s\u00fbr le volume d'informations et la dur\u00e9e de leur stockage. Un seul v\u00e9hicule autonome moderne g\u00e9n\u00e8re chaque jour jusqu'\u00e0 60 To de donn\u00e9es en provenance de tous ses capteurs et m\u00e9canismes. Pour d\u00e9velopper de nouveaux algorithmes de mouvement, ces informations doivent \u00eatre trait\u00e9es dans le m\u00eame d\u00e9lai, sinon elles commenceront \u00e0 s'accumuler. De plus, elles doivent \u00eatre conserv\u00e9es pendant tr\u00e8s longtemps \u2014 des d\u00e9cennies. Ce n'est qu'alors qu'il sera possible de tirer des conclusions bas\u00e9es sur de grands \u00e9chantillons analytiques dans le futur.<\/p>\n

Un seul appareil pour d\u00e9chiffrer les s\u00e9quences g\u00e9n\u00e9tiques produit environ 6 To par jour. Et les donn\u00e9es collect\u00e9es gr\u00e2ce \u00e0 son aide ne doivent en aucun cas \u00eatre supprim\u00e9es, c'est-\u00e0-dire qu'elles devraient th\u00e9oriquement \u00eatre conserv\u00e9es \u00e9ternellement.<\/p>\n

Enfin, il y a les r\u00e9seaux de cinqui\u00e8me g\u00e9n\u00e9ration. En plus des informations transmises, un tel r\u00e9seau est en lui-m\u00eame un \u00e9norme g\u00e9n\u00e9rateur de donn\u00e9es : journaux d'actions, enregistrements d'appels, r\u00e9sultats interm\u00e9diaires des interactions entre machines, etc. <\/p>\n

Tout cela n\u00e9cessite l'\u00e9laboration de nouvelles approches et algorithmes pour le stockage et le traitement des informations. Et de telles approches commencent \u00e0 appara\u00eetre.<\/p>\n

\"Tendances
\n<\/p>\n

Technologies de la nouvelle \u00e9poque<\/h2>\n

\nOn peut distinguer trois groupes de solutions destin\u00e9es \u00e0 r\u00e9pondre aux nouvelles exigences des syst\u00e8mes de stockage d'informations : l'int\u00e9gration de l'intelligence artificielle, l'\u00e9volution technique des supports de donn\u00e9es et les innovations dans le domaine de l'architecture des syst\u00e8mes. Commen\u00e7ons par l'IA.<\/p>\n

\"Tendances
\n
\nDans les nouvelles solutions de Huawei, l'intelligence artificielle est d\u00e9j\u00e0 utilis\u00e9e au niveau m\u00eame du stockage, qui est \u00e9quip\u00e9 d'un processeur IA permettant au syst\u00e8me d'analyser son propre \u00e9tat et de pr\u00e9dire des pannes. Si le syst\u00e8me de stockage est connect\u00e9 \u00e0 un cloud de services poss\u00e9dant d'importantes capacit\u00e9s de calcul, l'intelligence artificielle pourra traiter plus d'informations et am\u00e9liorer la pr\u00e9cision de ses hypoth\u00e8ses.<\/p>\n

En plus des pannes, cette IA est capable de pr\u00e9voir la future charge de pointe et le temps restant avant l'\u00e9puisement de la capacit\u00e9. Cela permet d'optimiser les performances et de faire \u00e9voluer le syst\u00e8me avant l'apparition d'\u00e9v\u00e9nements ind\u00e9sirables.<\/p>\n

\"Tendances
\n
\nParlons maintenant de l'\u00e9volution des supports de donn\u00e9es. Les premi\u00e8res cl\u00e9s USB \u00e9taient fabriqu\u00e9es selon la technologie SLC (Single-Level Cell). Les appareils bas\u00e9s sur cette technologie \u00e9taient rapides, fiables et stables, mais avaient une capacit\u00e9 limit\u00e9e et co\u00fbtaient tr\u00e8s cher. L'augmentation du volume et la baisse des prix ont \u00e9t\u00e9 obtenues gr\u00e2ce \u00e0 des compromis techniques, entra\u00eenant une r\u00e9duction de la vitesse, de la fiabilit\u00e9 et de la dur\u00e9e de vie des supports. Cependant, cette tendance n'a pas affect\u00e9 les syst\u00e8mes de stockage, qui, gr\u00e2ce \u00e0 diff\u00e9rentes astuces architecturales, sont devenus \u00e0 la fois plus performants et plus fiables.<\/p>\n

Mais pourquoi a-t-on eu besoin de syst\u00e8mes de stockage de classe All-Flash ? N'\u00e9tait-il pas suffisant de remplacer les anciens HDD par de nouveaux SSD de m\u00eame facteur de forme dans un syst\u00e8me d\u00e9j\u00e0 en service ? Cela \u00e9tait n\u00e9cessaire pour utiliser efficacement toutes les ressources des nouveaux disques \u00e0 \u00e9tat solide, ce qui n'\u00e9tait tout simplement pas possible dans les anciens syst\u00e8mes. <\/p>\n

Par exemple, Huawei a d\u00e9velopp\u00e9 une s\u00e9rie de technologies pour r\u00e9soudre ce probl\u00e8me, dont l'une est FlashLink<\/a><\/noindex>, qui a permis d'optimiser au maximum les interactions \u00ab disque \u2014 contr\u00f4leur \u00bb. <\/p>\n

L'identification intelligente a permis de r\u00e9partir les donn\u00e9es sur plusieurs flux et de g\u00e9rer plusieurs ph\u00e9nom\u00e8nes ind\u00e9sirables, tels que WA<\/a><\/noindex> (amplification d'\u00e9criture). Parall\u00e8lement, de nouveaux algorithmes de r\u00e9cup\u00e9ration, en particulier RAID 2.0+<\/a><\/noindex>, ont augment\u00e9 la vitesse de reconstruction, r\u00e9duisant son temps \u00e0 des valeurs quasiment n\u00e9gligeables.<\/p>\n

Les pannes, la saturation, le \u00ab ramassage des ordures \u00bb \u2014 ces facteurs n'affectent \u00e9galement plus la performance du syst\u00e8me de stockage gr\u00e2ce \u00e0 des optimisations sp\u00e9cifiques des contr\u00f4leurs.<\/p>\n

\"Tendances
\n
\nDe plus, les syst\u00e8mes de stockage par blocs se pr\u00e9parent \u00e0 accueillir NVMe<\/a><\/noindex>. Rappelons que le sch\u00e9ma classique d'acc\u00e8s aux donn\u00e9es fonctionnait de la mani\u00e8re suivante : le processeur interrogeait le contr\u00f4leur RAID via le bus PCI Express. Celui-ci interagissait ensuite avec des disques m\u00e9caniques via SCSI ou SAS. L'utilisation de NVMe en backend a consid\u00e9rablement acc\u00e9l\u00e9r\u00e9 l'ensemble du processus, mais pr\u00e9sentait un inconv\u00e9nient : les unit\u00e9s de stockage devaient \u00eatre directement connect\u00e9es au processeur pour garantir un acc\u00e8s direct \u00e0 la m\u00e9moire.<\/p>\n

La phase suivante de d\u00e9veloppement de la technologie que nous observons actuellement est l'application de NVMe-oF (NVMe over Fabrics). En ce qui concerne les technologies de blocs de Huawei, elles prennent d\u00e9j\u00e0 en charge FC-NVMe (NVMe over Fibre Channel), et NVMe over RoCE (RDMA over Converged Ethernet) est en pr\u00e9paration. Les mod\u00e8les de test sont tout \u00e0 fait fonctionnels, et il ne reste que quelques mois avant leur pr\u00e9sentation officielle. Notons que tout cela appara\u00eetra \u00e9galement dans des syst\u00e8mes distribu\u00e9s, o\u00f9 'Ethernet sans perte' sera tr\u00e8s recherch\u00e9.<\/p>\n

\"Tendances
\n
\nUne fa\u00e7on suppl\u00e9mentaire d'optimiser le fonctionnement des syst\u00e8mes de stockage distribu\u00e9s a \u00e9t\u00e9 de se passer compl\u00e8tement du miroirage des donn\u00e9es. Les solutions Huawei n'utilisent plus n copies, comme dans le traditionnel RAID 1, et passent enti\u00e8rement au m\u00e9canisme EC<\/a><\/noindex> (Erasure coding). Un paquet math\u00e9matique sp\u00e9cial calcule \u00e0 intervalles r\u00e9guliers des blocs de contr\u00f4le qui permettent de restaurer des donn\u00e9es interm\u00e9diaires en cas de perte.<\/p>\n

Les m\u00e9canismes de d\u00e9dupllication et de compression deviennent obligatoires. Si dans les syst\u00e8mes de stockage classiques, nous sommes limit\u00e9s par le nombre de processeurs install\u00e9s dans les contr\u00f4leurs, dans les syst\u00e8mes de stockage distribu\u00e9s \u00e9volutifs horizontalement, chaque n\u0153ud contient tout le n\u00e9cessaire : disques, m\u00e9moire, processeurs et interconnexion. Ces ressources sont suffisantes pour que la d\u00e9duplication et la compression aient un impact minimal sur les performances.<\/p>\n

Et en ce qui concerne les m\u00e9thodes mat\u00e9rielles d'optimisation. Ici, la charge sur les processeurs centraux a \u00e9t\u00e9 r\u00e9duite \u00e0 l'aide de circuits int\u00e9gr\u00e9s d\u00e9di\u00e9s (ou de blocs d\u00e9di\u00e9s dans le processeur lui-m\u00eame), jouant le r\u00f4le de TOE<\/a><\/noindex> (TCP\/IP Offload Engine) ou s'occupant des t\u00e2ches math\u00e9matiques de l'EC, de la d\u00e9duplication et de la compression.<\/p>\n

\"Tendances
\n
\nDe nouvelles approches de stockage des donn\u00e9es se sont mat\u00e9rialis\u00e9es dans une architecture d\u00e9sagr\u00e9g\u00e9e (distribu\u00e9e). Dans les syst\u00e8mes de stockage centralis\u00e9s, il existe une ferme de serveurs, connect\u00e9e par Fibre Channel \u00e0 SAN<\/a><\/noindex> un grand nombre de baies. Les inconv\u00e9nients de cette approche incluent des difficult\u00e9s de mise \u00e0 l\u2019\u00e9chelle et d\u2019assurance d\u2019un niveau de service garanti (en termes de performance ou de latence). Les syst\u00e8mes hyperconverg\u00e9s utilisent les m\u00eames h\u00f4tes, tant pour le stockage que pour le traitement des informations. Cela offre une possibilit\u00e9 de mise \u00e0 l\u2019\u00e9chelle pratiquement illimit\u00e9e, mais entra\u00eene des co\u00fbts \u00e9lev\u00e9s pour maintenir l'int\u00e9grit\u00e9 des donn\u00e9es.<\/p>\n

Contrairement \u00e0 ces deux architectures, l'architecture d\u00e9sagr\u00e9g\u00e9e implique la s\u00e9paration du syst\u00e8me en une ferme de calcul et un syst\u00e8me de stockage horizontal<\/b>. Cela fournit les avantages des deux architectures et permet de mettre \u00e0 l\u2019\u00e9chelle pratiquement sans limites uniquement l'\u00e9l\u00e9ment dont la performance est insuffisante.<\/p>\n

\"Tendances
\n<\/p>\n

De l'int\u00e9gration \u00e0 la convergence<\/h2>\n

\nUn d\u00e9fi classique, dont la pertinence n'a cess\u00e9 de cro\u00eetre au cours des 15 derni\u00e8res ann\u00e9es, est la n\u00e9cessit\u00e9 d'assurer simultan\u00e9ment le stockage en blocs, l'acc\u00e8s aux fichiers, l'acc\u00e8s aux objets, l'exploitation d'une ferme pour le big data, etc. La cerise sur le g\u00e2teau pourrait par exemple \u00eatre un syst\u00e8me de sauvegarde sur bande magn\u00e9tique.<\/p>\n

Au premier stade, il n'a \u00e9t\u00e9 possible d'unifier que la gestion de ces services. Des syst\u00e8mes de stockage de donn\u00e9es h\u00e9t\u00e9rog\u00e8nes \u00e9taient li\u00e9s \u00e0 un logiciel sp\u00e9cialis\u00e9, par lequel l'administrateur r\u00e9partissait les ressources des pools disponibles. Mais comme ces pools \u00e9taient techniquement diff\u00e9rents, la migration des charges de travail entre eux \u00e9tait impossible. \u00c0 un niveau d'int\u00e9gration plus \u00e9lev\u00e9, la consolidation se faisait au niveau de la passerelle. Avec un acc\u00e8s fichier commun, il \u00e9tait possible de le remettre via diff\u00e9rents protocoles.<\/p>\n

La m\u00e9thode de convergence la plus avanc\u00e9e \u00e0 notre disposition aujourd'hui implique la cr\u00e9ation d'un syst\u00e8me hybride universel. C'est exactement ce que devrait devenir notre OceanStor 100D<\/a><\/noindex>. L'acc\u00e8s universel utilise les m\u00eames ressources mat\u00e9rielles, logiquement divis\u00e9es en diff\u00e9rents pools, mais permettant la migration de la charge. Tout cela peut \u00eatre g\u00e9r\u00e9 via une console de gestion unique. De cette mani\u00e8re, nous avons r\u00e9ussi \u00e0 mettre en \u0153uvre le concept \u00ab un centre de donn\u00e9es - un stockage \u00bb.<\/p>\n

\"Tendances
\n
\nLe co\u00fbt du stockage des informations d\u00e9termine actuellement de nombreuses solutions architecturales. Et bien qu'il puisse \u00eatre plac\u00e9 au premier plan, nous discutons aujourd'hui du stockage \u00ab vivant \u00bb avec acc\u00e8s actif, donc la performance doit \u00e9galement \u00eatre prise en compte. Une autre caract\u00e9ristique importante des syst\u00e8mes distribu\u00e9s de nouvelle g\u00e9n\u00e9ration est l'unification. Apr\u00e8s tout, personne ne veut avoir plusieurs syst\u00e8mes disparates g\u00e9r\u00e9s depuis diff\u00e9rentes consoles. Toutes ces qualit\u00e9s se sont mat\u00e9rialis\u00e9es dans la nouvelle s\u00e9rie de produits Huawei. OceanStor Pacific<\/a><\/noindex>.<\/p>\n

Stockage de nouvelle g\u00e9n\u00e9ration<\/h2>\n

\nOceanStor Pacific r\u00e9pond aux exigences de fiabilit\u00e9 au niveau de \u00ab six neufs \u00bb (99,9999 %) et peut \u00eatre utilis\u00e9 pour cr\u00e9er des centres de donn\u00e9es de classe HyperMetro. Avec une distance entre deux centres de donn\u00e9es allant jusqu'\u00e0 100 km, les syst\u00e8mes affichent une latence suppl\u00e9mentaire de 2 ms, ce qui permet de construire des solutions de r\u00e9silience aux catastrophes, y compris avec des serveurs de quorum.<\/p>\n

\"Tendances
\n
\nLes produits de la nouvelle s\u00e9rie d\u00e9montrent une polyvalence en mati\u00e8re de protocoles. OceanStor 100D prend d\u00e9j\u00e0 en charge l'acc\u00e8s en bloc, l'acc\u00e8s objet et l'acc\u00e8s Hadoop. L'acc\u00e8s aux fichiers sera \u00e9galement mis en \u0153uvre prochainement. Il n'est pas n\u00e9cessaire de conserver plusieurs copies de donn\u00e9es si elles peuvent \u00eatre fournies via diff\u00e9rents protocoles.<\/p>\n

\"Tendances
\n
\nOn pourrait se demander quel rapport la notion de \u00ab r\u00e9seau sans perte \u00bb a avec le stockage ? La r\u00e9alit\u00e9 est que les syst\u00e8mes de stockage distribu\u00e9s reposent sur un r\u00e9seau rapide soutenant les algorithmes et le m\u00e9canisme RoCE appropri\u00e9s. De plus, la vitesse du r\u00e9seau peut \u00eatre augment\u00e9e et la latence r\u00e9duite gr\u00e2ce au syst\u00e8me d'intelligence artificielle pris en charge par nos commutateurs. AI Fabric<\/a><\/noindex>. Le gain de performance du stockage activ\u00e9 par AI Fabric peut atteindre 20 %.<\/p>\n

\"Tendances
\n
\nQue repr\u00e9sente donc le nouveau n\u0153ud de stockage distribu\u00e9 OceanStor Pacific ? La solution au format 5U comprend 120 disques et peut remplacer trois n\u0153uds classiques, offrant ainsi plus de deux fois d'\u00e9conomie d'espace en rack. Gr\u00e2ce \u00e0 l'abandon du stockage de copies, l'efficacit\u00e9 des disques augmente consid\u00e9rablement (jusqu'\u00e0 +92 %).<\/p>\n

Nous sommes habitu\u00e9s \u00e0 ce que le stockage d\u00e9fini par logiciel soit un logiciel sp\u00e9cial install\u00e9 sur un serveur classique. Mais maintenant, pour atteindre des performances optimales, cette solution architecturale n\u00e9cessite \u00e9galement des n\u0153uds sp\u00e9ciaux. Elle comprend deux serveurs bas\u00e9s sur des processeurs ARM, g\u00e9rant un ensemble de disques de 3 pouces.<\/p>\n

\"Tendances
\n
\nCes serveurs conviennent peu aux solutions hyperconverg\u00e9es. Premi\u00e8rement, il existe peu d'applications pour ARM, et deuxi\u00e8mement, il est difficile de maintenir un \u00e9quilibre de charge. Nous proposons de passer \u00e0 un stockage s\u00e9par\u00e9 : un cluster de calcul, repr\u00e9sent\u00e9 par des serveurs classiques ou des serveurs en rack, fonctionne s\u00e9par\u00e9ment, mais se connecte aux n\u0153uds de stockage OceanStor Pacific, qui accomplissent \u00e9galement leurs t\u00e2ches directes. Et cela est justifi\u00e9.<\/p>\n

Prenons par exemple une solution classique de stockage de grandes donn\u00e9es avec un syst\u00e8me hyperconverg\u00e9 occupant 15 racks de serveurs. Si nous r\u00e9partissons la charge entre des serveurs de calcul s\u00e9par\u00e9s et les n\u0153uds de stockage OceanStor Pacific, en les s\u00e9parant, le nombre de racks n\u00e9cessaires sera r\u00e9duit de moiti\u00e9 ! Cela r\u00e9duit les co\u00fbts d'exploitation du data center et diminue le co\u00fbt total de possession. Dans un monde o\u00f9 le volume des informations stock\u00e9es augmente de 30 % par an, on ne peut pas se permettre de n\u00e9gliger de tels avantages.<\/p>\n

***<\/h2>\n

\nVous pouvez obtenir plus d'informations sur les solutions Huawei et leurs sc\u00e9narios d'application sur notre site<\/a><\/noindex> ou en contactant directement des repr\u00e9sentants de l'entreprise.
\n
Source : habr.com<\/a> <\/p>","protected":false,"gt_translate_keys":[{"key":"rendered","format":"html"}]},"excerpt":{"rendered":"

\u0421\u0435\u0433\u043e\u0434\u043d\u044f \u043f\u043e\u0433\u043e\u0432\u043e\u0440\u0438\u043c \u043e \u0442\u043e\u043c, \u043a\u0430\u043a \u043b\u0443\u0447\u0448\u0435 \u0445\u0440\u0430\u043d\u0438\u0442\u044c \u0434\u0430\u043d\u043d\u044b\u0435 \u0432 \u043c\u0438\u0440\u0435, \u0433\u0434\u0435 \u0441\u0435\u0442\u0438 \u043f\u044f\u0442\u043e\u0433\u043e \u043f\u043e\u043a\u043e\u043b\u0435\u043d\u0438\u044f, \u0441\u043a\u0430\u043d\u0435\u0440\u044b \u0433\u0435\u043d\u043e\u043c\u043e\u0432 \u0438 \u0431\u0435\u0441\u043f\u0438\u043b\u043e\u0442\u043d\u044b\u0435 \u0430\u0432\u0442\u043e\u043c\u043e\u0431\u0438\u043b\u0438 \u043f\u0440\u043e\u0438\u0437\u0432\u043e\u0434\u044f\u0442 \u0437\u0430 \u0434\u0435\u043d\u044c \u0431\u043e\u043b\u044c\u0448\u0435 \u0434\u0430\u043d\u043d\u044b\u0445, \u0447\u0435\u043c \u0432\u0441\u0451 \u0447\u0435\u043b\u043e\u0432\u0435\u0447\u0435\u0441\u0442\u0432\u043e \u043f\u043e\u0440\u043e\u0434\u0438\u043b\u043e \u0432 \u043f\u0435\u0440\u0438\u043e\u0434 \u0434\u043e \u043f\u0440\u043e\u043c\u044b\u0448\u043b\u0435\u043d\u043d\u043e\u0439 \u0440\u0435\u0432\u043e\u043b\u044e\u0446\u0438\u0438. \u041d\u0430\u0448 \u043c\u0438\u0440 \u0433\u0435\u043d\u0435\u0440\u0438\u0440\u0443\u0435\u0442 \u0432\u0441\u0451 \u0431\u043e\u043b\u044c\u0448\u0435 \u0438\u043d\u0444\u043e\u0440\u043c\u0430\u0446\u0438\u0438. \u041a\u0430\u043a\u0430\u044f-\u0442\u043e \u0435\u0451 \u0447\u0430\u0441\u0442\u044c \u043c\u0438\u043c\u043e\u043b\u0451\u0442\u043d\u0430 \u0438 \u0443\u0442\u0440\u0430\u0447\u0438\u0432\u0430\u0435\u0442\u0441\u044f \u0442\u0430\u043a \u0436\u0435 \u0431\u044b\u0441\u0442\u0440\u043e, \u043a\u0430\u043a \u0438 \u0441\u043e\u0431\u0438\u0440\u0430\u0435\u0442\u0441\u044f. \u0414\u0440\u0443\u0433\u0430\u044f \u0434\u043e\u043b\u0436\u043d\u0430 \u0445\u0440\u0430\u043d\u0438\u0442\u044c\u0441\u044f \u0434\u043e\u043b\u044c\u0448\u0435, […]<\/p>\n","protected":false,"gt_translate_keys":[{"key":"rendered","format":"html"}]},"author":1,"featured_media":96142,"comment_status":"open","ping_status":"open","sticky":false,"template":"","format":"standard","meta":{"footnotes":""},"categories":[688],"tags":[],"class_list":["post-96141","post","type-post","status-publish","format-standard","has-post-thumbnail","hentry","category-administrirovanie"],"aioseo_notices":[],"aioseo_head":"\n\t\t\n\t\n\t\n\t\n\t\n\t\n\t\t\n\t\t\n\t\t\n\t\t\n\t\t\n\t\t\n\t\t\n\t\t\n\t\t\n\t\t\n\t\t\n\t\t\n\t\t\n\t\t\n\t\t\n\n","aioseo_head_json":{"title":"\ud83e\udd47Tendances industrielles en mati\u00e8re de syst\u00e8mes de stockage de donn\u00e9es massifs | ProHoster","description":"Aujourd'hui, nous allons parler de la meilleure fa\u00e7on de stocker des donn\u00e9es dans un monde o\u00f9 les r\u00e9seaux 5G, les s\u00e9quenceurs de g\u00e9nomes et les voitures autonomes produisent en une journ\u00e9e plus de donn\u00e9es que l'humanit\u00e9 n'en a g\u00e9n\u00e9r\u00e9es depuis le d\u00e9but de l'\u00e8re industrielle.","canonical_url":"https:\/\/prohoster.info\/fr\/blog\/administrirovanie\/promyshlennye-tendenczii-v-oblasti-massovyh-sistem-hraneniya-dannyh","robots":"max-image-preview:large","keywords":"","webmasterTools":{"miscellaneous":""},"schema":null,"og:locale":"fr_FR","og:site_name":"ProHoster | \u041a\u0443\u043f\u0438\u0442\u044c \u043d\u0430\u0434\u0435\u0436\u043d\u044b\u0439 \u0445\u043e\u0441\u0442\u0438\u043d\u0433 \u0434\u043b\u044f \u0441\u0430\u0439\u0442\u043e\u0432 \u0441 \u0437\u0430\u0449\u0438\u0442\u043e\u0439 \u043e\u0442 DDoS, VPS VDS \u0441\u0435\u0440\u0432\u0435\u0440\u044b","og:type":"article","og:title":"\ud83e\udd47\u041f\u0440\u043e\u043c\u044b\u0448\u043b\u0435\u043d\u043d\u044b\u0435 \u0442\u0435\u043d\u0434\u0435\u043d\u0446\u0438\u0438 \u0432 \u043e\u0431\u043b\u0430\u0441\u0442\u0438 \u043c\u0430\u0441\u0441\u043e\u0432\u044b\u0445 \u0441\u0438\u0441\u0442\u0435\u043c \u0445\u0440\u0430\u043d\u0435\u043d\u0438\u044f \u0434\u0430\u043d\u043d\u044b\u0445 | ProHoster","og:description":"\u0421\u0435\u0433\u043e\u0434\u043d\u044f \u043f\u043e\u0433\u043e\u0432\u043e\u0440\u0438\u043c \u043e \u0442\u043e\u043c, \u043a\u0430\u043a \u043b\u0443\u0447\u0448\u0435 \u0445\u0440\u0430\u043d\u0438\u0442\u044c \u0434\u0430\u043d\u043d\u044b\u0435 \u0432 \u043c\u0438\u0440\u0435, \u0433\u0434\u0435 \u0441\u0435\u0442\u0438 \u043f\u044f\u0442\u043e\u0433\u043e \u043f\u043e\u043a\u043e\u043b\u0435\u043d\u0438\u044f, \u0441\u043a\u0430\u043d\u0435\u0440\u044b \u0433\u0435\u043d\u043e\u043c\u043e\u0432 \u0438 \u0431\u0435\u0441\u043f\u0438\u043b\u043e\u0442\u043d\u044b\u0435 \u0430\u0432\u0442\u043e\u043c\u043e\u0431\u0438\u043b\u0438 \u043f\u0440\u043e\u0438\u0437\u0432\u043e\u0434\u044f\u0442 \u0437\u0430 \u0434\u0435\u043d\u044c \u0431\u043e\u043b\u044c\u0448\u0435 \u0434\u0430\u043d\u043d\u044b\u0445, \u0447\u0435\u043c \u0432\u0441\u0451 \u0447\u0435\u043b\u043e\u0432\u0435\u0447\u0435\u0441\u0442\u0432\u043e \u043f\u043e\u0440\u043e\u0434\u0438\u043b\u043e \u0432 \u043f\u0435\u0440\u0438\u043e\u0434 \u0434\u043e \u043f\u0440\u043e\u043c\u044b\u0448\u043b\u0435\u043d\u043d\u043e\u0439.","og:url":"https:\/\/prohoster.info\/fr\/blog\/administrirovanie\/promyshlennye-tendenczii-v-oblasti-massovyh-sistem-hraneniya-dannyh","og:image":"https:\/\/prohoster.info\/wp-content\/uploads\/2021\/11\/logo-350.jpg","og:image:secure_url":"https:\/\/prohoster.info\/wp-content\/uploads\/2021\/11\/logo-350.jpg","og:image:width":350,"og:image:height":350,"article:published_time":"2020-10-08T17:42:37+00:00","article:modified_time":"2020-10-08T17:42:37+00:00","article:publisher":"https:\/\/www.facebook.com\/prohoster","article:author":"https:\/\/www.facebook.com\/prohoster"},"aioseo_meta_data":{"post_id":"96141","title":null,"description":null,"keywords":null,"keyphrases":null,"primary_term":null,"canonical_url":null,"og_title":null,"og_description":null,"og_object_type":"default","og_image_type":"default","og_image_url":null,"og_image_width":null,"og_image_height":null,"og_image_custom_url":null,"og_image_custom_fields":null,"og_video":null,"og_custom_url":null,"og_article_section":null,"og_article_tags":null,"twitter_use_og":false,"twitter_card":"default","twitter_image_type":"default","twitter_image_url":null,"twitter_image_custom_url":null,"twitter_image_custom_fields":null,"twitter_title":null,"twitter_description":null,"schema":{"blockGraphs":[],"customGraphs":[],"default":{"data":{"Article":[],"Course":[],"Dataset":[],"FAQPage":[],"Movie":[],"Person":[],"Product":[],"ProductReview":[],"Car":[],"Recipe":[],"Service":[],"SoftwareApplication":[],"WebPage":[]},"graphName":"","isEnabled":true},"graphs":[]},"schema_type":null,"schema_type_options":null,"pillar_content":false,"robots_default":true,"robots_noindex":false,"robots_noarchive":false,"robots_nosnippet":false,"robots_nofollow":false,"robots_noimageindex":false,"robots_noodp":false,"robots_notranslate":false,"robots_max_snippet":null,"robots_max_videopreview":null,"robots_max_imagepreview":"large","priority":null,"frequency":null,"local_seo":null,"seo_analyzer_scan_date":null,"breadcrumb_settings":null,"limit_modified_date":false,"reviewed_by":null,"ai":null,"created":"2021-02-28 10:51:00","updated":"2022-09-30 10:24:16","focus_keyword":null,"additional_keywords":null,"truseo_locale":null},"gt_translate_keys":[{"key":"link","format":"url"}],"_links":{"self":[{"href":"https:\/\/prohoster.info\/fr\/wp-json\/wp\/v2\/posts\/96141","targetHints":{"allow":["GET"]}}],"collection":[{"href":"https:\/\/prohoster.info\/fr\/wp-json\/wp\/v2\/posts"}],"about":[{"href":"https:\/\/prohoster.info\/fr\/wp-json\/wp\/v2\/types\/post"}],"author":[{"embeddable":true,"href":"https:\/\/prohoster.info\/fr\/wp-json\/wp\/v2\/users\/1"}],"replies":[{"embeddable":true,"href":"https:\/\/prohoster.info\/fr\/wp-json\/wp\/v2\/comments?post=96141"}],"version-history":[{"count":0,"href":"https:\/\/prohoster.info\/fr\/wp-json\/wp\/v2\/posts\/96141\/revisions"}],"wp:featuredmedia":[{"embeddable":true,"href":"https:\/\/prohoster.info\/fr\/wp-json\/wp\/v2\/media\/96142"}],"wp:attachment":[{"href":"https:\/\/prohoster.info\/fr\/wp-json\/wp\/v2\/media?parent=96141"}],"wp:term":[{"taxonomy":"category","embeddable":true,"href":"https:\/\/prohoster.info\/fr\/wp-json\/wp\/v2\/categories?post=96141"},{"taxonomy":"post_tag","embeddable":true,"href":"https:\/\/prohoster.info\/fr\/wp-json\/wp\/v2\/tags?post=96141"}],"curies":[{"name":"wp","href":"https:\/\/api.w.org\/{rel}","templated":true}]}}