Aujourd'hui, pour la plupart des entreprises et des organisations, les données constituent l'un de leurs actifs stratégiques. Avec l'expansion des capacités analytiques, la valeur des données collectées et accumulées par les entreprises ne cesse d'augmenter. On parle souvent d'une croissance explosive et exponentielle des volumes de données générées par les entreprises. Il est noté que 90 % de toutes les données ont été créées ces deux dernières années.
La croissance des volumes de données s'accompagne d'une augmentation de leur valeur.
Les données sont créées et utilisées par des systèmes d'analyse de grandes données, d'internet des objets (IoT), d'intelligence artificielle, etc. Les données collectées sont la base pour améliorer la qualité du service client, prendre des décisions, soutenir l'activité opérationnelle des entreprises, ainsi que pour diverses recherches et développements.
90 % de toutes les données ont été créées ces deux dernières années.
Selon les prévisions d'IDC, le volume des données stockées dans le monde va doubler entre 2018 et 2023, et la capacité totale des stockages de données atteindra 11,7 zettabytes, les bases de données des entreprises représentant plus des trois quarts du volume total. Il est caractéristique que si, en 2018, la capacité totale des disques durs (HDD), qui restent pour l'instant le principal support d'information, était de 869 exabytes, ce chiffre pourrait dépasser 2,6 zettabytes d'ici 2023.
Plateformes de gestion des données : à quoi servent-elles et quel rôle jouent-elles ?
Il n'est pas surprenant que les questions de gestion des données deviennent prioritaires pour les entreprises, ayant un impact direct sur leur fonctionnement. Pour y faire face, il est parfois nécessaire de surmonter des défis tels que l'hétérogénéité des systèmes, des formats de données, des méthodes de stockage et d'utilisation, ainsi que des approches de gestion dans un environnement de « zoo » de solutions mises en œuvre à différents moments.
Le résultat de cette approche non uniformisée est la fragmentation des ensembles de données, stockés et traités dans différents systèmes, avec différentes procédures de garantie de la qualité des données. Ces problèmes typiques augmentent les coûts de main-d'œuvre et financiers lors du travail avec les données, par exemple, lors de la génération de statistiques et de rapports ou lors de la prise de décisions de gestion.
Le modèle commercial de gestion des données doit être personnalisé et adapté aux besoins, défis et objectifs de l'entreprise. Il n'existe pas de système automatisé unique, ni de plateforme de gestion des données qui puisse couvrir toutes les tâches. Cependant, les systèmes de gestion des données modernes, complets, flexibles et évolutifs, se présentent souvent comme des logiciels polyvalents pour la gestion et le stockage des données. Ils incluent les outils et services nécessaires pour une gestion efficace des données.
Les dernières innovations permettent aux entreprises de repenser la gestion des données à l'échelle de l'organisation, d'obtenir une vision claire des données disponibles, des politiques qui y sont associées, ainsi que de leur localisation et du temps de stockage. Enfin, elles offrent la possibilité de fournir en temps voulu les informations nécessaires aux bonnes personnes. Ce sont des solutions qui augmentent les capacités des entreprises et permettent :
- De gérer des fichiers, des objets, des données d'applications, des bases de données, des données sur des environnements virtuels et cloud, et d'accéder à différents types de données.
- D'utiliser des outils d'orchestration et d'automatisation pour déplacer les données là où leur stockage est le plus efficace — dans l'infrastructure de stockage primaire, secondaire, dans le centre de données du fournisseur ou dans le cloud.
- D'utiliser des fonctions complètes de protection des données.
- D'assurer l'intégration des données.
- D'obtenir des analyses opérationnelles à partir des données.
La plateforme de gestion des données peut être construite sur plusieurs produits logiciels ou représenter un système unifié unique. Une plateforme complète permet une gestion intégrée des données à travers l'ensemble de l'infrastructure informatique, y compris la sauvegarde, la restauration, l'archivage, la gestion des instantanés matériels et la génération de rapports.
Une telle plateforme permet de mettre en œuvre une stratégie multicloud, d'étendre le centre de données vers un environnement cloud, de réaliser une migration rapide vers le cloud, d'exploiter les possibilités de remplacement du matériel et d'adopter les options de stockage les plus économiques.
Certain solutions can automatically archive data. With the help of artificial intelligence, they can detect when ‘something goes wrong’ and automatically take corrective actions or notify the administrator, as well as identify and prevent various types of attacks. Automating services contributes to optimizing IT operations, freeing up IT personnel, minimizing errors due to human factors, and reducing downtime.
What qualities should a modern data management platform possess, and where are such solutions applied in practice?
The 'one-size-fits-all' approach does not work with data management platforms. Each company has its own data requirements, which depend on the type of business, level of experience, and more. A universal platform should, on one hand, provide customization for working with data at a specific enterprise, and on the other hand, be independent of the specifics of the applied industry, the area of application of the products based on it, and its informational environment.
Practical areas of data management (source; CMMI Institute).
Here are some practical areas of application for data management platforms:
Composant
Domaine d'application
Data management strategy
Goals and objectives of management, corporate culture of data management, defining life cycle requirements for data.
Gestion des données
Data and metadata management
Data operations
Standards and procedures for working with data sources
Data quality
Quality assurance, data quality framework
Platform and architecture
Architectural framework, platforms, and integration
Supporting processes
Assessment and analysis, process management, quality assurance, risk management, configuration management
In addition, such platforms play an important role in the process of transforming an organization into a 'data-driven' enterprise, which can be divided into several stages:
- Change data management in existing systems, implementing a role model with division of responsibilities and powers. Data quality control, cross-checking data between systems, correcting inaccurate data.
- Configuration des processus d'extraction et de collecte des données, leur transformation et leur chargement. Harmonisation des données dans un système unique sans compliquer le contrôle de la qualité des données ni modifier les processus métiers.
- Intégration des données. Automatisation des processus de livraison des données nécessaires au bon endroit et au bon moment.
- Mise en place d'un contrôle qualité des données complet. Définition des paramètres de contrôle qualité, élaboration d'une méthodologie d'utilisation des systèmes automatiques.
- Implémentation d'outils de gestion des processus de collecte de données, de leur vérification, déduplication et nettoyage. En conséquence, amélioration de la qualité, de la fiabilité et de l'unification des données de tous les systèmes de l'entreprise.
Avantages des plateformes de gestion des données
Les entreprises qui travaillent efficacement avec les données ont généralement un plus grand succès par rapport à leurs concurrents, mettent leurs produits et services sur le marché plus rapidement, comprennent mieux les besoins de leur public cible et peuvent réagir rapidement aux changements de la demande. Les plateformes de gestion des données offrent la possibilité de "nettoyer" les données, d'obtenir des informations de qualité et pertinentes, de transformer les données et d'évaluer stratégiquement les données de l'entreprise.
Exemple d'une plateforme universelle pour la création de systèmes de gestion des données d'entreprise - «Unidata», développée à partir de logiciels open source. Elle propose des outils de modélisation des données et des moyens d'étendre la fonctionnalité lors de l'intégration dans différents environnements informatiques et systèmes d'information tiers : de la gestion des ressources matérielles à la traitement sécurisé de grands volumes de données personnelles.
Architecture de la plateforme «Unidata» de l'entreprise éponyme.
Cette plateforme multifonctionnelle assure la collecte centralisée des données (inventaire et comptabilité des ressources), la normalisation des informations (normalisation et enrichissement), la prise en compte des informations actuelles et historiques (contrôle des versions d'enregistrement, périodes de validité des données), la qualité des données et la tenue de statistiques. L'automatisation des tâches telles que la collecte, l'accumulation, le nettoyage, la correspondance, la consolidation, le contrôle de qualité, la diffusion des données, ainsi que des outils pour automatiser le système de prise de décision sont prévus.
Plateformes de gestion des données (DPM) en publicité et marketing
En publicité et marketing, le concept de plateforme de gestion des données DMP (Data Management Platform) a une signification plus étroite. Il s'agit d'une plateforme logicielle qui, sur la base des données collectées, permet aux entreprises de définir des segments d'audience pour cibler la publicité sur des utilisateurs spécifiques et le contexte des campagnes publicitaires en ligne. Ce type de logiciel est capable de collecter, traiter et stocker tous types de données d'audience, et permet également leur utilisation à travers les médias habituels.
Selon les prévisions de Market Research Future (MRFR), le marché mondial des plateformes de gestion des données (DMP) pourrait atteindre 3 milliards de dollars d'ici la fin de l'année 2023, avec une croissance annuelle moyenne de 15 %, et en 2025, son volume dépassera 3,5 milliards de dollars.
Système DMP :
- Permet de collecter et structurer tous types de données d'audience; d'analyser les données existantes; de transférer les données dans n'importe quel espace médiatique pour la diffusion de publicités ciblées.
- Aide à collecter, organiser et activer des données provenant de diverses sources et à les transformer en une forme utile.
- Organise toutes les données en catégories en fonction des objectifs business et des modèles marketing. Le système analyse les données et génère des segments d'audience qui représentent fidèlement la base de clients à travers un large éventail de canaux, basés sur diverses caractéristiques communes.
- Permet d'accroître la précision du ciblage publicitaire en ligne et d'établir des communications personnalisées avec un public pertinent. Sur la base du DMP, il est également possible de configurer des chaînes d'interaction avec chaque segment cible, afin que les utilisateurs reçoivent des messages pertinents au bon moment et au bon endroit.
L'augmentation de la part du marketing numérique a un impact significatif sur la croissance du marché des plateformes de gestion des données. Les systèmes DMP peuvent rapidement unifier des données provenant de différentes sources et diviser les utilisateurs en plusieurs catégories en fonction de leur modèle de comportement. Ces capacités favorisent la demande pour les DMP parmi les marketeurs.
Le marché mondial des plateformes de gestion des données est représenté par plusieurs acteurs majeurs, ainsi que plusieurs nouvelles entreprises, y compris Lotame Solutions, KBM Group, Rocket Fuel, Krux Digital, Oracle, Neustar, SAS Institute, SAP, Adobe Systems, Cloudera, Turn, Informatica, etc.
Un exemple de solution russe est un produit d'infrastructure lancé par Mail.ru Group, qui représente une plateforme unique de gestion et de traitement des données (Data Management Platform, DMP). La solution permet de construire une description détaillée des profils des segments d'audience au sein de la plateforme, intégrée aux outils marketing. Le DMP regroupe les solutions et services de Mail.ru Group dans le domaine du marketing omnicanal et de la gestion de l'audience. Les clients pourront stocker, traiter et structurer leurs propres données anonymisées, ainsi que les activer dans les communications publicitaires, améliorant ainsi l'efficacité de leur entreprise et de leur marketing.
Gestion des données dans un environnement cloud
Une autre catégorie de solutions pour la gestion des données concerne les plateformes cloud. En particulier, l'utilisation d'une solution moderne de protection des données dans le cadre de la gestion des données dans le cloud permet d'éviter d'éventuels problèmes, allant des menaces à la sécurité aux problèmes de migration des données et de performance, ainsi que de relever les défis de transformation numérique auxquels l'entreprise est confrontée. Bien sûr, les fonctionnalités de ces systèmes ne se limitent pas à la protection des données.
Les fonctions d'une plateforme cloud de gestion des données selon Gartner : répartition des ressources, automatisation et orchestration ; gestion des demandes de service ; gestion au niveau supérieur et contrôle de la conformité des politiques ; surveillance et mesure des paramètres ; support des environnements multi-cloud ; optimisation et transparence des coûts ; optimisation des capacités et des ressources ; migration vers le cloud et garantie de la résilience (DR) ; gestion des niveaux de service ; sécurité et identification ; automatisation des mises à jour de configuration.
La gestion des données dans un environnement cloud doit garantir un niveau élevé de disponibilité des données, de contrôle, et d'automatisation de la gestion des données dans les centres de données, en périphérie du réseau et dans le cloud.
La gestion des données cloud (Cloud Data Management, CDM) est une plateforme utilisée pour gérer les données d'entreprise dans différents environnements cloud, en tenant compte des approches privées, publiques, hybrides et multi-cloud.
Un exemple de cette solution est la plateforme Veeam Cloud Data Management. Selon les développeurs, elle aide les organisations à transformer leur approche de la gestion des données, en offrant une gestion automatisée intelligente et un accès aux données dans toutes les applications ou infrastructures cloud.
La gestion des données cloud chez Veeam est considérée comme une partie intégrante de la gestion intelligente des données, garantissant leur disponibilité pour les entreprises depuis n'importe quel endroit.
La plateforme Veeam Cloud Data Management permet de moderniser les sauvegardes et d'abandonner les systèmes obsolètes, facilitant ainsi l'implémentation rapide de solutions de cloud hybride et la migration des données, ainsi que l'automatisation de la sécurité des données et de la conformité réglementaire.
Veeam Cloud Data Management Platform est une « plateforme moderne de gestion des données, compatible avec tous les clouds ».
Comme on peut le voir, les plateformes modernes de gestion des données représentent une classe de solutions assez vaste et variée. Ce qui les unit, c'est sans doute leur objectif commun : travailler efficacement avec les données d'entreprise et transformer la société ou l'organisation en une entreprise moderne, guidée par les données (data-driven enterprise).
Les plateformes de gestion des données représentent l'évolution nécessaire de la gestion traditionnelle des données. De plus en plus d'organisations déplacent leurs données vers le cloud, et avec un nombre croissant de configurations locales et cloud, de nouveaux problèmes émergent, nécessitant une approche axée sur la gestion des données. La gestion des données dans le cloud constitue une approche renouvelée, une nouvelle paradigm qui élargit les fonctions de gestion des données pour prendre en charge de nouvelles plateformes, applications et cas d'utilisation.
De plus, selon l'étude Veeam Cloud Data Management Report de 2019, les entreprises prévoient d'intégrer plus profondément les technologies cloud, les technologies de cloud hybride, l'analyse des big data, l'intelligence artificielle et l'internet des objets. On s'attend à ce que la mise en œuvre de ces initiatives numériques apporte des avantages significatifs aux entreprises.
Les entreprises adoptent rapidement des technologies de plateformes de données et sont prêtes à utiliser le cloud pour exécuter des charges de travail analytiques. Cependant, beaucoup rencontrent des problèmes pour exploiter toutes leurs données afin d'atteindre de meilleurs résultats commerciaux, selon les analystes de la société 451 Research. Les nouvelles plateformes de gestion des données aideront les entreprises à naviguer dans des processus complexes de gestion des données dans plusieurs clouds, à utiliser des outils de gestion des données et à effectuer leur analyse, peu importe où ces données se trouvent.
Dans notre volonté de rester à jour et d'écouter les souhaits de nos clients (qu'ils soient actuels ou potentiels), nous aimerions demander à la communauté Habr si vous aimeriez voir Veeam dans notre. ? Ответить можно в опросе ниже.
Seuls les utilisateurs enregistrés peuvent participer au sondage. , s'il vous plaît.
Offre groupée avec Veeam sur le marketplace.
62,5%Oui, bonne idée.
37,5%Je pense que cela ne décollera pas.
8 utilisateurs ont voté. 4 utilisateurs se sont abstenus.
Source : habr.com
