Datenmanagement-Plattformen: Von der Edge bis zur Cloud

Für die meisten Unternehmen und Organisationen sind Daten heute eines der strategischen Güter. Mit der Erweiterung der Analysefähigkeiten steigt der Wert der von Unternehmen gesammelten und gespeicherten Daten stetig. Oft wird von einem explosionsartigen, exponentiellen Wachstum der generierten Unternehmensdaten gesprochen. Es wird festgestellt, dass 90 % aller Daten in den letzten zwei Jahren erstellt wurden. 

Das Wachstum der Datenmengen geht mit einer Steigerung ihres Wertes einher

Daten werden von Big Data-Analysetools, dem Internet der Dinge (IoT), künstlicher Intelligenz und anderen Systemen erstellt und genutzt. Die gesammelten Daten bilden die Grundlage für die Verbesserung des Kundenservices, die Entscheidungsfindung, die Unterstützung des operativen Geschäfts von Unternehmen sowie für verschiedene Forschungs- und Entwicklungsprojekte.

90 % aller Daten wurden in den letzten zwei Jahren erstellt. 

Laut IDC wird sich das Volumen der weltweit gespeicherten Daten zwischen 2018 und 2023 verdoppeln, und die gesamte Speicherkapazität wird 11,7 Zettabyte erreichen, wobei über drei Viertel des Gesamtvolumens auf Unternehmensdatenbanken entfallen. Bemerkenswert ist, dass die gesamte Kapazität der gelieferten Festplattenlaufwerke (HDD), die nach wie vor das Hauptspeichermedium sind, im Jahr 2018 869 Exabyte betrug, während dieser Wert bis 2023 auf über 2,6 Zettabyte steigen könnte.

Datenmanagement-Plattformen: Wozu sie dienen und welche Rolle sie spielen.

Es ist nicht überraschend, dass Datenmanagementfragen für Unternehmen an oberster Stelle stehen und direkten Einfluss auf ihre Tätigkeit haben. Oft müssen dabei Herausforderungen wie die Heterogenität von Systemen, Datenformaten, Speicherungsmethoden und Managementansätzen im "Zoo" von Lösungen, die zu unterschiedlichen Zeiten implementiert wurden, überwunden werden. 

Das Ergebnis eines solchen nicht einheitlichen Ansatzes ist die Fragmentierung von Datensätzen, die in verschiedenen Systemen gespeichert und verarbeitet werden, sowie unterschiedliche Verfahren zur Sicherstellung der Datenqualität. Diese typischen Probleme erhöhen die Arbeits- und Finanzkosten im Umgang mit Daten, beispielsweise bei der Erstellung von Statistiken und Berichten oder bei der Entscheidungsfindung im Management. 

Das Geschäftsmodell für das Datenmanagement sollte maßgeschneidert und an die Bedürfnisse, Ziele und Aufgaben des Unternehmens angepasst sein. Es gibt kein einzelnes automatisiertes System oder eine Datenmanagement-Plattform, die alle Aufgaben abdecken kann. Dennoch bestehen moderne umfassende, flexible und skalierbare Datenmanagement-Systeme häufig aus universeller Software zur Verwaltung und Speicherung von Daten. Sie bieten die erforderlichen Werkzeuge und Dienste für ein effektives Datenmanagement. 

Die neuesten Entwicklungen ermöglichen es Unternehmen, das Datenmanagement auf Unternehmensebene neu zu gestalten. Sie bieten einen klaren Überblick darüber, welche Daten vorhanden sind, welche Richtlinien damit verbunden sind, wo und wie lange die Daten gespeichert werden. Zudem ermöglichen sie die rechtzeitige Bereitstellung der benötigten Informationen an die richtigen Personen. Diese Lösungen erweitern die Möglichkeiten der Unternehmen und ermöglichen es: 

• Dateien, Objekte, Anwendungsdaten, Datenbanken sowie Daten aus virtuellen und Cloud-Umgebungen zu verwalten und auf Daten unterschiedlicher Art zuzugreifen.
• Mit Hilfe von Orchestrierungs- und Automatisierungswerkzeugen Daten dorthin zu verschieben, wo ihre Speicherung am effizientesten ist – in die primäre oder sekundäre Speicherinfrastruktur, in das Rechenzentrum des Anbieters oder in die Cloud.
• Umfassende Funktionen zum Datenschutz zu nutzen.
• Datenintegration sicherzustellen.
• Echtzeitanalysen aus den Daten zu erhalten. 

Eine Datenmanagement-Plattform kann auf mehreren Softwareprodukten basieren oder ein einheitliches, integriertes System darstellen. Eine umfassende Plattform ermöglicht die zentrale Verwaltung von Daten innerhalb der gesamten IT-Infrastruktur, einschließlich Backup, Wiederherstellung, Archivierung, Verwaltung von Hardware-Snapshots und Berichtserstellung.

Eine solche Plattform ermöglicht die Implementierung einer Multicloud-Strategie, die Erweiterung des Rechenzentrums in die Cloud-Umgebung, eine zügige Migration in die Cloud, die Nutzung von Hardware-Austauschmöglichkeiten und die Einführung kosteneffizienter Datenspeicherlösungen.

Einige Lösungen können Daten automatisch archivieren. Mithilfe von künstlicher Intelligenz können sie erkennen, wenn "etwas schiefgelaufen ist", automatische Korrekturmaßnahmen ergreifen oder den Administrator benachrichtigen sowie Angriffe verschiedener Arten identifizieren und abwehren. Die Automatisierung von Dienstleistungen trägt zur Optimierung von IT-Operationen bei, entlastet IT-Personal, minimiert menschliche Fehler und reduziert Ausfallzeiten. 

Über welche Eigenschaften sollte eine moderne Datenmanagementplattform verfügen, und wo werden solche Lösungen in der Praxis eingesetzt?

Der Ansatz "eine Lösung für alle" funktioniert nicht bei Datenmanagementplattformen. Jedes Unternehmen hat eigene Datenanforderungen, die von der Art des Geschäfts, der Erfahrung und anderen Faktoren abhängen. Eine universelle Plattform sollte einerseits Anpassungen für die Arbeit mit den Daten im konkreten Unternehmen ermöglichen und andererseits unabhängig von den spezifischen Merkmalen der Anwendungsbranche, des Einsatzbereichs des auf ihr basierenden Produkts und dessen Informationsumfeld sein. 

Praktische Bereiche des Datenmanagements (Quelle; CMMI Institute).

Hier sind einige praktische Anwendungsbereiche von Datenmanagement-Plattformen:

Komponente
Anwendungsgebiete

Datenmanagement-Strategie
Ziele und Aufgaben des Managements, Unternehmenskultur des Datenmanagements, Festlegung der Anforderungen an den Datenlebenszyklus.

Datenmanagement
Daten- und Metadatenmanagement

Datenoperationen
Standards und Verfahren für den Umgang mit Datenquellen

Datenqualität
Qualitätssicherung, Datenqualitätsrahmenwerk

Plattform und Architektur
Architekturrahmenwerk, Plattformen und Integration 

Unterstützende Prozesse
Bewertung und Analyse, Prozessmanagement, Qualitätssicherung, Risikomanagement, Konfigurationsmanagement

Darüber hinaus spielen solche Plattformen eine wichtige Rolle im Transformationsprozess der Organisation in ein "datengetriebenes Unternehmen", der in mehrere Phasen unterteilt werden kann: 

1. Veränderung des Datenmanagements in bestehenden Systemen, Implementierung eines Rollenmodells mit Trennung von Verantwortlichkeiten und Befugnissen. Datenqualitätskontrolle, Cross-Validierung von Daten zwischen Systemen, Korrektur ungenauer Daten. 
2. Konfiguration der Prozesse zur Extraktion, Sammlung, Transformation und Speicherung von Daten. Vereinheitlichung der Daten ohne Komplikationen der Qualitätssicherung und Änderungen der Geschäftsprozesse. 
3. Datenintegration. Automatisierung der Prozesse zur Bereitstellung der benötigten Daten zur richtigen Zeit am richtigen Ort. 
4. Einführung einer umfassenden Qualitätskontrolle für Daten. Festlegung der Qualitätskontrollparameter und Entwicklung von Methodologien zur Nutzung automatisierter Systeme. 
5. Implementierung von Tools zur Verwaltung der Datensammelprozesse, deren Verifizierung, Deduplication und Bereinigung. Dies führt zu einer Verbesserung der Qualität, Zuverlässigkeit und Einheitlichkeit der Daten aller Systeme des Unternehmens. 

Vorteile von Datenmanagement-Plattformen

Unternehmen, die effizient mit Daten arbeiten, sind in der Regel erfolgreicher als ihre Konkurrenten. Sie bringen Produkte und Dienstleistungen schneller auf den Markt, verstehen die Bedürfnisse ihrer Zielgruppe besser und können flexibel auf Nachfrageänderungen reagieren. Datenmanagement-Plattformen ermöglichen die "Bereinigung" von Daten, das Erhalten qualitativ hochwertiger und relevanter Informationen sowie die Transformation und strategische Bewertung von Unternehmensdaten. 

Ein Beispiel für eine universelle Plattform zur Entwicklung von Systemen für das Unternehmensdatenmanagement ist die russische "Unidata", die auf Open-Source-Software basiert. Sie bietet Werkzeuge zur Erstellung von Datenmodellen und Funktionen zur Erweiterung bei der Integration in verschiedene IT-Umgebungen und externe Informationssysteme: von der Verwaltung von Ressourcen bis zur sicheren Verarbeitung großer Mengen personenbezogener Daten. 

Die Architektur der Plattform "Unidata" des gleichnamigen Unternehmens.

Diese multifunktionale Plattform bietet eine zentrale Datensammlung (Inventarisierung und Ressourcenmanagement), Standardisierung der Informationen (Normalisierung und Anreicherung), Verwaltung von aktuellen und historischen Daten (Versionskontrolle, Gültigkeitszeiträume der Daten), Datenqualität und Statistikführung. Es werden Automatisierungen für Aufgaben wie Sammlung, Speicherung, Bereinigung, Abgleich, Konsolidierung, Qualitätsprüfung und Verbreitung von Daten sowie Werkzeuge zur Automatisierung von Entscheidungsprozessen bereitgestellt. 

Datenmanagement-Plattformen (DPM) in Werbung und Marketing 

Im Bereich Werbung und Marketing hat der Begriff der Datenmanagement-Plattform (DMP) eine spezifischere Bedeutung. Es handelt sich um eine Software-Plattform, die auf Basis gesammelter Daten Unternehmen ermöglicht, Zielgruppensegmente für die zielgerichtete Werbung an bestimmte Nutzer und den Kontext von Online-Werbekampagnen zu definieren. Diese Software ist in der Lage, sämtliche Arten von Daten über Zielgruppen zu sammeln, zu verarbeiten und zu speichern sowie die Nutzung über gängige Medienkanäle zu ermöglichen.

Laut der Prognose von Market Research Future (MRFR) könnte der globale Markt für Data Management Plattformen (DMP) bis Ende 2023 3 Milliarden Dollar erreichen, mit einem jährlichen Wachstum von 15%. Bis 2025 wird sein Volumen voraussichtlich 3,5 Milliarden Dollar übersteigen.

DMP-System:

• Ermöglicht das Sammeln und Strukturieren aller Arten von Audiodaten; analysiert die vorhandenen Daten; überträgt Daten in jeden Medienraum zur Schaltung von gezielter Werbung. 
• Hilft dabei, Daten aus verschiedenen Quellen zu sammeln, zu organisieren und zu aktivieren und sie in eine nützliche Form zu überführen. 
• Organisiert alle Daten in Kategorien basierend auf Geschäftszielen und Marketingmodellen. Das System analysiert die Daten und generiert Zielgruppensegmente, die die Kundenbasis über ein breites Spektrum an Kanälen hinweg genau abbilden, basierend auf verschiedenen gemeinsamen Merkmalen.
• Erhöht die Genauigkeit der Online-Werbeaussprache und ermöglicht personalisierte Kommunikationen mit der relevanten Zielgruppe. Auf Basis der DMP können zudem Interaktionsketten für jedes Zielsegment eingerichtet werden, sodass die Nutzer zur richtigen Zeit und am richtigen Ort relevante Nachrichten erhalten.

Die zunehmende Bedeutung des digitalen Marketings hat einen wesentlichen Einfluss auf das Wachstum des Marktes für Datenmanagement-Plattformen. DMP-Systeme können Daten aus verschiedenen Quellen schnell zusammenführen und Benutzer basierend auf ihrem Verhalten in mehrere Kategorien einteilen. Diese Funktionen fördern die Nachfrage nach DMPs bei Marketingspezialisten. 

Der globale Markt für Datenmanagement-Plattformen wird von einer Reihe führender Anbieter sowie mehreren neuen Unternehmen dominiert, darunter Lotame Solutions, KBM Group, Rocket Fuel, Krux Digital, Oracle, Neustar, SAS Institute, SAP, Adobe Systems, Cloudera, Turn, Informatica und andere.

Ein Beispiel für eine russische Lösung – das von der Mail.ru Group herausgegebene Infrastrukturprodukt, das eine einheitliche Plattform für das Management und die Verarbeitung von Daten (Data Management Platform, DMP) darstellt. Die Lösung ermöglicht den Aufbau einer erweiterten Profilbeschreibung von Zielgruppensegmenten innerhalb der Plattform, die mit Marketinginstrumenten integriert ist. DMP vereint die Lösungen und Dienste der Mail.ru Group im Bereich Omnichannel-Marketing und Zielgruppenansprache. Kunden können ihre anonymisierten Daten speichern, verarbeiten und strukturieren sowie diese in Werbemaßnahmen aktivieren, um die Effizienz ihres Unternehmens und Marketings zu steigern. 

Datenmanagement in der Cloud-Umgebung

Eine weitere Kategorie von Lösungen für das Datenmanagement sind Cloud-Plattformen. Insbesondere die Nutzung moderner Lösungen zum Schutz von Daten im Rahmen des Datenmanagements in der Cloud hilft, mögliche Probleme zu vermeiden – von Sicherheitsbedrohungen bis hin zu Migrationsproblemen und Leistungseinbußen, sowie die Herausforderungen der digitalen Transformation des Unternehmens anzugehen. Natürlich beschränken sich die Funktionen solcher Systeme nicht nur auf den Datenschutz.

Funktionen der Cloud-Datenmanagement-Plattform laut Gartner: Ressourcenverteilung, Automatisierung und Orchestrierung; Verwaltung von Serviceanfragen; übergeordnetes Management und Compliance-Kontrolle; Überwachung und Messung von Parametern; Unterstützung von Multi-Cloud-Umgebungen; Kostenoptimierung und Transparenz; Optimierung von Kapazitäten und Ressourcen; Cloud-Migration und Disaster Recovery (DR); Service Level Management; Sicherheit und Identitätsmanagement; Automatisierung von Konfigurationsupdates.

Datenmanagement in der Cloud-Umgebung muss ein hohes Maß an Datenverfügbarkeit, Kontrolle und Automatisierung des Datenmanagements in Rechenzentren, am Netzwerkperimeter und in der Cloud gewährleisten. 

Cloud Data Management (CDM) ist eine Plattform, die zur Verwaltung von Unternehmensdaten in verschiedenen Cloud-Umgebungen eingesetzt wird, einschließlich privater, öffentlicher, hybrider und Multi-Cloud-Ansätze.

Ein Beispiel für eine solche Lösung ist die Veeam Cloud Data Management Platform. Laut den Entwicklern hilft das System Organisationen, ihren Ansatz zur Datenverwaltung zu ändern, bietet intelligente automatisierte Datenverwaltung und ermöglicht den Zugriff auf Daten in allen Anwendungen oder Cloud-Infrastrukturen.

Die Verwaltung von Cloud-Daten wird bei Veeam als ein wesentlicher Bestandteil des intelligenten Datenmanagements betrachtet, das den Zugriff auf Daten für Unternehmen von überall aus gewährleistet. 

Die Veeam Cloud Data Management Platform ermöglicht die Modernisierung von Backups und den Verzicht auf veraltete Systeme, beschleunigt die Einführung von hybriden Clouds und den Datentransfer, automatisiert die Datensicherheit und die Einhaltung von Vorschriften. 

Die Veeam Cloud Data Management Platform ist eine "moderne Plattform für das Datenmanagement, die jedes Cloud-Umfeld unterstützt."

Moderne Datenmanagementplattformen bieten eine breite und vielfältige Palette an Lösungen. Was sie vereint, ist das Ziel, eine effiziente Arbeit mit Unternehmensdaten zu ermöglichen und Unternehmen oder Organisationen in datengesteuerte Unternehmen (data-driven enterprise) zu verwandeln.

Datenmanagementplattformen sind eine notwendige Evolution des traditionellen Datenmanagements. Immer mehr Organisationen verlagern ihre Daten in die Cloud, wodurch in einer wachsenden Zahl von verschiedenen lokalen und cloudbasierten Konfigurationen neue Herausforderungen entstehen, die speziell aus der Perspektive des Datenmanagements gelöst werden müssen. Cloud-basiertes Datenmanagement ist ein aktualisierter Ansatz, eine neue Paradigme, die die Funktionen des Datenmanagements erweitert, um neue Plattformen, Anwendungen und Nutzungsszenarien zu unterstützen.

Außerdem planen Unternehmen laut dem Veeam Cloud Data Management Report 2019, Cloud-Technologien, hybride Cloud-Technologien, Big Data-Analytik, Künstliche Intelligenz und das Internet der Dinge tiefer zu integrieren. Es wird erwartet, dass die Umsetzung dieser digitalen Initiativen den Unternehmen erheblichen Nutzen bringt.

Unternehmen setzen zunehmend auf Datenplattform-Technologien und sind bereit, die Cloud für analytische Arbeitslasten zu nutzen. Dennoch haben viele Schwierigkeiten, alle ihre Daten effektiv zu nutzen, um bessere Geschäftsergebnisse zu erzielen, so die Analysten von 451 Research. Die neuesten Datenmanagement-Plattformen werden Unternehmen helfen, sich in den komplexen Prozessen der Datenverarbeitung über mehrere Clouds hinweg zurechtzufinden, Datenmanagement-Tools zu nutzen und Analysen durchzuführen, unabhängig davon, wo sich die Daten befinden.

Da wir bestrebt sind, mit der Zeit zu gehen und auf die Wünsche unserer Kunden (sowohl bestehende als auch potenzielle) einzugehen, möchten wir die Habr-Gemeinschaft fragen, ob sie sich Veeam bei uns wünschen würden. Marktplatz? Ответить можно в опросе ниже.

Nur registrierte Benutzer können an der Umfrage teilnehmen. Bitte melden Sie sich an.Sind Sie an Contour interessiert?

Paketangebot mit Veeam im Marktplatz

• 62,5%Ja, gute Idee

• 37,5%Ich denke, das wird nicht funktionieren

8 Nutzer haben abgestimmt. 4 Nutzer haben sich enthalten.

Quelle: habr.com