🥇Datastyrningsplattformar: från periferin till molnet

I dag är data för de flesta företag och organisationer en av de strategiska tillgångarna. Med en ökning av analysmöjligheterna växer värdet av de data som samlas in och lagras av företagen ständigt. Det pratas ofta om den explosionsartade, exponentiella tillväxten av de företagsdata som genereras. Det konstateras att 90 % av all data har skapats under de senaste två åren.

Ökningen av datamängderna åtföljs av ett ökat värde.

Data skapas och används av analysystem för big data, Internet of Things (IoT), artificiell intelligens och mer. De insamlade data utgör grunden för att förbättra kundservicen, fatta beslut, stödja företagsverksamheten och för olika forsknings- och utvecklingsprojekt.

90 % av all data har skapats under de senaste två åren.

Enligt IDC:s prognoser kommer den mängd lagrad data i världen att fördubblas mellan 2018 och 2023, och den totala lagringskapaciteten kommer att nå 11,7 zettabyte, där mer än tre fjärdedelar av detta kommer att bestå av företagsdatabaser. Det är anmärkningsvärt att, även om den totala kapaciteten på de levererade hårddiskarna (HDD), som fortfarande är den primära informationen, 2018 var 869 exabyte, så kan den siffran redan 2023 överstiga 2,6 zettabyte.

Datahanteringsplattformar: varför behövs de och vilken roll spelar de?

Det är inte förvånande att datastyrning blir en prioritet för företag, vilket direkt påverkar deras verksamhet. För att lösa dessa frågor måste man ibland övervinna utmaningar som heterogenitet i system, dataformat, lagringsmetoder och användning, samt strategier för förvaltning under förhållanden av en "zoo" av lösningar som implementerades vid olika tidpunkter.

Resultatet av en sådan oenhetlig strategi är fragmentering av datamängder som lagras och bearbetas i olika system, med olika procedurer för datakvalitet. Dessa typiska problem ökar arbets- och kostnaderna för datahantering, exempelvis vid insamling av statistik och rapporter eller vid beslutsfattande.

Affärsmodellen för datastyrning måste anpassas, skräddarsys efter företagets behov, uppgifter och mål. Det finns ingen enhetlig automatiserad lösning eller datastyrningsplattform som täcker alla krav. Ändå utgör moderna heltäckande, flexibla och skalbara datastyrningssystem ofta programvara som är allsidig för datastyrning och lagring. De inkluderar nödvändiga verktyg och tjänster för effektiv datastyrning.

De senaste innovationerna gör det möjligt för företag att ompröva datastyrning på en organisatorisk nivå, få en klar bild av vilka data som finns, vilka policyer som är kopplade till dem, var och hur länge data lagras, och ger slutligen möjlighet att snabbt ge relevant information till rätt personer. Detta är lösningar som stärker företags möjligheter och möjliggör:

Att hantera filer, objekt, applikationsdata, databaser, data från virtuella och molnmiljöer samt få åtkomst till olika datatyper.
Att med hjälp av orkestrerings- och automatiseringsverktyg flytta data till den plats där lagringen är mest effektiv – till primär eller sekundär lagringsinfrastruktur, till leverantörens datacenter eller till molnet.
Att använda omfattande dataskyddsfunktioner.
Att säkerställa dataintegration.
Att få operativ analys från data.

Datastyrningsplattformen kan byggas på flera programvaruprodukter eller representera ett enda enhetligt system. En komplett plattform möjliggör enhetlig datastyrning inom hela IT-infrastrukturen, inklusive säkerhetskopiering, återställning, arkivering, hantering av hårdvaruögonblicksbilder och rapportering.

En sådan plattform möjliggör genomförandet av en multicloud-strategi, utvidgar datacenter till molnmiljöer, möjliggör snabb migration till molnet, utnyttjar möjligheter för utrustningsbyte och implementerar de mest kostnadseffektiva lagringsalternativen.

Vissa lösningar kan automatiskt arkivera data. Med hjälp av artificiell intelligens kan de upptäcka när "något gick fel" och automatiskt vidta åtgärder eller informera administratören, samt identifiera och stoppa attacker av olika slag. Automatisering av tjänster bidrar till att optimera IT-operationer, frigör IT-personal, minimerar fel på grund av mänskliga faktorer och minimerar stillestånd.

Vilka egenskaper ska en modern dataplattform ha, och var tillämpas sådana lösningar i praktiken?

Tillvägagångssättet "ett lösning för alla" fungerar inte för dataplattformer. Varje företag har sina egna krav på data som beror på typ av verksamhet, erfarenhet och så vidare. En universell plattform bör, å ena sidan, möjliggöra anpassning för att hantera data på ett specifikt företag och, å andra sidan, vara oberoende av specifika tillämpningsområden, sektorer och informationsmiljöer för produkten som byggs på den.

Praktiska områden för datastyrning (källa; CMMI Institute).

Här är några praktiska användningsområden för dataplattformar:

Komponent
Användningsområde

Datastrategi
Mål och syften med styrning, företagskultur kring datastyrning, definiering av krav på datalivscykeln.

Datastyrning
Datastyrning och metadata

Dataoperationer
Standarder och procedurer för arbete med datakällor

Datakvalitet
Kvalitetssäkring, ramverk för datakvalitet

Plattform och arkitektur
Arkitekturramverk, plattformar och integration

Stödprocesser
Utvärdering och analys, processhantering, kvalitetssäkring, riskhantering, konfigurationshantering

Dessutom spelar sådana plattformar en viktig roll i processen att transformera en organisation till ett "datastyrt" företag, vilket kan delas in i flera steg:

Ändring av datastyrning i befintliga system, implementering av en rollmodell med uppdelning av ansvar och befogenheter. Kvalitetskontroll av data, korsreferens av data mellan system, korrigering av felaktiga data.
Konfigurering av processer för datainsamling och extrahering, deras transformation och uppladdning. Att föra samman data i ett enhetligt system utan att komplicera kvalitetskontrollen av data eller ändra affärsprocesserna.
Dataintegration. Automatisering av processer för leverans av nödvändig data till rätt plats och vid rätt tidpunkt.
Införande av ett fullgott system för kvalitetskontroll av data. Definition av kvalitetskontrollparametrar, utveckling av metodik för användning av automatiska system.
Implementering av verktyg för hantering av datainsamlingsprocesser, verifiering, deduplicering och datarensning. Resultatet blir en ökning av kvaliteten, tillförlitligheten och enhetligheten hos data för alla företagets system.

Fördelar med datastyrningsplattformar

Företag som effektivt arbetar med data tenderar att uppnå större framgång än sina konkurrenter, lanserar produkter och tjänster snabbare och förstår bättre målgruppens behov, samt reagerar snabbt på förändringar i efterfrågan. Datastyrningsplattformar möjliggör 'rensning' av data, att erhålla kvalitativ och relevant information, dataomvandling och strategisk utvärdering av företagets data.

Exempel på en universell plattform för att bygga system för företagsdatan är den ryska 'Unidata', som är utvecklad på grundval av mjukvara med öppen källkod. Den erbjuder verktyg för att skapa datamodeller och sätt att utöka funktionaliteten vid integration i olika IT-miljöer och externa informationssystem: från hantering av materielresurser till säker bearbetning av stora volymer personuppgifter.

Arkitekturen för plattformen 'Unidata' från det namngivna företaget.

Denna multifunktionella plattform säkerställer centraliserad datainsamling (inventering och redovisning av resurser), standardisering av uppgifter (normalisering och berikning), hantering av aktuell och historisk information (versionskontroll, giltighetsperioder för data), datakvalitet och statistikföring. Automatisering av uppgifter som insamling, lagring, rensning, matchning, konsolidering, kvalitetskontroll, distribution av data samt verktyg för automatisering av beslutsfattande system närvarar.

Datahanteringsplattformar (DPM) inom reklam och marknadsföring

Inom reklam och marknadsföring har begreppet datastyrd plattform DMP (Data Management Platform) en snävare betydelse. Det är en programvaruplattform som, baserat på insamlade data, gör det möjligt för företag att definiera målgrupper för riktad reklam till specifika användare och kontext för reklamskampanjer på internet. Denna programvara kan samla in, bearbeta och lagra alla typer av målgruppsdela och har även möjlighet att använda dessa genom vanliga mediakanaler.

Enligt prognosen från Market Research Future (MRFR) kan den globala marknaden för datastyrda plattformar (DMP) nå 3 miljarder dollar i slutet av 2023 med en årlig tillväxttakt på 15%, och senast 2025 kan marknadens storlek överstiga 3,5 miljarder dollar.

DMP-system:

Möjliggör insamling och strukturering av alla typer av målgruppdata; analyserar befintliga data; överför data till vilket medielandskap som helst för placering av riktad reklam.
Hjälper till att samla, organisera och aktivera data från olika källor och översätta dem till en användbar form.
Organiserar alla data i kategorier baserat på affärsmål och marknadsföringsmodeller. Systemet analyserar data och genererar målgrupper som exakt representerar kundbasen över ett brett utbud av kanaler baserat på olika gemensamma egenskaper.
Möjliggör en ökning av precisionen för riktad reklam online och bygger personliga kommunikationer med relevant publik. Baserat på DMP kan även interaktionskedjor med varje målgruppssegment ställas in, så att användarna får aktuella meddelanden vid rätt tidpunkt och på rätt plats.

Ökningen av den digitala marknadsföringens andel påverkar betydligt tillväxten på marknaden för datastyrda plattformar. DMP-system kan snabbt enhetliggöra data från olika källor och dela användare i flera kategorier baserat på deras beteendemönster. Dessa möjligheter bidrar till efterfrågan på DMP bland marknadsförare.

Den globala marknaden för datastyrda plattformar representeras av ett antal ledande aktörer samt flera nya företag, inklusive Lotame Solutions, KBM Group, Rocket Fuel, Krux Digital, Oracle, Neustar, SAS Institute, SAP, Adobe Systems, Cloudera, Turn, Informatica och andra.

Ett exempel på en rysk lösning är den infrastrukturprodukt som lanserats av Mail.ru Group, vilken utgör en enhetlig plattform för hantering och bearbetning av data (Data Management Platform, DMP). Lösningen möjliggör att bygga en utökad beskrivning av profilernas karaktärsdrag inom plattformen, som är integrerad med marknadsföringsverktyg. DMP förenar Mail.ru Groups lösningar och tjänster inom omnikanalmärkning och arbete med målgrupper. Kunder kan lagra, bearbeta och strukturera egna anonymiserade data, samt aktivera dem i reklamkommunikation, vilket ökar effektiviteten inom både verksamheten och marknadsföringen.

Datastyrning i molnmiljö

En annan kategori av lösningar för datastyrning är molnplattformar. Särskilt användningen av moderna lösningar för dataskydd inom datastyrning i molnet gör det möjligt att undvika potentiella problem – från säkerhetshot till problem med datamigrering och minskad prestanda, samt att lösa företagets utmaningar kopplade till digital transformation. Självklart är funktionerna hos sådana system inte begränsade till dataskydd.

Funktionerna hos molnplattformar för datastyrning enligt Gartner: resursdistribution, automatisering och orkestrering; hantering av serviceförfrågningar; hög nivå av styrning och efterlevnad av riktlinjer; övervakning och mätning av parametrar; stöd för multicloud-miljöer; optimering och transparens av kostnader; optimering av kapacitet och resurser; migrering till molnet och katastrofberedskap (DR); hantering av servicenivå; säkerhet och identifiering; automatisering av konfigurationsuppdateringar.

Datastyrning i molnmiljö bör säkerställa en hög tillgänglighet av data, kontroll, automatisering av datastyrning i datacenter, vid nätverksperimeter och i molnet.

Cloud Data Management (CDM) är en plattform som används för att hantera företagsdata i olika molnmiljöer, med hänsyn till privata, publika, hybrida och multicloud-ansatser.

Ett exempel på en sådan lösning är Veeam Cloud Data Management Platform. Enligt systemutvecklarna hjälper det organisationer att förändra sitt tillvägagångssätt för datastyrning, säkerställer intelligent automatiserad datastyrning och deras tillgång i alla applikationer eller molninfrastruktur.

Hantera molndata i Veeam anses vara en integrerad del av intelligent datastyrning, vilket säkerställer att de är tillgängliga för verksamheten från vilken plats som helst.

Veeam Cloud Data Management Platform möjliggör modernisering av säkerhetskopiering och avveckling av föråldrade system, säkerställer snabb implementering av hybridmoln och datamigrering, automatisering av dataskydd och efterlevnad av regulatoriska krav.

Veeam Cloud Data Management Platform – "en modern plattform för datastyrning som stödjer vilket moln som helst."

Som vi ser representerar moderna plattformar för datastyrning en ganska omfattande och mångsidig klass av lösningar. Det som förenar dem är nog en sak: fokus på effektivt arbete med företagsdata och att förvandla företaget eller organisationen till ett modernt datadrivet företag.

Plattformar för datastyrning är en nödvändig evolution av traditionell datastyrning. Fler och fler organisationer flyttar sina data till molnet, och i växande antal lokala och molnbaserade konfigurationer uppstår nya problem som måste lösas just ur datastyrningens perspektiv. Datastyrning i molnet är ett uppdaterat tillvägagångssätt, en ny paradigm som utökar funktionerna för datastyrning för att stödja nya plattformar, applikationer och användningsscenarier.

Dessutom, enligt Veeam Cloud Data Management Report från 2019, planerar företag att djupare integrera molnteknik, hybridmolnteknik, big data-analys, artificiell intelligens och internet of things. Det förväntas att implementeringen av dessa digitala initiativ kommer att ge företagen betydande fördelar.

Företag implementerar snabbt dataplattformstekniker och är redo att använda molnet för att hantera analytiska arbetsbelastningar. Men många stöter på problem när de försöker använda all sin data för att uppnå bättre affärsresultat, enligt analytiker från 451 Research. De senaste datastyrningsplattformarna kommer att hjälpa företag att navigera genom komplexa datahanteringsprocesser i flera moln, använda datastyrningsverktyg och genomföra analyser oavsett var dessa data finns.

Eftersom vi försöker hänga med i tiden och fokuserar på önskemål från våra kunder (både nuvarande och potentiella), vill vi fråga Habracommunity, skulle ni vilja se Veeam i vår marknadsplats? Ответить можно в опросе ниже.