🥇Datu pārvaldības platformas: no perifērijas līdz mākonim

Mūsdienās datiem ir kļuvis par vienu no stratēģiskajiem aktīviem lielākajai daļai uzņēmumu un organizāciju. Paplašinoties analītikas iespējām, vērtība, kas tiek iegūta no uzņēmumu vākto un uzkrāto datu, pastāvīgi pieaug. Bieži vien runā par eksplozīvu, eksponenciālu ģenerēto korporatīvo datu pieaugumu. Tiek norādīts, ka 90% no visiem datiem tika radīti pēdējo divu gadu laikā.

Datu apjoma pieaugums ir saistīts ar to vērtības pieaugumu.

Datus rada un izmanto lielo datu analītikas sistēmas, lietu internets (IoT), mākslīgais intelekts un citi. Vāktie dati ir pamats klientu apkalpošanas kvalitātes uzlabošanai, lēmumu pieņemšanai, atbalsta sniegšanai uzņēmumu operatīvajā darbībā, kā arī dažādiem pētījumiem un attīstībai.

90% no visiem datiem tika radīti pēdējo divu gadu laikā.

Saskaņā ar IDC prognozēm, datu apjoms, kas tiek glabāts visā pasaulē, no 2018. līdz 2023. gadam divkāršosies, un kopējā datu glabātuves ietilpība sasniegs 11,7 zettabaitus, turklāt vairāk nekā trīs ceturtdaļas no kopējā apjoma būs uzņēmumu datu bāzes. Interesanti, ka, ja 2018. gadā kopējā jaudā nodoto cieto disku (HDD), kas vēl joprojām ir galvenais informācijas nesējs, ietilpība bija 869 eksabaiti, tad līdz 2023. gadam šis rādītājs varētu pārsniegt 2,6 zettabaitus.

Datu pārvaldības platformas: kādēļ tās ir nepieciešamas un kādu lomu tās spēlē?

Nav brīnums, ka jautājumi par datu pārvaldību kļūst par prioritāriem uzņēmumiem, tiesājot to tiešo ietekmi uz uzņēmumu darbību. To risināšana dažkārt prasa pārvarēt tādas problēmas kā sistēmu, datu formātu, glabāšanas un izmantošanas metožu nevienveidība, pieejas pārvaldīšanai "zooparkā" ar risinājumiem, kas ieviesti dažādos laikos.

Šāda neviendabīgas pieejas rezultāts ir datu masīvu fragmentācija, kas tiek glabāta un apstrādāta dažādās sistēmās, kā arī atšķirīgas datu kvalitātes nodrošināšanas procedūras. Šīs tipiskās problēmas palielina darba un finanšu izmaksas, strādājot ar datiem, piemēram, statistikas un pārskatu iegūšanā vai lēmumu pieņemšanā.

Datu pārvaldības biznesa modelim jābūt pielāgotam, ņemot vērā uzņēmuma vajadzības, uzdevumus un mērķus. Nav vienas automatizētas sistēmas vai datu pārvaldības platformas, kura atrisinātu visus uzdevumus. Tomēr mūsdienu visaptverošās, elastīgās un mērogojamās datu pārvaldības sistēmas bieži ir universālas programmatūras risinājumi datu pārvaldībai un uzglabāšanai. Tās ietver nepieciešamos rīkus un pakalpojumus efektīvai datu pārvaldībai.

Jaunākās izstrādes ļauj uzņēmumiem pārdomāt datu pārvaldību visā organizācijas mērogā, iegūt skaidru priekšstatu par to, kādi dati ir pieejami, kādas ir saistītās politikas, kur un cik ilgi dati tiek uzglabāti, un visbeidzot, tās sniedz iespēju laikus nodrošināt nepieciešamo informāciju pareizajiem cilvēkiem. Šie risinājumi paplašina uzņēmumu iespējas un ļauj:

Pārvaldīt failus, objektus, lietojumprogrammu datus, datu bāzes, virtuālo un mākoņu vidi, piekļūt dažādu veidu datiem.
Izmantojot orķestrācijas un automatizācijas rīkus, pārvietot datus uz vietām, kur to uzglabāšana ir visefektīvākā — primārajā, sekundārajā uzglabāšanas infrastruktūrā, pakalpojumu sniedzēja datu centrā vai mākoņā.
Izmantot visaptverošas datu aizsardzības funkcijas.
Nodrošināt datu integrāciju.
Iegūt operatīvās analītikas datus.

Datu pārvaldības platforma var tikt veidota uz vairākiem programmatūras produktiem vai arī var būt viena vienota sistēma. Visaptveroša platforma nodrošina vienotu datu pārvaldību visā IT infrastruktūrā, tostarp to dublēšanu, atjaunošanu, arhivēšanu, aparatūras momentuzņēmumu pārvaldību un atskaišu sagatavošanu.

Šāda platforma ļauj īstenot multi-mākoņu stratēģiju, paplašināt datu centru līdz mākoņvides risinājumiem, veikt ātru migrāciju uz mākoņu, izmantot aparatūras nomaiņas iespējas un ieviest visekonomiskākos datu uzglabāšanas risinājumus.

Dažādi risinājumi spēj automātiski arhivēt datus. Ar mākslīgā intelekta palīdzību tie var atklāt, ka "kaut kas nav kārtībā", un automātiski veikt korektīvus pasākumus vai brīdināt administratoru, kā arī identificēt un novērst dažāda veida uzbrukumus. Pakalpojumu automatizācija veicina IT operāciju optimizāciju, ļauj atlīdzināt IT personālu un minimizēt cilvēku faktora kļūdas un dīkstāves.

Kādām prasībām jāatbilst mūsdienu datu pārvaldības platformai, un kur tādas risinājumus praktiski pielieto?

Pieeja "viena risinājuma visiem" neizdodas datu pārvaldības platformās. Katras uzņēmuma prasības attiecībā uz datiem ir atšķirīgas un ir atkarīgas no uzņēmējdarbības veida, darba pieredzes utt. Universālai platformai jānodrošina pielāgošana datu apstrādei konkrētā uzņēmumā un vienlaikus jābūt neatkarīgai no specifikas attiecībā uz nozari un produkta informācijas vidi, kas balstās uz to.

Datu pārvaldības praktiskās jomas (avots; CMMI Institūts).

Šeit ir dažas datu pārvaldības platformu praktiskās lietojumprogrammas:

Komponents
Pielietojuma joma

Datu pārvaldības stratēģija
Mērķi un uzdevumi, uzņēmuma kultūra datu pārvaldībā, prasību noteikšana attiecībā uz datu dzīves ciklu.

Datu pārvaldība
Datu un metadatu pārvaldība

Datu operācijas
Standarti un procedūras, strādājot ar datu avotiem

Datu kvalitāte
Kvalitātes nodrošināšana, datu kvalitātes ietvars

Platforma un arhitektūra
Arhitektūras ietvars, platformas un integrācija

Atbalsts procesiem
Novērtēšana un analīze, procesu vadība, kvalitātes nodrošināšana, risku vadība, konfigurācijas vadība

Turklāt šādas platformas spēlē būtisku lomu organizācijas transformācijas procesā uz "datu vadītu uzņēmumu", ko var iedalīt vairākos posmos:

Datu pārvaldības izmaiņas esošajās sistēmās, lomu modeļa ieviešana ar pienākumu un pilnvaru sadalīšanu. Datu kvalitātes kontrole, datu krustpārbaude starp sistēmām, nepatiesu datu labošanas.
Datu iegūšanas un apkopošanas procesu konfigurēšana, to transformācija un ielāde. Datu pielāgošana vienotai sistēmai, neapgrūtinot datu kvalitātes kontroles un biznesa procesu izmaiņas.
Datu integrācija. Procesu automatizācija, lai piegādātu vajadzīgos datus vajadzīgajā vietā un laikus.
Pilnvērtīgas datu kvalitātes kontroles ieviešana. Kvalitātes kontroles parametru noteikšana, automātisko sistēmu izmantošanas metodoloģijas izstrāde.
Datu apkopošanas procesu pārvaldības rīku ieviešana, to verificēšana, deduplicēšana un attīrīšana. Kā rezultātā - datu kvalitātes, ticamības un vienotības pieaugums visās uzņēmuma sistēmās.

Datu pārvaldības platformu priekšrocības

Uzņēmumi, kas efektīvi strādā ar datiem, parasti gūst lielāku panākumu salīdzinājumā ar konkurentiem, ātrāk izlaida produktus un pakalpojumus tirgū, labāk izprot mērķauditorijas vajadzības un var ātri reaģēt uz pieprasījuma izmaiņām. Datu pārvaldības platformas sniedz iespēju „attīrīt” datus, iegūt kvalitatīvu un atbilstošu informāciju, datu transformāciju un stratēģisku uzņēmuma datu novērtēšanu.

Universālas platformas piemērs uzņēmuma datu pārvaldības sistēmu izveidei ir krievu "Unidata", kas izveidota uz atvērtā koda programmatūras bāzes. Tā piedāvā datu modeļu izveides rīkus un iespējas funkcionalitātes paplašināšanai, integrējoties dažādās IT vidēs un trešo pušu informācijas sistēmās: no materiālo resursu uzskaites līdz drošai lielu apjomu personas datu apstrādei.

Platformas "Unidata" arhitektūra ir tās paša nosaukuma uzņēmumam.

Šī daudzfunkcionālā platforma nodrošina centralizētu datu vākšanu (resursu inventarizācija un uzskaite), datu standartizāciju (normalizācija un bagātināšana), pašreizējās un vēsturiskās informācijas uzskaiti (ieraksta versiju kontrole, datu aktualitātes periodi), datu kvalitāti un statistikas veikšanu. Ir paredzēta tādu uzdevumu automatizācija kā datu vākšana, uzkrāšana, attīrīšana, salīdzināšana, konsolidēšana, kvalitātes pārbaude, datu izplatīšana, kā arī rīki lēmumu pieņemšanas sistēmas automatizēšanai.

Datu pārvaldības platformas (DMP) reklāmā un mārketingā

Reklāmā un mārketingā datu pārvaldības platformas (DMP) jēdziens ir šaurāks. Tā ir programmatūras platforma, kas, balstoties uz savāktiem datiem, ļauj uzņēmumiem identificēt auditorijas segmentos mērķtiecīgas reklāmas izveidei konkrētiem lietotājiem un reklāmas kampaņu konteksta pārvaldībai internetā. Šāda programmatūra spēj savākt, apstrādāt un uzglabāt dažāda veida auditorijas datus, kā arī nodrošina iespēju izmantot tos caur ierastajiem mediju kanāliem.

Saskaņā ar Market Research Future (MRFR) prognozi, globālais datu pārvaldības platformu tirgus līdz 2023. gada beigām var sasniegt 3 miljardus dolāru ar vidējo gadā pieaugumu 15%, bet 2025. gadā tā apjoms pārsniegs 3,5 miljardus dolāru.

DMP sistēma:

Iespējot savākt un strukturēt visus auditorijas datu tipus; analizēt esošos datus; nodot datus jebkurā mediju telpā, lai izvietotu mērķtiecīgu reklāmu.
Palīdz savākt, organizēt un aktivizēt datus no dažādiem avotiem un pārveidot tos noderīgā formā.
Organizē visus datus kategorijās, pamatojoties uz biznesa mērķiem un mārketinga modeļiem. Sistēma analizē datus un ģenerē auditorijas segmentus, kas precīzi atspoguļo klientu bāzi plašā kanālu diapazonā, balstoties uz dažādām kopējām īpašībām.
Piedāvā palielināt reklāmas mērķtiecīguma precizitāti tiešsaistē un izveidot personalizētas komunikācijas ar atbilstošo auditoriju. DMP pamatā arī var iestatīt mijiedarbības ķēdes ar katru mērķauditorijas segmentu, lai lietotāji saņemtu aktuālus ziņojumus pareizajā laikā un vietā.

Digitālā mārketinga daļas pieaugums ievērojami ietekmē datu pārvaldības platformu tirgus izaugsmi. DMP sistēmas var ātri vienot datus no dažādiem avotiem un sadalīt lietotājus vairākās kategorijās, pamatojoties uz viņu uzvedības modeli. Šādas iespējas veicina DMP pieprasījumu starp mārketinga speciālistiem.

Globālais datu pārvaldības platformu tirgus ir pārstāvēts ar vairākām vadošām kompānijām, kā arī vairākām jaunām, tostarp Lotame Solutions, KBM Group, Rocket Fuel, Krux Digital, Oracle, Neustar, SAS Institute, SAP, Adobe Systems, Cloudera, Turn, Informatica un citiem.

Krievijas risinājums — Mail.ru Group izlaists infrastruktūras produkts, kas ir vienota datu pārvaldības un apstrādes platforma (Data Management Platform, DMP). Risinājums ļauj veidot paplašinātus auditorijas segmentu profilu aprakstus platformā, kas integrēta ar mārketinga rīkiem. DMP apvieno Mail.ru Group risinājumus un pakalpojumus omnikanālā mārketinga jomā un darbā ar auditoriju. Klienti varēs glabāt, apstrādāt un strukturēt savus anonimizētos datus, kā arī aktivizēt tos reklāmas saziņā, uzlabojot biznesa un mārketinga efektivitāti.

Datu pārvaldība mākoņu vidē

Vēl viena datu pārvaldības risinājumu kategorija ir mākoņu platformas. It īpaši mūsdienīga risinājuma izmantošana datu aizsardzībai datu pārvaldības ietvaros mākoņos ļauj izvairīties no iespējamām problēmām — no drošības apdraudējumiem līdz datu migrācijas problēmām un snieguma samazināšanai, kā arī risināt uzņēmuma digitālās transformācijas izaicinājumus. Protams, šādu sistēmu funkcijas neaprobežojas tikai ar datu aizsardzību.

Mākoņu datu pārvaldības platformas funkcijas Gartner skatījumā: resursu sadale, automatizācija un orķestrācija; apkalpošanas pieprasījumu pārvaldība; augsta līmeņa pārvaldība un politiku ievērošanas kontrole; parametru uzraudzība un mēri; atbalsts multi-mākoņu vidēm; izmaksu optimizācija un caurredzamība; jaudu un resursu optimizācija; migrācija uz mākoņu un katastrofu noturības nodrošināšana (DR); pakalpojuma līmeņa vadība; drošība un identifikācija; konfigurāciju atjauninājumu automatizācija.

Datu pārvaldībai mākoņu vidē jānodrošina augsts datu pieejamības, kontroles un automatizācijas līmenis datu centros, tīkla perifērijā un mākoņos.

Mākoņu datu pārvaldība (Cloud Data Management, CDM) ir platforma, ko izmanto korporatīvo datu pārvaldībai dažādās mākoņu vidēs, ņemot vērā privātās, publiskās, hibrīdās un multi-mākoņu pieejas.

Šāda risinājuma piemērs ir Veeam Cloud Data Management Platform. Kā apgalvo sistēmas izstrādātāji, tā palīdz organizācijām mainīt pieeju datu pārvaldībai, nodrošina intelektuālu automatizētu datu pārvaldību un to pieejamību jebkurās lietojumprogrammās vai mākoņu infrastruktūrā.

Veeam mākoņa datu pārvaldību uzskata par neatņemamu intelektuālas datu pārvaldības sastāvdaļu, kas nodrošina to pieejamību biznesam no jebkuras vietas.

Mākoņu platforma Veeam Cloud Data Management Platform ļauj modernizēt dublēšanu un atteikties no novecojušām sistēmām, nodrošina paātrinātu hibrīdmākoņu ieviešanu un datu pārvietošanu, datu drošības automatizāciju un atbilstības normatīvajiem aktiem prasību izpildi.

Veeam Cloud Data Management Platform — moderna datu pārvaldības platforma, kas atbalsta jebkuru mākoņu.

Kā redzams, mūsdienu datu pārvaldības platformas pārstāv pietiekami plašu un daudzveidīgu risinājumu klasi. Visus tās apvieno, iespējams, viens: orientācija uz efektīvu darbu ar uzņēmuma datiem un pārvēršanu uzņēmumu par mūsdienīgu datu vadītu uzņēmumu (data-driven enterprise).

Datu pārvaldības platformas ir nepieciešama evolūcija tradicionālai datu pārvaldībai. Vairāk un vairāk organizāciju pārvieto datus mākoņos, un pieaugošais dažādo lokālo un mākoņu konfigurāciju skaits rada jaunas problēmas, kuras jārisina tieši no datu pārvaldības viedokļa. Datu pārvaldība mākoņos ir atjaunināta pieeja, jauna paradigma, kas paplašina datu pārvaldības funkcijas, lai atbalstītu jaunas platformas, lietojumprogrammas un izmantošanas scenārijus.

Turklāt, saskaņā ar 2019. gada Veeam Cloud Data Management Report, uzņēmumi plāno dziļāk integrēt mākoņu tehnoloģijas, hibrīdmākoņa tehnoloģijas, lielo datu analītiku, mākslīgo intelektu un lietu internetu. Sagaidāms, ka šo digitālo iniciatīvu ieviešana nesīs uzņēmumiem ievērojamas priekšrocības.

Uzņēmumi strauji ievieš datu platformu tehnoloģijas un ir gatavi izmantot mākoņu risinājumus analītisko darba slodžu veikšanai, taču daudzi saskaras ar grūtībām, mēģinot izmantot visus savus datus, lai panāktu labākus biznesa rezultātus, uzskata uzņēmuma 451 Research analītiķi. Jaunākās datu pārvaldības platformas palīdzēs uzņēmumiem orientēties sarežģītajos datu apstrādes procesos vairāku mākoņu vidē, izmantot datu pārvaldības rīkus un veikt to analīzi neatkarīgi no tā, kur šie dati atrodas.

Tā kā mēs cenšamies sekot laikam un ņemam vērā mūsu klientu (gan esošo, gan potenciālo) vēlmes, mēs vēlētos jautāt Habr kopienai, vai jums patiktu redzēt Veeam mūsu tirgus vietnē? Ответить можно в опросе ниже.

Tikai reģistrētie lietotāji var piedalīties aptaujā. Pieteikties, lūdzu.

Veeam pakotnes piedāvājums tirgus vietnē

62,5%Jā, laba ideja5
37,5%Domāju, ka neizdosies3

Nobalsoja 8 lietotāji. Atturējās 4 lietotāji.

Avots: habr.com