ProHoster > Blogs > Administrācija > Datu pārvaldības platformas: no malas līdz mākonim

Datu pārvaldības platformas: no malas līdz mākonim

MÅ«sdienās lielākajai daļai uzņēmumu un organizāciju dati ir viens no stratēģiskajiem aktÄ«viem. Un, paplaÅ”inoties analÄ«tikas iespējām, uzņēmumu savākto un uzkrāto datu vērtÄ«ba pastāvÄ«gi pieaug. Tajā paŔā laikā viņi bieži runā par sprādzienbÄ«stamu, eksponenciālu Ä£enerēto korporatÄ«vo datu apjoma pieaugumu. Tiek atzÄ«mēts, ka 90% no visiem datiem ir izveidoti pēdējo divu gadu laikā. 

Datu pārvaldības platformas: no malas līdz mākonim

Datu apjoma pieaugumu pavada to vērtības pieaugums

Datus veido un izmanto lielo datu analÄ«tikas sistēmas, lietiskais internets (IoT), mākslÄ«gais intelekts u.c. Apkopotie dati ir pamats klientu apkalpoÅ”anas kvalitātes uzlaboÅ”anai, lēmumu pieņemÅ”anai, uzņēmumu darbÄ«bas atbalstam un dažādi pētÄ«jumi un izstrāde.

Datu pārvaldības platformas: no malas līdz mākonim
90% no visiem datiem ir izveidoti pēdējo divu gadu laikā. 

IDC prognozē, ka no 2018. lÄ«dz 2023. gadam globāli uzglabāto datu apjoms dubultosies, kopējai datu uzglabāŔanas jaudai sasniedzot 11,7 zettabaitus, un uzņēmumu datubāzes veidos vairāk nekā trÄ«s ceturtdaļas no kopējā datu apjoma. RaksturÄ«gi, ka, ja vēl 2018. gadā piegādāto diskdziņu (HDD), kas joprojām ir galvenais datu nesējs, kopējā ietilpÄ«ba bija 869 eksabaiti, tad lÄ«dz 2023. gadam Å”is rādÄ«tājs var pārsniegt 2,6 zetabaitus.

Datu pārvaldības platformas: kam tās paredzētas un kādu lomu tās spēlē?

Nav pārsteidzoÅ”i, ka datu pārvaldÄ«bas jautājumi kļūst par uzņēmumu prioritāti, kas tieÅ”i ietekmē viņu darbu. Lai tos atrisinātu, dažreiz ir jāpārvar tādas grÅ«tÄ«bas kā sistēmu neviendabÄ«gums, datu formāti, to glabāŔanas un izmantoÅ”anas metodes, pieejas pārvaldÄ«bai dažādos laikos ieviesto risinājumu ā€œzoodārzāā€. 

Datu pārvaldības platformas: no malas līdz mākonim
Å Ä«s nevienotās pieejas rezultāts ir dažādās sistēmās uzglabāto un apstrādāto datu kopu sadrumstalotÄ«ba un dažādas datu kvalitātes nodroÅ”ināŔanas procedÅ«ras. Å Ä«s tipiskās problēmas palielina darbaspēka un finanÅ”u izmaksas, strādājot ar datiem, piemēram, iegÅ«stot statistiku un pārskatus vai pieņemot vadÄ«bas lēmumus. 

Datu pārvaldÄ«bas biznesa modelim jābÅ«t pielāgotam, pielāgotam uzņēmuma vajadzÄ«bām, uzdevumiem un mērÄ·iem. Nav vienas automatizētas sistēmas vai datu pārvaldÄ«bas platformas, kas aptvertu visus uzdevumus. Tomēr mÅ«sdienu visaptveroŔās, elastÄ«gās un mērogojamās datu pārvaldÄ«bas sistēmas bieži vien nodroÅ”ina visaptveroÅ”u datu pārvaldÄ«bas un uzglabāŔanas programmatÅ«ru. Tie ietver nepiecieÅ”amos rÄ«kus un pakalpojumus efektÄ«vai datu pārvaldÄ«bai. 

Jaunākie sasniegumi ļauj uzņēmumiem pārdomāt datu pārvaldÄ«bu visā organizācijā, iegÅ«stot skaidru izpratni par to, kādi dati ir pieejami, kādas politikas ar tiem ir saistÄ«tas, kur dati tiek glabāti un cik ilgi, un visbeidzot, tie nodroÅ”ina iespēju nodroÅ”ināt pareizo informāciju Ä«stajiem cilvēkiem savlaicÄ«gi. Å ie ir risinājumi, kas paplaÅ”ina uzņēmumu iespējas un ļauj: 

  • Pārvaldiet failus, objektus, lietojumprogrammu datus, datu bāzes, datus no virtuālās un mākoņa vides un piekļūstiet dažāda veida datiem.
  • Izmantojot orÄ·estrÄ“Å”anas un automatizācijas rÄ«kus, pārvietojiet datus tur, kur tie tiek glabāti visefektÄ«vāk ā€“ uz primāro, sekundāro krātuves infrastruktÅ«ru, uz pakalpojumu sniedzēja datu centru vai uz mākoni.
  • Izmantojiet visaptveroÅ”us datu aizsardzÄ«bas lÄ«dzekļus.
  • NodroÅ”iniet datu integrāciju.
  • IegÅ«stiet operatÄ«vo analÄ«zi no datiem. 

Datu pārvaldÄ«bas platformu var veidot, pamatojoties uz vairākiem programmatÅ«ras produktiem, vai arÄ« tā var bÅ«t viena vienota sistēma. VisaptveroŔā platforma nodroÅ”ina vienotu datu pārvaldÄ«bu visā IT infrastruktÅ«rā, tostarp dublÄ“Å”anu, atkopÅ”anu, arhivÄ“Å”anu, aparatÅ«ras momentuzņēmumu pārvaldÄ«bu un atskaites.

Šāda platforma ļauj Ä«stenot vairāku mākoņu stratēģiju, paplaÅ”ināt datu centru mākoņa vidē, veikt ātru migrāciju uz mākoni, izmantot iespēju nomainÄ«t aprÄ«kojumu un ieviest izmaksu ziņā izdevÄ«gākās datu uzglabāŔanas iespējas.

Daži risinājumi spēj automātiski arhivēt datus. Un ar mākslÄ«gā intelekta palÄ«dzÄ«bu var konstatēt, ka ā€œkaut kas ir nogājis greiziā€ un automātiski veikt korektÄ«vas darbÄ«bas vai paziņot administratoram, kā arÄ« identificēt un apturēt dažāda veida uzbrukumus. Pakalpojumu automatizācija palÄ«dz optimizēt IT darbÄ«bas, atbrÄ«vo IT darbiniekus, samazina kļūdas, kas rodas cilvēka faktora dēļ, un samazina dÄ«kstāves laiku. 

Kādām Ä«paŔībām jāpiemÄ«t modernai datu pārvaldÄ«bas platformai un kur Ŕādi risinājumi tiek izmantoti praksē?

Viena izmēra pieeja nedarbojas ar datu pārvaldÄ«bas platformām. Katram uzņēmumam ir savas datu prasÄ«bas, tās ir atkarÄ«gas no uzņēmējdarbÄ«bas veida, darba pieredzes utt. Universālai platformai, no vienas puses, jānodroÅ”ina konfigurācija darbam ar datiem konkrētajā uzņēmumā un, no otras puses, jābÅ«t neatkarÄ«gai no pielietojamās nozares specifika, uz tā bāzes veidota produkta pielietojuma joma un tā informatÄ«vā vide. 

Datu pārvaldības platformas: no malas līdz mākonim
Datu pārvaldības praktiskās jomas (avots; CMMI institūts).

Šeit ir daži praktiski pielietojumi datu pārvaldības platformām:

komponents
Pieteikumi

Datu pārvaldības stratēģija
PārvaldÄ«bas mērÄ·i un uzdevumi, datu pārvaldÄ«bas korporatÄ«vā kultÅ«ra, datu dzÄ«ves cikla prasÄ«bu noteikÅ”ana.

Datu vadība
Datu un metadatu pārvaldība

Datu operācijas
Standarti un procedūras darbam ar datu avotiem

Datu kvalitāte
Kvalitātes nodroŔināŔana, datu kvalitātes ietvars

Platforma un arhitektūra
ArhitektÅ«ras ietvars, platformas un integrācija 

Atbalsta procesi
NovērtÄ“Å”ana un analÄ«ze, procesu vadÄ«ba, kvalitātes nodroÅ”ināŔana, risku vadÄ«ba, konfigurācijas vadÄ«ba

Turklāt Ŕādām platformām ir svarÄ«ga loma organizācijas pārveidoÅ”anas procesā par ā€œdatu vadÄ«tuā€ uzņēmumu, ko var iedalÄ«t vairākos posmos: 

  1. Datu pārvaldÄ«bas maiņa esoÅ”ajās sistēmās, parauga ievieÅ”ana ar pienākumu un pilnvaru nodalÄ«Å”anu. Datu kvalitātes kontrole, datu kontrolpārbaude starp sistēmām, nederÄ«go datu laboÅ”ana. 
  2. Procesu iestatÄ«Å”ana datu iegÅ«Å”anai un apkopoÅ”anai, to pārveidoÅ”anai un ielādei. Datu apvienoÅ”ana vienotā sistēmā, neapgrÅ«tinot datu kvalitātes kontroli un nemainot biznesa procesus. 
  3. Datu integrācija. Automatizējiet pareizo datu piegādes procesus pareizajā vietā un laikā. 
  4. Pilnas datu kvalitātes kontroles ievieÅ”ana. Kvalitātes kontroles parametru noteikÅ”ana, automātisko sistēmu izmantoÅ”anas metodikas izstrāde. 
  5. RÄ«ku ievieÅ”ana datu vākÅ”anas, pārbaudes, dublÄ“Å”anas un tÄ«rÄ«Å”anas procesu pārvaldÄ«bai. Tā rezultātā palielinās visu uzņēmuma sistēmu datu kvalitāte, uzticamÄ«ba un unifikācija. 

Datu pārvaldības platformu priekŔrocības

Uzņēmumi, kas efektÄ«vi strādā ar datiem, mēdz bÅ«t veiksmÄ«gāki nekā konkurenti, ātrāk laist tirgÅ« produktus un pakalpojumus, labāk izprot savas mērÄ·auditorijas vajadzÄ«bas un var ātri reaģēt uz pieprasÄ«juma izmaiņām. Datu pārvaldÄ«bas platformas nodroÅ”ina iespēju tÄ«rÄ«t datus, iegÅ«t kvalitatÄ«vu un atbilstoÅ”u informāciju, pārveidot datus un stratēģiski novērtēt uzņēmuma datus. 

Universālas platformas piemērs korporatÄ«vo datu pārvaldÄ«bas sistēmu izveidei ir Krievijas Unidata, kas izveidota, pamatojoties uz atvērtā pirmkoda programmatÅ«ru. Tas piedāvā rÄ«kus datu modeļa izveidei un lÄ«dzekļus funkcionalitātes paplaÅ”ināŔanai, integrējoties dažādās IT vidēs un treÅ”o puÅ”u informācijas sistēmās: no materiāltehnisko resursu uzturÄ“Å”anas lÄ«dz liela apjoma personas datu droÅ”ai apstrādei. 

Datu pārvaldības platformas: no malas līdz mākonim
Tā paÅ”a nosaukuma uzņēmuma Unidata platformas arhitektÅ«ra.

Å Ä« daudzfunkcionālā platforma nodroÅ”ina centralizētu datu vākÅ”anu (inventāra un resursu uzskaite), informācijas standartizāciju (normalizāciju un bagātināŔanu), paÅ”reizējās un vēsturiskās informācijas uzskaiti (ierakstu versiju kontrole, datu atbilstÄ«bas periodi), datu kvalitāti un statistiku. Tiek nodroÅ”ināta tādu uzdevumu automatizācija kā savākÅ”ana, uzkrāŔana, tÄ«rÄ«Å”ana, salÄ«dzināŔana, konsolidācija, kvalitātes kontrole, datu izplatÄ«Å”ana, kā arÄ« rÄ«ki lēmumu pieņemÅ”anas sistēmas automatizÄ“Å”anai. 

Datu pārvaldÄ«bas platformas (DPM) reklāmā un mārketingā 

Reklāmā un mārketingā datu pārvaldÄ«bas platformas DMP (Data Management Platform) jēdzienam ir Å”aurāka nozÄ«me. Tā ir programmatÅ«ras platforma, kas, pamatojoties uz apkopotajiem datiem, ļauj uzņēmumiem definēt auditorijas segmentus, lai reklamētu konkrētus lietotājus un tieÅ”saistes reklāmas kampaņu kontekstu. Šāda programmatÅ«ra spēj apkopot, apstrādāt un uzglabāt jebkura veida klases datus, kā arÄ« to var izmantot pazÄ«stamos mediju kanālos.

Datu pārvaldības platformas: no malas līdz mākonim
Saskaņā ar Market Research Future (MRFR) datiem globālā datu pārvaldības platformas (DMP) tirgus līdz 2023. gada beigām varētu sasniegt 3 miljardus ASV dolāru ar 15% CAGR un 2025. gadā pārsniegs 3,5 miljardus ASV dolāru.

DMP sistēma:

  • Ä»auj apkopot un strukturēt visu veidu klases datus; analizēt pieejamos datus; pārsÅ«tÄ«t datus uz jebkuru mediju vietu, lai izvietotu mērÄ·tiecÄ«gu reklāmu. 
  • PalÄ«dz apkopot, sakārtot un aktivizēt datus no dažādiem avotiem un pārvērst tos noderÄ«gā formā. 
  • Sakārto visus datus kategorijās, pamatojoties uz biznesa mērÄ·iem un mārketinga modeļiem. Sistēma analizē datus un Ä£enerē auditorijas segmentus, kas precÄ«zi atspoguļo klientu bāzi plaŔā kanālu klāstā, pamatojoties uz dažādām kopÄ«gām iezÄ«mēm.
  • Ä»auj palielināt tieÅ”saistes reklāmu mērÄ·auditorijas atlases precizitāti un veidot personalizētu saziņu ar atbilstoŔām auditorijām. Pamatojoties uz DMP, varat arÄ« iestatÄ«t mijiedarbÄ«bas ķēdes ar katru mērÄ·a segmentu, lai lietotāji saņemtu atbilstoÅ”us ziņojumus Ä«stajā laikā un Ä«stajā vietā.

PieaugoÅ”ais digitālā mārketinga Ä«patsvars bÅ«tiski ietekmē datu pārvaldÄ«bas platformu tirgus izaugsmi. DMP sistēmas var ātri apvienot datus no dažādiem avotiem un klasificēt lietotājus, pamatojoties uz viņu uzvedÄ«bas modeļiem. Šādas iespējas palielina pieprasÄ«jumu pēc DMP tirgotāju vidÅ«. 

Globālo datu pārvaldÄ«bas platformu tirgu pārstāv virkne vadoÅ”o spēlētāju, kā arÄ« vairāki jauni uzņēmumi, tostarp Lotame Solutions, KBM Group, Rocket Fuel, Krux Digital), Oracle, Neustar, SAS Institute, SAP, Adobe Systems, Cloudera, Pagrieziens, informātika utt.

Krievu risinājuma piemērs ir Mail.ru Group izdotais infrastruktÅ«ras produkts, kas ir vienota datu pārvaldÄ«bas un apstrādes platforma (Data Management Platform, DMP). Risinājums ļauj izveidot paplaÅ”inātu auditorijas segmentu profila aprakstu platformā, kas integrēta ar mārketinga rÄ«kiem. DMP apvieno Mail.ru Group risinājumus un pakalpojumus daudzkanālu mārketinga un darba ar auditoriju jomā. Klienti varēs uzglabāt, apstrādāt un strukturēt savus anonimizētos datus, kā arÄ« aktivizēt tos reklāmas komunikācijās, palielinot biznesa un mārketinga efektivitāti. 

Mākoņa datu pārvaldība

Vēl viena datu pārvaldÄ«bas risinājumu kategorija ir mākoņu platformas. Jo Ä«paÅ”i mÅ«sdienÄ«ga datu aizsardzÄ«bas risinājuma izmantoÅ”ana mākoņdatu pārvaldÄ«bas ietvaros ļauj izvairÄ«ties no iespējamām problēmām ā€“ no droŔības apdraudējumiem lÄ«dz datu migrācijas problēmām un samazinātu produktivitāti, kā arÄ« risināt digitālās transformācijas izaicinājumus, ar kuriem saskaras uzņēmums. Protams, Ŕādu sistēmu funkcijas neaprobežojas tikai ar datu aizsardzÄ«bu.

Datu pārvaldības platformas: no malas līdz mākonim
Gartner mākoņdatu pārvaldÄ«bas platformas lÄ«dzekļi: resursu pieŔķirÅ”ana, automatizācija un orÄ·estrÄ“Å”ana; pakalpojumu pieprasÄ«jumu vadÄ«ba; augsta lÄ«meņa vadÄ«bas un politikas atbilstÄ«bas uzraudzÄ«ba; parametru uzraudzÄ«ba un mērÄ«Å”ana; atbalsts vairāku mākoņu vidēm; izmaksu optimizācija un caurskatāmÄ«ba; jaudu un resursu optimizācija; mākoņu migrācija un noturÄ«ba pret katastrofām (DR); pakalpojumu lÄ«meņa vadÄ«ba; droŔība un identifikācija; konfigurācijas atjauninājumu automatizācija.

Datu pārvaldÄ«bai mākoņa vidē ir jānodroÅ”ina augsts datu pieejamÄ«bas, kontroles un datu pārvaldÄ«bas automatizācijas lÄ«menis datu centros, gar tÄ«kla perimetru un mākonÄ«. 

Datu pārvaldības platformas: no malas līdz mākonim
Cloud Data Management (CDM) ir platforma, kas tiek izmantota, lai pārvaldītu uzņēmuma datus dažādās mākoņa vidēs, ņemot vērā privātās, publiskās, hibrīda un vairāku mākoņu pieejas.

Šāda risinājuma piemērs ir Veeam Cloud Data Management Platform. Kā norāda sistēmas izstrādātāji, tas palÄ«dz organizācijām mainÄ«t pieeju datu pārvaldÄ«bai, nodroÅ”ina inteliÄ£entu, automatizētu datu pārvaldÄ«bu un tās pieejamÄ«bu jebkurā aplikācijā vai mākoņa infrastruktÅ«rā.

Datu pārvaldības platformas: no malas līdz mākonim
Veeam mākoņdatu pārvaldÄ«bu uzskata par neatņemamu inteliÄ£entas datu pārvaldÄ«bas sastāvdaļu, nodroÅ”inot, ka dati ir pieejami uzņēmumiem no jebkuras vietas. 

Veeam Cloud datu pārvaldÄ«bas platforma modernizē dublÄ“Å”anu un likvidē mantotās sistēmas, paātrina hibrÄ«da mākoņa ievieÅ”anu un datu migrāciju, kā arÄ« automatizē datu droŔību un atbilstÄ«bu. 

Datu pārvaldības platformas: no malas līdz mākonim
Veeam Cloud Data Management Platform ir "moderna datu pārvaldības platforma, kas atbalsta jebkuru mākoni".

Kā redzat, mÅ«sdienu datu pārvaldÄ«bas platformas pārstāv diezgan plaÅ”u un daudzveidÄ«gu risinājumu klasi. Iespējams, viņiem ir viena kopÄ«ga iezÄ«me: koncentrÄ“Å”anās uz efektÄ«vu darbu ar korporatÄ«vajiem datiem un uzņēmuma vai organizācijas pārveidoÅ”anu par modernu uz datiem balstÄ«tu uzņēmumu.

Datu pārvaldÄ«bas platformas ir tradicionālās datu pārvaldÄ«bas nepiecieÅ”amā attÄ«stÄ«ba. Tā kā arvien vairāk organizāciju pārvieto datus uz mākoni, arvien vairāk dažādu lokālo un mākoņa konfigurāciju rada jaunas problēmas, kas jārisina tieÅ”i no datu pārvaldÄ«bas viedokļa. Datu pārvaldÄ«ba mākonÄ« ir atjaunota pieeja, jauna paradigma, kas paplaÅ”ina datu pārvaldÄ«bas iespējas, lai atbalstÄ«tu jaunas platformas, lietojumprogrammas un lietoÅ”anas gadÄ«jumus.

Turklāt saskaņā ar Veeam mākoņdatu pārvaldÄ«bas ziņojumu 2019. gadam uzņēmumi plāno dziļi integrēt mākoņtehnoloÄ£ijas, hibrÄ«da mākoņtehnoloÄ£ijas, lielo datu analÄ«zi, mākslÄ«go intelektu un lietu internetu. Paredzams, ka Å”o digitālo iniciatÄ«vu Ä«stenoÅ”ana uzņēmumiem dos ievērojamus ieguvumus.

Saskaņā ar 451 Research analÄ«tiÄ·u teikto, uzņēmumi paātrina datu platformu tehnoloÄ£iju ievieÅ”anu un ir gatavi izmantot mākoni, lai veiktu analÄ«tikas darba slodzi, taču daudzi saskaras ar problēmām, izmantojot visus savus datus, lai sasniegtu labākus biznesa rezultātus. Jaunākās datu pārvaldÄ«bas platformas var palÄ«dzēt uzņēmumiem pārvietoties sarežģītās datu darbplÅ«smās vairākos mākoņos, pārvaldÄ«t datus un veikt analÄ«zi neatkarÄ«gi no datu atraÅ”anās vietas.

Tā kā mēs cenÅ”amies iet lÄ«dzi laikam un koncentrēties uz mÅ«su klientu (gan paÅ”reizējo, gan potenciālo) vēlmēm, vēlamies jautāt habra sabiedrÄ«bai, vai vēlaties redzēt Veeam mÅ«su tirgus laukums? JÅ«s varat atbildēt zemāk esoÅ”ajā aptaujā.

Datu pārvaldības platformas: no malas līdz mākonim

Aptaujā var piedalīties tikai reģistrēti lietotāji. Ielogoties, lūdzu.

PakeŔu piedāvājums ar Veeam tirgū

  • 62,5%Jā, laba ideja 5

  • 37,5%Nedomāju, ka pacelsies3

Nobalsoja 8 lietotāji. 4 lietotāji atturējās.

Avots: www.habr.com

Pievieno komentāru