🥇Platforme za upravljanje podatkov: od roba do oblaka

Danas su podaci za većinu kompanija i organizacija jedan od strateških resursa. Sa širenjem analitičkih mogućnosti, vrednost podataka koje kompanije prikupljaju i akumuliraju neprekidno raste. Često se govori o eksplozivnom, eksponencijalnom rastu količine generisanih korporativnih podataka. Navodi se da je 90% svih podataka nastalo u poslednje dve godine.

Rast količine podataka prati povećanje njihove vrednosti

Podaci stvaraju i koriste sistemi analitike velikih podataka, Interneta stvari (IoT), veštačke inteligencije i drugih. Prikupljeni podaci su osnova za poboljšanje kvaliteta usluge klijentima, donošenje odluka, podršku operativnim aktivnostima kompanija, kao i za različita istraživanja i razvoj.

90% svih podataka je nastalo u poslednje dve godine.

Prema prognozi IDC-a, količina pohranjenih podataka u svetu će se od 2018. do 2023. godine udvostručiti, a ukupni kapacitet skladišta podataka doseći 11,7 zettabajta, pri čemu će više od tri četvrtine ukupnog obima činiti podaci iz preduzeća. Zanimljivo je da je ukupni kapacitet isporučenih diskovnih jedinica (HDD), koje su još uvek glavni nosači informacija, 2018. godine iznosio 869 eksabajta, dok bi do 2023. godine ova cifra mogla premašiti 2,6 zettabajta.

Platforme za upravljanje podacima: čemu služe i koju ulogu igraju?

Nije iznenađujuće da pitanja upravljanja podacima postaju prioritet za preduzeća, direktno utičući na njihov rad. Za njihovo rešavanje ponekad je potrebno prevazići izazove poput heterogenosti sistema, formata podataka, metoda njihove pohrane i upotrebe, kao i pristupa u uslovima 'zoološkog vrta' rešenja koja su implementirana u različito vreme.

Rezultat takvog neujednačenog pristupa je fragmentacija skupova podataka, pohranjenih i obrađenih u različitim sistemima, kao i različite procedure osiguravanja kvaliteta podataka. Ovi tipični problemi povećavaju radne i finansijske troškove prilikom rada s podacima, na primer, prilikom dobijanja statistike i izveštaja ili donošenja upravljačkih odluka.

Poslovni model upravljanja podatki mora biti prilagojen potrebam, nalogam in ciljem podjetja. Ne obstaja enotna avtomatizirana sistemska platforma za upravljanje podatkov, ki bi pokrivala vse naloge. Kljub temu sodobni celoviti, prilagodljivi in razširljivi sistemi za upravljanje podatkov pogosto predstavljajo univerzalno programsko opremo za upravljanje in shranjevanje podatkov. Vključujejo potrebna orodja in storitve za učinkovito upravljanje podatkov.

Novejši razvoj omogoča podjetjem, da ponovno definirajo upravljanje podatkov na ravni celotne organizacije, pridobijo jasno sliko o tem, kakšni podatki so na voljo, kakšne politike so povezane z njimi, kje in koliko časa so podatki shranjeni, ter omogočajo pravočasno zagotavljanje potrebnih informacij pravim ljudem. To so rešitve, ki širijo zmožnosti podjetij in omogočajo:

Upravljanje datotek, objektov, podatkov aplikacij, baz podatkov, podatkov virtualnih in oblačnih okolij ter dostop do različnih vrst podatkov.
S pomočjo orodij za orkestracijo in avtomatizacijo premikati podatke tja, kjer je njihovo shranjevanje najučinkovitejše - v primarno, sekundarno infrastrukturo shranjevanja, v podatkovne centre ponudnika ali v oblak.
Uporabljati celovite funkcije zaščite podatkov.
Zagotavljati integracijo podatkov.
Pridobivati operativne analitike iz podatkov.

Platforma za upravljanje podatkov lahko temelji na več programskih produktih ali pa predstavlja enotno enotno sistemsko rešitev. Celovita platforma zagotavlja enotno upravljanje podatkov v okviru celotne IT-infrastrukture, vključno z njihovo varnostno kopijo, obnovitvijo, arhiviranjem, upravljanjem strojnih posnetkov in pridobivanjem poročil.

Takšna platforma omogoča uresničitev več-oblačne strategije, širitev centra za obdelavo podatkov v oblačno okolje, hitro migracijo v oblak, uporabo možnosti nadomestitve opreme in uvedbo najbolj kostno učinkovitih rešitev za shranjevanje podatkov.

Nekatera rešitev lahko samodejno arhivira podatke. Z uporabo umetne inteligence lahko zaznajo, da je "prišlo do težave" in samodejno sprejmejo korektivne ukrepe ali obvestijo skrbnika ter prepoznajo in ustavijo napade različnih vrst. Samodejno upravljanje storitev pripomore k optimizaciji IT-operacij, omogoča razbremenitev IT-osebja, zmanjšuje napake zaradi človeškega faktorja ter minimizira izpade.

Kakšnimi lastnostmi mora razpolagati sodobna platforma za upravljanje podatkov in kje se taka rešitev uporablja v praksi?

Pristop "ena rešitev za vse" ne deluje pri platformah za upravljanje podatkov. Vsaka podjetja ima svoje zahteve glede podatkov, ki so odvisne od vrste poslovanja, delovnih izkušenj itd. Univerzalna platforma mora na eni strani omogočiti prilagoditev za delo s podatki v specifičnem podjetju, na drugi strani pa biti neodvisna od specifikacij panoge, področja uporabe izdelka, zgrajenega na njenem osnovi, in njegovega informacijskega okolja.

Praktična področja upravljanja podatkov (vir; CMMI Institute).

Tukaj je nekaj praktičnih področij uporabe platform za upravljanje podatkov:

Komponenta
Področje uporabe

Strategija upravljanja podatkov
Cilji in naloge upravljanja, korporativna kultura upravljanja podatkov, določitev zahtev glede življenjskega cikla podatkov.

Upravljanje podatkov
Upravljanje podatkov in metapodatkov

Operacije s podatki
Standardi in postopki dela s podatkovnimi viri

Kakovost podatkov
Zagotavljanje kakovosti, okvir kakovosti podatkov

Platforma in arhitektura
Arhitekturni okvir, platforme in integracija

Podporni procesi
Ocena in analiza, vodenje procesov, zagotavljanje kakovosti, upravljanje tveganj, upravljanje konfiguracije

Poleg tega te platforme igrajo pomembno vlogo v procesu preobrazbe organizacije v "podatkovno usmerjeno" podjetje, ki ga lahko razdelimo na več stopenj:

Sprememba upravljanja podatkov v obstoječih sistemih, uvajanje modela vlog z razdelitvijo nalog in pristojnosti. Nadzor kakovosti podatkov, preverjanje podatkov med sistemi, popravljanje netočnih podatkov.
Nastavitev procesov pridobivanja in zbiranja podatkov, njihova transformacija in nalaganje. Prikazovanje podatkov v enotnem sistemu brez zapletanja nadzora kakovosti podatkov in sprememb poslovnih procesov.
Integracija podatkov. Avtomatizacija procesov dostave potrebnih podatkov na pravo mesto ob pravem času.
Uvedba celovitega nadzora kakovosti podatkov. Določitev parametrov nadzora kakovosti, razvoj metodologije uporabe avtomatskih sistemov.
Vpeljava orodij za upravljanje procesov zbiranja podatkov, njihovo preverjanje, deduplikacijo in čiščenje. Kot posledica — povečanje kakovosti, zanesljivosti in enotnosti podatkov vseh sistemov podjetja.

Prednosti platform za upravljanje podatkov

Podjetja, ki učinkovito upravljajo s podatki, običajno dosegajo večji uspeh v primerjavi s konkurenti, hitreje uvajajo izdelke in storitve na trg, bolje razumejo potrebe ciljne publike in se lahko hitro odzovejo na spremembe povpraševanja. Platforme za upravljanje podatkov zagotavljajo možnost "čiščenja" podatkov, pridobivanja kakovostnih in relevantnih informacij, transformacije podatkov in strateške ocene podatkov podjetja.

Primer univerzalne platforme za vzpostavitev sistemov upravljanja s korporativnimi podatki – ruska "Unidata", ustvarjena na osnovi programske opreme z odprto kodo. Ponudba orodij za ustvarjanje podatkovnih modelov in sredstva za širitev funkcionalnosti pri integraciji v različna IT okolja in zunanje informacijske sisteme: od upravljanja materialnih in tehnoloških sredstev do varne obdelave velikih količin osebnih podatkov.

Arhitektura platforme "Unidata" istoimenskega podjetja.

Ta večfunkcionalna platforma zagotavlja centralizirano zbiranje podatkov (inventarizacija in evidentiranje sredstev), standardizacijo informacij (normalizacija in obogatitev), spremljanje trenutnih in zgodovinskih informacij (nadzor različic zapisov, obdobja aktualnosti podatkov), kakovost podatkov in vodenje statistike. Predvidena je avtomatizacija nalog, kot so zbiranje, kopičenje, čiščenje, usklajevanje, konsolidacija, preverjanje kakovosti, distribucija podatkov ter orodja za avtomatizacijo sistema sprejemanja odločitev.

Platforme za upravljanje podacima (DPM) u oglašavanju i marketingu

U oglašavanju i marketingu, pojam platforme za upravljanje podacima DMP (Data Management Platform) ima uži smisao. To je softverska platforma koja na osnovu prikupljenih podataka omogućava kompanijama da definišu sektore publike za ciljanje reklama na specifične korisnike i kontekste oglasnih kampanja na internetu. Ovakav softver može prikupljati, obrađivati i čuvati sve vrste podataka o publici, kao i omogućiti njihovu upotrebu preko uobičajenih medijskih kanala.

Prema prognozi Market Research Future (MRFR), svetsko tržište platformi za upravljanje podacima (DMP) može do kraja 2023. godine dostići 3 milijarde dolara sa prosečnim godišnjim rastom od 15%, dok će 2025. godine njegov obim premašiti 3,5 milijardi dolara.

Sistem DMP:

Omogućava prikupljanje i strukturisanje svih vrsta podataka o publici; analizu dostupnih podataka; prenos podataka u bilo koji medijski prostor za plasiranje ciljanih reklama.
Pomaže u prikupljanju, organizovanju i aktivaciji podataka iz različitih izvora i njihovom prevođenju u korisni oblik.
Organizuje sve podatke u kategorije na osnovu poslovnih ciljeva i marketinških modela. Sistem analizira podatke i generiše segmente publike koji precizno predstavljaju korisničku bazu u širokom spektru kanala, zasnovanih na različitim zajedničkim karakteristikama.
Povećava preciznost ciljanje reklama online i omogućava izgradnju personalizovanih komunikacija s relevantnom publikom. Na bazi DMP-a moguće je takođe postaviti lančane interakcije sa svakim ciljnim segmentom, kako bi korisnici primali relevantne poruke u pravo vreme i na pravom mestu.

Povećanje učešća digitalnog marketinga značajno utiče na rast tržišta platformi za upravljanje podacima. DMP sistemi mogu brzo unifikovati podatke iz različitih izvora i deliti korisnike u više kategorija na osnovu njihovog obrasca ponašanja. Ove mogućnosti doprinose potražnji za DMP-om među marketinškim stručnjacima.

Svetsko tržište platformi za upravljanje podacima obuhvata niz vodećih igrača, kao i nekoliko novih kompanija, uključujući Lotame Solutions, KBM Group, Rocket Fuel, Krux Digital, Oracle, Neustar, SAS Institute, SAP, Adobe Systems, Cloudera, Turn, Informatica i druge.

Primer rešitve iz Rusije – infrastruktura, ki jo je izdalo Mail.ru Group, predstavlja enotno platformo za upravljanje in obdelavo podatkov (Data Management Platform, DMP). Rešitev omogoča gradnjo razširjenega opisa profilov ciljne publike znotraj platforme, integrirane z marketinškimi orodji. DMP povezuje rešitve in storitve Mail.ru Group na področju omnikanalnega marketinga in dela z občinstvom. Stranke bodo lahko shranjevale, obdelovale in strukturirale svoje anonimne podatke ter jih aktivirale v oglasnih komunikacijah, kar povečuje učinkovitost poslovanja in marketinga.

Upravljanje podatkov v oblaku

Še ena kategorija rešitev za upravljanje podatkov so oblačne platforme. Zlasti uporaba sodobne rešitve za zaščito podatkov v okviru upravljanja podatkov v oblaku omogoča izogibanje morebitnim težavam – od groženj varnosti do težav pri migraciji podatkov in zmanjšane zmogljivosti, prav tako pa rešuje izzive digitalne transformacije, s katerimi se podjetja soočajo. Seveda funkcionalnosti takšnih sistemov niso omejene samo na zaščito podatkov.

Funkcije oblačne platforme za upravljanje podatkov po definiciji Gartnerja: razporeditev virov, avtomatizacija in orkestracija; upravljanje zahtevkov za storitve; nadzor na visoki ravni in zagotavljanje skladnosti s politikami; spremljanje in merjenje parametrov; podpora večoblačnim okoljem; optimizacija in preglednost stroškov; optimizacija zmogljivosti in virov; migracija v oblak in zagotavljanje odpornosti na katastrofe (DR); upravljanje ravni storitve; varnost in identifikacija; avtomatizacija posodabljanja konfiguracij.

Upravljanje podatkov v oblaku mora zagotavljati visoko raven dostopnosti podatkov, nadzora, avtomatizacije upravljanja podatkov v podatkovnih centrih, na obrobju omrežja in v oblaku.

Upravljanje oblačnih podatkov (Cloud Data Management, CDM) je platforma, ki se uporablja za upravljanje korporacijskih podatkov v različnih oblačnih okoljih, ob upoštevanju zasebnih, javnih, hibridnih in večoblačnih pristopov.

Primer takšnega rešitve je Veeam Cloud Data Management Platform. Kot trdijo razvijalci sistema, pomaga organizacijam spremeniti pristop k upravljanju podatkov, omogoča inteligentno avtomatizirano upravljanje podatkov in njihovo dostopnost v vseh aplikacijah ali oblačni infrastrukturi.

Upravljanje oblačnih podatkov v Veeamu štejejo za neizogiben del inteligentnega upravljanja podatkov, ki zagotavlja njihovo dostopnost za podjetja z katere koli točke.

Oblačna platforma Veeam Cloud Data Management Platform omogoča nadgradnjo varnostnega kopiranja in opustitev zastarelih sistemov, zagotavlja pospešeno uvajanje hibridnega oblaka in prenos podatkov, avtomatizacijo varnosti podatkov in skladnost z regulativnimi zahtevami.

Veeam Cloud Data Management Platform — "sodobna platforma za upravljanje podatkov, ki podpira katero koli oblačno okolje."

Kot je razvidno, sodobne platforme za upravljanje podatkov predstavljajo dovolj obsežno in raznoliko kategorijo rešitev. Povezuje jih morda le eno: usmerjenost v učinkovito delo s korporativnimi podatki in preoblikovanje podjetja ali organizacije v sodobno podjetje, ki temelji na podatkih (data-driven enterprise).

Platforme za upravljanje podatkov so nujna evolucija tradicionalnega upravljanja podatkov. Čedalje več organizacij prenaša podatke v oblak, v naraščajočem številu različnih lokalnih in oblačnih konfiguracij se pojavljajo novi izzivi, ki jih je treba reševati predvsem z vidika upravljanja podatkov. Upravljanje podatkov v oblaku je posodobljen pristop, nova paradigma, ki širi funkcije upravljanja podatkov za podporo novim platformam, aplikacijam in scenarijem uporabe.

Poleg tega po podatkih raziskave Veeam Cloud Data Management Report iz leta 2019 podjetja načrtujejo globlje integracijo oblačnih tehnologij, tehnologij hibridnega oblaka, analitike velikih podatkov, umetne inteligence in interneta stvari. Očekuje se, da bo uvedba teh digitalnih pobud podjetjem prinesla pomembne koristi.

Podjetja hitro uvajajo tehnologije podatkovnih platform in so pripravljena izkoristiti oblak za izvajanje analitičnih delovnih obremenitev, vendar se mnogi soočajo s težavami pri uporabi vseh svojih podatkov za dosego boljših poslovnih rezultatov, menijo analitiki podjetja 451 Research. Najnovejše platforme za upravljanje podatkov bodo podjetjem pomagale navigirati skozi kompleksne procese dela s podatki v več oblakih, uporabljati sredstva za upravljanje podatkov in izvajati njihove analize ne glede na to, kje se ti podatki nahajajo.

Ker se trudimo držati korak s časom in upoštevamo želje naših strank (tako sedanjih kot potencialnih), bi radi povprašali skupnost Habr, ali bi želeli videti Veeam v našem tržnem mestu? Ответить можно в опросе ниже.