Platforme za upravljanje podacima: od periferije do oblaka

Danas su podaci za većinu tvrtki i organizacija jedan od strateških resursa. Uz proširenje mogućnosti analitike, vrijednost podataka koje tvrtke prikupljaju i pohranjuju stalno raste. Često se govori o eksplozivnom, eksponencijalnom rastu količine generiranih korporativnih podataka. Zabilježeno je da je 90% svih podataka stvoreno u posljednje dvije godine. 

Platforme za upravljanje podacima: od periferije do oblaka

Rast količine podataka prati povećanje njihove vrijednosti.

Podaci stvaraju i koriste sustavi analitike velikih podataka, interneta stvari (IoT), umjetne inteligencije i dr. Prikupljeni podaci osnovica su za unapređenje kvalitete usluga, donošenje odluka, podršku operativnom poslovanju tvrtki, te za razne istraživačke i razvojne aktivnosti.

Platforme za upravljanje podacima: od periferije do oblaka
90% svih podataka stvoreno je u posljednje dvije godine. 

Prema prognozama IDC-a, količina pohranjenih podataka u svijetu udvostručiti će se od 2018. do 2023. godine, a ukupni kapacitet skladišta podataka doseći će 11,7 zettabajta, pri čemu će podaci iz baza podataka poduzeća činiti više od tri četvrtine ukupnog volumena. Karakteristično je da je, dok je 2018. ukupni kapacitet isporučenih tvrdih diskova (HDD) koji još uvijek ostaju glavni medij informacija iznosio 869 eksabajta, do 2023. taj broj mogao premašiti 2,6 zettabajta.

Platforme za upravljanje podacima: čemu služe i koju ulogu igraju?

Nije iznenađujuće što su pitanja upravljanja podacima postala prioritet za tvrtke, izravno utječući na njihov rad. Ponekad je potrebno prevladati složenosti kao što su heterogenost sustava, formata podataka, metoda njihove pohrane i korištenja, te pristupa upravljanju u uvjetima "zoo-parka" rješenja koja su implementirana u različitim vremenima. 

Platforme za upravljanje podacima: od periferije do oblaka
Rezultat takvog neuniformiranog pristupa je fragmentacija skupova podataka koji se pohranjuju i obrađuju u različitim sustavima, različite procedure osiguravanja kvalitete podataka. Ove tipične probleme povećavaju radne i financijske troškove pri radu s podacima, primjerice prilikom dobivanja statistike i izvještaja ili pri donošenju upravljačkih odluka. 

Poslovni model upravljanja podacima trebao bi biti prilagođen potrebama, ciljevima i zadacima poduzeća. Ne postoji jedinstveni automatizirani sustav, platforma za upravljanje podacima koja bi pokrivala sve zadatke. Međutim, moderni svestrani, fleksibilni i skalabilni sustavi za upravljanje podacima često predstavljaju univerzalni softver za upravljanje i pohranu podataka. Oni uključuju potrebne alate i usluge za učinkovito upravljanje podacima. 

Najnoviji razvoj omogućava poduzećima da preispitaju upravljanje podacima na razini cijele organizacije, steknu jasan uvid u koje podatke posjeduju, koje politike su s njima povezane, gdje i koliko dugo se podaci pohranjuju, a također omogućuju pravodobno pružanje potrebnih informacija pravim osobama. Ovo su rješenja koja proširuju mogućnosti poduzeća i omogućuju: 

  • Upravljanje datotekama, objektima, podacima aplikacija, bazama podataka, podacima virtualnih i oblaka, pristup podacima različitih vrsta.
  • Uz pomoć alata za orkestraciju i automatizaciju premještaju podatke tamo gdje je njihova pohrana najefikasnija — u primarnu, sekundarnu infrastrukturu za pohranu, u podatkovni centar pružatelja ili u oblak.
  • Koristiti sveobuhvatne funkcije zaštite podataka.
  • Osigurati integraciju podataka.
  • Dobiti operativnu analitiku iz podataka. 

Platforma za upravljanje podacima može se graditi na osnovi nekoliko softverskih proizvoda ili predstavljati jedinstveni unificirani sustav. Sveobuhvatna platforma osigurava jedinstveno upravljanje podacima unutar cijele IT infrastrukture, uključujući njihovu izradu sigurnosnih kopija, oporavak, arhiviranje, upravljanje trenutnim slikama hardvera i dobivanje izvještaja.

Takva platforma omogućuje ostvarivanje višestruke oblake strategije, širenje centra za obradu podataka do oblaka, brzu migraciju u oblak, korištenje mogućnosti zamjene opreme i implementaciju najisplativijih opcija za pohranu podataka.

Neka rješenja mogu automatski arhivirati podatke. Uz pomoć umjetne inteligencije, mogu otkriti kada je "nešto pošlo naopako" i automatski poduzeti korektivne mjere ili obavijestiti administratora, kao i identificirati i spriječiti napade različitih tipova. Automatizacija usluga pomaže optimizaciji IT operacija, oslobađa IT osoblje, minimizira greške uzrokovane ljudskim faktorom i smanjuje prekide. 

Koje kvalitete bi moderna platforma za upravljanje podacima trebala imati, i gdje se takva rješenja prakticiraju?

Pristup "jedno rješenje za sve" ne funkcionira u slučaju platformi za upravljanje podacima. Svaka tvrtka ima svoje zahtjeve za podatke koji ovise o vrsti posla, iskustvu i sl. Univerzalna platforma treba s jedne strane omogućiti prilagodbu za rad s podacima u specifičnoj tvrtki, a s druge strane biti neovisna o specifičnostima primijenjene industrije, sfere primjene proizvoda temeljenog na njoj i njegovog informacijskog okruženja. 

Platforme za upravljanje podacima: od periferije do oblaka
Praktična područja upravljanja podacima (izvor; CMMI Institute).

Evo nekoliko praktičnih područja primjene platformi za upravljanje podacima:

Komponenta
Područje primjene

Strategija upravljanja podacima
Ciljevi i zadaci upravljanja, korporativna kultura upravljanja podacima, definiranje zahtjeva za životni ciklus podataka.

Upravljanje podacima
Upravljanje podacima i metapodacima

Operacije s podacima
Standardi i procedure rada s izvorima podataka

Kvaliteta podataka
Osiguranje kvalitete, okvir kvalitete podataka

Platforma i arhitektura
Arhitektonski okvir, platforme i integracija 

Potporni procesi
Procjena i analiza, upravljanje procesima, osiguranje kvalitete, upravljanje rizicima, upravljanje konfiguracijom

Osim toga, takve platforme igraju važnu ulogu u procesu transformacije organizacije u "podacima upravljanu" tvrtku, koji se može podijeliti u nekoliko faza: 

  1. Promjena upravljanja podacima u postojećim sustavima, implementacija modela uloga s odvojenim odgovornostima i ovlastima. Kontrola kvalitete podataka, međusobna provjera podataka između sustava, ispravljanje netočnih podataka. 
  2. Postavljanje procesa vađenja i prikupljanja podataka, njihove transformacije i učitavanja. Prilagodba podataka jedinstvenom sustavu bez kompliciranja kontrole kvalitete podataka i promjene poslovnih procesa. 
  3. Integracija podataka. Automatizacija procesa isporuke potrebnih podataka na pravo mjesto i u pravo vrijeme. 
  4. Uvođenje sveobuhvatne kontrole kvalitete podataka. Definiranje parametara kontrole kvalitete, razvoj metodologije korištenja automatskih sustava. 
  5. Implementacija alata za upravljanje procesima prikupljanja podataka, njihove verifikacije, deduplikacije i čišćenja. Kao rezultat — poboljšanje kvalitete, pouzdanosti i unifikacije podataka svih sustava poduzeća. 

Prednosti platformi za upravljanje podacima

Tvrtke koje učinkovito rade s podacima obično postižu veći uspjeh u odnosu na konkurenciju, brže lansiraju proizvode i usluge na tržište, bolje razumiju potrebe ciljne publike i mogu brzo reagirati na promjene potražnje. Platforme za upravljanje podacima pružaju mogućnost "čišćenja" podataka, dobivanja kvalitetnih i relevantnih informacija, transformacije podataka i strateške procjene podataka poduzeća. 

Primjer univerzalne platforme za izgradnju sustava upravljanja korporativnim podacima – ruska "Unidata", stvorena na temelju softvera s otvorenim izvorom. Ona nudi alate za izradu modela podataka i sredstva za proširenje funkcionalnosti prilikom integracije u različita IT okruženja i strana informatička rješenja: od vođenja materijalnih i tehničkih resursa do sigurne obrade velikih količina osobnih podataka. 

Platforme za upravljanje podacima: od periferije do oblaka
Arhitektura platforme "Unidata" istoimene tvrtke.

Ova višenamjenska platforma osigurava centralizirano prikupljanje podataka (inventarizacija i evidencija resursa), standardizaciju informacija (normalizacija i obogaćivanje), praćenje trenutnih i povijesnih informacija (kontrola verzija zapisa, razdoblja aktualnosti podataka), kvalitetu podataka i vođenje statistike. Predviđena je automatizacija takvih zadataka kao što su prikupljanje, akumulacija, čišćenje, usklađivanje, konsolidacija, provjera kvalitete, distribucija podataka, te alati za automatizaciju sustava donošenja odluka. 

Platforme za upravljanje podacima (DPM) u oglašavanju i marketingu 

U oglašavanju i marketingu pojam platforme za upravljanje podacima DMP (Data Management Platform) ima uži značaj. To je softverska platforma koja, na temelju prikupljenih podataka, omogućuje kompanijama da odrede segmente publike za ciljanje reklama na specifične korisnike i kontekst oglasnih kampanja na internetu. Takav softver može prikupljati, obrađivati i pohranjivati sve vrste audijencijskih podataka, te ima mogućnost njihove upotrebe kroz poznate medijske kanale.

Platforme za upravljanje podacima: od periferije do oblaka
Prema prognozi Market Research Future (MRFR), globalno tržište platformi za upravljanje podacima (DMP) moglo bi do kraja 2023. godine doseći 3 milijarde dolara uz prosječnu godišnju stopu rasta od 15%, dok bi u 2025. godini njegov volumen mogao preći 3,5 milijarde dolara.

Sistem DMP:

  • Omogućuje prikupljanje i strukturiranje svih tipova audijencijskih podataka; analizu dostupnih podataka; prenos podataka u bilo koji medijski prostor za plasman ciljanih reklama. 
  • Pomaže u prikupljanju, organiziranju i aktivaciji podataka iz različitih izvora i prevodi ih u korisni oblik. 
  • Organizira sve podatke u kategorije temeljem poslovnih ciljeva i marketinških modela. Sistem analizira podatke i generira segmente publike koji precizno predstavljaju klijentsku bazu u širokom rasponu kanala, temeljenom na raznim zajedničkim karakteristikama.
  • Omogućava povećanje tačnosti ciljanje reklama na mreži i izgradnju personalizirane komunikacije s relevantnom publikom. Na bazi DMP-a također se mogu postaviti lanci interakcije s svakim ciljnim segmentom kako bi korisnici primali relevantne poruke u pravom trenutku i na pravom mjestu.

Povećanje udjela digitalnog marketinga značajno utječe na rast tržišta platformi za upravljanje podacima. DMP sistemi mogu brzo unificirati podatke iz različitih izvora i razdvojiti korisnike u nekoliko kategorija temeljeno na njihovim obrascima ponašanja. Ove mogućnosti potiču potražnju za DMP-ima među marketinškim stručnjacima. 

Globalno tržište platformi za upravljanje podacima predstavljaju niz vodećih igrača, kao i nekoliko novih kompanija, uključujući Lotame Solutions, KBM Group, Rocket Fuel, Krux Digital), Oracle, Neustar, SAS Institute, SAP, Adobe Systems, Cloudera, Turn, Informatica i druge.

Primjer rješenja iz Rusije — infrastrukturni proizvod koji je izdala Mail.ru Group, koji predstavlja jedinstvenu platformu za upravljanje i obradu podataka (Data Management Platform, DMP). Rješenje omogućuje izgradnju proširenog opisa profila segmenta publike unutar platforme, integrirane s marketinškim alatima. DMP spaja rješenja i usluge Mail.ru Group u području omnichannel marketinga i rada s publikom. Klijenti će moći pohranjivati, obrađivati i strukturirati vlastite deidentificirane podatke te ih aktivirati u reklamnim komunikacijama, poboljšavajući efikasnost poslovanja i marketinga. 

Upravljanje podacima u oblaku

Još jedna kategorija rješenja za upravljanje podacima su cloud platforme. Konkretno, upotreba suvremenog rješenja za zaštitu podataka unutar upravljanja podacima u oblaku omogućuje izbjegavanje mogućih problema – od prijetnji sigurnosti do problema s migracijom podataka i smanjenjem performansi, kao i rješavanje izazova digitalne transformacije s kojima se suočava tvrtka. Naravno, funkcije sličnih sustava ne ograničavaju se samo na zaštitu podataka.

Platforme za upravljanje podacima: od periferije do oblaka
Funkcije cloud platforme za upravljanje podacima prema Gartneru: raspodjela resursa, automatizacija i orkestracija; upravljanje zahtjevima za uslugama; upravljanje na visokom nivou i kontrola usklađenosti politika; nadzor i mjerenje parametara; podrška za višekratna okruženja; optimizacija i transparentnost troškova; optimizacija kapaciteta i resursa; migracija u oblak i osiguranje otpornosti na katastrofe (DR); upravljanje razinom usluge; sigurnost i identifikacija; automatizacija ažuriranja konfiguracija.

Upravljanje podacima u oblaku treba osigurati visoku razinu dostupnosti podataka, kontrole, automatizacije upravljanja podacima u podatkovnim centrima, na perimetru mreže i u oblaku. 

Platforme za upravljanje podacima: od periferije do oblaka
Upravljanje podacima u oblaku (Cloud Data Management, CDM) je platforma koja se koristi za upravljanje korporativnim podacima u različitim cloud okruženjima, uzimajući u obzir privatne, javne, hibridne i višekratne pristupe.

Primjer takvog rješenja je Veeam Cloud Data Management Platform. Kako tvrde razvijači sustava, pomaže organizacijama da promijene pristup upravljanju podacima, osigurava inteligentno automatizirano upravljanje podacima i njihovu dostupnost u bilo kojim aplikacijama ili oblaku.

Platforme za upravljanje podacima: od periferije do oblaka
Upravljanje oblacima podataka u Veeamu smatraju neizostavnim dijelom inteligentnog upravljanja podacima, koje osigurava njihovu dostupnost za poslovanje s bilo kojeg mjesta. 

Oblačna platforma Veeam Cloud Data Management Platform omogućava modernizaciju backup-a i napuštanje zastarjelih sustava, osigurava brže uvođenje hibridnog oblaka i migraciju podataka, automatizaciju sigurnosti podataka i usklađenosti s propisima. 

Platforme za upravljanje podacima: od periferije do oblaka
Veeam Cloud Data Management Platform - "moderna platforma za upravljanje podacima koja podržava bilo koji oblak".

Kao što se može vidjeti, moderne platforme za upravljanje podacima predstavljaju prilično opsežnu i raznoliku klasu rješenja. Zajedničko im je, možda, jedno: usmjerenost na učinkovito upravljanje korporativnim podacima i preobrazbu tvrtke ili organizacije u moderno poduzeće koje se vodi podacima (data-driven enterprise).

Platforme za upravljanje podacima su nužna evolucija tradicionalnog upravljanja podacima. Sve više organizacija seli podatke u oblak, a u sve većem broju raznih lokalnih i oblačnih konfiguracija javljaju se novi problemi koje je potrebno rješavati upravo s aspekta upravljanja podacima. Upravljanje podacima u oblaku je ažurirani pristup, nova paradigma koja proširuje funkcije upravljanja podacima za podršku novim platformama, aplikacijama i scenarijima upotrebe.

Osim toga, prema podacima istraživanja Veeam Cloud Data Management Report za 2019. godinu, tvrtke planiraju dublje integrirati oblačne tehnologije, tehnologije hibridnog oblaka, analitiku velikih podataka, umjetnu inteligenciju i internet stvari. Očekuje se da će implementacija ovih digitalnih inicijativa donijeti značajne koristi tvrtkama.

Tvrtke brzo usvajaju tehnologije platformi podataka i spremne su koristiti oblak za izvršavanje analitičkih radnih opterećenja, no mnogi se suočavaju s problemima kada pokušavaju iskoristiti sve svoje podatke za postizanje boljih poslovnih rezultata, smatraju analitičari tvrtke 451 Research. Najnovije platforme za upravljanje podacima pomoći će tvrtkama da se snađu u složenim procesima obrade podataka u više oblaka, koriste alate za upravljanje podacima i provode njihovu analizu bez obzira na to gdje se ti podaci nalaze.

Kako nastojimo biti u korak s vremenom i fokusiramo se na želje naših klijenata (kako sadašnjih tako i potencijalnih), želimo pitati zajednicu Habr, biste li voljeli vidjeti Veeam na našem marketplaceu? Ответить можно в опросе ниже.

Platforme za upravljanje podacima: od periferije do oblaka

Samo registrirani korisnici mogu sudjelovati u anketi. Prijavite se, molimo.

Ponuda paketa s Veeamom na marketplaceu

  • 62,5%Da, dobra ideja5

  • 37,5%Mislim da neće uspjeti3

Glasalo je 8 korisnika. Suzdržalo se 4 korisnika.

Izvor: habr.com

Kupite pouzdan hosting za web stranice s DDoS zaštitom, VPS VDS servere 🔥 Kupite pouzdan hosting za web stranice s DDoS zaštitom, VPS VDS servere | ProHoster