🥇Andmehaldusplatvormid: servast pilve

Tänapäeval on andmed enamikule ettevõtetele ja organisatsioonidele üks strateegilisi varasid. Ja koos analüütika võimaluste laienemisega suureneb ettevõtetes kogutud ja hoitud andmete väärtus pidevalt. Samuti räägitakse sageli plahvatuslikust, eksponentsiaalsest kasvust genereeritava ettevõtte andmehulga osas. Toodud on välja, et 90% kõigist andmetest on loodud viimase kahe aasta jooksul.

Andmehulga kasvuga kaasneb nende väärtuse suurenemine.

Andmeid loovad ja kasutavad suurandmete analüüsi, asjade interneti (IoT), tehisintellekti ja muud süsteemid. Kogutud andmed on aluseks klienditeeninduse kvaliteedi tõstmisele, otsuste tegemisele, ettevõtete igapäevase tegevuse toetamisele, erinevatele uuringutele ja arendustele.

90% kõigist andmetest on loodud viimase kahe aasta jooksul.

IDC prognoosi kohaselt kahekordistub maailmas hoitavate andmete maht ajavahemikus 2018 kuni 2023 ning andmesalvestuse kogumaht ulatub 11,7 zettabaidini, kusjuures ettevõtete andmebaasidele kuulub üle kolme neljandiku üldmahust. Iseloomulik on, et kui 2018. aastal oli müüdud kõvakettabaaside (HDD) üldmaht 869 eksabaiti, siis 2023. aastaks võib see number ületada 2,6 zettabaidi.

Andmehaldusplatvormid: milleks need on vajalikud ja millist rolli nad mängivad?

Pole üllatav, et andmehalduse küsimused muutuvad ettevõtetele prioriteetseteks, avaldades otsest mõju nende toimimisele. Nende lahendamiseks tuleb sageli ületada selliseid keerukusi nagu süsteemide, andmevormingute, salvestamise ja kasutamise meetodite mitmekesisus, juhtimislähenemised, mis on rakendatud erinevatel aegadel, ja 'loomaaia' lahendused.

Sellise mitteühendatud lähenemise tulemus on andmemassiivide fragmentatsioon, mis on talletatud ja töödeldud erinevates süsteemides, samuti erinevad andmekvaliteedi tagamise protseduurid. Need tüüpilised probleemid suurendavad töö- ja rahakulusid andmetega töötamisel, näiteks statistika ja aruannete koostamisel või juhtimisotsuste tegemisel.

Andmete haldamise äri mudel peaks olema kohandatud, et vastata ettevõtte vajadustele, ülesannetele ja eesmärkidele. Ühtegi universaalset automatiseeritud süsteemi ega andmehalduse platvormi ei ole, mis kataks kõik ülesanded. Sellegipoolest on tänapäevased põhjalikud, paindlikud ja skaleeritavad andmehaldussüsteemid sageli universaalne tarkvara andmete haldamiseks ja säilitamiseks. Need sisaldavad vajalikke tööriistu ja teenuseid efektiivseks andmete haldamiseks.

Uuenduslikud lahendused võimaldavad ettevõtetel ümber mõelda andmete haldamise kogu organisatsiooni ulatuses, saades selge ülevaate sellest, millised andmed on olemas, millised poliitikad nendega seotud on, kus ja kui kaua andmeid säilitatakse, ning lõpuks annavad nad võimaluse õigeaegselt edastada vajalikku teavet õigetele inimestele. Need on lahendused, mis laiendavad ettevõtete võimekust ja võimaldavad:

Haldada faile, objekte, rakenduste andmeid, andmebaase, virtuaalseid ja pilvekeskkonda andmeid ning pääseda ligi erinevat tüüpi andmetele.
Orkestreerimise ja automatiseerimise tööriistade abil andmete liigutamine sinna, kus nende säilitamine on kõige efektiivsem – esmasele ja teisele salvestusstruktuurile, teenusepakkuja andmekeskusesse või pilve.
Kasutada andmete kaitse komplekse funktsioone.
Tagada andmete integreerimise.
Käia andmetest välja operatiivset analüüsi.

Andmehalduse platvorm võib põhineda mitmel tarkvaratooteil või olla ühtne ühtne süsteem. Komplekne platvorm tagab andmete ühtse haldamise kogu IT-infrastruktuuri ulatuses, sealhulgas nende varukoopiate tegemise, taastamise, arhiveerimise, riistvara hetkeseisude haldamise ja aruandluse.

Selline platvorm võimaldab ellu viia mitme pilve strateegiat, laiendada andmekeskust pilves keskkonda, viia läbi kiire pilve migreerimise, kasutada seadme asendamise võimalusi ja rakendada kõige ökonoomsemaid andmete säilitamise variante.

Mõned lahendused suudavad andmeid automaatselt arhiveerida. Ja tehisintellekti abil suudavad nad tuvastada, et "midagi läks valesti", ja automaatselt tõsta korrigeerimismeetmeid või teavitada administraatorit ning samuti tuvastada ja peatada erinevat tüüpi rünnakud. Teenuste automatiseerimine aitab optimeerida IT-operatsioone, vabastab IT-personali, minimeerib inimfaktorist tingitud vigu ja vähendab seiskumisi.

Milliseid omadusi peaks omama kaasaegne andmehaldusplatvorm ja kus selliseid lahendusi põhimõtteliselt rakendatakse?

Ükslahenduse lähenemine ei toimi andmehaldusplatvormide puhul. Igal ettevõttel on erinevad andmenõuded, mis sõltuvad äriliigist, kogemustest jms. Universaalne platvorm peab, ühelt poolt, pakkuma kohandamist andmete tööks konkreetses ettevõttes ja teiselt poolt olema sõltumatu rakendustööstusest, sellele tugineva toote kasutusvaldkonnast ja selle infokeskkonnast.

Andmehalduse praktilised valdkonnad (allikas; CMMI Institute).

Siin on mõned praktilised andmehaldusplatvormide rakendusvaldkonnad:

Komponent
Kasutusala

Andmehaldusstrateegia
Halduse eesmärgid ja ülesanded, andmehalduse ettevõtte kultuur, nõuete määratlemine andmete elutsükli kohta.

Andmete haldamine
Andmete ja metaandmete haldamine

Andmete operatsioonid
Andmeallikate töö standardid ja protseduurid

Andmekvaliteet
Kvaliteedi tagamine, andmekvaliteedi raamistik

Platvorm ja arhitektuur
Arhitektuuriraamistik, platvormid ja integratsioon

Toe protsessid
Hindamine ja analüüs, protsesside haldamine, kvaliteedi tagamine, riskide haldamine, konfiguratsiooni haldamine

Lisaks mängivad sellised platvormid olulist rolli organisatsiooni ümberkujundamise protsessis andmehaldusettevõtteks, mille saab jagada mitmeks etapiks:

Andmehalduse muutmine olemasolevates süsteemides, rollimudeli rakendamine ülesannete ja pädevuste jagunemisega. Andmekvaliteedi kontroll, andmete ristkontroll süsteemide vahel, valeandmete parandamine.
Andmete kaevandamise ja kogumise, nende transformeerimise ja laadimise protsesside seadistamine. Andmete viimine ühtsesse süsteemi ilma kvaliteedikontrolli keerukuse ning äritegevuse muutmiseta.
Andmete integreerimine. Protsesside automatiseerimine, et vajalikud andmed jõuaksid õiges kohas ja õigel ajal.
Täieliku andmekvaliteedi kontrolli rakendamine. Kvaliteedikontrolli määratlemine, automatiseeritud süsteemide kasutamise metodoloogia väljatöötamine.
Andmete kogumise, valideerimise, dedupikatsiooni ja puhastamise protsesside haldamise tööriistade rakendamine. Selle tulemusena — andmete kvaliteedi, usaldusväärsuse ja ühtsuse suurenemine kogu ettevõtte süsteemides.

Andmete haldamise platvormide eelised

Ettevõtted, mis töötavad andmetega efektiivselt, saavutavad tavaliselt konkurentidest suuremat edu, viivad turule tooteid ja teenuseid kiiremini, mõistavad paremini sihtrühma vajadusi ning saavad kiirelt reageerida nõudluse muutustele. Andmete haldamise platvormid võimaldavad andmete „puhastamist“, kvaliteetse ja asjakohase teabe saamist, andmete transformeerimist ja ettevõtte andmete strateegilist hindamist.

Universaalse platvormi näide, mis on loodud ettevõtte andmehalduse süsteemide ülesehitamiseks, on Venemaa "Unidata", mis on loodud avatud lähtekoodiga tarkvara põhjal. See pakub andmemudeli loomise tööriistu ja funktsionaalsuse laiendamise vahendeid integreerimiseks erinevatesse IT-keskkondadesse ja kolmandate osapoolte infosüsteemidesse: alates materiaalsete ressursside haldamisest kuni suurte isikuandmete koguste turvalise töötlemiseni.

Platvormi "Unidata" arhitektuur sama nimega ettevõttest.

See multifunktsionaalne platvorm tagab andmete keskse kogumise (varude inventuurimine ja arvestamine), teabe standardimise (normaliseerimine ja rikastamine), jooksva ja ajaloo teabe arvestamise (salvestusversioonide kontroll, andmete aktuaalsusperioodid), andmete kvaliteedi ja statistika pidamise. Ettenähtud on automatiseerimine sellistes ülesannetes nagu kogumine, akumuleerimine, puhastamine, tõlgendamine, konsolideerimine, kvaliteedi kontrollimine, andmete levitamine, samuti otsuste tegemise süsteemi automatiseerimise tööriistad.

Andmete haldussüsteemid (DPM) reklaamis ja turunduses

Reklaamis ja turunduses tähendab mõiste andmete haldussüsteem (DMP, Data Management Platform) kitsamat tähendust. See on tarkvaraplatvorm, mis võimaldab ettevõtetel kogutud andmete põhjal määratleda sihtrühmad, et suunata reklaame konkreetsetele kasutajatele ja kontekstidele veebikampaaniates. Selline tarkvara suudab koguda, töödelda ja salvestada kõiki tüüpe auditi andmeid ning omab võimalust neid kasutada tuttavates meediakanalites.

Market Research Future (MRFR) prognoosib, et rahvusvaheline DMP-de turg võib 2023. aasta lõpuks ulatuda 3 miljardi dollarini, saavutades keskmise aastakasvu 15%, ning 2025. aastaks ületab selle maht 3,5 miljardit dollarit.

DMP süsteem:

Pakub võimalust koguda ja struktureerida kõik tüüpi auditi andmeid; analüüsida olemasolevaid andmeid; edastada andmeid mistahes meediasse sihitud reklaami paigutamiseks.
Aitab koguda, korraldada ja aktiveerida andmeid erinevatest allikatest ning tõlkida need kasulikku vormi.
Kategooriatena korraldab kõik andmed, tuginedes ärieesmärkidele ja turundusmudelitele. Süsteem analüüsib andmeid ja genereerib sihtrühmi, mis täpselt esindavad kliendibaasi erinevates kanalites, tuginedes erinevatele ühistele omadustele.
Aitab parandada reklaami sihtimise täpsust veebis ja luua isikupärastatud suhtlemist asjakohase publikuga. DMP põhjal on samuti võimalik seadistada suhtlusahelad iga sihtrühma jaoks, et kasutajad saaksid õigeaegseid sõnumeid õigel ajal ja õigel kohal.

Digitaalse turunduse osakaalu suurenemine mõjutab pidevalt DMP-de turu kasvu. DMP süsteemid suudavad kiiresti ühtlustada andmeid erinevatest allikatest ja jagada kasutajaid mitmeks kategooriaks nende käitumismudeli põhjal. Sellised võimalused soodustavad DMPde nõudlust turundajate seas.

Rahvusvaheline andmete haldussüsteemide turg on esindatud mitmete juhtivate tegijate ning uute ettevõtetega, sealhulgas Lotame Solutions, KBM Group, Rocket Fuel, Krux Digital, Oracle, Neustar, SAS Institute, SAP, Adobe Systems, Cloudera, Turn, Informatica jne.

Näide Venemaa lahendusest - Mail.ru Group'i välja antud infrastruktuuri toode, mis esindab ühte andmete haldamise ja töötlemise platvormi (Data Management Platform, DMP). Lahendus võimaldab luua süvitsi minevat profiili kirjeldust auditoorsete segmentide sees platvormis, mis on integreeritud turundusinstrumentidega. DMP ühendab Mail.ru Group'i lahendused ja teenused ühtses omnichannel turunduse ja auditooriumi haldamise süsteemis. Klientidel on võimalik salvestada, töödelda ja struktureerida oma anonüümsed andmed ning aktiveerida neid reklaamisuhtluses, suurendades seeläbi äri ja turunduse efektiivsust.

Andmete haldamine pilveskeskkonnas

Veel üks andmete haldamise lahenduste kategooria on pilveplatvormid. Eelkõige võimaldab kaasaegse andmekaitse lahenduse kasutamine andmete haldamisel pilves vältida võimalikke probleeme - alates turvähäiretest kuni andmete rände ja jõudluse langemise probleemideni ja lahendada ettevõtte ees seisvaid digitaalsete transformatsioonide ülesandeid. Muidugi, sarnaste süsteemide funktsioonid ei piirdu ainult andmete kaitsmisega.

Gartneri silmis on pilveandmete halduse platvormi funktsioonid: ressursside jaotamine, automatiseerimine ja orkestreerimine; teenindustaotluste haldamine; kõrgtaseme haldamine ja poliitikakohase jälgimise kontroll; mõõtmis- ja jälgimisparameetrite jälgimine; mitme pilve keskkondade tugi; kulude optimeerimine ja läbipaistvus; võimsuste ja resursside optimeerimine; pilve migreerimine ja katastroofikindluse tagamine (DR); teenindusastme haldamine; turvalisus ja tunnistus; konfiguratsioonide uuendamise automatiseerimine.

Andmete haldamine pilveskeskkonnas peaks tagama kõrge andmete kättesaadavuse, kontrolli, andmete haldamise automatiseerimise andmekeskustes, võrgu ääres ja pilves.

Pilveandmete haldus (Cloud Data Management, CDM) on platvorm, mida kasutatakse ettevõtte andmete haldamiseks erinevates pilveskeskkondades, arvestades eraklikke, avalikke, hübriidseid ja mitme pilve lähenemisviise.

Sellise lahenduse näide on Veeam Cloud Data Management Platform. Süsteemi arendajate väitel aitab see organisatsioonidel muuta andmehalduse lähenemist, tagades andmete intelligentse automatiseeritud haldamise ja nende kergesti kättesaadavuse igasugustes rakendustes või pilvinfra, struktuuris.

Veeami pilandmete haldamist peetakse lahutamatuks osaks andmete intelligentse haldamisega, mis tagab nende kergesti kättesaadavuse ärile igast kohast.

Veeam Cloud Data Management Platform võimaldab moderniseerida varundamist ja loobuda aegunud süsteemidest, tagades kiirema hübriidpilve rakendamise ning andmete üleviimise, andmete turvalisuse ning seaduslikkuse automatiseerimise.

Veeam Cloud Data Management Platform on "kaasaegne andmehaldussüsteem, mis toetab igasuguseid pilvi."

Kuid nagu näha, pakuvad kaasaegsed andmehalduse platvormid piisavalt laia ja mitmekesist lahenduste klassi. Need ühendavad ilmselt ühte: keskendumine tõhusale töötlemisele ettevõtte andmete ja ettevõtte muundamisele kaasaegseks andmehalduse ettevõtteks.

Andmehalduse platvormid on vajalik evolutsioon traditsioonilisest andmehaldusest. Üha rohkem organisatsioone viib andmed pilve, kasvavas arvus erinevates kohalikes ja pilvekonfiguratsioonides tekivad uued probleemid, mida tuleb lahendada just andmehalduse seisukohalt. Pilvandmete haldamine on uuendatud lähenemine, uus paradigma, mis laiendab andmehalduse funktsioone uute platvormide, rakenduste ja kasutusstsenaariumide toetamiseks.

Lisaks, vastavalt Veeam Cloud Data Management Report 2019. aasta uuringule, plaanivad ettevõtted, et sügavamalt integreerida pilvetehnoloogiad, hübriidpilvetehnoloogiad, suurandmete analüütika, tehisintellekti ja asjade interneti. Oodatakse, et nende digitaalsete algatuste rakendamine toob ettevõtetele märkimisväärseid eeliseid.

Ettevõtted võtavad kiirelt kasutusele andmeplatvormi tehnoloogiad ja on valmis rakendama pilve analüütiliste töökoormuste täitmiseks, kuid paljud kohtavad probleeme, püüdes kasutada kõiki oma andmeid paremate äritulemuste saavutamiseks, väidavad analüütikud ettevõttest 451 Research. Uued andmehaldusplatvormid aitavad ettevõtetel navigeerida keerulistes andmehalduse protsessides mitmes pilves, kasutada andmehaldusvahendeid ja neist analüüse, sõltumata sellest, kus need andmed asuvad.

Kuna me püüame ajaga kaasas käia ja läheneme oma klientide (nii olemasolevate kui ka potentsiaalsete) soovidele, tahame küsida habrasoodustuse kogukonnalt, kas teile meeldiks näha Veeami meie turul? Ответить можно в опросе ниже.