Сёння для большасці кампаній і арганізацый дадзеныя - гэта адзін са стратэгічных актываў. І з пашырэннем магчымасцяў аналітыкі, каштоўнасць збіраных і назапашваных кампаніямі дадзеных увесь час павялічваецца. Пры гэтым часта кажуць пра выбухны, экспанентны рост аб'ёмаў генераваных карпаратыўных дадзеных. Адзначаецца, што 90% усіх звестак былі створаны за апошнія два гады.
Рост аб'ёмаў дадзеных суправаджаецца павелічэннем іх каштоўнасці
Дадзеныя ствараюць і выкарыстоўваюць сістэмы аналітыкі вялікіх дадзеных, інтэрнэту рэчаў (IoT), штучнага інтэлекту і інш. Збіраныя дадзеныя - аснова для павышэння якасці абслугоўвання кліентаў, прыняцця рашэнняў, падтрымкі аперацыйнай дзейнасці кампаній, для розных даследаванняў і распрацовак.
90% усіх дадзеных былі створаны за апошнія два гады.
Па прагнозе IDC, аб'ём захоўваемых дадзеных у свеце з 2018 па 2023 гады падвоіцца, а агульная ёмістасць сховішчаў дадзеных дасягне 11,7 зэтабайт, прычым на долю баз дадзеных прадпрыемстваў будзе прыпадаць больш за тры чвэрці ад агульнага аб'ёму. Характэрна, што калі яшчэ ў 2018 годзе агульная ёмістасць пастаўленых дыскавых назапашвальнікаў (HDD), якія пакуль што застаюцца асноўным носьбітам інфармацыі, склала 869 экзабайт, то ўжо да 2023 года гэты паказчык можа перавысіць 2,6 зэтабайта.
Платформы кіравання дадзенымі: навошта яны патрэбныя, і якую гуляюць ролю?
Нядзіўна, што пытанні кіравання дадзенымі становяцца для прадпрыемстваў прыярытэтнымі, аказваючы непасрэдны ўплыў на іх працу. Для іх вырашэння даводзіцца часам пераадольваць такія складанасці як разнастайнасць сістэм, фарматаў даных, метадаў іх захоўвання і выкарыстання, падыходаў да кіравання ва ўмовах "заапарка" рашэнняў, якія ўкараняліся ў розны час.
Вынік такога неўніфікаванага падыходу - фрагментацыя масіваў дадзеных, якія захоўваюцца і апрацоўваюцца ў розных сістэмах, розныя працэдуры забеспячэння якасці дадзеных. Гэтыя тыпавыя праблемы павялічваюць працоўныя і фінансавыя выдаткі пры працы з дадзенымі, напрыклад, пры атрыманні статыстыкі і справаздач або пры прыняцці кіраўнічых рашэнняў.
Бізнес-мадэль кіравання дадзенымі павінна быць кастамізаванай, адаптаванай да патрэб, задач і мэт прадпрыемства. Не існуе адзінай аўтаматызаванай сістэмы, платформы кіравання дадзенымі, якая закрывала б усе задачы. Тым не менш, сучасныя ўсёабдымныя, гнуткія і якія маштабуюцца сістэмы кіравання дадзенымі нярэдка ўяўляюць сабою ўніверсальнае праграмнае забеспячэнне для кіравання дадзенымі і іх захоўванні. Яны складаюцца з неабходныя прылады і сэрвісы для эфектыўнага кіравання дадзенымі.
Найноўшыя распрацоўкі дазваляюць прадпрыемствам пераасэнсаваць кіраванне дадзенымі ў маштабе ўсёй арганізацыі, атрымаць дакладнае ўяўленне аб тым, якія дадзеныя ёсць, якія з імі звязаны палітыкі, дзе і колькі часу дадзеныя захоўваюцца, нарэшце, яны даюць магчымасць своечасова прадастаўляць патрэбную інфармацыю патрэбным людзям. Гэта рашэнні, якія пашыраюць магчымасці прадпрыемстваў і дазваляюць:
- Кіраваць файламі, аб'ектамі, дадзенымі прыкладанняў, базамі дадзеных, дадзенымі віртуальных і хмарных асяроддзяў, атрымліваць доступ да дадзеных розных тыпаў.
- З дапамогай інструментаў аркестрацыі і аўтаматызацыі перамяшчаць дадзеныя туды, дзе іх захоўванне найбольш эфектыўна - у першасную, другасную інфраструктуру захоўвання, у ЦАД правайдэра або ў воблака.
- Выкарыстоўваць комплексныя функцыі абароны дадзеных.
- Забяспечыць інтэграцыю дадзеных.
- Атрымліваць з дадзеных аператыўную аналітыку.
Платформа кіравання дадзенымі можа будавацца на аснове некалькіх праграмных прадуктаў ці ўяўляць сабой адзіную уніфікаваную сістэму. Комплексная платформа забяспечвае адзінае кіраванне дадзенымі ў рамках усёй ІТ-інфраструктуры, у тым ліку іх рэзервовае капіраванне, аднаўленне, архіваванне, кіраванне апаратнымі маментальнымі здымкамі і атрыманне справаздачнасці.
Такая платформа дазваляе рэалізаваць мультывоблачную стратэгію, пашырыць цэнтр апрацоўкі даных да воблачнага асяроддзя, ажыццявіць хуткую міграцыю ў воблака, выкарыстоўваць магчымасці замены абсталявання і ўкаранення найбольш эканамічных варыянтаў захоўвання даных.
Некаторыя рашэнні здольныя аўтаматычна архіваваць дадзеныя. А з дапамогай штучнага інтэлекту яны могуць выяўляць, што «нешта пайшло не так», і аўтаматычна прадпрымаць якія карэктуюць меры ці апавяшчаць адміністратара, а таксама выяўляць і спыняць напады розных тыпаў. Аўтаматызацыя сэрвісаў спрыяе аптымізацыі ІТ-аперацый, дазваляе вызваліць ІТ-персанал, звесці да мінімуму памылкі з-за чалавечага фактару, мінімізаваць прастоі.
Якімі ж якасцямі павінна валодаць сучасная платформа кіравання дадзенымі, і дзе такія рашэнні прымяняюцца на практыцы?
Падыход "адно рашэнне для ўсіх" не спрацоўвае ў выпадку з платформамі кіравання дадзенымі. У кожнай кампаніі свае патрабаванні да дадзеных, яны залежаць ад тыпу бізнэсу, досведу працы і інш. Універсальная платформа павінна, з аднаго боку, забяспечваць наладу для працы з дадзенымі на пэўным прадпрыемстве, а з іншай, быць незалежнай ад спецыфікі прыкладнай галіны, сферы ўжывання пабудаванага на яе аснове прадукта і яго інфармацыйнага асяроддзя.
Практычныя вобласці кіравання дадзенымі (крыніца; CMMI Institute).
Вось некаторыя практычныя вобласці ўжывання платформаў кіравання дадзенымі:
кампанент
Вобласць прымянення
Стратэгія кіравання дадзенымі
Мэты і задачы кіравання, карпаратыўная культура кіравання дадзенымі, вызначэнне патрабаванняў да жыццёвага цыкла дадзеных.
Кіраванне дадзенымі
Кіраванне дадзенымі і метададзенымі
Аперацыі з дадзенымі
Стандарты і працэдуры працы з крыніцамі даных
Якасць дадзеных
Забеспячэнне якасці, фрэймворк якасці дадзеных
Платформа і архітэктура
Архітэктурны фрэймворк, платформы і інтэграцыя
Якія падтрымліваюць працэсы
Ацэнка і аналіз, кіраванне працэсамі, забеспячэнне якасці, кіраванне рызыкамі, кіраванне канфігурацыяй
Акрамя таго, такія платформы гуляюць важную ролю ў працэсе трансфармацыі арганізацыі ў прадпрыемства, "кіраванае дадзенымі", які можна падзяліць на некалькі этапаў:
- Змяненне кіравання дадзенымі ў існуючых сістэмах, укараненне ролевай мадэлі з падзелам абавязкаў і паўнамоцтваў. Кантроль якасці даных, перакрыжаваная праверка даных паміж сістэмамі, выпраўленне недакладных даных.
- Настройка працэсаў здабывання і збору даных, іх трансфармацыі і загрузкі. Прывядзенне даных да адзінай сістэмы без ускладнення кантролю якасці даных і змянення бізнес-працэсаў.
- Інтэграцыя дадзеных. Аўтаматызацыя працэсаў дастаўкі патрэбных дадзеных у патрэбнае месца і ў патрэбны час.
- Увядзенне паўнацэннага кантролю якасці даных. Вызначэнне параметраў кантролю якасці, распрацоўка метадалогіі выкарыстання аўтаматычных сістэмаў.
- Укараненне інструментаў кіравання працэсамі збору даных, іх верыфікацыі, дэдуплікацыі і ачысткі. Як следства - павелічэнне якасці, дакладнасці і уніфікацыі дадзеных усіх сістэм прадпрыемства.
Перавагі платформ кіравання дадзенымі
Кампаніі, якія эфектыўна працуюць з дадзенымі, як правіла, дамагаюцца большага поспеху ў параўнанні з канкурэнтамі, хутчэй выводзяць на рынак прадукты і паслугі, лепш разумеюць запатрабаванні мэтавай аўдыторыі, могуць аператыўна рэагаваць на змены попыту. Платформы кіравання дадзенымі даюць магчымасць "ачысткі" даных, атрымання якаснай і рэлевантнай інфармацыі, трансфармацыі даных і стратэгічнай ацэнкі даных прадпрыемства.
Прыклад універсальнай платформы для пабудовы сістэм кіравання карпаратыўнымі дадзенымі – расійская "Юнідата", створаная на аснове ПЗ з адкрытым зыходным кодам. Яна прапануе прылады стварэння мадэлі дадзеных і сродкі пашырэння функцыянальнасці пры інтэграцыі ў розныя ІТ-асяроддзі і іншыя інфармацыйныя сістэмы: ад вядзення матэрыяльна-тэхнічных рэсурсаў да бяспечнай апрацоўкі вялікіх аб'ёмаў персанальных дадзеных.
Архітэктура платформы "Юнідата" аднайменнай кампаніі.
Гэта шматфункцыянальная платформа забяспечвае цэнтралізаваны збор даных (інвентарызацыя і ўлік рэсурсаў), стандартызацыю звестак (нармалізацыя і ўзбагачэнне), улік бягучай і гістарычнай інфармацыі (кантроль версій запісу, перыяды актуальнасці даных), якасць даных і вядзенне статыстыкі. Прадугледжана аўтаматызацыя такіх задач як збор, назапашванне, ачыстка, супастаўленне, кансалідацыя, праверка якасці, распаўсюджванне даных, а таксама інструменты для аўтаматызацыі сістэмы прыняцця рашэнняў.
Платформы кіравання дадзенымі (DPM) у рэкламе і маркетынгу
У рэкламе і маркетынгу паняцце платформы кіравання дадзенымі DMP (Data Management Platform) мае вузейшы сэнс. Гэта праграмная платформа, якая на аснове дадзеных, што збіраюцца, дазваляе кампаніям вызначаць сегменты аўдыторыі для таргетынгу рэкламы на канкрэтных карыстальнікаў і кантэкст рэкламных кампаній у інтэрнэце. Такое праграмнае забеспячэнне здольна збіраць, апрацоўваць і захоўваць любыя тыпы аўдыторных даных, а таксама валодае магчымасцю іх выкарыстання праз звыклыя медыя-каналы.
Паводле прагнозу Market Research Future (MRFR), сусветны рынак платформ кіравання дадзенымі (DMP) можа дасягнуць да канца 2023 года 3 млрд. долараў пры сярэднегадавым росце 15%, а ў 2025 годзе яго аб'ём перавысіць 3,5 млрд. долараў.
Сістэма DMP:
- Дае магчымасць збіраць і структураваць усе тыпы аўдыторных даных; аналізаваць наяўныя дадзеныя; перадаваць дадзеныя ў любую медыйную прастору для размяшчэння таргетаванай рэкламы.
- Дапамагае збіраць, арганізоўваць і актываваць дадзеныя з розных крыніц і пераводзіць іх у карысную форму.
- Арганізуе ўсе дадзеныя ў катэгорыі на аснове бізнес-мэтаў і маркетынгавых мадэляў. Сістэма аналізуе дадзеныя і генеруе сегменты аўдыторыі, якія сапраўды прадстаўляюць кліенцкую базу ў шырокім дыяпазоне каналаў, заснаваных на розных агульных характарыстыках.
- Дазваляе павысіць дакладнасць таргетынгу рэкламы ў анлайне і выбудаваць персаналізаваныя камунікацыі з рэлевантнай аўдыторыяй. На базе DMP таксама можна наладзіць ланцужкі ўзаемадзеяння з кожным мэтавым сегментам, каб карыстачы атрымлівалі актуальныя паведамленні ў патрэбны час і ў патрэбным месцы.
Павелічэнне долі лічбавага маркетынгу ў значнай ступені ўплывае на рост рынку платформаў кіравання дадзенымі. Сістэмы DMP могуць хутка ўніфікаваць дадзеныя з розных крыніц і падзяляць карыстальнікаў на некалькі катэгорый на аснове іх мадэлі паводзін. Такія магчымасці спрыяюць попыту на DMP сярод маркетолагаў.
Сусветны рынак платформ кіравання дадзенымі прадстаўлены шэрагам вядучых гульцоў, а таксама некалькімі новымі кампаніямі, у тым ліку Lotame Solutions, KBM Group, Rocket Fuel, Krux Digital), Oracle, Neustar, SAS Institute, SAP, Adobe Systems, Cloudera, Turn, Informatica і інш
Прыклад расійскага рашэння – выпушчаны Mail.ru Group інфраструктурны прадукт, які ўяўляе сабой адзіную платформу кіравання і апрацоўкі дадзеных (Data Management Platform, DMP). Рашэнне дазваляе будаваць пашыранае апісанне профіля аўдыторных сегментаў усярэдзіне платформаў, інтэграванай з маркетынгавымі прыладамі. DMP аб'ядноўвае рашэнні і сэрвісы Mail.ru Group у вобласці амніканальнага маркетынгу і працы з аўдыторыяй. Кліенты змогуць захоўваць, апрацоўваць і структураваць уласныя абязлічаныя дадзеныя, а таксама актываваць іх у рэкламных камунікацыях, падвышаючы эфектыўнасць бізнэсу і маркетынгу.
Кіраванне дадзенымі ў хмарным асяроддзі
Яшчэ адна катэгорыя рашэнняў для кіраванне дадзенымі - хмарныя платформы. У прыватнасці, выкарыстанне сучаснага рашэння для абароны дадзеных у рамках кіравання дадзенымі ў воблаку дазваляе пазбегнуць магчымых праблем - ад пагроз бяспекі да праблем з міграцыяй дадзеных і зніжэння прадукцыйнасці, а таксама вырашыць задачы лічбавай трансфармацыі, якія стаяць перад кампаніяй. Вядома, функцыі падобных сістэм не абмяжоўваюцца абаронай дадзеных.
Функцыі хмарнай платформы кіравання дадзенымі ў паданні Gartner: размеркаванне рэсурсаў, аўтаматызацыя і аркестрацыя; кіраванне запытамі на абслугоўванне; кіраванне высокага ўзроўню і кантроль захавання палітык; маніторынг і вымярэнне параметраў; падтрымка мультывоблачных асяроддзяў; аптымізацыя і празрыстасць затрат; аптымізацыя магутнасцей і рэсурсаў; міграцыя ў воблака і забеспячэнне катастрофаўстойлівасці (DR); кіраванне ўзроўнем абслугоўвання; бяспека і ідэнтыфікацыя; аўтаматызацыя абнаўлення канфігурацый.
Кіраванне дадзенымі ў хмарным асяроддзі павінна забяспечваць высокі ўзровень даступнасці дадзеных, кантролю, аўтаматызацыі кіравання дадзенымі ў дата-цэнтрах, па перыметры сеткі і ў воблаку.
Кіраванне хмарнымі дадзенымі (Cloud Data Management, CDM) - гэта платформа, якая выкарыстоўваецца для кіравання карпаратыўнымі дадзенымі ў розных хмарных асяроддзях з улікам прыватных, публічных, гібрыдных і мультывоблачных падыходаў.
Прыклад такога рашэння – Veeam Cloud Data Management Platform. Як сцвярджаюць распрацоўшчыкі сістэмы, яно дапамагае арганізацыям змяніць падыход да кіравання дадзенымі, забяспечвае інтэлектуальнае аўтаматызаванае кіраванне дадзенымі і іх даступнасць у любых дадатках або хмарнай інфраструктуры.
Кіраванне хмарнымі дадзенымі ў Veeam лічаць неад'емнай часткай інтэлектуальнага кіравання дадзенымі, які забяспечвае іх даступнасць для бізнэсу з любой кропкі.
Воблачная платформа Veeam Cloud Data Management Platform дазваляе мадэрнізаваць рэзервовае капіраванне і адмовіцца ад састарэлых сістэм, забяспечвае паскоранае ўкараненне гібрыднага аблокі і перанос даных, аўтаматызацыю бяспекі даных і адпаведнасці нарматыўным патрабаванням.
Veeam Cloud Data Management Platform – "сучасная платформа для кіравання дадзенымі, якая падтрымлівае любое воблака".
Як відаць, сучасныя платформы кіравання дадзенымі ўяўляюць дастаткова шырокі і разнастайны клас рашэнняў. Аб'ядноўвае іх, мабыць, адно: накіраванасць на эфектыўную працу з карпаратыўнымі дадзенымі і ператварэнне кампаніі ці арганізацыі ў сучаснае прадпрыемства, кіраванае дадзенымі (data-driven enterprise).
Платформы кіравання дадзенымі - неабходная эвалюцыя традыцыйнага кіравання дадзенымі. Усё больш арганізацый пераносяць дадзеныя ў воблака, у расце ліку розных лакальных і хмарных канфігурацый узнікаюць новыя праблемы, якія неабходна вырашаць менавіта з пункту гледжання кіравання дадзенымі. Кіраванне дадзенымі ў воблаку - абноўлены падыход, новая парадыгма, якая пашырае функцыі кіравання дадзенымі для падтрымкі новых платформаў, прыкладанняў і сцэнарыяў выкарыстання.
Акрамя таго, па дадзеных даследавання Veeam Cloud Data Management Report за 2019 год, кампаніі плануюць глыбей інтэграваць хмарныя тэхналогіі, тэхналогіі гібрыднага аблокі, аналітыкі вялікіх дадзеных, штучнага інтэлекту і інтэрнэту рэчаў. Як чакаецца, укараненне гэтых лічбавых ініцыятыў прынясе кампаніям значныя выгады.
Прадпрыемствы паскоранымі тэмпамі ўкараняюць тэхналогіі платформаў дадзеных і гатовы задзейнічаць воблака для выканання аналітычных працоўных нагрузак, аднак многія сутыкаюцца з праблемамі, спрабуючы выкарыстоўваць усе свае дадзеныя для дасягнення лепшых бізнес-вынікаў, лічаць аналітыкі кампаніі 451 Research. Найноўшыя платформы кіравання дадзенымі дапамогуць прадпрыемствам арыентавацца ў складаных працэсах працы з дадзенымі ў некалькіх аблоках, выкарыстоўваць сродкі кіравання дадзенымі і выконваць іх аналізу незалежна ад таго, дзе гэтыя дадзеныя знаходзяцца.
Бо мы імкнемся ісці ў нагу са часам і арыентуемся на пажаданні нашых кліентаў (як цяперашніх, так і патэнцыйных), то жадаем спытаць у хабрасупольнасці, жадалася бы вам бачыць Veeam у нашым ? Адказаць можна ў апытанні ніжэй.
Толькі зарэгістраваныя карыстачы могуць удзельнічаць у апытанні. , Калі ласка.
Пакетная прапанова з Veeam у маркетплэйсе
-
62,5%Так, добрая ідэя5
-
37,5%Думаю не ўзляціць3
Прагаласавалі 8 карыстальнікаў. Устрымаліся 4 карыстальніка.
Крыніца: habr.com