Днес за повечето компании и организации данните са един от стратегическите активи. С разширяването на аналитичните възможности, стойността на събираните и натрупваните от компаниите данни постоянно нараства. Често се говори за експлозивния, експоненциален растеж на обемите на генерираните корпоративни данни. Според данни, 90% от всички данни са били създадени през последните две години.
Растежът на обемите данни върви ръка за ръка с увеличаването на тяхната стойност.
Данни се създават и използват от системи за анализ на големи обеми данни, интернет на нещата (IoT), изкуствен интелект и др. Събираемите данни са основа за подобряване на качеството на обслужването на клиентите, вземане на решения, поддържане на оперативната дейност на компаниите, за различни изследвания и разработки.
90% от всички данни са били генерирани през последните две години.
Според прогнозата на IDC, обемът на съ хранимите данни в света от 2018 до 2023 година ще се удвои, а общата капацитет на хранилищата за данни ще достигне 11,7 зетабайта, като повече от три четвърти от общия обем ще се пада на корпоративни бази данни. Значително е, че ако през 2018 година общият капацитет на доставените дискети (HDD), които все още остават основният носител на информация, е бил 869 екзабайта, то до 2023 година този показател може да надвишава 2,6 зетабайта.
Платформи за управление на данни: каква е тяхната роля?
Не е изненадващо, че въпросите на управлението на данни стават приоритетни за предприятията, оказвайки директно влияние върху тяхната работа. За решаването им понякога се налага да се преодоляват трудности като хетерогенността на системите, формати на данните, методи за съхранение и използване, подходи за управление в условията на „зоопарк“ от решения, които са били внедрявани в различно време.
Резултатът от този неунифициран подход е фрагментация на масивите от данни, съхранявани и обработвани в различни системи, различни процедури за осигуряване на качеството на данните. Тези типични проблеми увеличават трудовите и финансовите разходи при работа с данни, например, при получаване на статистика и отчети или при вземане на управленски решения.
Бизнес моделата за управление на данни трябва да бъде персонализирана, адаптирана към нуждите, задачите и целите на предприятието. Няма единно автоматизирано решение, платформа за управление на данни, която да покрива всички задачи. Въпреки това, съвременните всеобхватни, гъвкави и мащабируеми системи за управление на данни често представляват универсален софтуер за управление и съхранение на данни. Те включват необходимите инструменти и услуги за ефективно управление на данни.
Последните разработки позволяват на предприятията да преосмислят управлението на данни в мащаба на цялата организация, да получат ясна представа за наличните данни, свързаните с тях политики, местоположението и периода на съхранение на данните, и накрая, те осигуряват навременно предоставяне на необходимата информация на правилните хора. Тези решения разширяват възможностите на предприятията и позволяват:
- Управление на файлове, обекти, данни от приложения, бази данни, данни от виртуални и облачни среди, достъп до различни типове данни.
- С помощта на инструменти за оркестрация и автоматизация, преместване на данни там, където тяхното съхранение е най-ефективно — в първичната или вторичната инфраструктура за съхранение, в ЦОД на доставчика или в облака.
- Използване на комплексни функции за защита на данните.
- Осигуряване на интеграция на данни.
- Получаване на оперативна аналитика от данни.
Платформата за управление на данни може да бъде изградена на базата на няколко софтуерни продукта или да представлява единна унифицирана система. Комплексната платформа осигурява единно управление на данни в рамките на цялата ИТ инфраструктура, включително тяхното резервно копие, възстановяване, архивиране, управление на хардуерни моментални снимки и генериране на отчети.
Такава платформа позволява реализирането на мултиоблачна стратегия, разширяване на центъра за обработка на данни до облачна среда, бърза миграция в облака, използване на възможности за замяна на оборудването и внедряване на най-икономичните варианти за съхранение на данни.
Някои решения могат автоматично да архивират данни. С помощта на изкуствения интелект те могат да установят, че "нещо е тръгнало не така" и автоматично да предприемат коригиращи мерки или да уведомят администратора, както и да откриват и предотвратяват атаки от различен тип. Автоматизацията на услугите спомага за оптимизацията на ИТ-операциите, позволявайки освобождаването на ИТ-персонала и минимизиране на грешките, свързани с човешкия фактор, и намаляване на престоя.
Какви качества трябва да притежава съвременната платформа за управление на данни и къде се прилагат такива решения на практика?
Подходът "едно решение за всички" не сработва в случая с платформите за управление на данни. Всяка компания има свои изисквания към данните, които зависят от типа бизнес, опит и др. Универсалната платформа трябва, от една страна, да осигурява конфигурируемост за работа с данни в конкретното предприятие, а от друга, да бъде независима от спецификата на приложната индустрия, сферата на приложение на продукта, изграден на нейната основа, и неговата информационна среда.
Практически области на управление на данни (източник; Институт CMMI).
Ето някои практични области на приложение на платформите за управление на данни:
Компонент
Област на приложение
Стратегия за управление на данни
Цели и задачи на управлението, корпоративна култура на управление на данните, определяне на изискванията за жизнения цикъл на данните.
Управление на данните
Управление на данни и метаданни
Операции с данни
Стандарти и процедури за работа с източници на данни
Качество на данните
Осигуряване на качество, рамка за качество на данните
Платформа и архитектура
Архитектурна рамка, платформи и интеграция
Подкрепящи процеси
Оценка и анализ, управление на процеси, осигуряване на качество, управление на рисковете, управление на конфигурацията
Освен това, такива платформи играят важна роля в процеса на трансформация на организацията в предприятие, "управлявано от данни", който може да бъде разделен на няколко етапа:
- Промяна на управлението на данните в съществуващите системи, внедряване на ролеви модел с разделение на задължения и правомощия. Контрол на качеството на данните, кръстосана проверка на данните между системите, коригиране на некоректни данни.
- Настройка на процесите на извличане и събиране на данни, тяхната трансформация и зареждане. Привеждане на данните в единна система, без усложняване на контрола на качеството на данните и изменения в бизнес-процесите.
- Интеграция на данни. Автоматизация на процесите по доставяне на нужните данни на нужното място и в нужния момент.
- Въведение в пълноценен контрол на качеството на данни. Определяне на параметрите за контрол на качеството, разработка на методология за използване на автоматични системи.
- Внедряване на инструменти за управление на процесите по събиране на данни, тяхната верификация, дедупликация и почистване. В резултат — повишаване на качеството, достоверността и унификацията на данните във всички системи на предприятието.
Предимства на платформите за управление на данни
Компаниите, които ефективно работят с данни, обикновено постигат по-голям успех в сравнение с конкурентите, по-бързо предлагат на пазара продукти и услуги, по-добре разбират нуждите на целевата аудитория и могат бързо да реагират на промените в търсенето. Платформите за управление на данни предлагат възможност за "очистване" на данните, получаване на качествена и релевантна информация, трансформация на данни и стратегическо оценяване на данните на предприятието.
Пример за универсална платформа за изграждане на системи за управление на корпоративни данни – руският "Юнидата", създаден на базата на софтуер с отворен код. Тя предлага инструменти за създаване на модел на данни и средства за разширяване на функционалността при интеграция в различни ИТ среди и външни информационни системи: от управление на материално-технически ресурси до безопасна обработка на големи обеми лични данни.
Архитектура на платформата "Юнидата" на съответната компания.
Тази многофункционална платформа осигурява централизирано събиране на данни (инвентаризация и отчитане на ресурси), стандартизиране на информацията (нормализация и обогатяване), отчитане на текуща и историческа информация (контрол на версиите на записа, периоди на актуалност на данните), качество на данните и водене на статистика. Предвидена е автоматизация на задачи като събиране, натрупване, почистване, съпоставяне, консолидация, проверка на качеството, разпространение на данни, както и инструменти за автоматизация на системата за вземане на решения.
Платформи за управление на данни (DPM) в рекламата и маркетинга
В рекламата и маркетинга понятието платформа за управление на данни DMP (Data Management Platform) има по-тесен смисъл. Това е софтуерна платформа, която на базата на събираните данни позволява на компаниите да определят сегменти на аудиторията за таргетиране на реклами към конкретни потребители и контекста на рекламните кампании в интернет. Това софтуерно решение е способно да събира, обработва и съхранява всякакви видове данни от аудиторията, както и да предоставя възможности за тяхното използване чрез обичайните медиа канали.
Според прогнозата на Market Research Future (MRFR), световният пазар на платформи за управление на данни (DMP) може да достигне 3 млрд. долара до края на 2023 година с годишен ръст от 15%, а през 2025 година обемът му ще надвиши 3,5 млрд. долара.
Система DMP:
- Предлага възможност за събиране и структуриране на всички видове данни от аудиторията; анализира наличните данни; предава данните в всяко медийно пространство за поставяне на таргетирани реклами.
- Помага за събиране, организиране и активиране на данни от различни източници и преобразуването им в полезен формат.
- Организира всички данни в категории въз основа на бизнес цели и маркетингови модели. Системата анализира данните и генерира сегменти на аудиторията, които точно представят клиентската база в широк набор от канали, базирани на различни общи характеристики.
- Позволява да се увеличи точността на таргетирането на реклами онлайн и да се изградят персонализирани комуникации с релевантната аудитория. На базата на DMP също така могат да се настроят вериги на взаимодействие с всеки целеви сегмент, така че потребителите да получават актуални съобщения в точното време и на точното място.
Увеличаването на дела на дигиталния маркетинг в значителна степен влияе на растежа на пазара на платформи за управление на данни. Системите DMP могат бързо да унифицират данните от различни източници и да разделят потребителите на няколко категории въз основа на тяхната поведенческа модел. Тези възможности стимулират търсенето на DMP сред маркетолозите.
Световният пазар на платформи за управление на данни е представен от редица водещи играчи, а също и от няколко нови компании, включително Lotame Solutions, KBM Group, Rocket Fuel, Krux Digital, Oracle, Neustar, SAS Institute, SAP, Adobe Systems, Cloudera, Turn, Informatica и др.
Пример на руско решение – инфраструктурен продукт, издаден от Mail.ru Group, който представлява единна платформа за управление и обработка на данни (Data Management Platform, DMP). Това решение позволява изграждането на разширено описание на профилите на аудиторията вътре в платформата, интегрирана с маркетингови инструменти. DMP обединява решенията и услугите на Mail.ru Group в областта на омниканалния маркетинг и работата с аудиторията. Клиентите ще могат да съхраняват, обработват и структурирани собствени анонимизирани данни, както и да ги активират в рекламни комуникации, повишавайки ефективността на бизнеса и маркетинга.
Управление на данни в облачна среда
Още една категория решения за управление на данни – облачни платформи. В частност, употребата на модерно решение за защита на данни в контекста на управление на данни в облака позволява да се избегнат потенциални проблеми – от заплахи за сигурността до проблеми с миграцията на данни и намаляване на производителността, както и да се решат предизвикателствата на дигиталната трансформация на компанията. Разбира се, функциите на подобни системи не се ограничават само до защитата на данни.
Функции на облачната платформа за управление на данни според Gartner: разпределение на ресурси, автоматизация и оркестрация; управление на исканията за обслужване; управление на високо ниво и контрол на спазването на политики; мониторинг и измерване на параметри; поддръжка на мултиоблачни среди; оптимизация и прозрачност на разходите; оптимизация на капацитети и ресурси; миграция към облака и осигуряване на непрекъснатост при аварии (DR); управление на нива на обслужване; сигурност и идентификация; автоматизация на обновленията на конфигурации.
Управлението на данни в облачната среда трябва да осигурява висок nivo на достъпност на данните, контрол, автоматизация на управлението на данни в дата центрове, по периметъра на мрежата и в облака.
Управление на облачни данни (Cloud Data Management, CDM) – това е платформа, която се използва за управление на корпоративни данни в различни облачни среди с внимание към частни, публични, хибридни и мултиоблачни подходи.
Пример за такова решение е Veeam Cloud Data Management Platform. Както твърдят разработчиците на системата, то помага на организациите да променят подхода си към управлението на данни, предлага интелигентно автоматизирано управление на данни и техния достъп до всякакви приложения или облачна инфраструктура.
Управлението на облачни данни в Veeam се счита за неотменима част от интелигентното управление на данни, постоянно осигуряващо тяхната достъпност за бизнеса от всяка точка.
Облачната платформа Veeam Cloud Data Management Platform позволява модернизация на резервното копиране и отказ от остарели системи, осигурява ускорено внедряване на хибридно облако и прехвърляне на данни, автоматизация на сигурността на данните и съответствието с нормативни изисквания.
Veeam Cloud Data Management Platform — "модерна платформа за управление на данни, поддържаща всяко облако."
Както се вижда, съвременните платформи за управление на данни представляват доста обширен и разнообразен клас решения. Обединява ги, вероятно, само едно: ориентираност към ефективната работа с корпоративни данни и превръщането на компанията или организацията в модерно предприятие, управлявано от данни (data-driven enterprise).
Платформите за управление на данни са необходима еволюция на традиционното управление на данни. Все повече организации прехвърлят данните в облака, а в нарастващ брой различни локални и облачни конфигурации възникват нови проблеми, които трябва да се решават именно от перспектива на управлението на данни. Управлението на данни в облака е обновен подход, нова парадигма, разширяваща функциите на управлението на данни за поддръжка на нови платформи, приложения и сценарии на ползване.
Освен това, според данните от изследването Veeam Cloud Data Management Report за 2019 година, компаниите планират по-дълбока интеграция на облачни технологии, технологии на хибридно облако, аналитики на големи данни, изкуствен интелект и интернет на нещата. Очаква се внедряването на тези цифрови инициативи да донесе значителни ползи за компаниите.
Предприятията внедряват технологии за данни на платформата с ускорени темпове и са готови да използват облака за извършване на аналитични работни задачи, но много от тях срещат трудности, когато опитват да използват всичките си данни за постигане на по-добри бизнес резултати, смятат анализаторите от 451 Research. Най-новите платформи за управление на данни ще помогнат на предприятията да се справят със сложните процеси по работа с данни в различни облаци, да използват инструменти за управление на данни и да извършват техния анализ независимо от местоположението им.
Тъй като се стремим да се придържаме към времето и да отразяваме желанията на нашите клиенти (както настоящи, така и потенциални), искаме да питаме хабрасообществото дали искате да видите Veeam в нашия ? Ответить можно в опросе ниже.
Само регистрирани потребители могат да участват в анкетата. , моля.
Пакетното предложение с Veeam в маркетплейса
62,5%Да, добра идея5
37,5%Мисля, че няма да постигне успех3
Гласували 8 потребителя. Въздържали се 4 потребителя.
Източник: habr.com
