🥇Platformy pro správu dat: od okrajového zařízení po cloud

Dnes jsou pro většinu společností a organizací data jedním ze strategických aktiv. S rozšiřováním analytických možností roste hodnota shromažďovaných a akumulovaných dat firem. Často se mluví o explozivním, exponenciálním růstu objemů generovaných podnikových dat. Uvádí se, že 90 % všech dat byla vytvořena v posledních dvou letech.

Růst objemů dat je spojen se zvyšováním jejich hodnoty

Data vytvářejí a využívají systémy analýzy velkých dat, internetu věcí (IoT), umělé inteligence a další. Shromážděná data jsou základem pro zlepšení kvality služeb zákazníkům, rozhodování, podporu provozních činností firem a pro různé výzkumy a vývoje.

90 % všech dat byla vytvořena v posledních dvou letech.

Podle prognózy IDC se objem uložených dat na světě zdvojnásobí v letech 2018 až 2023 a celková kapacita datových uložišť dosáhne 11,7 zettabytů, přičemž na podnikové databáze bude připadat více než tři čtvrtiny celkového objemu. Je charakteristické, že pokud v roce 2018 celková kapacita dodaných diskových jednotek (HDD), které zatím zůstávají hlavním nosičem informací, činila 869 exabytů, do roku 2023 by tento údaj mohl přesáhnout 2,6 zettabytů.

Platformy pro správu dat: k čemu jsou potřebné a jakou roli hrají?

Není divu, že otázky řízení dat se stávají pro podniky prioritními, protože mají přímý dopad na jejich činnost. Je nutné někdy překonávat takové potíže, jako je heterogenita systémů, formátů dat, metod jejich ukládání a používání, přístupy k řízení v podmínkách "zoo" různých řešení, která byla implementována v různých obdobích.

Výsledkem takového neunifikovaného přístupu je fragmentace datových sad, které jsou ukládány a zpracovávány v různých systémech, různé postupy zajištění kvality dat. Tyto typické problémy zvyšují pracovní a finanční náklady při práci s daty, například při získávání statistik a zpráv nebo při rozhodování.

Model řízení dat by měla být přizpůsobena potřebám, cílům a úkolům podniku. Neexistuje automatizovaný systém nebo platforma pro správu dat, která by pokrývala všechny úkoly. Přesto moderní komplexní, flexibilní a škálovatelné systémy řízení dat často představují univerzální software pro správu dat a jejich ukládání. Obsahují nezbytné nástroje a služby pro efektivní správu dat.

Nejnovější trendy umožňují podnikům přepracovat správu dat na úrovni celé organizace, získat jasný přehled o tom, jaká data mají, jaké politiky s nimi souvisejí, kde a jak dlouho jsou data uložena, a konečně umožňují včas poskytovat potřebné informace těm správným lidem. Tato řešení zvyšují schopnosti podniků a umožňují:

Spravovat soubory, objekty, data aplikací, databáze, data virtuálních a cloudových prostředí, přistupovat k různým typům dat.
Pomocí nástrojů pro orchestraci a automatizaci přesouvat data tam, kde je jejich ukládání nejefektivnější — do primární, sekundární infrastruktury pro ukládání, do datového centra poskytovatele nebo do cloudu.
Využívat komplexní funkce zabezpečení dat.
Zajistit integraci dat.
Získávat z dat provozní analytiku.

Platforma pro správu dat může být postavena na základě několika softwarových produktů nebo představovat jednotný unifikovaný systém. Komplexní platforma zajišťuje jednotnou správu dat v rámci celé IT infrastruktury, včetně jejich zálohování, obnovy, archivace, správy hardwarových snapshotů a generování reportů.

Taková platforma umožňuje realizovat strategii více cloudu, rozšířit datové centrum do cloudového prostředí, provádět rychlou migraci do cloudu, využívat možnosti výměny hardware a zavádění nejhospodárnějších variant ukládání dat.

Některá řešení jsou schopna automaticky archivovat data. Pomocí umělé inteligence mohou identifikovat, že "něco nefunguje", a automaticky přijímat nápravné opatření nebo informovat administrátora, stejně jako detekovat a zamezit různým typům útoků. Automatizace služeb přispívá k optimalizaci IT operací, uvolňuje IT personál, minimalizuje chyby způsobené lidským faktorem a snižuje prostoje.

Jakými vlastnostmi by měla disponovat moderní platforma pro správu dat a kde se taková řešení prakticky aplikují?

Přístup "jedno řešení pro všechny" nefunguje v případě platforem pro správu dat. Každá společnost má své vlastní požadavky na data, které závisí na typu podnikání, pracovních zkušenostech atd. Univerzální platforma musí na jedné straně umožnit nastavení pro práci s daty v konkrétní firmě a na druhé straně být nezávislá na specifikách aplikovaného odvětví, oblasti použití produktu na jejím základě a jeho informačním prostředí.

Praktické oblasti správy dat (zdroj; CMMI Institute).

Zde je několik praktických oblastí použití platforem pro správu dat:

Komponenta
Oblast použití

Strategie správy dat
Cíle a úkoly správy, podniková kultura správy dat, definice požadavků na životní cyklus dat.

Správa dat
Správa dat a metadat

Operace s daty
Normy a postupy práce se zdroji dat

Kvalita dat
Zajištění kvality, rámec kvality dat

Platforma a architektura
Architektonický rámec, platformy a integrace

Podpůrné procesy
Hodnocení a analýza, řízení procesů, zajištění kvality, řízení rizik, řízení konfigurace

Kromě toho tyto platformy hrají důležitou roli v procesu transformace organizace na podnik "řízený daty", který lze rozdělit do několika fází:

Změna správy dat v existujících systémech, zavedení role-based modelu s rozdělením povinností a pravomocí. Kontrola kvality dat, křížová kontrola dat mezi systémy, oprava nesprávných dat.
Nastavení procesů extrakce a sběru dat, jejich transformace a zásobování. Uvedení dat do jednotného systému bez komplikace kontroly kvality dat a změny obchodních procesů.
Integrace dat. Automatizace procesů dodávání potřebných dat na správné místo ve správný čas.
Zavedení plnohodnotné kontroly kvality dat. Stanovení parametrů kontroly kvality, vypracování metodologie využití automatických systémů.
Implementace nástrojů pro řízení procesů sběru dat, jejich verifikaci, deduplikaci a čištění. Jako důsledek - zvýšení kvality, věrohodnosti a unifikace dat všech systémů podniku.

Výhody platforem pro správu dat

Společnosti, které efektivně pracují s daty, obvykle dosahují většího úspěchu ve srovnání s konkurencí, rychleji uvádějí na trh produkty a služby, lépe chápou potřeby cílové skupiny a mohou rychle reagovat na změny poptávky. Platformy pro správu dat poskytují možnost "čištění" dat, získávání kvalitních a relevantních informací, transformaci dat a strategické hodnocení podnikových dat.

Příklad univerzální platformy pro vybudování systémů řízení korporátních dat - ruská "Unidata", vytvořená na základě softwaru s otevřeným zdrojovým kódem. Nabízí nástroje pro vytváření datového modelu a prostředky pro rozšíření funkčnosti při integraci do různých IT prostředí a externích informačních systémů: od evidence materiálních a technických zdrojů až po bezpečné zpracování velkých objemů osobních údajů.

Architektura platformy "Unidata" stejnojmenné společnosti.

Tato multifunkční platforma zajišťuje centralizovaný sběr dat (inventarizace a účet zdrojů), standardizaci údajů (normalizace a obohacení), sledování aktuálních a historických informací (kontrola verzí záznamu, období aktuálnosti dat), kvalitu dat a vedení statistik. Je zahrnuta automatizace úkolů, jako jsou sběr, akumulace, čištění, porovnávání, konsolidace, kontrola kvality, distribuce dat, stejně jako nástroje pro automatizaci systému rozhodování.

Platformy správy dat (DPM) v reklamě a marketingu

V reklamě a marketingu má pojem platformy správy dat DMP (Data Management Platform) užší význam. Je to softwarová platforma, která na základě shromážděných dat umožňuje firmám definovat segmenty publika pro cílovou reklamu na konkrétní uživatele a kontext reklamních kampaní na internetu. Takový software je schopen shromažďovat, zpracovávat a uchovávat jakékoli typy dat o publiku a také nabízí možnost jejich využití prostřednictvím běžných mediálních kanálů.

Podle prognózy Market Research Future (MRFR) může globální trh s platformami správy dat (DMP) dosáhnout na konci roku 2023 3 miliardy dolarů s průměrným ročním nárůstem 15 %, a do roku 2025 se jeho objem zvýší na více než 3,5 miliardy dolarů.

Systém DMP:

Umožňuje shromažďovat a strukturovat všechny typy dat o publiku; analyzovat dostupná data; přenášet data do jakéhokoli mediálního prostoru pro umístění cílené reklamy.
Pomáhá shromažďovat, organizovat a aktivovat data z různých zdrojů a převádět je do užitečné formy.
Organizuje všechna data do kategorií na základě obchodních cílů a marketingových modelů. Systém analyzuje data a generuje segmenty publika, které přesně reprezentují zákaznickou základnu napříč širokým spektrem kanálů na základě různých společných charakteristik.
Umožňuje zvýšit přesnost cílení reklamy online a vytvářet personalizované komunikace s relevantním publikem. Na základě DMP lze také nastavit interakční řetězce s každým cílovým segmentem, aby uživatelé dostávali aktuální zprávy ve správný čas a na správném místě.

Zvýšení podílu digitálního marketingu značně ovlivňuje růst trhu s platformami správy dat. Systémy DMP mohou rychle unifikovat data z různých zdrojů a rozdělovat uživatele do několika kategorií na základě jejich chování. Takové možnosti podporují poptávku po DMP mezi marketéry.

Globální trh s platformami správy dat je zastoupen několika předními hráči a také několika novými společnostmi, včetně Lotame Solutions, KBM Group, Rocket Fuel, Krux Digital, Oracle, Neustar, SAS Institute, SAP, Adobe Systems, Cloudera, Turn, Informatica a dalších.

Příklad českého řešení — infrastruktura vydaná skupinou Mail.ru, která představuje jednotnou platformu pro správu a zpracování dat (Data Management Platform, DMP). Řešení umožňuje vytvářet podrobné popisy profilů segmentů publika v rámci platformy, která je integrována s marketingovými nástroji. DMP spojuje řešení a služby skupiny Mail.ru v oblasti omnichannel marketingu a práce s publikem. Klienti budou moci uchovávat, zpracovávat a strukturovat svá anonymizovaná data a aktivovat je v reklamních komunikacích, což zvýší efektivitu podnikání a marketingu.

Správa dat v cloudovém prostředí

Další kategorií řešení pro správu dat jsou cloudové platformy. Využití moderního řešení pro ochranu dat v rámci správy dat v cloudu umožňuje vyhnout se možným problémům — od bezpečnostních hrozeb po problémy s migrací dat a snížení výkonu, a také řešit úkoly digitální transformace, před kterými stojí společnost. Funkce těchto systémů samozřejmě nepokrývají pouze ochranu dat.

Funkce cloudové platformy pro správu dat dle Gartnera: distribuce zdrojů, automatizace a orchestrace; správa požadavků na služby; řízení na vysoké úrovni a kontrola dodržování politik; monitorování a měření parametrů; podpora multi-cloudových prostředí; optimalizace a transparentnost nákladů; optimalizace výkonu a zdrojů; migrace do cloudu a zajištění odolnosti vůči katastrofám (DR); správa úrovně služeb; bezpečnost a identifikace; automatizace aktualizace konfigurací.

Správa dat v cloudovém prostředí by měla zajišťovat vysokou úroveň dostupnosti dat, kontroly, automatizace správy dat v datových centrech, na okraji sítě a v cloudu.

Správa cloudových dat (Cloud Data Management, CDM) — to je platforma, která se používá k řízení podnikových dat v různých cloudových prostředích, zohledňující soukromé, veřejné, hybridní a multi-cloudové přístupy.

Příklad takového řešení je Veeam Cloud Data Management Platform. Jak uvádějí vývojáři systému, pomáhá organizacím změnit přístup k správě dat, zajišťuje inteligentní automatizované řízení dat a jejich dostupnost v jakýchkoli aplikacích nebo cloudové infrastruktuře.

Správa cloudových dat ve Veeamu je považována za nedílnou součást inteligentního řízení dat, které zajišťuje jejich dostupnost pro podniky z jakéhokoli místa.

Cloudová platforma Veeam Cloud Data Management Platform umožňuje modernizaci zálohování a opuštění zastaralých systémů, zajišťuje urychlené zavedení hybridního cloudu a přenos dat, automatizaci zabezpečení dat a splnění regulativních požadavků.

Veeam Cloud Data Management Platform — „moderní platforma pro správu dat podporující jakýkoli cloud“.

Jak je vidět, moderní platformy pro správu dat představují dostatečně širokou a různorodou třídu řešení. Spojuje je snad jen jedno: zaměření na efektivní práci s podnikovými daty a přeměna společnosti nebo organizace na moderní podnik řízený daty (data-driven enterprise).

Platformy pro správu dat jsou nezbytnou evolucí tradiční správy dat. Čím dál více organizací přesouvá data do cloudu a v rostoucím počtu různých lokálních a cloudových konfigurací vznikají nové problémy, které je třeba řešit právě z hlediska správy dat. Správa dat v cloudu je aktualizovaný přístup, nová paradigma, která rozšiřuje funkce správy dat na podporu nových platforem, aplikací a scénářů použití.

Kromě toho podle zprávy o správě cloudových dat Veeam Cloud Data Management Report z roku 2019 společnosti plánují hlouběji integrovat cloudové technologie, technologie hybridního cloudu, analytiku velkých dat, umělou inteligenci a internet věcí. Očekává se, že zavedení těchto digitálních iniciativ přinese společnostem významné výhody.

Podniky rychle zavádějí technologie datových platforem a jsou připraveny využívat cloud k provádění analytických pracovních zátěží, nicméně mnohé z nich čelí problémům, když se snaží využít všechna svá data pro dosažení lepších obchodních výsledků, domnívají se analytici společnosti 451 Research. Nejnovější platformy pro správu dat pomohou podnikům orientovat se v komplexních procesech práce s daty v několika cloudech, používat nástroje pro správu dat a provádět jejich analýzu bez ohledu na to, kde se tato data nacházejí.

Protože se snažíme držet krok s dobou a zaměřujeme se na přání našich klientů (jak současných, tak potenciálních), chtěli bychom se zeptat komunity na Habr, jestli byste chtěli vidět Veeam v našem marketplace? Ответить можно в опросе ниже.