🥇Adatkezelő platformok: a peremről a felhőig

Ma a legtöbb vállalat és szervezet számára az adatok a stratégiai eszközök egyikét jelentik. Az elemzési lehetőségek bővülésével a vállalatok által gyűjtött és felhalmozott adatok értéke folyamatosan nő. Gyakran beszélnek a vállalati adatok robbanásszerű, exponenciális növekedéséről. Megfigyelték, hogy az összes adat 90%-át az elmúlt két évben hozták létre.

Az adatmennyiség növekedésével az értékük is nő.

Az adatokat a big data analitikai rendszerek, az IoT (Internet of Things), a mesterséges intelligencia és mások hoznak létre és használják. A gyűjtött adatok alapot biztosítanak a vevőszolgálat minőségének javításához, a döntéshozatalhoz, a vállalatok működésének támogatásához, valamint különféle kutatásokhoz és fejlesztésekhez.

Az összes adat 90%-át az elmúlt két évben hozták létre.

Az IDC előrejelzése szerint az eltárolt adatok mennyisége 2018 és 2023 között megduplázódik, a tárolók összes kapacitása pedig 11,7 zettabájtot ér el, a vállalati adatbázisok pedig a teljes mennyiség több mint háromnegyedét teszik ki. Jellemző, hogy ha 2018-ban az összesen eladott merevlemezek (HDD) kapacitása 869 exabájt volt, 2023-ra ez a szám már meghaladhatja a 2,6 zettabájtot.

Adatkezelő platformok: mire van szükségük, és milyen szerepet játszanak?

Nem meglepő, hogy az adatkezelés kérdései prioritássá válnak a vállalatok számára, közvetlen hatással vannak azok működésére. Ezek megoldásához gyakran meg kell küzdeni az olyan nehézségekkel, mint a rendszerek, adatformátumok, tárolási és felhasználási módszerek különbözősége, valamint a különböző időpontokban telepített megoldások «zoo» körülmények közötti kezelésének megközelítései.

Az ilyen nem egységes megközelítés eredménye az adathalmazok töredezettsége, amelyeket különböző rendszerekben tárolnak és dolgoznak fel, valamint a különböző adatminőség biztosítási eljárások. Ezek a tipikus problémák növelik a munkaerő- és pénzügyi költségeket az adatok feldolgozása során, például statisztikák és jelentések készítése vagy vezetői döntések meghozatala során.

Az adatok kezelési üzleti modelljének testreszabottan kell alkalmazkodnia a vállalat igényeihez, feladataihoz és céljaihoz. Nincs egyetlen automatizált rendszer vagy adatkezelő platform, amely minden feladatot megoldana. Mindazonáltal a modern, átfogó, rugalmas és skálázható adatkezelő rendszerek gyakran univerzális szoftvermegoldásokat jelentenek az adatok kezelésére és tárolására. Ezek tartalmazzák a szükséges eszközöket és szolgáltatásokat az adatok hatékony kezeléséhez.

A legújabb fejlesztések lehetővé teszik a vállalatok számára, hogy átgondolják az adatok kezelését az egész szervezeten belül, világos képet kapjanak arról, hogy milyen adatok állnak rendelkezésre, milyen politikák kapcsolódnak hozzájuk, hol és mennyi ideig tárolják őket, végül pedig lehetőséget adnak arra, hogy időben szolgáltassák a szükséges információkat a megfelelő embereknek. Ezek a megoldások bővítik a vállalatok képességeit és lehetővé teszik:

Fájlok, objektumok, alkalmazásadatok, adatbázisok, virtuális és felhőalapú környezetek adatai kezelését, valamint hozzáférést biztosítanak különböző típusú adatokhoz.
Az orkestrációs és automatizálási eszközök segítségével az adatokat a leghatékonyabb tárolási helyre kell mozgatni - az elsődleges vagy másodlagos tárolóinfrastruktúrába, a szolgáltató adatközpontjába vagy a felhőbe.
Kiterjedt adatvédelmi funkciókat használni.
Adatintegráció biztosítása.
Operatív elemzést nyerni az adatokból.

Az adatkezelő platform több szoftvertermék alapjain épülhet fel, vagy egységes integrált rendszert képviselhet. Az átfogó platform egységes adatkezelést biztosít az egész IT-infrastruktúrában, beleértve azok biztonsági mentését, helyreállítását, archiválását, a hardveres pillanatfelvételek kezelését és a jelentéstételt.

Ez a platform lehetővé teszi a multi-cloud stratégia megvalósítását, a adatközpont felhő környezetre történő kiterjesztését, a gyors migrációt a felhőbe, a hardvercsere lehetőségeinek kihasználását és a legköltséghatékonyabb tárolási megoldások bevezetését.

Egyes megoldások automatikusan archiválják az adatokat. A mesterséges intelligencia segítségével képesek észlelni, ha „valami nem működik”, és automatikusan intézkedéseket hozni, vagy értesíteni az adminisztrátort, valamint észlelni és megakadályozni a különböző típusú támadásokat. A szolgáltatások automatizálása segíti az IT műveletek optimalizálását, lehetővé téve az IT személyzet felszabadítását, minimalizálva az emberi hibákból fakadó tévedéseket és csökkentve a leállásokat.

Milyen tulajdonságokkal kell rendelkeznie egy modern adatmennyiségi kezelési platformnak, és hol alkalmazzák ezeket a gyakorlatban?

Az „egy megoldás mindenkinek” megközelítés nem működik az adatmennyiségi kezelési platformok esetében. Minden vállalatnak saját követelményei vannak az adatokkal kapcsolatban, amelyek az üzlet típusától, a tapasztalatoktól stb. függenek. Az univerzális platformnak egyrészt biztosítania kell az adatokkal való munkához való testreszabást az adott vállalaton belül, másrészt függetlennek kell lennie az alkalmazási ágazat sajátosságaitól, a létrehozott termék felhasználási területétől és információs környezetétől.

Adatkezelési gyakorlati területek (forrás; CMMI Institute).

Íme néhány gyakorlati terület, ahol az adatmennyiségi kezelési platformokat alkalmazzák:

Összetevő
Alkalmazási terület

Adatkezelési stratégia
Az irányítás céljai és feladatai, a vállalati adatkezelési kultúra, az adatok életciklusának követelményeinek meghatározása.

Adatkezelés
Adatok és metaadatok kezelése

Adatkezelési műveletek
Adatforrásokkal kapcsolatos szabványok és eljárások

Adatok minősége
Minőségbiztosítás, adatminőségi keretrendszer

Platform és architektúra
Architekturális keretrendszer, platformok és integráció

Támogató folyamatok
Értékelés és elemzés, folyamatmenedzsment, minőségbiztosítás, kockázatmenedzsment, konfigurációmenedzsment

Továbbá, ezek a platformok fontos szerepet játszanak a szervezet átalakulásában egy „adatvezérelt” vállalattá, amely több szakaszra bontható:

Adatkezelés megváltoztatása a meglévő rendszerekben, szerepkörmodell bevezetése a felelősségek és hatáskörök elosztásával. Adatminőség ellenőrzése, adatkereszt-ellenőrzés a rendszerek között, megbízhatatlan adatok javítása.
Az adatok kinyerésének és gyűjtésének, azok átalakításának és betöltésének folyamatai. Az adatok egységes rendszerbe hozása, anélkül, hogy bonyolódna az adatok minőségellenőrzése és a üzleti folyamatok változása.
Adatintegráció. Az adatok szükséges helyre és időben történő szállítási folyamatok automatizálása.
Teljeskörű adatintegritási ellenőrzés bevezetése. A minőségellenőrzési paraméterek meghatározása, automatikus rendszerek használati metodológiájának kidolgozása.
Adatgyűjtő folyamatok kezelésére szolgáló eszközök bevezetése, azok érvényesítése, deduplikálása és tisztítása. Ennek következményeként nő az adatok minősége, megbízhatósága és az összes vállalati rendszer egységesítése.

Adatkezelő platformok előnyei

Azok a vállalatok, amelyek hatékonyan dolgoznak az adatokkal, általában nagyobb sikereket érnek el a versenytársaikhoz képest, gyorsabban vezetik be a termékeket és szolgáltatásokat a piacra, jobban megértik a célközönség igényeit, valamint gyorsan reagálnak a kereslet változásaira. Az adatkezelő platformok lehetőséget biztosítanak az adatok "tisztítására", releváns és minőségi információk megszerzésére, az adatok átalakítására és a vállalati adatok stratégiai értékelésére.

A vállalati adatkezelő rendszerek felépítésére példa a orosz "Unidata", amely nyílt forráskódú szoftver alapjaira épül. Olyan eszközöket kínál, amelyek lehetővé teszik az adatok modelljének elkészítését és a funkcionalitás kiterjesztését különböző IT-környezetekbe és külső információs rendszerekbe való integráláskor: az anyag- és műszaki erőforrások kezelésétől a nagyméretű személyes adatok biztonságos feldolgozásáig.

Az "Unidata" platform architektúrája az azonos nevű cégtől.

Ez a sokfunkciós platform centralizált adatgyűjtést biztosít (leltár és erőforrások nyilvántartása), az adatok standardizálását (normalizálás és gazdagítás), a jelenlegi és történeti információk nyilvántartását (a rekordverziók ellenőrzése, az adatok érvényességi időszakai), az adatok minőségét és statisztikai nyilvántartást vezet. Automatizálható feladatok közé tartozik az adatok gyűjtése, tárolása, tisztítása, összehasonlítása, konszolidálása, minőségellenőrzés, az adatok terjesztése, valamint döntéstámogató rendszerek automatizálásának eszközei.

Adatkezelő platformok (DPM) a reklámban és marketingben

A reklámban és marketingben az adatkezelő platform (DMP) fogalma szűkebb jelentéssel bír. Ez egy szoftverplatform, amely a gyűjtött adatok alapján lehetővé teszi a cégek számára, hogy meghatározzák a célközönséget a reklámok célzására konkrét felhasználókra és a reklámkampányok kontextusára az interneten. Az ilyen szoftver képes összegyűjteni, feldolgozni és tárolni bármilyen típusú közönségadatokat, valamint lehetőséget biztosít azok használatára a megszokott médiacsatornákon keresztül.

A Market Research Future (MRFR) előrejelzése szerint a globális adatkezelő platformok (DMP) piaca 2023 végére elérheti a 3 milliárd dollárt, évi 15%-os növekedéssel, míg 2025-re a piaca meghaladja a 3,5 milliárd dollárt.

DMP rendszer:

Lehetővé teszi az összes típusú közönségadat gyűjtését és struktúrába rendezését; elemzi a meglévő adatokat; adatokat küld bármilyen médiatérbe a célzott reklámok elhelyezésére.
Segít gyűjteni, rendezni és aktiválni az adatokat különböző forrásokból, és hasznos formába fordítani azokat.
Az összes adatot a vállalati célok és a marketingmodellek alapján kategóriákba szervezi. A rendszer elemzi az adatokat és generálja a közönségszegmenseket, amelyek pontosan tükrözik az ügyfélkört széles csatornaválasztékban, különböző közös jellemzők alapján.
Lehetővé teszi a reklámok online célzásának precizitását, és személyre szabott kommunikációt alakít ki a releváns közönséggel. A DMP alapján a kölcsönhatások láncolatai is kialakíthatók minden egyes célzott szegmentumra, hogy a felhasználók a megfelelő időben és helyen kapjanak releváns üzeneteket.

A digitális marketing növekvő részesedése jelentősen hozzájárul az adatkezelő platformok piacának növekedéséhez. A DMP rendszerek gyorsan egységesíthetik az adatokat különböző forrásokból, és több kategóriába oszthatják a felhasználókat viselkedési modelljük alapján. Az ilyen lehetőségek keresletnövekedést generálnak a DMP iránt a marketingesek körében.

A globális adatkezelő platformok piaca számos vezető szereplőből, valamint néhány új vállalatból áll, köztük a Lotame Solutions, KBM Group, Rocket Fuel, Krux Digital, Oracle, Neustar, SAS Institute, SAP, Adobe Systems, Cloudera, Turn, Informatica és mások.

A példa orosz megoldás — a Mail.ru Group által kiadott infrastrukturális termék, amely egy integrált adatkezelő és -feldolgozó platformot (Data Management Platform, DMP) képvisel. Ez a megoldás lehetővé teszi a közönségi szegmensek profilmintáinak kibővített leírását a marketingeszközökkel integrált platformon belül. A DMP összekapcsolja a Mail.ru Group megoldásait és szolgáltatásait az omnikanális marketing és a közönséggel való munka területén. Az ügyfelek képesek lesznek tárolni, feldolgozni és strukturálni a saját anonim adataikat, valamint aktiválni azokat a reklámkommunikációkban, így növelve a vállalatok és a marketing hatékonyságát.

Adatkezelés felhő alapú környezetben

A felhőalapú platformok egy másik kategóriája az adatkezelési megoldásoknak. Különösen a modern adatvédelmi megoldások alkalmazása az adatkezelés keretein belül lehetővé teszi a lehetséges problémák elkerülését — a biztonsági fenyegetésektől kezdve az adatvándorlás és teljesítménycsökkentési problémákon át, egészen a digitális átalakulás vállalati kihívásának megoldásáig. Természetesen az ilyen rendszerek funkciói nem korlátozódnak csupán az adatok védelmére.

A Gartner által bemutatott felhőalapú adatkezelő platform funkciói: erőforrások elosztása, automatizálás és orchestration; szolgáltatási igények kezelése; magas szintű irányítás és a szabályok betartásának ellenőrzése; paraméterek monitorozása és mérése; többfelhős környezetek támogatása; költségek optimalizálása és átláthatóság; teljesítmény és erőforrások optimalizálása; felhőbe történő migráció és katasztrófahelyzetek biztosítása (DR); szolgáltatási szint menedzsment; biztonság és azonosítás; konfigurációs frissítések automatizálása.

Az adatkezelés felhő alapú környezetben biztosítania kell a magas szintű adat-hozzáférhetőséget, ellenőrzést, az adatkezelés automatizálását az adatközpontokban, a hálózat peremén és a felhőben.

A felhőalapú adatkezelés (Cloud Data Management, CDM) egy olyan platform, amely a vállalati adatok kezelésére szolgál különböző felhőkörnyezetekben, figyelembe véve a privát, nyilvános, hibrid és többfelhős megközelítéseket.

Egy ilyen megoldás a Veeam Cloud Data Management Platform. A rendszer fejlesztői szerint ez segít a szervezeteknek megváltoztatni az adatok kezelését, intelligens automatizált adatkezelést biztosít, és lehetővé teszi az adatok hozzáférését bármely alkalmazásban vagy felhőinfrastruktúrában.

A Veeam felhőadatainak kezelése elengedhetetlen része az intelligens adatkezelésnek, amely biztosítja azok üzleti hozzáférhetőségét bárhonnan.

A Veeam Cloud Data Management Platform lehetővé teszi a mentési rendszerek modernizálását és az elavult rendszerek elhagyását, felgyorsítja a hibrid felhő bevezetését és az adatok áthelyezését, illetve automatizálja az adatok biztonságát és a jogszabályi megfelelést.

A Veeam Cloud Data Management Platform egy "modern adatkezelési platform, amely támogat bármilyen felhőt".

Mint látható, a modern adatkezelési platformok egy elég széles és változatos megoldásosztályt képviselnek. Talán egy dolog közös bennük: a vállalati adatokkal való hatékony munka és a vállalatok vagy szervezetek adatvezérelt vállalkozásokká (data-driven enterprise) alakítása.

Az adatkezelési platformok a hagyományos adatkezelés szükséges evolúcióját képviselik. Egyre több szervezet helyezi az adatokat felhőbe, és a különböző helyi és felhőalapú konfigurációk növekvő számában új problémák merülnek fel, amelyeket éppen az adatok kezelése szempontjából kell megoldani. A felhőadatok kezelése egy frissített megközelítés, új paradigma, amely bővíti az adatkezelési funkciókat az új platformok, alkalmazások és felhasználási forgatókönyvek támogatására.

Ezen kívül a Veeam Cloud Data Management Report 2019-es tanulmányának adatai szerint a cégek mélyebben kívánják integrálni a felhőtechnológiákat, a hibrid felhőt, a nagy adatelemzést, a mesterséges intelligenciát és az internet dolgait. A várakozások szerint ezen digitális kezdeményezések bevezetése jelentős előnyöket hoz a vállalatok számára.

A vállalatok gyors ütemben vezetik be az adatplatform technológiákat, és készen állnak a felhő bevonására analitikai munkaterhek végrehajtásához, azonban sokan problémákba ütköznek, amikor megpróbálnak minden adatukat a jobb üzleti eredmények elérésére használni - mondják a 451 Research elemzői. A legújabb adatkezelési platformok segítenek a vállalatoknak az összetett adatkezelési folyamatok navigálásában több felhőben, az adatkezelési eszközök alkalmazásában és azok elemzésében, függetlenül attól, hol tárolják ezeket az adatokat.

Mivel igyekszünk lépést tartani az idővel és figyelembe vesszük ügyfeleink (jelenlegi és potenciális) kívánságait, szeretnénk megkérdezni a Habr közösséget, hogy szeretnék-e látni a Veeam-t a marketplace-ünkben? Ответить можно в опросе ниже.