{"id":77649,"date":"2020-04-12T13:42:52","date_gmt":"2020-04-12T11:42:52","guid":{"rendered":"https:\/\/prohoster.info\/blog\/administrirovanie\/datagovernance-svoimi-silami"},"modified":"2020-04-12T13:42:52","modified_gmt":"2020-04-12T11:42:52","slug":"datagovernance-svoimi-silami","status":"publish","type":"post","link":"https:\/\/prohoster.info\/hu\/blog\/administrirovanie\/datagovernance-svoimi-silami","title":{"rendered":"DataGovernance saj\u00e1t er\u0151vel","gt_translate_keys":[{"key":"rendered","format":"text"}]},"content":{"rendered":"<p>Hell\u00f3, Habr!<\/p>\n<p>Az adatok a v\u00e1llalat leg\u00e9rt\u00e9kesebb eszk\u00f6zei. Ezt szinte minden digit\u00e1lis ir\u00e1nyults\u00e1g\u00fa c\u00e9g hangoztatja. Ezt neh\u00e9z vitatni: az adatok kezel\u00e9si, t\u00e1rol\u00e1si \u00e9s feldolgoz\u00e1si megk\u00f6zel\u00edt\u00e9seir\u0151l sz\u00f3l\u00f3 diskurzus n\u00e9lk\u00fcl ma m\u00e1r egyetlen nagyobb IT-konferencia sem zajlik le.<\/p>\n<p>Az adatok k\u00fcls\u0151 forr\u00e1sb\u00f3l \u00e9rkeznek hozz\u00e1nk, valamint a c\u00e9gen bel\u00fcl is form\u00e1l\u00f3dnak, \u00e9s ha a telekommunik\u00e1ci\u00f3s adatokr\u00f3l besz\u00e9l\u00fcnk, akkor ezek az alkalmazottak sz\u00e1m\u00e1ra kincset \u00e9rnek, hiszen inform\u00e1ci\u00f3kat ny\u00fajtanak az \u00fcgyf\u00e9lr\u0151l, \u00e9rdekl\u0151d\u00e9si k\u00f6reir\u0151l, szok\u00e1sair\u00f3l \u00e9s tart\u00f3zkod\u00e1si hely\u00e9r\u0151l. A kell\u0151 profillal \u00e9s szegment\u00e1l\u00e1ssal a rekl\u00e1maj\u00e1nlatok a leghat\u00e9konyabban m\u0171k\u00f6dnek. Azonban a gyakorlatban a helyzet nem olyan r\u00f3zs\u00e1s. Az adatok, amelyeket a c\u00e9gek t\u00e1rolnak, elavultak, redund\u00e1nsak, egym\u00e1sra \u00e9p\u00fclnek, vagy senki sem tud r\u00f3luk, csak egy sz\u0171k felhaszn\u00e1l\u00f3i k\u00f6r. <\/p>\n<p><noindex><a rel=\"nofollow\" href=\"https:\/\/habr.com\/ru\/company\/rostelecom\/blog\/495934\/\"><img decoding=\"async\" alt=\"DataGovernance saj\u00e1t er\u0151vel\" src=\"\/wp-content\/uploads\/2020\/04\/612de9bc3f0df4fafdee9d1dffa94d05.jpg\" style=\"display:block;margin: 0 auto;\" \/><\/a><\/noindex><br \/>\nEgysz\u00f3val, az adatokkal hat\u00e9konyan kell gazd\u00e1lkodni - csak \u00edgy v\u00e1lhatnak a v\u00e1llalkoz\u00e1s sz\u00e1m\u00e1ra igazi hasznot \u00e9s profitot hoz\u00f3 eszk\u00f6zz\u00e9. Sajnos, az adatok kezel\u00e9s\u00e9vel kapcsolatos k\u00e9rd\u00e9sek megold\u00e1sa \u00e9rdek\u00e9ben sz\u00e1mos neh\u00e9zs\u00e9get kell lek\u00fczdeni. Ezek legink\u00e1bb a rendszerek \u201e\u00e1llatkertj\u00e9nek\u201d t\u00f6rt\u00e9neti \u00f6r\u00f6ks\u00e9ge, valamint az egys\u00e9ges folyamatok \u00e9s megk\u00f6zel\u00edt\u00e9sek hi\u00e1nya miatt mer\u00fclnek fel. De mit is jelent az \u201eadataj\u00e1t\u00e9k\u201d?<\/p>\n<p>\u00c9ppen err\u0151l besz\u00e9l\u00fcnk majd a folytat\u00e1sban, valamint arr\u00f3l, hogy az opensource-stack hogyan seg\u00edtett nek\u00fcnk.<br \/>\n<noindex><a rel=\"nofollow\" name=\"habracut\"><\/a><\/noindex><br \/>\nA strat\u00e9giai adatkezel\u00e9s (Data Governance, DG) koncepci\u00f3ja m\u00e1r el\u00e9gg\u00e9 ismert a magyar piacon, \u00e9s az \u00fczlet \u00e1ltal el\u00e9rhet\u0151 c\u00e9lok vil\u00e1gosak \u00e9s egy\u00e9rtelm\u0171en megfogalmazottak. C\u00e9g\u00fcnk sem volt kiv\u00e9tel, \u00e9s belekezdett az adatkezel\u00e9s koncepci\u00f3j\u00e1nak bevezet\u00e9s\u00e9be.<\/p>\n<p>Teh\u00e1t, hol kezdt\u00fck? El\u0151sz\u00f6r is, meghat\u00e1roztuk a kulcsfontoss\u00e1g\u00fa c\u00e9ljainkat:<\/p>\n<ol>\n<li>Biztos\u00edtani az adataink el\u00e9rhet\u0151s\u00e9g\u00e9t.<\/li>\n<li>Biztos\u00edtani az adatok \u00e9letciklus\u00e1nak \u00e1tl\u00e1that\u00f3s\u00e1g\u00e1t.<\/li>\n<li>A c\u00e9g felhaszn\u00e1l\u00f3i sz\u00e1m\u00e1ra egyeztetett, \u00f6sszhangban lev\u0151 adatokat adni.<\/li>\n<li>A c\u00e9g felhaszn\u00e1l\u00f3i sz\u00e1m\u00e1ra ellen\u0151rz\u00f6tt adatokat adni.<\/li>\n<\/ol>\n<p>\nJelenleg a szoftverpiacon t\u00f6bb tucat adatkezel\u00e9si oszt\u00e1ly\u00fa eszk\u00f6z \u00e9rhet\u0151 el.<\/p>\n<p><img decoding=\"async\" alt=\"DataGovernance saj\u00e1t er\u0151vel\" src=\"\/wp-content\/uploads\/2020\/04\/aacfa4e149a42c428ba1cae1f152aae0.jpg\" style=\"display:block;margin: 0 auto;\" \/><br \/>\n<br \/>\nDe alapos elemz\u00e9s \u00e9s a megold\u00e1sok tanulm\u00e1nyoz\u00e1sa ut\u00e1n sz\u00e1mos kritikus megjegyz\u00e9st r\u00f6gz\u00edtett\u00fcnk magunkban:<\/p>\n<ul>\n<li>A legt\u00f6bb gy\u00e1rt\u00f3 \u00e1tfog\u00f3 megold\u00e1scsomagot k\u00edn\u00e1l, amely sz\u00e1munkra t\u00falz\u00f3, \u00e9s m\u00e1r megl\u00e9v\u0151 funkcionalit\u00e1sokat duplik\u00e1l. Ezen k\u00edv\u00fcl er\u0151forr\u00e1sok szempontj\u00e1b\u00f3l dr\u00e1ga integr\u00e1ci\u00f3t jelent a jelenlegi IT-t\u00e1jk\u00e9phez.<\/li>\n<li>A funkcionalit\u00e1s \u00e9s a fel\u00fclet technol\u00f3gusoknak van tervezve, nem pedig v\u00e9gs\u0151 \u00fczleti felhaszn\u00e1l\u00f3knak.<\/li>\n<li>Alacsony term\u00e9kelfogad\u00e1si ar\u00e1ny \u00e9s sikeres bevezet\u00e9si hi\u00e1ny a hazai piacon.<\/li>\n<li>Magas szoftverk\u00f6lts\u00e9g \u00e9s tov\u00e1bbi t\u00e1mogat\u00e1si ig\u00e9ny.<\/li>\n<\/ul>\n<p>\nA fent eml\u00edtett krit\u00e9riumok \u00e9s javaslatok az orosz c\u00e9gek szoftverimport helyettes\u00edt\u00e9s\u00e9vel kapcsolatban meggy\u0151ztek minket, hogy saj\u00e1t fejleszt\u00e9sbe kezdj\u00fcnk opensource technol\u00f3gi\u00e1n. A Django-t v\u00e1lasztottuk platformnak \u2013 ingyenes \u00e9s ny\u00edlt keretrendszer, amely Python nyelven k\u00e9sz\u00fclt. Ily m\u00f3don kiemelt\u00fck a kulcsfontoss\u00e1g\u00fa modulokat, amelyek seg\u00edtik a fent eml\u00edtett c\u00e9lokat:<\/p>\n<ol>\n<li>Jelent\u00e9snyilv\u00e1ntart\u00f3.<\/li>\n<li>\u00dczleti sz\u00f3szedet.<\/li>\n<li>M\u00f3dul a technikai \u00e1talakul\u00e1sok le\u00edr\u00e1s\u00e1ra.<\/li>\n<li>M\u00f3dul az adatok \u00e9letciklus\u00e1nak le\u00edr\u00e1s\u00e1ra a forr\u00e1st\u00f3l a BI-eszk\u00f6zig.<\/li>\n<li>Adatmin\u0151s\u00e9g-ellen\u0151rz\u00e9si modul.<\/li>\n<\/ol>\n<p>\n<img decoding=\"async\" alt=\"DataGovernance saj\u00e1t er\u0151vel\" src=\"\/wp-content\/uploads\/2020\/04\/4645b9d360652319a341836584ca42ca.jpg\" style=\"display:block;margin: 0 auto;\" \/><br \/>\n<\/p>\n<h2>Jelent\u00e9snyilv\u00e1ntart\u00f3<\/h2>\n<p>\nA nagyv\u00e1llalatok bels\u0151 kutat\u00e1sai szerint, amikor az adatokkal kapcsolatos feladatokat oldanak meg, a munkat\u00e1rsak 40-80%-\u00e1t az adatok keres\u00e9s\u00e9re ford\u00edtj\u00e1k. Ez\u00e9rt c\u00e9lul t\u0171zt\u00fck ki, hogy megnyitjuk a megl\u00e9v\u0151 jelent\u00e9sekr\u0151l sz\u00f3l\u00f3 inform\u00e1ci\u00f3t, amelyek kor\u00e1bban csak a megrendel\u0151k sz\u00e1m\u00e1ra voltak el\u00e9rhet\u0151k. Ezzel cs\u00f6kkentj\u00fck az \u00faj jelent\u00e9sek elk\u00e9sz\u00edt\u00e9s\u00e9re ford\u00edtott id\u0151t, \u00e9s el\u0151seg\u00edtj\u00fck az adatok demokratiz\u00e1l\u00e1s\u00e1t.<\/p>\n<p><img decoding=\"async\" alt=\"DataGovernance saj\u00e1t er\u0151vel\" src=\"\/wp-content\/uploads\/2020\/04\/1186a88bdfbcd4dc6c66defc0911e85e.jpg\" style=\"display:block;margin: 0 auto;\" \/><br \/>\n<br \/>\nA jelent\u00e9snyilv\u00e1ntart\u00f3 az a k\u00f6zponti jelent\u00e9si platform, amelyet a k\u00fcl\u00f6nb\u00f6z\u0151 r\u00e9gi\u00f3k, oszt\u00e1lyok \u00e9s r\u00e9szlegek bels\u0151 felhaszn\u00e1l\u00f3i haszn\u00e1lnak. \u00d6sszes\u00edti az inf\u00f3szolg\u00e1ltat\u00e1sok adatait, amelyeket a v\u00e1llalat t\u00f6bb v\u00e1llalati t\u00e1rol\u00f3j\u00e1ban hoztak l\u00e9tre, \u00e9s ezekb\u0151l a Rostelecomon bel\u00fcl nem kev\u00e9s tal\u00e1lhat\u00f3.<\/p>\n<p>A nyilv\u00e1ntart\u00f3 azonban nem csup\u00e1n egy sz\u00e1raz lista a kidolgozott jelent\u00e9sekr\u0151l. Minden jelent\u00e9shez olyan inform\u00e1ci\u00f3kat biztos\u00edtunk, amelyek sz\u00fcks\u00e9gesek a felhaszn\u00e1l\u00f3 sz\u00e1m\u00e1ra az \u00f6n\u00e1ll\u00f3 megismer\u00e9shez:<\/p>\n<ul>\n<li>a jelent\u00e9s r\u00f6vid le\u00edr\u00e1sa;<\/li>\n<li>az adatok hozz\u00e1f\u00e9r\u00e9s\u00e9nek m\u00e9lys\u00e9ge;<\/li>\n<li>megrendel\u0151 szegmense;<\/li>\n<li>visualiz\u00e1l\u00f3 eszk\u00f6z;<\/li>\n<li>v\u00e1llalati t\u00e1rol\u00f3 neve;<\/li>\n<li>\u00fczleti funkcion\u00e1lis k\u00f6vetelm\u00e9nyek;<\/li>\n<li>jelent\u00e9s hivatkoz\u00e1sa;<\/li>\n<li>hozz\u00e1f\u00e9r\u00e9si ig\u00e9nyl\u00e9si hivatkoz\u00e1s;<\/li>\n<li>megval\u00f3s\u00edt\u00e1si st\u00e1tusz.<\/li>\n<\/ul>\n<p>\nA jelent\u00e9sek alapj\u00e1n el\u00e9rhet\u0151 az haszn\u00e1lhat\u00f3s\u00e1gi szint\u0171 elemz\u00e9s, \u00e9s a jelent\u00e9sek a logelemz\u00e9sek alapj\u00e1n a felhaszn\u00e1l\u00f3k egyedi sz\u00e1m\u00e1nak eml\u00e9kezet\u00e9be ker\u00fclnek. De ez m\u00e9g nem minden. Az \u00e1ltal\u00e1nos jellemz\u0151k mellett r\u00e9szletes le\u00edr\u00e1st is k\u00e9sz\u00edtett\u00fcnk a jelent\u00e9sek attrib\u00fatum-\u00f6sszetev\u0151ir\u0151l p\u00e9ld\u00e1k \u00e9rt\u00e9keivel \u00e9s sz\u00e1m\u00edt\u00e1si m\u00f3dszerekkel. Az ilyen r\u00e9szletess\u00e9g azonnal v\u00e1laszt ad a felhaszn\u00e1l\u00f3nak arra, hogy hasznos-e a jelent\u00e9s vagy sem. <\/p>\n<p>Ennek a modulnak a fejleszt\u00e9se fontos l\u00e9p\u00e9s volt az adatok demokratiz\u00e1l\u00e1sa szempontj\u00e1b\u00f3l, \u00e9s jelent\u0151sen cs\u00f6kkentette az ig\u00e9nyelt inform\u00e1ci\u00f3k keres\u00e9s\u00e9nek idej\u00e9t. Az id\u0151keres\u00e9s cs\u00f6kkent\u00e9s\u00e9n k\u00edv\u00fcl a t\u00e1mogat\u00f3i csapathoz int\u00e9zett konzult\u00e1ci\u00f3s k\u00e9relmek sz\u00e1ma is cs\u00f6kkent. Nem lehet figyelmen k\u00edv\u00fcl hagyni egy m\u00e1sik hasznos eredm\u00e9nyt sem, amit el\u00e9rt\u00fcnk, amikor egys\u00e9ges nyilv\u00e1ntart\u00e1st hoztunk l\u00e9tre a jelent\u00e9sekre \u2013 megakad\u00e1lyoztuk a duplik\u00e1lt jelent\u00e9sek fejleszt\u00e9s\u00e9t k\u00fcl\u00f6nb\u00f6z\u0151 strukt\u00far\u00e1k sz\u00e1m\u00e1ra.<\/p>\n<h2>\u00dczleti sz\u00f3t\u00e1r<\/h2>\n<p>\nMindannyian tudj\u00e1tok, hogy m\u00e9g egyazon v\u00e1llalaton bel\u00fcl is az \u00fczlet elt\u00e9r\u0151 nyelveken besz\u00e9l. Igen, ugyanazokat a kifejez\u00e9seket haszn\u00e1lj\u00e1k, de teljesen m\u00e1s \u00e9rtelmez\u00e9seket adnak nekik. E probl\u00e9m\u00e1nak a megold\u00e1sa az \u00fczleti sz\u00f3t\u00e1r feladata.<\/p>\n<p>Sz\u00e1munkra az \u00fczleti sz\u00f3t\u00e1r nem csup\u00e1n egy \u00fatmutat\u00f3 a kifejez\u00e9sek \u00e9s sz\u00e1m\u00edt\u00e1si m\u00f3dszerek le\u00edr\u00e1s\u00e1val. Ez egy teljes fejleszt\u00e9si, egyeztet\u00e9si \u00e9s a terminol\u00f3gia j\u00f3v\u00e1hagy\u00e1s\u00e1nak k\u00f6rnyezete, a kifejez\u00e9sek m\u00e1s inform\u00e1ci\u00f3s eszk\u00f6z\u00f6kkel val\u00f3 \u00f6sszef\u00fcgg\u00e9s\u00e9nek kialak\u00edt\u00e1sa. Miel\u0151tt a terminol\u00f3gia beker\u00fclne az \u00fczleti sz\u00f3t\u00e1rba, minden egyeztet\u00e9si l\u00e9p\u00e9st meg kell tennie az \u00fczleti megrendel\u0151kkel \u00e9s az adatok min\u0151s\u00e9gk\u00f6zpontj\u00e1val. Csak ezut\u00e1n v\u00e1lik el\u00e9rhet\u0151v\u00e9 a haszn\u00e1lathoz.<\/p>\n<p>Ahogyan m\u00e1r kor\u00e1bban meg\u00edrtam, ennek az eszk\u00f6znek az egyedis\u00e9ge abban rejlik, hogy lehet\u0151v\u00e9 teszi a kapcsolatokat az \u00fczleti kifejez\u00e9s szintj\u00e9r\u0151l a konkr\u00e9t felhaszn\u00e1l\u00f3i jelent\u00e9sek szintj\u00e9re, amelyekben a kifejez\u00e9s haszn\u00e1latban van, valamint az adatb\u00e1zisok fizikai objektumaihoz.<\/p>\n<p><img decoding=\"async\" alt=\"DataGovernance saj\u00e1t er\u0151vel\" src=\"\/wp-content\/uploads\/2020\/04\/ff3c8b35baee205577c3178e69e74679.jpg\" style=\"display:block;margin: 0 auto;\" \/><br \/>\n<br \/>\nEz a sz\u00f3t\u00e1r-id\u0151pontok azonos\u00edt\u00f3inak haszn\u00e1lat\u00e1val v\u00e1lt lehet\u0151v\u00e9 a nyilv\u00e1ntart\u00e1s jelent\u00e9seinek r\u00e9szletes le\u00edr\u00e1s\u00e1ban \u00e9s az adatb\u00e1zisok fizikai objektumainak le\u00edr\u00e1s\u00e1ban. <\/p>\n<p>Jelenleg a Sz\u00f3szedetben t\u00f6bb mint 4000 kifejez\u00e9s van defini\u00e1lva \u00e9s j\u00f3v\u00e1hagyva. Haszn\u00e1lata leegyszer\u0171s\u00edti \u00e9s felgyors\u00edtja a be\u00e9rkez\u0151 k\u00e9rd\u00e9sek feldolgoz\u00e1s\u00e1t a v\u00e1llalat inform\u00e1ci\u00f3s rendszereiben. Ha a sz\u00fcks\u00e9ges mutat\u00f3 m\u00e1r megval\u00f3sult valamilyen jelent\u00e9sben, akkor a felhaszn\u00e1l\u00f3 azonnal l\u00e1tni fog egy k\u00e9sz jelent\u00e9sek list\u00e1j\u00e1t, ahol ez a mutat\u00f3 szerepel, \u00e9s d\u00f6nthet a m\u00e1r l\u00e9tez\u0151 funkci\u00f3k hat\u00e9kony \u00fajb\u00f3li felhaszn\u00e1l\u00e1s\u00e1r\u00f3l vagy minim\u00e1lis finom\u00edt\u00e1s\u00e1r\u00f3l, an\u00e9lk\u00fcl, hogy \u00faj jelent\u00e9s k\u00e9sz\u00edt\u00e9s\u00e9re ir\u00e1nyul\u00f3 k\u00e9r\u00e9seket ind\u00edtana.<\/p>\n<h2>A technikai \u00e1talak\u00edt\u00e1sok \u00e9s DataLineage le\u00edr\u00f3 modulja<\/h2>\n<p>\nMegk\u00e9rdezheti, mik ezek a modulok? Csak a Jelent\u00e9snyilv\u00e1ntart\u00e1s \u00e9s a Sz\u00f3szedet bevezet\u00e9se nem elegend\u0151, minden \u00fczleti kifejez\u00e9st \u00e1t kell \u00fcltetni a fizikai adatb\u00e1zis modellbe. Ily m\u00f3don siker\u00fclt befejezni az adatok \u00e9letciklus\u00e1nak kialak\u00edt\u00e1s\u00e1t a forr\u00e1sszerverekt\u0151l a BI-vizualiz\u00e1ci\u00f3n \u00e1t a t\u00e1rol\u00f3r\u00e9tegekig. M\u00e1s szavakkal: fel\u00e9p\u00edteni a DataLineage-t.<\/p>\n<p>Kifejlesztett\u00fcnk egy felhaszn\u00e1l\u00f3i fel\u00fcletet, amely a v\u00e1llalatn\u00e1l kor\u00e1bban haszn\u00e1lt szab\u00e1lyok \u00e9s adat\u00e1talak\u00edt\u00e1si logika le\u00edr\u00e1s\u00e1nak form\u00e1tum\u00e1n alapult. A fel\u00fcleten ugyanazt az inform\u00e1ci\u00f3t r\u00f6gz\u00edtj\u00fck, mint kor\u00e1bban, de k\u00f6telez\u0151v\u00e9 v\u00e1lt egy \u00fczleti sz\u00f3szedetb\u0151l sz\u00e1rmaz\u00f3 kifejez\u00e9s azonos\u00edt\u00f3j\u00e1nak meghat\u00e1roz\u00e1sa. \u00cdgy \u00e9p\u00edtj\u00fck fel a kapcsolatot az \u00fczleti \u00e9s a fizikai r\u00e9tegek k\u00f6z\u00f6tt.<\/p>\n<p>Kinek van erre sz\u00fcks\u00e9ge? Mi\u00e9rt volt probl\u00e9m\u00e1s a r\u00e9gi form\u00e1tum, amellyel \u00e9vekig dolgoztunk? Mennyivel n\u0151ttek meg a k\u00f6vetelm\u00e9nyek megfogalmaz\u00e1s\u00e1ra ford\u00edtott munka\u00f3r\u00e1k? Ilyen k\u00e9rd\u00e9sekre kellett v\u00e1laszolnunk az eszk\u00f6z bevezet\u00e9se sor\u00e1n. Itt a v\u00e1laszok meglehet\u0151sen egyszer\u0171ek \u2013 ez mindannyiunknak sz\u00fcks\u00e9ges, a c\u00e9g\u00fcnk adatirod\u00e1j\u00e1nak \u00e9s felhaszn\u00e1l\u00f3inknak.<\/p>\n<p>Val\u00f3ban, a munkat\u00e1rsaknak alkalmazkodniuk kellett, kezdetben ez enyhe megn\u00f6vekedett munkaterheket eredm\u00e9nyezett a dokument\u00e1ci\u00f3 el\u0151k\u00e9sz\u00edt\u00e9se sor\u00e1n, de ezt a k\u00e9rd\u00e9st siker\u00fclt megoldanunk. A gyakorlat, a probl\u00e9m\u00e1s ter\u00fcletek azonos\u00edt\u00e1sa \u00e9s optimaliz\u00e1l\u00e1sa megtette a mag\u00e1\u00e9t. A legfontosabb, hogy jav\u00edtottuk a kidolgozott k\u00f6vetelm\u00e9nyek min\u0151s\u00e9g\u00e9t. A k\u00f6telez\u0151en kit\u00f6ltend\u0151 mez\u0151k, az egys\u00e9ges\u00edtett referenci\u00e1k, az adatbeviteli maszkok \u00e9s a be\u00e9p\u00edtett ellen\u0151rz\u00e9sek mind hozz\u00e1j\u00e1rultak ahhoz, hogy jelent\u0151sen jav\u00edtsuk a transzform\u00e1ci\u00f3k le\u00edr\u00e1s\u00e1nak min\u0151s\u00e9g\u00e9t. Elhagytuk a k\u00f6vetelm\u00e9nyek \u00e1tad\u00e1s\u00e1nak gyakorlat\u00e1t, \u00e9s megosztottuk a fejleszt\u0151 csapat sz\u00e1m\u00e1ra eddig csak el\u00e9rhet\u0151 tud\u00e1st. Az elk\u00e9sz\u00edtett metadatab\u00e1zis t\u00f6bbsz\u00f6r\u00f6sen cs\u00f6kkenti a regresszi\u00f3s anal\u00edzishez sz\u00fcks\u00e9ges id\u0151t, \u00e9s lehet\u0151v\u00e9 teszi a v\u00e1ltoz\u00e1sok hat\u00e1s\u00e1nak gyors \u00e9rt\u00e9kel\u00e9s\u00e9t az IT t\u00e1j b\u00e1rmely r\u00e9teg\u00e9n (riportok, aggreg\u00e1torok, forr\u00e1sok).<\/p>\n<p>Milyen kapcsolatban \u00e1llnak a riportok \u00e1tlagos felhaszn\u00e1l\u00f3i ezzel, milyen el\u0151ny\u00f6ket ny\u00fajtanak sz\u00e1mukra? A DataLineage lehet\u0151s\u00e9g\u00e9nek k\u00f6sz\u00f6nhet\u0151en felhaszn\u00e1l\u00f3ink, akik ak\u00e1r t\u00e1vol \u00e1llnak is az SQL-t\u0151l \u00e9s m\u00e1s programoz\u00e1si nyelvekt\u0151l, gyorsan hozz\u00e1f\u00e9rhetnek az inform\u00e1ci\u00f3khoz a forr\u00e1sokr\u00f3l \u00e9s azokr\u00f3l az objektumokr\u00f3l, amelyek alapj\u00e1n adott riportot k\u00e9sz\u00edtenek.<\/p>\n<h2>Adatmin\u0151s\u00e9g-ellen\u0151rz\u0151 modul<\/h2>\n<p>\nMindez, amir\u0151l kor\u00e1bban besz\u00e9lt\u00fcnk az adatok \u00e1tl\u00e1that\u00f3s\u00e1g\u00e1nak biztos\u00edt\u00e1sa \u00e9rdek\u00e9ben, nem sz\u00e1m\u00edt, ha nem \u00e9rtj\u00fck, hogy az adatok, amelyeket a felhaszn\u00e1l\u00f3knak \u00e1tadunk, helyesek. Az adatir\u00e1ny\u00edt\u00e1si koncepci\u00f3nk egyik fontos modulja az adatmin\u0151s\u00e9g-ellen\u0151rz\u0151 modul.<\/p>\n<p>A jelenlegi szakaszban ez az ellen\u0151rz\u00e9sek katal\u00f3gusa a mintavett entit\u00e1sok sz\u00e1m\u00e1ra. A term\u00e9k fejleszt\u00e9s\u00e9nek legk\u00f6zelebbi c\u00e9lja az ellen\u0151rz\u00e9sek lista kib\u0151v\u00edt\u00e9se \u00e9s az riportjegyz\u00e9khez val\u00f3 integr\u00e1ci\u00f3.<br \/>\nMit fog ez adni \u00e9s kinek? A jegyz\u00e9k v\u00e9gfelhaszn\u00e1l\u00f3i sz\u00e1m\u00e1ra el\u00e9rhet\u0151 inform\u00e1ci\u00f3k lesznek a tervezett \u00e9s t\u00e9nyleges riportk\u00e9sz\u00edt\u00e9si hat\u00e1rid\u0151kr\u0151l, a v\u00e9grehajtott ellen\u0151rz\u00e9sek eredm\u00e9nyei a dinamika ment\u00e9n, valamint az riportba bet\u00f6lt\u00f6tt forr\u00e1sok adatai.<\/p>\n<p>Sz\u00e1munkra a munkafolyamatokba integr\u00e1lt adatmin\u0151s\u00e9g-modul a k\u00f6vetkez\u0151ket jelenti:<\/p>\n<ul>\n<li>A megrendel\u0151k elv\u00e1r\u00e1sainak gyors form\u00e1l\u00e1sa.<\/li>\n<li>D\u00f6nt\u00e9sek meghozatala az adatok tov\u00e1bbi felhaszn\u00e1l\u00e1s\u00e1r\u00f3l.<\/li>\n<li>Probl\u00e9ma\u00e9rz\u00e9kel\u00e9se az els\u0151 szakaszokban a rendszeres adatmin\u0151s\u00e9gi ellen\u0151rz\u00e9sek kidolgoz\u00e1s\u00e1hoz.<\/li>\n<\/ul>\n<p>\nEz k\u00e9ts\u00e9gtelen\u00fcl az els\u0151 l\u00e9p\u00e9sek az adatok kezel\u00e9s\u00e9nek teljes folyamat\u00e1nak ki\u00e9p\u00edt\u00e9s\u00e9ben. De biztosak vagyunk benne, hogy csak akkor \u00e9rhetj\u00fck el ezt a c\u00e9lt, ha tudatosan foglalkozunk ezzel a munk\u00e1val, akt\u00edvan integr\u00e1lva a DataGovernance eszk\u00f6z\u00f6ket a munkafolyamatba, \u00edgy biztos\u00edtva \u00fcgyfeleink sz\u00e1m\u00e1ra az inform\u00e1ci\u00f3kat, a magabiztoss\u00e1got az adatokkal kapcsolatban, az \u00e1tl\u00e1that\u00f3s\u00e1got a beszerz\u00e9s\u00fck sor\u00e1n, \u00e9s n\u00f6velve az \u00faj funkci\u00f3k bevezet\u00e9s\u00e9nek sebess\u00e9g\u00e9t.<\/p>\n<p><i>DataOffice Csapat<\/i><br \/>\n<br \/>Forr\u00e1s: <a content=\"nofollow\" rel=\"nofollow\" href=\"https:\/\/habr.com\/ru\/company\/rostelecom\/blog\/495934\/\">habr.com<\/a> <\/p>","protected":false,"gt_translate_keys":[{"key":"rendered","format":"html"}]},"excerpt":{"rendered":"<p>\u041f\u0440\u0438\u0432\u0435\u0442, \u0425\u0430\u0431\u0440! \u0414\u0430\u043d\u043d\u044b\u0435 \u2014 \u044d\u0442\u043e \u0446\u0435\u043d\u043d\u0435\u0439\u0448\u0438\u0439 \u0430\u043a\u0442\u0438\u0432 \u043a\u043e\u043c\u043f\u0430\u043d\u0438\u0438. \u041e\u0431 \u044d\u0442\u043e\u043c \u0437\u0430\u044f\u0432\u043b\u044f\u0435\u0442 \u0447\u0443\u0442\u044c \u043b\u0438 \u043d\u0435 \u043a\u0430\u0436\u0434\u0430\u044f \u043a\u043e\u043c\u043f\u0430\u043d\u0438\u044f \u0441 \u0446\u0438\u0444\u0440\u043e\u0432\u044b\u043c \u0443\u043a\u043b\u043e\u043d\u043e\u043c. \u0421 \u044d\u0442\u0438\u043c \u0441\u043b\u043e\u0436\u043d\u043e \u0441\u043f\u043e\u0440\u0438\u0442\u044c: \u0431\u0435\u0437 \u043e\u0431\u0441\u0443\u0436\u0434\u0435\u043d\u0438\u044f \u043f\u043e\u0434\u0445\u043e\u0434\u043e\u0432 \u0443\u043f\u0440\u0430\u0432\u043b\u0435\u043d\u0438\u044f, \u0445\u0440\u0430\u043d\u0435\u043d\u0438\u044f \u0438 \u043e\u0431\u0440\u0430\u0431\u043e\u0442\u043a\u0438 \u0434\u0430\u043d\u043d\u044b\u0445 \u0441\u0435\u0439\u0447\u0430\u0441 \u043d\u0435 \u043f\u0440\u043e\u0445\u043e\u0434\u0438\u0442 \u043d\u0438 \u043e\u0434\u043d\u0430 \u043a\u0440\u0443\u043f\u043d\u0430\u044f IT-\u043a\u043e\u043d\u0444\u0435\u0440\u0435\u043d\u0446\u0438\u044f. \u0414\u0430\u043d\u043d\u044b\u0435 \u043a \u043d\u0430\u043c \u043f\u043e\u0441\u0442\u0443\u043f\u0430\u044e\u0442 \u0441\u043d\u0430\u0440\u0443\u0436\u0438, \u0442\u0430\u043a\u0436\u0435 \u043e\u043d\u0438 \u0444\u043e\u0440\u043c\u0438\u0440\u0443\u044e\u0442\u0441\u044f \u0432\u043d\u0443\u0442\u0440\u0438 \u043a\u043e\u043c\u043f\u0430\u043d\u0438\u0438, \u0430 \u0435\u0441\u043b\u0438 \u0433\u043e\u0432\u043e\u0440\u0438\u0442\u044c \u043e \u0434\u0430\u043d\u043d\u044b\u0445 \u0442\u0435\u043b\u0435\u043a\u043e\u043c-\u043a\u043e\u043c\u043f\u0430\u043d\u0438\u0438, \u0442\u043e [&hellip;]<\/p>\n","protected":false,"gt_translate_keys":[{"key":"rendered","format":"html"}]},"author":1,"featured_media":77650,"comment_status":"open","ping_status":"open","sticky":false,"template":"","format":"standard","meta":{"footnotes":""},"categories":[688],"tags":[],"class_list":["post-77649","post","type-post","status-publish","format-standard","has-post-thumbnail","hentry","category-administrirovanie"],"aioseo_notices":[],"aioseo_head":"\n\t\t<!-- All in One SEO 5.0.3 - aioseo.com -->\n\t<meta name=\"description\" content=\"\u041f\u0440\u0438\u0432\u0435\u0442, \u0425\u0430\u0431\u0440! \u0414\u0430\u043d\u043d\u044b\u0435 \u2014 \u044d\u0442\u043e \u0446\u0435\u043d\u043d\u0435\u0439\u0448\u0438\u0439 \u0430\u043a\u0442\u0438\u0432 \u043a\u043e\u043c\u043f\u0430\u043d\u0438\u0438. \u041e\u0431 \u044d\u0442\u043e\u043c \u0437\u0430\u044f\u0432\u043b\u044f\u0435\u0442 \u0447\u0443\u0442\u044c \u043b\u0438 \u043d\u0435 \u043a\u0430\u0436\u0434\u0430\u044f \u043a\u043e\u043c\u043f\u0430\u043d\u0438\u044f \u0441 \u0446\u0438\u0444\u0440\u043e\u0432\u044b\u043c \u0443\u043a\u043b\u043e\u043d\u043e\u043c.\" \/>\n\t<meta name=\"robots\" content=\"max-image-preview:large\" \/>\n\t<meta name=\"author\" content=\"Yuri Gagarin\"\/>\n\t<link rel=\"canonical\" href=\"https:\/\/prohoster.info\/hu\/blog\/administrirovanie\/datagovernance-svoimi-silami\" \/>\n\t\t<meta name=\"generator\" content=\"All in One SEO (AIOSEO) 5.0.3\" \/>\n\t\t<meta property=\"og:locale\" content=\"hu_HU\" \/>\n\t\t<meta property=\"og:site_name\" content=\"ProHoster | \u041a\u0443\u043f\u0438\u0442\u044c \u043d\u0430\u0434\u0435\u0436\u043d\u044b\u0439 \u0445\u043e\u0441\u0442\u0438\u043d\u0433 \u0434\u043b\u044f \u0441\u0430\u0439\u0442\u043e\u0432 \u0441 \u0437\u0430\u0449\u0438\u0442\u043e\u0439 \u043e\u0442 DDoS, VPS VDS \u0441\u0435\u0440\u0432\u0435\u0440\u044b\" \/>\n\t\t<meta property=\"og:type\" content=\"article\" \/>\n\t\t<meta property=\"og:title\" content=\"\ud83e\udd47DataGovernance \u0441\u0432\u043e\u0438\u043c\u0438 \u0441\u0438\u043b\u0430\u043c\u0438 | ProHoster\" \/>\n\t\t<meta property=\"og:description\" content=\"\u041f\u0440\u0438\u0432\u0435\u0442, \u0425\u0430\u0431\u0440! \u0414\u0430\u043d\u043d\u044b\u0435 \u2014 \u044d\u0442\u043e \u0446\u0435\u043d\u043d\u0435\u0439\u0448\u0438\u0439 \u0430\u043a\u0442\u0438\u0432 \u043a\u043e\u043c\u043f\u0430\u043d\u0438\u0438. \u041e\u0431 \u044d\u0442\u043e\u043c \u0437\u0430\u044f\u0432\u043b\u044f\u0435\u0442 \u0447\u0443\u0442\u044c \u043b\u0438 \u043d\u0435 \u043a\u0430\u0436\u0434\u0430\u044f \u043a\u043e\u043c\u043f\u0430\u043d\u0438\u044f \u0441 \u0446\u0438\u0444\u0440\u043e\u0432\u044b\u043c \u0443\u043a\u043b\u043e\u043d\u043e\u043c.\" \/>\n\t\t<meta property=\"og:url\" content=\"https:\/\/prohoster.info\/hu\/blog\/administrirovanie\/datagovernance-svoimi-silami\" \/>\n\t\t<meta property=\"og:image\" content=\"https:\/\/prohoster.info\/wp-content\/uploads\/2021\/11\/logo-350.jpg\" \/>\n\t\t<meta property=\"og:image:secure_url\" content=\"https:\/\/prohoster.info\/wp-content\/uploads\/2021\/11\/logo-350.jpg\" \/>\n\t\t<meta property=\"og:image:width\" content=\"350\" \/>\n\t\t<meta property=\"og:image:height\" content=\"350\" \/>\n\t\t<meta property=\"article:published_time\" content=\"2020-04-12T11:42:52+00:00\" \/>\n\t\t<meta property=\"article:modified_time\" content=\"2020-04-12T11:42:52+00:00\" \/>\n\t\t<meta property=\"article:publisher\" content=\"https:\/\/www.facebook.com\/prohoster\" \/>\n\t\t<meta property=\"article:author\" content=\"https:\/\/www.facebook.com\/prohoster\" \/>\n\t\t<!-- All in One SEO -->\n\n","aioseo_head_json":{"title":"\ud83e\udd47DataGovernance saj\u00e1t er\u0151forr\u00e1saival | ProHoster","description":"Hell\u00f3, Habr! Az adatok a v\u00e1llalat leg\u00e9rt\u00e9kesebb eszk\u00f6zei. Ezt szinte minden digit\u00e1lis orient\u00e1ci\u00f3val rendelkez\u0151 v\u00e1llalat kijelenti.","canonical_url":"https:\/\/prohoster.info\/hu\/blog\/administrirovanie\/datagovernance-svoimi-silami","robots":"max-image-preview:large","keywords":"","webmasterTools":{"miscellaneous":""},"schema":null,"og:locale":"hu_HU","og:site_name":"ProHoster | \u041a\u0443\u043f\u0438\u0442\u044c \u043d\u0430\u0434\u0435\u0436\u043d\u044b\u0439 \u0445\u043e\u0441\u0442\u0438\u043d\u0433 \u0434\u043b\u044f \u0441\u0430\u0439\u0442\u043e\u0432 \u0441 \u0437\u0430\u0449\u0438\u0442\u043e\u0439 \u043e\u0442 DDoS, VPS VDS \u0441\u0435\u0440\u0432\u0435\u0440\u044b","og:type":"article","og:title":"\ud83e\udd47DataGovernance \u0441\u0432\u043e\u0438\u043c\u0438 \u0441\u0438\u043b\u0430\u043c\u0438 | ProHoster","og:description":"\u041f\u0440\u0438\u0432\u0435\u0442, \u0425\u0430\u0431\u0440! \u0414\u0430\u043d\u043d\u044b\u0435 \u2014 \u044d\u0442\u043e \u0446\u0435\u043d\u043d\u0435\u0439\u0448\u0438\u0439 \u0430\u043a\u0442\u0438\u0432 \u043a\u043e\u043c\u043f\u0430\u043d\u0438\u0438. \u041e\u0431 \u044d\u0442\u043e\u043c \u0437\u0430\u044f\u0432\u043b\u044f\u0435\u0442 \u0447\u0443\u0442\u044c \u043b\u0438 \u043d\u0435 \u043a\u0430\u0436\u0434\u0430\u044f \u043a\u043e\u043c\u043f\u0430\u043d\u0438\u044f \u0441 \u0446\u0438\u0444\u0440\u043e\u0432\u044b\u043c \u0443\u043a\u043b\u043e\u043d\u043e\u043c.","og:url":"https:\/\/prohoster.info\/hu\/blog\/administrirovanie\/datagovernance-svoimi-silami","og:image":"https:\/\/prohoster.info\/wp-content\/uploads\/2021\/11\/logo-350.jpg","og:image:secure_url":"https:\/\/prohoster.info\/wp-content\/uploads\/2021\/11\/logo-350.jpg","og:image:width":350,"og:image:height":350,"article:published_time":"2020-04-12T11:42:52+00:00","article:modified_time":"2020-04-12T11:42:52+00:00","article:publisher":"https:\/\/www.facebook.com\/prohoster","article:author":"https:\/\/www.facebook.com\/prohoster"},"aioseo_meta_data":{"post_id":"77649","title":null,"description":null,"keywords":null,"keyphrases":null,"primary_term":null,"canonical_url":null,"og_title":null,"og_description":null,"og_object_type":"default","og_image_type":"default","og_image_url":null,"og_image_width":null,"og_image_height":null,"og_image_custom_url":null,"og_image_custom_fields":null,"og_video":null,"og_custom_url":null,"og_article_section":null,"og_article_tags":null,"twitter_use_og":false,"twitter_card":"default","twitter_image_type":"default","twitter_image_url":null,"twitter_image_custom_url":null,"twitter_image_custom_fields":null,"twitter_title":null,"twitter_description":null,"schema":{"blockGraphs":[],"customGraphs":[],"default":{"data":{"Article":[],"Course":[],"Dataset":[],"FAQPage":[],"Movie":[],"Person":[],"Product":[],"ProductReview":[],"Car":[],"Recipe":[],"Service":[],"SoftwareApplication":[],"WebPage":[]},"graphName":"","isEnabled":true},"graphs":[]},"schema_type":null,"schema_type_options":null,"pillar_content":false,"robots_default":true,"robots_noindex":false,"robots_noarchive":false,"robots_nosnippet":false,"robots_nofollow":false,"robots_noimageindex":false,"robots_noodp":false,"robots_notranslate":false,"robots_max_snippet":null,"robots_max_videopreview":null,"robots_max_imagepreview":"large","priority":null,"frequency":null,"local_seo":null,"seo_analyzer_scan_date":null,"breadcrumb_settings":null,"limit_modified_date":false,"reviewed_by":null,"ai":null,"created":"2021-02-28 17:14:22","updated":"2022-10-01 08:42:42","focus_keyword":null,"additional_keywords":null,"truseo_locale":null},"gt_translate_keys":[{"key":"link","format":"url"}],"_links":{"self":[{"href":"https:\/\/prohoster.info\/hu\/wp-json\/wp\/v2\/posts\/77649","targetHints":{"allow":["GET"]}}],"collection":[{"href":"https:\/\/prohoster.info\/hu\/wp-json\/wp\/v2\/posts"}],"about":[{"href":"https:\/\/prohoster.info\/hu\/wp-json\/wp\/v2\/types\/post"}],"author":[{"embeddable":true,"href":"https:\/\/prohoster.info\/hu\/wp-json\/wp\/v2\/users\/1"}],"replies":[{"embeddable":true,"href":"https:\/\/prohoster.info\/hu\/wp-json\/wp\/v2\/comments?post=77649"}],"version-history":[{"count":0,"href":"https:\/\/prohoster.info\/hu\/wp-json\/wp\/v2\/posts\/77649\/revisions"}],"wp:featuredmedia":[{"embeddable":true,"href":"https:\/\/prohoster.info\/hu\/wp-json\/wp\/v2\/media\/77650"}],"wp:attachment":[{"href":"https:\/\/prohoster.info\/hu\/wp-json\/wp\/v2\/media?parent=77649"}],"wp:term":[{"taxonomy":"category","embeddable":true,"href":"https:\/\/prohoster.info\/hu\/wp-json\/wp\/v2\/categories?post=77649"},{"taxonomy":"post_tag","embeddable":true,"href":"https:\/\/prohoster.info\/hu\/wp-json\/wp\/v2\/tags?post=77649"}],"curies":[{"name":"wp","href":"https:\/\/api.w.org\/{rel}","templated":true}]}}