Hey Habr!
Data jẹ dukia ile-iṣẹ ti o niyelori julọ. Fere gbogbo ile-iṣẹ pẹlu idojukọ oni-nọmba n kede eyi. O soro lati jiyan pẹlu eyi: kii ṣe apejọ IT pataki kan ṣoṣo ti o waye laisi jiroro awọn isunmọ si iṣakoso, titoju ati ṣiṣe data.
Data wa si wa lati ita, o tun jẹ ipilẹṣẹ laarin ile-iṣẹ naa, ati pe ti a ba sọrọ nipa data lati ile-iṣẹ telecom, lẹhinna fun awọn oṣiṣẹ inu eyi jẹ ile-itaja ti alaye nipa onibara, awọn ifẹ rẹ, awọn iwa, ati ipo. Pẹlu profaili to dara ati ipin, awọn ipese ipolowo munadoko julọ. Sibẹsibẹ, ni iṣe, kii ṣe ohun gbogbo jẹ rosy. Awọn data ti awọn ile-iṣẹ fipamọ le jẹ ti igbati ainireti, laiṣe, atunwi, tabi wiwa rẹ jẹ aimọ si ẹnikẹni ayafi Circle dín ti awọn olumulo. ¯_(ツ) _/ ¯
Ni ọrọ kan, data gbọdọ wa ni iṣakoso daradara - nikan lẹhinna yoo di dukia ti o mu awọn anfani gidi ati ere wa si iṣowo naa. Laanu, ipinnu awọn ọran iṣakoso data nilo bibori ọpọlọpọ awọn eka pupọ. Wọn jẹ nipataki nitori itan-akọọlẹ itan mejeeji ni irisi “zoos” ti awọn eto ati aini awọn ilana iṣọkan ati awọn isunmọ si iṣakoso wọn. Ṣugbọn kini o tumọ si lati jẹ “ti a dari data”?
Eyi ni deede ohun ti a yoo sọrọ nipa labẹ gige, bi daradara bi akopọ orisun ṣiṣi ṣe ṣe iranlọwọ fun wa.
Imọye ti iṣakoso data ilana iṣakoso data Isakoso (DG) ti mọ tẹlẹ daradara ni ọja Russia, ati awọn ibi-afẹde ti iṣowo ti o waye nitori abajade imuse rẹ jẹ kedere ati ni gbangba. Ile-iṣẹ wa kii ṣe iyasọtọ ati ṣeto ararẹ iṣẹ-ṣiṣe ti iṣafihan imọran ti iṣakoso data.
Nitorina nibo ni a ti bẹrẹ? Lati bẹrẹ pẹlu, a ṣe agbekalẹ awọn ibi-afẹde pataki fun ara wa:
- Jeki data wa ni wiwọle.
- Rii daju akoyawo ti awọn data lifecycle.
- Pese awọn olumulo ile-iṣẹ ni ibamu, data deede.
- Pese awọn olumulo ile-iṣẹ pẹlu data ijẹrisi.
Loni, awọn irinṣẹ kilasi Alakoso Data mejila mejila wa lori ọja sọfitiwia naa.
Ṣugbọn lẹhin itupalẹ alaye ati iwadi ti awọn ojutu, a ṣe igbasilẹ nọmba awọn asọye pataki fun ara wa:
- Pupọ julọ awọn aṣelọpọ nfunni ni akojọpọ awọn solusan, eyiti o jẹ apọju fun wa ati ṣe ẹda iṣẹ ṣiṣe ti o wa tẹlẹ. Pẹlupẹlu, gbowolori ni awọn ofin ti awọn orisun, iṣọpọ sinu ala-ilẹ IT lọwọlọwọ.
- Iṣẹ ṣiṣe ati wiwo jẹ apẹrẹ fun awọn onimọ-ẹrọ, kii ṣe awọn olumulo ipari iṣowo.
- Oṣuwọn iwalaaye kekere ti awọn ọja ati aini awọn imuse aṣeyọri lori ọja Russia.
- Ga iye owo ti software ati siwaju support.
Awọn ibeere ati awọn iṣeduro ti o sọ loke nipa gbigbewọle sọfitiwia ti sọfitiwia fun awọn ile-iṣẹ Russia gba wa loju lati lọ si idagbasoke tiwa lori akopọ orisun ṣiṣi. Syeed ti a yan ni Django, ọfẹ ati ilana orisun ṣiṣi ti a kọ sinu Python. Ati nitorinaa a ti ṣe idanimọ awọn modulu bọtini ti yoo ṣe alabapin si awọn ibi-afẹde ti a sọ loke:
- Forukọsilẹ ti awọn iroyin.
- Gilosari iṣowo.
- Modulu fun apejuwe awọn iyipada imọ-ẹrọ.
- Modulu fun apejuwe ọna igbesi aye data lati orisun si ọpa BI.
- module Iṣakoso didara data.
Forukọsilẹ ti awọn iroyin
Gẹgẹbi awọn abajade ti awọn iwadii inu inu ni awọn ile-iṣẹ nla, nigbati o ba yanju awọn iṣoro ti o ni ibatan data, awọn oṣiṣẹ lo 40-80% ti akoko wọn lati wa wọn. Nitorina, a ṣeto ara wa ni iṣẹ-ṣiṣe ti ṣiṣe alaye ṣiṣi nipa awọn iroyin ti o wa tẹlẹ ti o wa tẹlẹ fun awọn onibara nikan. Nitorinaa, a dinku akoko fun ṣiṣẹda awọn ijabọ tuntun ati rii daju tiwantiwa ti data.
Iforukọsilẹ iroyin ti di ferese ijabọ ẹyọkan fun awọn olumulo inu lati ọpọlọpọ awọn agbegbe, awọn ẹka, ati awọn ipin. O ṣe idapọ alaye lori awọn iṣẹ alaye ti a ṣẹda ni ọpọlọpọ awọn ibi ipamọ ile-iṣẹ, ati pe ọpọlọpọ ninu wọn wa ni Rostelecom.
Ṣugbọn iforukọsilẹ kii ṣe atokọ gbigbẹ nikan ti awọn ijabọ idagbasoke. Fun ijabọ kọọkan, a pese alaye pataki fun olumulo lati mọ ara wọn pẹlu rẹ:
- apejuwe kukuru ti ijabọ naa;
- ijinle wiwa data;
- onibara apa;
- ohun elo iworan;
- orukọ ibi ipamọ ile-iṣẹ;
- Awọn ibeere iṣẹ-ṣiṣe iṣowo;
- asopọ si iroyin;
- ọna asopọ si ohun elo fun wiwọle;
- ipo imuse.
Awọn atupale ipele lilo wa fun awọn ijabọ, ati pe awọn ijabọ wa ni ipo ni oke atokọ ti o da lori awọn atupale log ti o da lori nọmba awọn olumulo alailẹgbẹ. Ati pe kii ṣe iyẹn. Ni afikun si awọn abuda gbogbogbo, a tun ti pese alaye alaye ti akopọ abuda ti awọn ijabọ pẹlu awọn apẹẹrẹ ti awọn iye ati awọn ọna iṣiro. Iru alaye bẹ lẹsẹkẹsẹ fun olumulo ni idahun boya ijabọ naa wulo fun u tabi rara.
Idagbasoke ti module yii jẹ igbesẹ pataki ni tiwantiwa ti data ati dinku ni pataki akoko ti o gba lati wa alaye ti o nilo. Ni afikun si idinku akoko wiwa, nọmba awọn ibeere si ẹgbẹ atilẹyin lati pese awọn ijumọsọrọ tun ti dinku. Ko ṣee ṣe lati ma ṣe akiyesi abajade iwulo miiran ti a ṣaṣeyọri nipasẹ idagbasoke iforukọsilẹ iṣọkan ti awọn ijabọ - idilọwọ idagbasoke ti awọn ijabọ ẹda ẹda fun oriṣiriṣi awọn ẹya igbekalẹ.
Gilosari iṣowo
Gbogbo rẹ mọ pe paapaa laarin ile-iṣẹ kanna, awọn iṣowo sọ awọn ede oriṣiriṣi. Bẹẹni, wọn lo awọn ọrọ kanna, ṣugbọn wọn tumọ si awọn nkan ti o yatọ patapata. A ṣe apẹrẹ iwe-itumọ iṣowo lati yanju iṣoro yii.
Fun wa, iwe-itumọ iṣowo kii ṣe iwe itọkasi nikan pẹlu apejuwe awọn ofin ati ilana iṣiro. Eyi jẹ agbegbe ti o ni kikun fun idagbasoke, gbigba ati ifọwọsi awọn ọrọ-ọrọ, kikọ awọn ibatan laarin awọn ofin ati awọn ohun-ini alaye miiran ti ile-iṣẹ naa. Ṣaaju titẹ si iwe-itumọ iṣowo, ọrọ kan gbọdọ lọ nipasẹ gbogbo awọn ipele ti ifọwọsi pẹlu awọn alabara iṣowo ati ile-iṣẹ didara data. Nikan lẹhin eyi o wa fun lilo.
Gẹgẹbi Mo ti kọ loke, iyasọtọ ti ọpa yii ni pe o gba awọn asopọ laaye lati ipele ti ọrọ-ọrọ iṣowo si awọn ijabọ olumulo kan pato ninu eyiti o ti lo, bakanna si ipele ti awọn ohun elo data ti ara.
Eyi jẹ ki o ṣee ṣe nipasẹ lilo awọn idamọ ọrọ-itumọ ni alaye alaye ti awọn ijabọ iforukọsilẹ ati apejuwe awọn nkan data data ti ara.
Lọwọlọwọ, diẹ sii ju awọn ofin 4000 ti ni asọye ati ti gba lori ninu Gilosari. Lilo rẹ jẹ irọrun ati yiyara sisẹ awọn ibeere ti nwọle fun awọn ayipada ninu awọn eto alaye ti ile-iṣẹ naa. Ti itọkasi ti o nilo ba ti ni imuse tẹlẹ ninu ijabọ eyikeyi, lẹhinna olumulo yoo rii lẹsẹkẹsẹ ṣeto ti awọn ijabọ ti a ti ṣetan nibiti o ti lo atọka yii, ati pe yoo ni anfani lati pinnu lori ilotunlo imunadoko ti iṣẹ ṣiṣe ti o wa tabi iyipada ti o kere ju, laisi ipilẹṣẹ. titun ibeere fun awọn idagbasoke ti a titun iroyin.
Modulu fun apejuwe awọn iyipada imọ-ẹrọ ati DataLineage
Kini awọn modulu wọnyi, o beere? Ko to lati ṣe imuse Iforukọsilẹ Iroyin ati Gilosari; o tun jẹ dandan lati gbe gbogbo awọn ofin iṣowo sori awoṣe data data ti ara. Nitorinaa, a ni anfani lati pari ilana ti ṣiṣẹda ọna igbesi aye data lati awọn eto orisun si iworan BI nipasẹ gbogbo awọn fẹlẹfẹlẹ ti ile itaja data. Ni awọn ọrọ miiran, kọ DataLineage kan.
A ṣe agbekalẹ wiwo ti o da lori ọna kika ti a lo ni iṣaaju ninu ile-iṣẹ fun apejuwe awọn ofin ati ọgbọn ti iyipada data. Alaye kanna ti wa ni titẹ nipasẹ wiwo bi iṣaaju, ṣugbọn itumọ ti idamọ ọrọ lati inu iwe-itumọ iṣowo ti di ohun pataki ṣaaju. Eyi ni bii a ṣe kọ asopọ laarin iṣowo ati awọn fẹlẹfẹlẹ ti ara.
Tani o nilo rẹ? Kini aṣiṣe pẹlu ọna kika atijọ ti o ṣiṣẹ pẹlu ọdun pupọ? Elo ni awọn idiyele iṣẹ fun ṣiṣe awọn ibeere pọ si? A ni lati koju iru awọn ibeere nigba imuse ti ọpa. Awọn idahun nibi jẹ ohun rọrun - gbogbo wa nilo eyi, ọfiisi data ti ile-iṣẹ wa ati awọn olumulo wa.
Nitootọ, awọn oṣiṣẹ naa ni lati ni ibamu; ni akọkọ, eyi yori si ilosoke diẹ ninu awọn idiyele iṣẹ fun igbaradi awọn iwe, ṣugbọn a ṣeto ọran yii. Iwaṣe, idamo ati iṣapeye awọn agbegbe iṣoro ti ṣe iṣẹ wọn. A ti ṣaṣeyọri ohun akọkọ - a ti ni ilọsiwaju didara awọn ibeere ti o dagbasoke. Awọn aaye dandan, awọn iwe itọkasi iṣọkan, awọn iboju iparada, awọn sọwedowo ti a ṣe sinu - gbogbo eyi jẹ ki o ṣee ṣe lati ni ilọsiwaju didara awọn apejuwe iyipada. A lọ kuro ni iṣe ti fifun awọn iwe afọwọkọ bi awọn ibeere idagbasoke ati imọ ti o pin ti o wa nikan fun ẹgbẹ idagbasoke. Ibi ipamọ data metadata ti ipilẹṣẹ dinku ni pataki akoko ti o nilo lati ṣe itupalẹ ipadasẹhin ati pese agbara lati yara ṣe iṣiro ipa ti awọn ayipada lori eyikeyi Layer ti ala-ilẹ IT (awọn ijabọ iṣafihan, awọn akojọpọ, awọn orisun).
Kini eyi ni lati ṣe pẹlu awọn olumulo lasan ti awọn ijabọ, kini awọn anfani fun wọn? Ṣeun si agbara lati kọ DataLineage, awọn olumulo wa, paapaa awọn ti o jinna si SQL ati awọn ede siseto miiran, gba alaye ni iyara nipa awọn orisun ati awọn nkan lori ipilẹ eyiti ijabọ kan ti ipilẹṣẹ.
Module Iṣakoso Didara Data
Ohun gbogbo ti a ti sọrọ nipa loke ni awọn ofin ti aridaju akoyawo data ni ko pataki lai agbọye pe awọn data ti a fi fun awọn olumulo ni o tọ. Ọkan ninu awọn modulu pataki ti imọran Ijọba data wa jẹ module iṣakoso didara data.
Ni ipele lọwọlọwọ, eyi jẹ atokọ ti awọn sọwedowo fun awọn nkan ti o yan. Ibi-afẹde lẹsẹkẹsẹ fun idagbasoke ọja ni lati faagun atokọ ti awọn sọwedowo ati ṣepọ pẹlu iforukọsilẹ ijabọ.
Kini yoo fun ati tani? Olumulo ipari ti iforukọsilẹ yoo ni iwọle si alaye nipa eto ati awọn ọjọ ti imurasilẹ ti ijabọ, awọn abajade ti awọn sọwedowo ti o pari pẹlu awọn agbara, ati alaye lori awọn orisun ti a kojọpọ sinu ijabọ naa.
Fun wa, module didara data ti a ṣe sinu awọn ilana iṣẹ wa ni:
- Ibiyi kiakia ti awọn ireti alabara.
- Ṣiṣe awọn ipinnu lori lilo siwaju sii ti data.
- Ngba eto alakoko ti awọn aaye iṣoro ni awọn ipele ibẹrẹ ti iṣẹ fun idagbasoke awọn iṣakoso didara deede.
Nitoribẹẹ, iwọnyi ni awọn igbesẹ akọkọ ni kikọ ilana iṣakoso data ni kikun. Ṣugbọn a ni igboya pe nikan nipa ṣiṣe iṣẹ yii ni ipinnu, ni iṣafihan awọn irinṣẹ Isakoso Data sinu ilana iṣẹ, a yoo pese awọn alabara wa pẹlu akoonu alaye, ipele giga ti igbẹkẹle ninu data, akoyawo ninu gbigba wọn ati mu iyara ifilọlẹ pọ si. titun iṣẹ-.
DataOffice Egbe
orisun: www.habr.com