Hai Habr!
Data shine mafi girman kadari na kamfani. Kusan kowane kamfani mai mayar da hankali na dijital yana bayyana wannan. Yana da wuya a yi jayayya da wannan: ba a gudanar da babban taron IT ba tare da tattauna hanyoyin sarrafawa, adanawa da sarrafa bayanai ba.
Bayanai suna zuwa mana daga waje, suma ana samar da su a cikin kamfanin, kuma idan muka yi magana game da bayanai daga kamfanin sadarwa, to ga ma'aikatan cikin gida wannan wurin ajiyar bayanai ne game da abokin ciniki, abubuwan da yake so, dabi'unsa, da inda yake. Tare da ingantaccen bayanin martaba da rarrabuwa, tayin talla ya fi tasiri. Duk da haka, a aikace, ba duk abin da yake da ja ba. Bayanan da kamfanoni ke tarawa na iya zama ba tare da bege ba, mai sake yin aiki, maimaituwa, ko wanzuwar kowa ba a san shi ba sai kunkuntar da'irar masu amfani. ¯_(ツ) _/
A cikin kalma, dole ne a sarrafa bayanai yadda ya kamata - sai kawai zai zama kadari wanda ke kawo fa'idodi na gaske da riba ga kasuwancin. Abin takaici, warware matsalolin sarrafa bayanai na buƙatar shawo kan sarƙaƙƙiya da yawa. Suna da yawa saboda duka gadon tarihi a cikin nau'i na "zoos" na tsarin da kuma rashin tsari guda ɗaya da hanyoyin gudanar da su. Amma menene ma'anar "kore bayanai"?
Wannan shi ne ainihin abin da za mu yi magana a kai a ƙarƙashin yanke, da kuma yadda tarin tushen buɗe ido ya taimaka mana.
Manufar dabarun sarrafa bayanai (DG) an riga an san shi sosai a cikin kasuwar Rasha, kuma manufofin da kasuwancin da aka cimma a sakamakon aiwatar da shi sun bayyana a sarari kuma a sarari. Kamfaninmu ba banda bane kuma ya sanya kansa aikin gabatar da manufar sarrafa bayanai.
To daga ina muka fara? Da farko, mun kafa maƙasudin maƙasudai ga kanmu:
- Ci gaba da samun damar bayanan mu.
- Tabbatar da gaskiyar tsarin rayuwar bayanan.
- Samar da masu amfani da kamfani tare da daidaito, daidaiton bayanai.
- Samar da masu amfani da kamfani da ingantattun bayanai.
A yau, akwai dozin kayan aikin ajin Gudanar da Bayanai akan kasuwar software.
Amma bayan cikakken bincike da nazarin hanyoyin magance, mun rubuta wasu maganganu masu mahimmanci ga kanmu:
- Yawancin masana'antun suna ba da cikakkiyar saiti na mafita, waɗanda a gare mu ba su da yawa kuma suna kwafin ayyukan da ke akwai. Bugu da ƙari, tsada dangane da albarkatun, haɗin kai cikin yanayin IT na yanzu.
- An tsara ayyukan da keɓancewa don masu fasaha, ba masu amfani da ƙarshen kasuwanci ba.
- Ƙananan rayuwa na samfurori da rashin nasarar aiwatarwa akan kasuwar Rasha.
- Babban farashin software da ƙarin tallafi.
Sharuɗɗa da shawarwarin da aka bayyana a sama game da shigo da software don kamfanonin Rasha sun shawo kan mu mu matsa zuwa ci gaban namu akan tarin buɗaɗɗen tushe. Dandalin da muka zaba shine Django, tsarin kyauta kuma buɗaɗɗen tushe da aka rubuta cikin Python. Kuma ta haka ne muka gano mahimman kayayyaki waɗanda za su ba da gudummawa ga manufofin da aka ambata a sama:
- Rajista na rahotanni.
- Kamus na kasuwanci.
- Module don bayyana sauye-sauyen fasaha.
- Module don bayyana yanayin rayuwar bayanai daga tushen zuwa kayan aikin BI.
- Tsarin sarrafa ingancin bayanai.
Rajista na rahotanni
Dangane da sakamakon binciken cikin gida a cikin manyan kamfanoni, lokacin da ake warware matsalolin da ke da alaƙa da bayanai, ma'aikata suna kashe 40-80% na lokacin neman su. Sabili da haka, mun sanya kanmu aikin yin buɗaɗɗen bayanai game da rahotannin da suka kasance a baya kawai ga abokan ciniki. Don haka, muna rage lokacin samar da sabbin rahotanni da tabbatar da dimokiradiyyar bayanai.
Rijistar bayar da rahoto ta zama taga bayar da rahoto guda ɗaya ga masu amfani da ciki daga yankuna daban-daban, sassan, da sassa daban-daban. Yana ƙarfafa bayanai kan sabis ɗin bayanan da aka ƙirƙira a cikin ma'ajiyar kamfanoni da yawa na kamfanin, kuma akwai da yawa daga cikinsu a cikin Rostelecom.
Amma rajista ba kawai busasshen jerin rahotannin da aka ci gaba ba ne. Ga kowane rahoto, muna ba da bayanan da ake buƙata don mai amfani don sanin kansu da shi:
- taƙaitaccen bayanin rahoton;
- zurfin samun bayanai;
- sashin abokin ciniki;
- kayan aikin gani;
- sunan ajiyar kamfani;
- bukatun aikin kasuwanci;
- hanyar haɗi zuwa rahoton;
- hanyar haɗi zuwa aikace-aikacen don samun dama;
- matsayin aiwatarwa.
Ana samun ƙididdigar matakin amfani don rahotanni, kuma ana lissafin rahotanni a saman jerin dangane da ƙididdigar log dangane da adadin masu amfani na musamman. Kuma ba haka ba ne. Bugu da kari ga general halaye, mun kuma bayar da cikakken bayanin na sifa abun da ke ciki na rahotanni tare da misalai na dabi'u da kuma hanyoyin lissafi. Irin wannan cikakken bayani nan da nan yana ba mai amfani amsa ko rahoton yana da amfani a gare shi ko a'a.
Haɓaka wannan tsarin ya kasance muhimmin mataki a cikin tsarin dimokraɗiyya na bayanai kuma yana rage lokacin da ake ɗauka don nemo bayanan da ake buƙata. Baya ga rage lokacin bincike, adadin buƙatun ga ƙungiyar tallafi don ba da shawarwari kuma ya ragu. Ba shi yiwuwa a lura da wani sakamako mai fa'ida wanda muka samu ta hanyar haɓaka haɗe-haɗen rajistar rahotanni - hana haɓaka rahotannin kwafi na sassan tsarin daban-daban.
Kamus na kasuwanci
Duk kun san cewa ko da a cikin kamfani ɗaya, kasuwancin suna magana da harsuna daban-daban. Ee, suna amfani da kalmomi iri ɗaya, amma suna nufin abubuwa daban-daban. An tsara ƙamus na kasuwanci don magance wannan matsala.
A gare mu, ƙamus na kasuwanci ba littafin tunani ba ne kawai tare da bayanin sharuɗɗa da hanyoyin lissafi. Wannan cikakken yanayi ne don haɓakawa, yarda da yarda da kalmomi, gina dangantaka tsakanin sharuɗɗa da sauran kadarorin bayanai na kamfanin. Kafin shigar da ƙamus na kasuwanci, lokaci dole ne ya bi duk matakan amincewa tare da abokan cinikin kasuwanci da cibiyar ingancin bayanai. Sai kawai bayan wannan ya zama samuwa don amfani.
Kamar yadda na rubuta a sama, bambancin wannan kayan aiki shine cewa yana ba da damar haɗi daga matakin lokacin kasuwanci zuwa takamaiman rahoton mai amfani wanda aka yi amfani da shi, da kuma matakin abubuwan bayanan bayanan jiki.
Wannan yana yiwuwa ta hanyar amfani da masu gano kalmomin ƙamus a cikin cikakken bayanin rahotannin rajista da bayanin abubuwan bayanai na zahiri.
A halin yanzu, fiye da sharuɗɗan 4000 an fayyace kuma an amince da su a cikin ƙamus. Amfani da shi yana sauƙaƙa da saurin aiwatar da buƙatun masu shigowa don canje-canje a tsarin bayanan kamfanin. Idan an riga an aiwatar da alamar da ake buƙata a cikin kowane rahoto, nan da nan mai amfani zai ga saitin rahotannin da aka shirya inda ake amfani da wannan alamar, kuma za su iya yanke shawara kan ingantaccen sake amfani da ayyukan da ke akwai ko ƙaramin gyare-gyare, ba tare da farawa ba. sabbin buƙatun don haɓaka sabon rahoto.
Module don bayyana sauye-sauyen fasaha da DataLineage
Menene waɗannan kayayyaki, kuna tambaya? Bai isa kawai aiwatar da Rijistar Rahoto da ƙamus ba; ya zama dole a ƙaddamar da duk sharuɗɗan kasuwanci akan ƙirar bayanan zahiri. Don haka, mun sami damar kammala aikin samar da tsarin rayuwar bayanai daga tsarin tushe zuwa hangen nesa na BI ta kowane yadudduka na ma'ajiyar bayanai. A takaice dai, gina DataLineage.
Mun ƙirƙira hanyar sadarwa bisa tsarin da aka yi amfani da shi a baya a cikin kamfani don kwatanta dokoki da dabaru na sauya bayanai. Ana shigar da bayanai iri ɗaya ta hanyar mu'amala kamar da, amma ma'anar kalmar ganowa daga ƙamus na kasuwanci ya zama buƙatu. Wannan shine yadda muke gina haɗin gwiwa tsakanin kasuwanci da yadudduka na zahiri.
Wanene yake bukata? Menene kuskuren tsohon tsarin da kuka yi aiki dashi tsawon shekaru da yawa? Nawa ne farashin aiki don samar da buƙatu ya karu? Dole ne mu magance irin waɗannan tambayoyin yayin aiwatar da kayan aiki. Amsoshin anan suna da sauƙi - duk muna buƙatar wannan, ofishin bayanan kamfaninmu da masu amfani da mu.
Lalle ne, ma'aikata sun daidaita; da farko, wannan ya haifar da karuwar farashin aiki don shirya takardun, amma mun warware wannan batu. Kwarewa, ganowa da inganta wuraren matsala sun yi aikinsu. Mun cimma babban abu - mun inganta ingancin abubuwan da aka haɓaka. Filayen wajibai, littattafan tunani guda ɗaya, abubuwan shigar da bayanai, abubuwan da aka gina a ciki - duk wannan ya ba da damar haɓaka ingancin kwatancin canji. Mun ƙaura daga aikin ba da rubutun a matsayin buƙatun ci gaba da kuma ilimin da aka raba wanda kawai ga ƙungiyar ci gaba. Bayanan metadata da aka samar da mahimmanci yana rage lokacin da ake buƙata don gudanar da bincike na koma baya kuma yana ba da ikon tantance tasirin canje-canje da sauri akan kowane yanki na yanayin IT (rahoton nunin, tarawa, tushe).
Menene wannan ya yi da talakawa masu amfani da rahotanni, menene fa'idodin a gare su? Godiya ga ikon gina DataLineage, masu amfani da mu, har ma da waɗanda ke nesa da SQL da sauran yarukan shirye-shirye, suna karɓar bayanai da sauri game da tushe da abubuwa a kan tushen da aka samar da takamaiman rahoto.
Module Kula da Ingancin Bayanai
Duk abin da muka yi magana game da shi a sama dangane da tabbatar da gaskiyar bayanai ba shi da mahimmanci ba tare da fahimtar cewa bayanan da muke ba masu amfani daidai ba ne. Ɗaya daga cikin mahimman abubuwan ra'ayinmu na Gudanar da Bayanai shine tsarin sarrafa ingancin bayanai.
A halin yanzu, wannan kasida ce ta rajistan ayyukan da aka zaɓa. Manufar nan take don haɓaka samfura shine faɗaɗa jerin abubuwan dubawa da haɗawa tare da rajistar rahoto.
Me zai ba kuma wa? Mai amfani na ƙarshe na rajista zai sami damar samun bayanai game da shirye-shiryen da ainihin kwanakin shirye-shiryen rahoton, sakamakon binciken da aka kammala tare da kuzari, da bayanai kan tushen da aka ɗora a cikin rahoton.
A gare mu, tsarin ingancin bayanai da aka haɗa cikin ayyukanmu shine:
- Samuwar tsammanin abokin ciniki da sauri.
- Yin yanke shawara kan ƙarin amfani da bayanai.
- Samun saiti na farko na maki matsala a farkon matakan aiki don haɓaka ingantaccen sarrafawa na yau da kullun.
Tabbas, waɗannan sune matakan farko na gina cikakken tsarin sarrafa bayanai. Amma muna da tabbacin cewa kawai ta hanyar yin wannan aikin da gangan, ƙaddamar da ƙaddamar da kayan aikin Gudanar da Bayanai a cikin tsarin aiki, za mu samar da abokan cinikinmu da abun ciki na bayanai, babban matakin amincewa da bayanan, nuna gaskiya a cikin karɓar su da kuma ƙara saurin ƙaddamarwa. sabon ayyuka.
Tawagar DataOffice
source: www.habr.com