🥇Muxuu bangigu ugu baahan yahay AIOps iyo la socodka dallada, ama maxay yihiin xiriirka macmiilku ku dhisan yahay

Qoraalada Habré, waxaan horeba wax uga qoray waayo-aragnimadayda dhismaha iskaashiga kooxdayda (halkan oo ka hadlaya sidii loo samayn lahaa heshiis iskaashi marka la bilaabayo ganacsi cusub si aanu ganacsigu u burburin). Oo hadda waxaan jeclaan lahaa inaan ka hadlo sida loo dhiso iskaashi lala yeesho macaamiisha, maadaama iyaga la'aantood aysan jirin wax kala go'a. Waxaan rajeynayaa in maqaalkani uu faa'iido u yeelan doono kuwa bilawga ah ee bilaabaya inay ka iibiyaan alaabtooda ganacsiyada waaweyn.

Hadda waxaan madax ka ahay shirkad bilow ah oo la yiraahdo MONQ Digital shaybaadhka, halkaas oo aniga iyo kooxdayda aanu ku samaynayno badeecad si otomaatig ah loogu sameeyo hababka taageerada iyo hawlgelinta IT-ga shirkadda. Gelitaanka suuqa ma aha hawl fudud, waxaanu ku bilownay shaqo-guri yar, waxaanu soo marnay khubaro suuqa ku xeel dheer, bah-wadaagtayada, waxaanu samaynay kala qaybsanaan suuqa. Su'aasha ugu weyn waxay ahayd in la fahmo "xanuunkee ayaan sida ugu fiican u bogsiin karnaa?"

Bangiyadu waxay ka dhigeen TOP 3 qaybood. Dabcan, kuwa ugu horreeya ee liiska waxay ahaayeen Tinkoff iyo Sberbank. Markii aan booqanay khubarada suuqa bangiyada, waxay yiraahdeen: ku baro badeecadaada halkaas, dariiqa suuqa bangiyada ayaa furmi doona. Waxaan isku daynay inaan galno labadaba halkaas iyo halkaas, laakiin guuldarradu waxay nagu sugaysay Sberbank, ragga Tinkoff waxay u noqdeen kuwo aad u furfuran oo xiriir wax soo saar leh la leh shirkado Ruush ah (laga yaabee inay sabab u tahay xaqiiqda Sber wakhtigaas). iibsaday ku dhawaad hal bilyan oo ka mid ah tartamayaashayada Galbeedka). Bil gudaheed waxaan bilownay mashruuc tijaabo ah. Siday wax u dhaceen, akhri.

Sannado badan ayaanu la tacaalnay arrimaha hawlgalka iyo la socodka, hadda waxa aanu fulinayna wax soo saarkayaga qaybaha dawladda, Caymiska, Bangiyada, Shirkadaha Isgaadhsiinta, hal meel oo la hirgeliyey waxa ay ahayd shirkad diyaaradeed (mashruuca ka hor, xataa ma aannu samayn u malayn in duulistu ay ahayd warshad ku tiirsan IT-ga, hadda waxaan runtii rajaynaynaa, in kasta oo COVID, in shirkadu soo bixi doonto oo ay kici doonto).

Alaabta aan samayno waxaa iska leh software-ka ganacsiga, AIOps (Intelligence Artificial for IT Operations, ama ITOps) qaybta. Hadafyada ugu muhiimsan ee hirgelinta nidaamyadan sida heerka qaan-gaarnimada geeddi-socod ee shirkadu waxay kordhisaa:

Deminta dabka: ogow guul-darrooyinka, ka nadiifi qulqulka digniinaha qashinka, u xilsaar hawlaha iyo shilalka kuwa mas'uulka ka ah;
Kordhi hufnaanta adeegga IT: la yareeyo wakhtiga lagu xallinayo shilalka, muuji sababaha guul-darrooyinka, kordhinta hufnaanta heerka IT;
Kordhi wax ku oolnimada ganacsiga: yarayso tirada shaqada gacanta, yarayso khatarta, kordhiso daacadnimada macaamiisha.

Waayo-aragnimadayada, bangiyadu waxay leeyihiin "xanuun" soo socda oo ay la socdaan la socodka guud ee dhammaan kaabayaasha IT-ga ee waaweyn:

"Yaa yaqaan waxa": waxaa jira waaxyo farsamo oo badan, ku dhawaad qof kastaa wuxuu leeyahay ugu yaraan hal nidaam oo kormeer ah, badankooduna waxay leeyihiin wax ka badan hal;
"Swarm kaneecada" ee digniinaha: nidaam kastaa wuxuu abuuraa boqolaal wuxuuna duqeeyaa dhammaan kuwa mas'uulka ka ah iyaga (mararka qaarkood sidoo kale inta u dhaxaysa waaxaha). Way adag tahay in si joogto ah loo ilaaliyo diiradda xakameynta ogeysiis kasta;
bangiyada waaweyn - hoggaamiyeyaasha qaybuhu ma rabaan oo kaliya inay si joogto ah ula socdaan nidaamyadooda, si ay u ogaadaan halka ay ku guuldareystaan, laakiin sidoo kale sixirka dhabta ah ee AI - si ay u sameeyaan nidaamyada is-kormeerka, is-saadaalinta iyo is-sax.

Markii aan nimid shirkii ugu horreeyay ee Tinkoff, isla markiiba waxaa naloo sheegay in aysan wax dhibaato ah ku qabin la socodka waxna aysan waxba u dhimin, su'aasha ugu weyni waxay ahayd: "Maxaan u soo bandhigi karnaa kuwa horeyba u fiicnaaday?"

Wadahadalku wuxuu ahaa mid dheer, waxaan ka wada hadalnay sida adeegyadooda yaryar loo dhiso, sida waaxyadu u shaqeeyaan, dhibaatooyinka kaabayaasha ah ee xasaasiga ah, kuwaas oo aad u nugul isticmaalayaasha, aaway "dhibcaha indhoolaha", iyo maxay yihiin hadafyadooda iyo SLAs.

Jid ahaan, SLAs bangigu runtii waa cajiib. Tusaale ahaan, mudnaanta 1 dhacdo helitaanka shabakad waxay qaadan kartaa oo kaliya dhowr daqiiqo in la xalliyo. Qiimaha qaladka iyo wakhtiga hoos u dhaca halkan, dabcan, waa mid cajiib ah.

Natiijo ahaan, waxaan aqoonsannay dhowr meelood oo iskaashi:

Marxaladda koowaad waa la socodka dallada si loo kordhiyo xawaaraha xallinta shilka
Marxaladda labaad waa habka otomaatiga ah si loo yareeyo khataraha loona yareeyo kharashaadka lagu cabbirayo waaxda IT-ga.

Dhawr "dhibcood oo cad" ah ayaa lagu rinjiyeeyaa midabada dhalaalaya ee digniinta kaliya iyada oo la adeegsanayo macluumaadka laga helo dhowr nidaamyo kormeer ah, maadaama aysan suurtagal ahayn in si toos ah loo qaato qiyaasaha; si loo fahmo sawirka guud ee waxa dhacaya. "Dalladaha" ayaa ku haboon hawshan waxaana buuxinay shuruudahan markaa.

Wax aad u muhiim ah, fikraddayada, xiriirka macaamiisha waa daacadnimo. Ka dib markii wada hadalka iyo xisaabinta ugu horeysay ee kharashka shatiga, waxaa la sheegay in maadaama qiimaha uu yahay mid aad u hooseeya, waxaa laga yaabaa in ay mudan tahay in la iibsado shatiga isla markiiba (marka la barbardhigo Dynatrace Klyuch-Astrom ka maqaalka kor ku xusan ee ku saabsan bangiga cagaaran, our kharashka liisanka ma aha saddex meelood meel hal bilyan, laakiin 12 kun oo rubles bishiiba 1 gigabyte, waayo, Sber waxay ku kici lahayd dhowr jeer ka jaban). Laakiin markiiba waxaanu u sheegnay waxa aanu haysano iyo waxa aanu haysan. Waxaa laga yaabaa in wakiilka iibka ee ka socda isdhexgalka weyn uu yiraahdo "haa, wax walba waan sameyn karnaa, dabcan iibso shatigayaga," laakiin waxaan go'aansanay inaan dhammaan kaararkayaga miiska saarno. Waqtigii la bilaabay, sanduuqayagu ma lahayn isdhexgalka Prometheus, iyo nooc cusub oo leh nidaam hoosaadyo otomaatig ah ayaa ku dhowaa in la sii daayo, laakiin weli uma aan soo rarin macaamiisha.

Mashruucii tijaabada ahaa ayaa bilaabmay, xuduudihiisa ayaa la go’aamiyay, waxaana nala siiyay 2 bilood. Hawlaha ugu muhiimsan waxay ahaayeen:

diyaari nooc cusub oo madal ah oo ku dheji kaabayaasha bangiga
isku xidhka 2 hababka la socodka (Zabbix iyo Prometheus);
U dir ogeysiisyada kuwa mas'uulka ka ah Slack iyo SMS;
ordi qoraalada bogsiinta.

Bishii ugu horeysay ee mashruuca tijaabada ah waxaa lagu kharash gareeyay diyaarinta nooc cusub oo madal ah oo ah qaab aad u degdeg badan baahida mashruuca tijaabada ah. Nooca cusub wuxuu isla markiiba ka mid yahay la-qabsiga Prometheus iyo bogsiinta tooska ah. Waad ku mahadsan tahay kooxdayada horumarinta, ma aysan seexan dhowr habeen, laakiin waxay sii daayeen wixii ay ballanqaadeen iyaga oo aan ka maqnaan waqtiyada kama dambaysta ah ee ballanqaadyada kale ee hore loo sameeyay.

Intii aan diyaarinaynay duuliyaha, waxaan la kulannay dhibaato cusub oo xiri karta mashruuca ka hor jadwalka: si aan u dirno ogeysiisyada fariimaha degdega ah iyo SMS-ka, waxaan u baahnnahay xiriirinta soo socota iyo tan bixisa ee server-yada Microsoft Azure (waqtigaas waxaan isticmaalnay goobtan si loogu diro digniinaha Slack) iyo adeeg dirista dibadeed SMS. Laakiin mashruucan, badbaadadu waxay ahayd diiradda gaarka ah. Sida ku cad siyaasadda bangiga, "godadka" noocan oo kale ah lama furi karo xaalad kasta. Wax walba waxay ku qasbanaadeen inay ka shaqeeyaan wareeg xiran. Waxaa naloo soo bandhigay inaan isticmaalno API-ga adeegyadayada gudaha ee u soo dira digniinaha Slack iyo SMS, laakiin ma aanan helin fursad aan ku xirno adeegyadan oo kale sanduuqa dhexdiisa.

Fiidnimadii dood ay la yeesheen kooxda horumarinta ayaa ku soo idlaatay guul raadin xal. Ka dib markii aan ku xamanay dib-u-dhacii, waxaan helnay hal hawl oo aynaan waligeen u haysan waqti ku filan iyo mudnaanta - si aan u abuurno nidaamka plug-in si kooxaha fulinta ama macmiilku ay naftooda u qoraan add-ons, ballaarinta awooda goobta.

Laakiin waxa noo hadhay bil, taas oo aanu ku qasbanahay in aanu wax walba ku rakibno, habaynno oo aanu geyno automation-ka.

Sida laga soo xigtay Sergei, madaxa naqshadeeye, waxay qaadataa ugu yaraan hal bil si loo hirgeliyo nidaamka fur-in.

Waqti maanu haysan...

Waxaa jiray hal xal - u tag macmiilka oo u sheeg wax walba sida ay yihiin. Si wada jir ah uga wada hadla xilliga kama dambaysta ah. Wayna shaqaysay. Waxa nalagu daray 2 toddobaad oo dheeraad ah. Waxay sidoo kale haysteen waqtiyo kama dambays ah iyo waajibaad gudaha ah si ay u muujiyaan natiijooyinka, laakiin waxay haysteen 2 toddobaad oo kayd ah. Dhammaadka, wax walba waxaan dhignaa khadka. Suurtagal ma ahayn in la khalkhal galiyo. Daacadnimada iyo habka iskaashiga ayaa mar kale faa'iido leh.

Natiijada duuliyaha, dhowr natiijooyin farsamo oo muhiim ah iyo gunaanad ayaa la helay:

Waxaan tijaabinay shaqeynta cusub ee socodsiinta ogeysiisyada

Nidaamka la diray wuxuu bilaabay inuu si sax ah u helo digniinaha Prometheus oo koox u dirto. Ogeysiis ku saabsan dhibaatada macmiilka Prometheus ayaa duulaya 30 ilbiriqsi kasta (ku-ururinta waqtiga lama awoodo), waxaanan la yaabnay haddii ay suurtogal tahay in lagu kooxeeyo "dallada" lafteeda. Waxaa soo baxday in ay suurtagal tahay - dejinta hab-socodka digniinaha ee goobta waxaa lagu hirgeliyaa qoraal. Tani waxay suurtogal ka dhigaysaa in la hirgeliyo ku dhawaad wixii macquul ah ee lagu farsamayn lahaa. Waxaan horeyba u hirgelinay macquulka caadiga ah ee madal qaab qaab-dhismeedka - haddii aadan rabin inaad la timaado wax adiga kuu gaar ah, waxaad isticmaali kartaa mid diyaarsan.

"Synthetic kiciye" interface. Dejinta habaynta digniinaha ka imanaya nidaamyada la socodka ee ku xidhan

Wuxuu dhisay xaaladda "caafimaadka" nidaamka

Iyada oo ku saleysan digniinaha, dhacdooyinka la socodka ayaa la sameeyay kuwaas oo saameeyay caafimaadka unugyada qaabeynta (CUs). Waxaan hirgelineynaa qaabka adeegga kheyraadka (RSM), kaas oo isticmaali kara CMDB gudaha ah ama ku xiri kara mid dibadda ah - inta lagu jiro mashruuca tijaabada macmiilku iskuma xirin CMDB u gaar ah.

Interface-ka la shaqaynta qaabka-adeegga kheyraadka. Duuliye RSM.

Waa hagaag, dhab ahaantii, macmiilku wuxuu ugu dambeyntii leeyahay hal shaashad oo kormeer ah, halkaas oo dhacdooyinka nidaamyada kala duwan ay muuqdaan. Hadda, laba nidaam ayaa ku xiran "dallada" - Zabbix iyo Prometheus, iyo nidaamka kormeerka gudaha ee madal laftiisa.

Isku xirka falanqaynta. Shaashada la socodka hal.

Automation-ka habka la bilaabay

Dhacdooyinka la socodka ayaa kiciyay bilawga ficilada horay loo habeeyey - dirista digniinaha, qoraalada socodsiinta, dhacdooyinka diiwaan gelinta/ kobcinta - kan dambe laguma tijaabin macmiilkan gaarka ah, sababtoo ah Mashruucii tijaabada ahaa ma jirin wax la qabsiga miiska adeegga.

Action settings interface. U dir digniinaha Slack oo dib u kabo seerfarka.

Shaqaynta alaabta oo la fidiyay

Marka laga hadlayo qoraallada otomaatiga ah, macmiilku wuxuu waydiistay taageerada bash iyo interface kaas oo qoraalladan si habboon loo habayn karo. Nooca cusubi wuxuu sameeyay wax yar oo dheeri ah (awoodda lagu qori karo dhismooyinka macquulka ah ee buuxa ee Lua iyadoo la taageerayo cURL, SSH iyo SNMP) iyo shaqeynta la fuliyay oo kuu oggolaaneysa inaad maareyso wareegga nolosha ee qoraalka (abuuro, wax ka beddel, xakamaynta nooca) , tirtir oo kaydi).

Interface-ka la shaqaynta qoraallada bogsiinta iswada Qoraalka Server-ka dib-u-kicinta iyada oo loo marayo SSH.

Natiijooyinka ugu muhiimsan

Intii lagu jiray tijaabada, sheekooyinka isticmaalaha ayaa sidoo kale la abuuray kuwaas oo wanaajiya shaqada hadda jirta oo kordhisa qiimaha macmiilka, kuwani waa qaar ka mid ah:

hirgelin kartida aad u gudbiso doorsoomayaasha si toos ah digniinta una gudbiso qoraalka iswada;
ku dar oggolaanshaha goobta iyada oo loo marayo Hagaha Active.

Oo waxaan helnay caqabado badan oo caalami ah - si aan u "dhisno" alaabta oo leh awoodo kale:

dhismo toos ah oo ah qaabka adeegga kheyraadka ee ku saleysan ML, halkii laga ahaan lahaa xeerarka iyo wakiilada (malaha caqabada ugu weyn hadda);
taageero qoraal dheeri ah iyo luqadaha macquulka ah (tanina waxay noqon doontaa JavaScript).

Fikradayda ugu muhiimsanWaxa uu duuliyahani muujinayaa waa laba arrimood:

Wadashaqeynta macmiilku waa furaha waxtarka, marka isgaarsiin wax ku ool ah lagu dhiso daacadnimo iyo furfurnaan, macmiilkuna wuxuu ka mid noqdaa koox natiijooyin la taaban karo ku gaadha waqti gaaban.
Xaalad kasta oo ay tahay lagama maarmaan ma aha in "la habeeyo" oo la dhiso "qalabka" - kaliya xalalka nidaamka. Way fiicantahay inaad waqti yar ku qaadato, laakiin samee xal nidaam oo ay isticmaali doonaan macaamiisha kale. Jid ahaan, tani waa wixii dhacay, nidaamka plugin iyo baabi'inta ku tiirsanaanta Azure waxay siisay qiimo dheeraad ah macaamiisha kale (hello, Sharciga Federaalka 152).

Source: www.habr.com