Nahoana ny banky no mila AIOps sy fanaraha-maso elo, na inona no iorenan'ny fifandraisan'ny mpanjifa?

Tao amin'ny boky Habré, efa nanoratra momba ny traikefako tamin'ny fananganana fiaraha-miasa amin'ny ekipako aho (eto miresaka momba ny fomba fanaovana fifanarahana fiaraha-miasa rehefa manomboka orinasa vaovao mba tsy hikorontana ny orinasa). Ary ankehitriny dia te hiresaka momba ny fomba hananganana fiaraha-miasa amin'ny mpanjifa aho, satria raha tsy misy azy ireo dia tsy hisy na inona na inona hisaraka. Manantena aho fa ity lahatsoratra ity dia ho ilaina ho an'ny startups izay manomboka mivarotra ny vokatra amin'ny orinasa lehibe.

Mitady fanombohana antsoina hoe MONQ Digital lab aho amin'izao fotoana izao, izay amolavolanay sy ny ekipako vokatra ho an'ny automatique ny dingan'ny fanohanana sy fampandehanana ny IT orinasa. Tsy asa mora ny fidirana an-tsena ary nanomboka tamin'ny enti-mody kely izahay, nandalo ireo manam-pahaizana momba ny tsena, ireo mpiara-miombon'antoka ary nanao fizarana tsena. Ny fanontaniana lehibe indrindra dia ny fahatakarana hoe "ny fanaintainan'iza no azontsika sitranina tsara?"

Ny banky dia niditra tao amin'ny fizarana TOP 3. Ary mazava ho azy, ny voalohany amin'ny lisitra dia Tinkoff sy Sberbank. Rehefa nitsidika ireo manam-pahaizana momba ny tsenan'ny banky izahay dia nilaza izy ireo hoe: ampidiro any ny vokatrao, ary hisokatra ny lalana mankany amin'ny tsenan'ny banky. Niezaka niditra tany sy tany izahay, saingy niandry anay tao amin'ny Sberbank ny tsy fahombiazana, ary ireo lehilahy avy any Tinkoff dia nanjary nisokatra kokoa tamin'ny fifandraisana mamokatra tamin'ny fanombohana Rosiana (angamba noho ny Sber tamin'izany fotoana izany. nividy efa ho iray miliara amin'ireo mpifaninana tandrefana). Tao anatin'ny iray volana dia nanomboka tetikasa andrana izahay. Ahoana no nitrangan'izany, vakio.

Niatrika olana momba ny fampandehanana sy ny fanaraha-maso nandritra ny taona maro izahay, ankehitriny dia mampihatra ny vokatray izahay amin'ny sehatra ho an'ny daholobe, amin'ny fiantohana, amin'ny banky, amin'ny orinasam-pifandraisan-davitra, ny fampiharana iray dia tamin'ny fiaramanidina iray (talohan'ny tetikasa, tsy nanao izany izahay. eritrereto fa indostria miankina amin'ny IT ny fiaramanidina, ary manantena izahay ankehitriny, na dia eo aza ny COVID, fa hipoitra sy hiainga ny orinasa).

Ny vokatra ataonay dia an'ny rindrambaiko orinasa, ny fizarana AIOps (Artificial Intelligence for IT Operations, na ITOps). Ny tanjona fototra amin'ny fampiharana ireo rafitra toy ny haavon'ny fahamatorana amin'ny fizotran'ny orinasa dia mitombo:

1. Famonoana afo: fantaro ny tsy fahombiazana, esory ny fampandrenesana amin'ny fako, omeo asa sy zava-nitranga ho an'ireo tompon'andraikitra;
2. Ampitomboy ny fahombiazan'ny serivisy IT: mampihena ny fotoana hamahana ny zava-nitranga, manondro ny anton'ny tsy fahombiazana, mampitombo ny mangarahara ny sata IT;
3. Ampitomboy ny fahombiazan'ny fandraharahana: mampihena ny habetsaky ny asa tanana, mampihena ny risika, mampitombo ny tsy fivadihan'ny mpanjifa.

Araka ny traikefanay, ny banky dia manana ireto "fanaintainana" manaraka ireto miaraka amin'ny fanaraha-maso mitovy amin'ny fotodrafitrasa IT lehibe rehetra:

• “iza no mahalala hoe”: misy sampana teknika maro, saika manana rafitra fanaraha-maso iray farafahakeliny ny tsirairay, ary manana mihoatra ny iray ny ankamaroany;
• Fampandrenesana “fahoriana moka”: mamoaka an-jatony ny rafitra tsirairay ary manapoaka baomba ireo tompon'andraikitra rehetra miaraka aminy (indraindray koa eo anelanelan'ny sampana). Sarotra ny mitazona tsy tapaka ny fifantohana amin'ny fanaraha-maso isaky ny fampandrenesana, ny fahamehana sy ny maha-zava-dehibe azy ireo noho ny hamaroan'ny isa;
• banky lehibe - ny mpitarika ny sehatra dia tsy maniry ny hanara-maso tsy tapaka ny rafitra ihany, mba hahafantarana hoe aiza no misy ny tsy fahombiazana, fa koa ny tena ody AI - mba hahatonga ny rafitra manara-maso, maminavina ny tenany ary manitsy ny tenany.

Rehefa tonga tany amin'ny fivoriana voalohany tao Tinkoff izahay, dia nilazana avy hatrany fa tsy nanana olana tamin'ny fanaraha-maso izy ireo ary tsy nisy naninona azy ireo, ary ny fanontaniana lehibe dia ny hoe: "Inona no azontsika atolotra ho an'ireo izay efa mandeha tsara?"

Naharitra ela ny resaka, nifanakalo hevitra momba ny fananganana ny microservices, ny fomba fiasan'ny sampan-draharaha, ny olan'ny fotodrafitrasa saro-pady kokoa, izay tsy dia saro-pady loatra ho an'ny mpampiasa, aiza ny "jamba", ary inona ny tanjon'izy ireo sy ny SLA.

Raha ny marina, ny SLA an'ny banky dia tena mahavariana. Ohatra, mety haharitra minitra vitsy monja ny trangan-javatra misy ny tambazotra XNUMX laharam-pahamehana vao voavaha. Ny vidin'ny hadisoana sy ny fiatoana eto, mazava ho azy, dia mahavariana.

Vokatr'izany dia nahita sehatra maromaro fiaraha-miasa izahay:

1. Ny dingana voalohany dia ny fanaraha-maso elo mba hampitombo ny hafainganam-pandehan'ny famahana ny tranga
2. Ny dingana faharoa dia ny automatique ny fizotran'ny fampihenana ny risika sy ny fampihenana ny fandaniana amin'ny fampitomboana ny departemanta IT.

Maro ny “petsy fotsy” azo holokoina amin'ny loko mamirapiratra amin'ny fampandrenesana raha tsy amin'ny alàlan'ny fanodinana fampahalalana avy amin'ny rafitra fanaraha-maso maromaro, satria tsy azo atao ny maka ny metrika mivantana; nilaina ihany koa ny fametrahana ny angon-drakitra avy amin'ny rafitra fanaraha-maso samihafa amin'ny "ecran iray" mba hilamina. mba hahatakarana ny sary ankapobeny ny zava-nitranga. "Elo" dia mety amin'ity asa ity ary nahafeno ireo fepetra ireo izahay avy eo.

Ny tena zava-dehibe, araka ny hevitray, amin'ny fifandraisana amin'ny mpanjifa dia ny fahamarinana. Taorian'ny resadresaka voalohany sy ny kajy ny vidin'ny fahazoan-dàlana dia voalaza fa satria ambany dia ambany ny vidiny, dia mety ho mendrika ny hividy fahazoan-dàlana avy hatrany (raha ampitahaina amin'ny Dynatrace Klyuch-Astrom avy amin'ny lahatsoratra etsy ambony momba ny banky maitso, ny anay Ny fahazoan-dàlana dia tsy ampahatelon'ny arivo tapitrisa, fa 12 arivo roubles isam-bolana ho an'ny 1 gigabyte, ho an'ny Sber dia lafo imbetsaka ny vidiny). Nolazainay tamin’izy ireo avy hatrany anefa izay anananay sy izay tsy anananay. Angamba ny solontenan'ny varotra avy amin'ny integrator lehibe iray dia afaka miteny hoe "eny, afaka manao ny zava-drehetra izahay, mazava ho azy fa mividy ny fahazoan-dàlanay", saingy nanapa-kevitra ny hametraka ny karatray rehetra eo ambony latabatra izahay. Tamin'ny fotoana nanombohana, ny boaty dia tsy nampidirina tamin'ny Prometheus, ary efa havoaka ny dikan-teny vaovao misy subsystem automatique, saingy tsy mbola nalefanay tamin'ny mpanjifa izany.

Nanomboka ny tetikasa pilotra, voafaritra ny fetrany ary nomena 2 volana izahay. Ny asa lehibe dia:

• manomana dikan-teny vaovao amin'ny sehatra ary apetraho ao amin'ny fotodrafitrasa ny banky
• mampifandray rafitra fanaraha-maso 2 (Zabbix sy Prometheus);
• mandefa fampandrenesana amin'ireo tompon'andraikitra ao amin'ny Slack sy amin'ny SMS;
• mihazakazaka autohealing scripts.

Ny volana voalohany amin'ny tetikasa mpanamory dia lany amin'ny fanomanana dikan-teny vaovao amin'ny sehatra amin'ny fomba faran'izay haingana ho an'ny filan'ny tetikasa mpanamory. Ny dikan-teny vaovao avy hatrany dia misy ny fampidirana miaraka amin'ny Prometheus sy ny fanasitranana mandeha ho azy. Noho ny ekipam-pampandrosoanay dia tsy natory nandritra ny alina maromaro izy ireo, fa namoaka izay nampanantenainy nefa tsy diso ny fe-potoana ho an'ny fanoloran-tena hafa natao teo aloha.

Raha teo am-pananganana ny mpanamory izahay dia nisedra olana vaovao mety hanakatona ny tetikasa mialoha ny fandaharam-potoana: handefa fanairana amin'ny iraka avy hatrany sy amin'ny alàlan'ny SMS, mila fifandraisana miditra sy mivoaka amin'ny mpizara Microsoft Azure izahay (tamin'izany fotoana izany dia nampiasa ity sehatra ity izahay. handefa fampandrenesana amin'ny Slack) sy SMS serivisy fandefasana ivelany. Saingy tamin'ity tetikasa ity dia nifantoka manokana ny fiarovana. Araka ny politikan'ny banky dia tsy azo sokafana na inona na inona toe-javatra toy izany. Tsy maintsy niasa tamin'ny loop mihidy ny zava-drehetra. Natolotra izahay hampiasa ny API amin'ny serivisy anatiny manokana izay mandefa fampandrenesana amin'ny Slack sy amin'ny alàlan'ny SMS, saingy tsy nanana fahafahana mampifandray ireo serivisy toy izany ivelan'ny boaty izahay.

Nifarana tamin’ny fitadiavana vahaolana ny takariva niarahana tamin’ny ekipan’ny fampandrosoana. Rehefa avy nitsidika ny backlog izahay dia nahita asa iray izay tsy nanananay fotoana sy laharam-pahamehana - ny hamorona rafitra plug-in mba hahafahan'ny ekipa fampiharana na ny mpanjifa manoratra fanampiny, manitatra ny fahaizan'ny sehatra.

Saingy nanana iray volana katroka tavela izahay, izay tsy maintsy nametrahanay ny zava-drehetra, nanamboatra ary nametraka automatique.

Araka ny voalazan'i Sergei, lehiben'ny mpanao mari-trano, dia mila iray volana farafahakeliny ny fampiharana ny rafitra plug-in.

Tsy nanam-potoana izahay...

Tsy nisy afa-tsy vahaolana iray ihany - mandehana any amin'ny mpanjifa ary lazao ny zava-drehetra amin'ny maha-izy azy. Resaho miaraka ny fiovan'ny fe-potoana. Ary nahomby izany. Nomena 2 herinandro fanampiny izahay. Nanana fe-potoana manokana sy adidy anatiny hanehoana vokatra ihany koa izy ireo, saingy nanana 2 herinandro famandrihana. Amin'ny farany dia mametraka ny zava-drehetra amin'ny tsipika izahay. Tsy azo natao ny nanakorontana. Nahitam-bokany indray ny fahamarinana sy ny fiaraha-miasa.

Vokatry ny mpanamory dia nisy vokatra ara-teknika lehibe sy fehin-kevitra azo:

Nosedrainay ny fiasa vaovao amin'ny fanodinana fampandrenesana

Ny rafitra napetraka dia nanomboka nahazo fampandrenesana avy amin'ny Prometheus ary natambatra azy ireo. Ny fampandrenesana momba ny olana avy amin'ny mpanjifa Prometheus dia manidina isaky ny 30 segondra (tsy mandeha ny fanakambanana amin'ny fotoana), ary nanontany tena izahay raha azo atao ny manangona azy ireo ao amin'ny "elo" mihitsy. Hita fa azo atao izany - ny fametrahana ny fanodinana fampandrenesana ao amin'ny lampihazo dia ampiharina amin'ny script. Izany dia ahafahana mampihatra ny lojika rehetra amin'ny fanodinana azy ireo. Efa nampihatra lojika mahazatra amin'ny sehatra amin'ny endrika môdely izahay - raha tsy te hamorona zavatra ho anao manokana ianao dia afaka mampiasa iray efa vita.

"Synthetic trigger" interface tsara. Fametrahana fanodinana fampandrenesana avy amin'ny rafitra fanaraha-maso mifandray

Namboarina ny toetry ny "fahasalamana" ny rafitra

Mifototra amin'ny fampandrenesana, noforonina ny hetsika fanaraha-maso izay nisy fiantraikany tamin'ny fahasalaman'ny singa fanamafisam-peo (CU). Mampihatra modely tolotra loharanon-karena (RSM) izahay, izay afaka mampiasa CMDB anatiny na mampifandray iray ivelany - nandritra ny tetikasa mpanamory dia tsy nampifandray ny CMDB azy ny mpanjifa.

Interface amin'ny fiaraha-miasa amin'ny maodely tolotra loharanon-karena. Pilot RSM.

Eny, raha ny marina, ny mpanjifa dia manana efijery fanaraha-maso tokana, izay ahitana hetsika avy amin'ny rafitra samihafa. Amin'izao fotoana izao, rafitra roa no mifandray amin'ny "elo" - Zabbix sy Prometheus, ary rafitra fanaraha-maso anatiny ny sehatra.

Anaty interface. Efijery fanaraha-maso tokana.

Natomboka ny automation process

Ny hetsika fanaraha-maso dia nahatonga ny fanombohana hetsika efa nomanina mialoha - fandefasana fampandrenesana, sora-baventy mandeha, fisoratana anarana/fampivoarana tranga - tsy notsaraina tamin'ity mpanjifa manokana ity ity farany, satria tao amin'ny tetikasa pilot dia tsy nisy ny fampidirana ny biraon'ny serivisy.

Fifandraisana eo amin'ny sehatry ny hetsika. Alefaso ny fanairana amin'ny Slack ary atsangano indray ny mpizara.

Fampiasana vokatra nitarina

Rehefa miresaka momba ny script automatique, dia nangataka fanohanana bash sy interface iray ahafahan'ireo script ireo azo amboarina tsara ny mpanjifa. Ny dikan-teny vaovao dia nahavita kely kokoa (ny fahafahana manoratra fananganana lojika feno amin'ny Lua miaraka amin'ny fanohanan'ny cURL, SSH ary SNMP) ary fampiharana fampiharana izay ahafahanao mitantana ny tsingerin'ny fiainan'ny script (mamorona, manova, mifehy ny dikan-teny). , vonoy ary arsiva).

Interface miasa amin'ny script autohealing. Ny script reboot server amin'ny SSH.

Fehiny lehibe

Nandritra ny mpanamory dia noforonina ihany koa ny tantaran'ny mpampiasa izay manatsara ny fampiasa ankehitriny ary mampitombo ny sanda ho an'ny mpanjifa, ireto ny sasany amin'izy ireo:

• mampihatra ny fahafahana mamindra ny fari-piainana mivantana avy amin'ny fanairana mankany amin'ny script autohealing;
• ampio fanomezan-dàlana amin'ny sehatra amin'ny alàlan'ny Active Directory.

Ary nahazo fanamby eran-tany bebe kokoa izahay - "hanangana" ny vokatra miaraka amin'ny fahaiza-manao hafa:

• fanorenana mandeha ho azy ny maodely ressource-service mifototra amin'ny ML, fa tsy fitsipika sy mpiasa (angamba ny fanamby lehibe ankehitriny);
• fanohanana amin'ny fiteny fanoratana sy lojika fanampiny (ary JavaScript izany).

Amin'ny hevitro ny tena zavadehibeZavatra roa no asehon'ity mpanamory ity:

1. Ny fiaraha-miombon'antoka amin'ny mpanjifa no fanalahidin'ny fahombiazana, rehefa miorina amin'ny fahamarinana sy ny fisokafana ny fifandraisana mahomby, ary ny mpanjifa dia lasa anisan'ny ekipa iray izay mahatratra vokatra lehibe ao anatin'ny fotoana fohy.
2. Na ahoana na ahoana dia tsy ilaina ny "mampifanaraka" sy manangana "tehina" - vahaolana amin'ny rafitra ihany. Tsara kokoa ny mandany fotoana kely kokoa, fa manaova vahaolana rafitra izay hampiasain'ny mpanjifa hafa. Teny an-dalana, izany no nitranga, ny rafitra plugin sy ny fanafoanana ny fiankinan-doha amin'ny Azure dia nanome lanja fanampiny ho an'ny mpanjifa hafa (hello, Federal Law 152).

Source: www.habr.com