Sehlopha sa rona se rata liteko. Slurm e 'ngoe le e' ngoe ha se pheta-pheto e tsitsitseng ea tse fetileng, empa ke ho nahanisisa ka phihlelo le phetoho ho tloha botleng ho ea ho betere. Empa le re nkile qeto ea ho sebelisa sebopeho se secha - ho fa barupeluoa maemo a haufi ka moo ho ka khonehang ho "loana".
Haeba ka bokhutšoanyane re hlalosa seo re se entseng nakong ea thupelo e matla: “Re haha, rea roba, rea lokisa;
rea ithuta." SRE ha e na thuso ea letho ka khopolo feela - ho itloaetsa feela, litharollo tsa 'nete, mathata a nnete.
Barupeluoa ba arotsoe ka lihlopha e le hore moea oa tlhōlisano o matla o se ke oa lumella mang kapa mang ho robala kapa ho qala "Linonyana Tse Halefileng" ho iPhone, ho latela mohlala oa Dmitry Anatolyevich.
Mathata, liphoso, liphoso le mesebetsi li ile tsa fuoa barupeluoa ke baeletsi ba bane. Ivan Kruglov, Moqapi e Moholo oa Booking.com (Netherlands). Ben Tyler, Moqapi e Moholo oa Booking.com (USA). Eduard Medvedev, CTO ho Tungsten Labs (Jeremane). Evgeniy Varavva, moqapi oa kakaretso oa Google (San Francisco).
Ho feta moo, barupeluoa ba arotsoe ka lihlopha 'me ba hlōlisana. E thahasellisa?
Ivan, Ben, Eduard le Evgeniy ba sheba barupeluoa ba futsanehileng ba Slurm SRE ba nang le litlolo tse mosa tsa Leninist pele tlhōlisano e qala.
Kahoo mosebetsi:
Re ba rona, re tla haha lefatše le lecha...
Ho na le webosaete ea kakaretso ea litekete tsa lifilimi. Liketsahalo li qapiloe ke baeletsi ka mokhoa o entsoeng esale pele (le hoja ho se motho ea sa kenyelletseng ntlafatso e tsoetseng pele le e bolotsana), ts'ebetso ea sebaka sena e hlalosoa ka metrics e fapaneng. Mathata a ka fapana haholo: litekete tsa theater ea Moulin Rouge ha lia kengoa polokelong ea polokelo; li-poster tsa lifilimi le litšoantšiso li kenngoa polokelong ea litaba ka metsotsoana e fetang 10; tlhaloso ea filimi ka 'ngoe e hoama; 0,1% ea litaelo li se li bolokiloe; Nako le nako sistimi ea ts'ebetso ea tefo e senyeha ka motsotso kapa tse peli. Le lintho tse ngata tse sa thabiseng tse ka hlahelang motho ea nkang karolo Slurm SRE mosebetsing oa hae oa 'nete.
Re itokiselitse ho sebetsana le eng kapa eng ... le bohle.
Webosaete ea rona e nang le mamello e telele e na le li-microservices tse 'maloa. Mosebetsi oa eona ke ho bokella lintlha tsa mananeo, litheko le litulo tse fumanehang ho tsoa libaesekopong tsohle; e bonts'a liphatlalatso tsa lifilimi, e u lumella ho khetha cinema, show, holo le sebaka, buka le ho lefella litekete. Ka kakaretso, ntho e 'ngoe le e' ngoe eo seshebelli a ka e lorang feela. Empa mosebelisi ha a belaelle hore na ntoa ea titanic bakeng sa botsitso le phihlello ea sebaka sa marang-rang e ntse e tsoela pele joang.
Bakeng sa sebaka sa marang-rang se matla, re hlahisitse matšoao a SLO, SLI, SLA, meralo e ntlafalitsoeng ea meralo le meaho, ra tsamaisa sebaka sa marang-rang, ra theha leihlo le tlhokomeliso. Mme rea tsamaya.
SLO, SLI, SLA
SLI - matšoao a boemo ba tšebeletso. Li-SLO ke lipheo tsa boemo ba litšebeletso. SLA - litumellano tsa boemo ba tšebeletso.
SLA ke poleloana ea mokhoa oa ITIL e bolelang tumellano ea molao pakeng tsa moreki oa tšebeletso le mofani oa eona, e nang le tlhaloso ea tšebeletso, litokelo le boikarabelo ba lihlopha, haholo-holo, boemo boo ho lumellanoeng ka bona ba boleng bakeng sa ho fana ka sena. tshebeletso.
SLO ke sepheo sa boemo ba lits'ebeletso: boleng bo shebiloeng kapa mofuta oa boleng bakeng sa boemo ba ts'ebeletso bo lekantsoeng ke SLI. Boleng bo tloaelehileng ba SLO ke "SLI ≤ Target" kapa "Lower Limit ≤ SLI ≤ Upper Limit".
SLI ke letšoao la boemo ba tšebeletso-e leng tekanyo e hlalositsoeng ka hloko ea karolo e le 'ngoe ea boemo ba tšebeletso e fanoeng. Bakeng sa lits'ebeletso tse ngata, senotlolo sa SLI se nkoa e le latency ea kopo - ho nka nako e kae ho khutlisetsa karabo ho kopo. Li-SLI tse ling tse tloaelehileng li kenyelletsa sekhahla sa liphoso, hangata se hlahisoang e le karoloana ea likopo tsohle tse amohetsoeng, le phepelo ea sistimi, hangata e lekantsoeng ka likopo motsotsoana.
Pele ho tsohle, re tla roba lifofane, ebe banana, ebe banana ...
Lintlha tsa ka hare le tsa ka ntle li ile tsa qala ho "senya" SLO ho tloha metsotso ea pele. Ntho e 'ngoe le e' ngoe e ile ea oela lihloohong tsa batsamaisi-liphoso tsa bahlahisi, ho hlōleha ha mekhoa ea mehaho, ho phalla ha baeti, le litlhaselo tsa DDoS. Ntho e ngoe le e ngoe e mpefatsang SLO.
"- Barupeluoa ba ratehang, ke potlakela ho le khahlisa, ntho ea pele eo le hlōlehang ho e etsa ke ... tsohle!"
Tseleng, libui li ile tsa buisana ka botsitso, tekanyetso ea liphoso, mokhoa oa ho etsa liteko, tsamaiso ea litšitiso le mojaro oa ts'ebetso.
Ha re li-stoker, ha se mapolanka...
Joale barupeluoa ba ile ba qala ho lokisa lintho - ntho e ka sehloohong ke ho utloisisa seo u lokelang ho se tšoara pele.
"- Morena, ha ke e-s'o bone e robeha tjena, ka mokhoa ona le boemong bo joalo!"
Kahoo, ho ile ha etsahala kotsi. Ts'ebeletso ea ts'ebetso ea litefo e theohile. U ka etsa joang ho khutlisa ts'ebetso ka nako e khuts'oane ka ho fetesisa?
Litsebi, li shebile ka lerato ho barupeluoa, li lokisetsa leqheka le leng.
Sehlopha se seng le se seng se hlophisa mosebetsi oa sehlopha ho felisa kotsi - e kenyelletsa basebetsi-'moho, e tsebisa batho ba thahasellang (ba amehang). Ka nako e tšoanang, ho behoa lintho tse tlang pele. Ka tsela ena, barupeluoa ba koetliselitsoe ho sebetsa tlas'a khatello tlas'a maemo a fokolang haholo a nako.
"Ke ts'abo ea mofuta ofe e tsoileng?!"
Exhale ... 'me u qete boikoetliso
Hammoho le libui, ka mor'a hore bothata bo bong le bo bong bo rarolloe 'me setša se tsitsitsoe ka nakoana, sehlopha se ile sa ithuta liketsahalo ho latela pono ea SRE. Re hlahlobile mathata ka ho qaqileng - lisosa tsa ketsahalo ea bona, tsoelo-pele ea ho felisoa. Ka mor'a moo, ka bobeli sehlopha-ka-sehlopha 'me re kopane, re ile ra etsa liqeto mabapi le hore na re ka li thibela joang ka ho eketsehileng: mokhoa oa ho ntlafatsa tlhokomelo, mokhoa oa ho fetola mehaho ka bohlale, mokhoa oa ho fetola mokhoa oa ho ntlafatsa le ho sebetsa, mokhoa oa ho lokisa melao. Libui li ile tsa bontša mokhoa oa ho etsa post-mortem.
“Ke mang hape ea batlang tlhokofatso! - Ke!"
Katleho ea lihlopha e ne e ngotsoe ka thata le ka mokhoa o hlakileng letlapeng la lintlha tsa elektroniki.
Bakeng sa libaka tsa pele - bonase ho tsoa ho ba amehang.
Source: www.habr.com