Inona no tokony hoeritreretina rehefa mampihatra ny fiovan'ny adidy

Ryn Daniels, mpanoratra DevOps mahomby, dia mizara paikady azon'ny rehetra ampiasaina hamoronana fihodinana Oncall tsara kokoa, tsy mahasosotra ary maharitra kokoa.

Inona no tokony hoeritreretina rehefa mampihatra ny fiovan'ny adidy

Miaraka amin'ny fahatongavan'ny Devops, injeniera maro amin'izao fotoana izao no mikarakara fiovana amin'ny fomba iray na hafa, izay andraikitry ny sysadmins na ny injeniera amin'ny asa. Tsy asa ankafizin'ny ankamaroan'ny olona ny manao adidy, indrindra amin'ny ora tsy fiasana. Ny adidy amin'ny oncall dia mety hanelingelina ny torimasontsika, hanelingelina ny asa mahazatra ezahantsika atao mandritra ny andro, ary hanelingelina ny fiainantsika amin'ny ankapobeny. Rehefa mihamaro ny ekipa mandray anjara amin'ny fiaretan-tory, dia nametraka ny fanontaniana izahay hoe: "Inona no azontsika atao amin'ny maha-olona sy ekipa ary fikambanana mba hahatonga ny fiambenana ho maha-olombelona sy maharitra kokoa?"

Vonjeo ny torimasonao

Matetika ny zavatra voalohany eritreretin'ny olona rehefa mieritreritra ny hanao adidy izy ireo dia ny fiantraikany ratsy amin'ny torimasony; tsy misy mila fanairana hamoha azy amin'ny misasak'alina. Raha mihabetsaka ny fikambananao na ny ekipanao dia azonao atao ny mampiasa fihodinana "manaraka ny masoandro", izay ahafahan'ny ekipa ao amin'ny faritry ny ora maro mandray anjara amin'ny fihodinana iray ihany, miaraka amin'ny fiovan'ny adidy kely kokoa. (na farafaharatsiny mifoha) ora. Ny fametrahana fihodinana toy izany dia afaka manao fahagagana hampihenana ny enta-mavesatry ny alina izay ataon'ny mpikarakara.

Raha tsy ampy ny injeniera sy ny fizarana ara-jeografika hanohanana ny fihodinan'ny masoandro, dia mbola misy zavatra azonao atao mba hampihenana ny mety hisian'ny olona hifoha tsy amin'ny antony amin'ny misasakalina. Raha ny marina, zavatra iray ihany ny miala amin’ny fandriana amin’ny 4 ora maraina mba hamahana olana manenika ny mpanjifa; Hafa mihitsy ny mifoha vao mahita fa misy fanairana diso. Afaka manampy amin'ny famerenana ny fampandrenesana rehetra natsanganao izany ary manontany ny ekipanao hoe iza amin'ireo no tena ilaina hamoha olona aorian'ny ora maro, ary raha afaka miandry ny maraina ireo fampandrenesana ireo. Mety ho sarotra ny hahatonga ny olona hanaiky hamono ny fanairana sasany tsy miasa, indrindra raha niteraka olana teo aloha ny olana tsy hita, saingy zava-dehibe ny mitadidy fa tsy injeniera mahomby indrindra ny injeniera tsy ampy torimaso. Apetraho ireo fanairana ireo mandritra ny ora fiasana rehefa tena manan-danja. Ny ankamaroan'ny fitaovana fanairana amin'izao andro izao dia ahafahanao mametraka fitsipika samihafa ho an'ny fampahafantarana aorian'ny ora, na vanim-potoana fampahafantarana Nagios na fametrahana fandaharam-potoana samihafa ao amin'ny PagerDuty.

Matory, adidy ary kolontsain'ny ekipa

Ny vahaolana hafa amin'ny fikorontanan'ny torimaso dia misy fiovana ara-kolontsaina lehibe kokoa. Ny fomba iray hamahana ity olana ity dia ny fanaraha-maso ny fampandrenesana, mandinika manokana ny fotoana hahatongavany ary raha azo atao izany. Opsweekly dia fitaovana noforonina sy navoakan'ny Etsy izay ahafahan'ny ekipa manara-maso sy manasokajy ny fanairana azony. Izy io dia afaka mamorona sary mampiseho ny isan'ny fanairana nanaitra ny olona (mampiasa angon-drakitra torimaso avy amin'ny mpanara-maso ara-batana), ary koa ny isan'ny fampandrenesana tena nitaky ny fihetsik'olombelona. Amin'ny fampiasana ireo teknolojia ireo dia azonao atao ny manara-maso ny fahombiazan'ny fihodinan'ny antsonao sy ny fiantraikany amin'ny torimaso rehefa mandeha ny fotoana.

Ny ekipa dia afaka mitana anjara toerana amin'ny fiantohana fa ny mpiasa rehetra dia mahazo fialan-tsasatra ampy. Mamorona kolontsaina mamporisika ny olona hikarakara ny tenany: raha very torimaso ianao noho ny niantsoana anao tamin'ny alina, dia afaka matory elaela kokoa ianao amin'ny maraina mba hanandrana hanonerana ny fotoana very torimaso. Afaka mifampitsinjo ny mpikambana ao amin'ny ekipa: Rehefa mifampizara ny angona momba ny torimasony amin'ny alalan'ny zavatra toy ny Opsweekly ny ekipa, dia afaka mandeha any amin'ny mpiara-miasa aminy miasa izy ireo ary miteny hoe: "Hey, toa nisy alina nanjavozavo niaraka tamin'i PagerDuty omaly alina." “Tianao ve ny hanaronako anao anio alina mba hialanao sasatra?” Amporisiho ny olona hifanohana amin'izany fomba izany ary hanakivy ny "kolontsain'ny maherifo" izay hanosehana ny tenany ho amin'ny fetra sy hisorohana ny fangatahana fanampiana.

Mampihena ny fiantraikan'ny adidy amin'ny asa

Rehefa reraka ny injeniera satria taitra teo am-piasana, dia mazava ho azy fa tsy hiasa amin'ny 100% capacité mandritra ny andro izy ireo, fa na dia tsy misy aza ny tsy fahampian'ny torimaso dia mety hisy fiantraikany hafa amin'ny asa ihany koa. Ny iray amin'ireo fatiantoka lehibe indrindra mandritra ny adidy dia noho ny anton'ny fahatapahana, ny fiovan'ny teny manodidina: ny fahatapahana tokana dia mety hiteraka fahaverezan'ny 20 minitra farafahakeliny noho ny fahaverezan'ny fifantohana sy ny fiovan'ny contexte. Azo inoana fa hisy loharanon'ny fahatapahana hafa ny ekipanao, toy ny tapakila vokarin'ny ekipa hafa, fangatahana na fanontaniana avy amin'ny chat sy/na mailaka. Miankina amin'ny habetsahan'ireo fahatapahana hafa ireo, azonao atao ny mieritreritra ny hampiditra azy ireo amin'ny fihodinana efa misy mandritra ny adidy na ny fametrahana fihodinana faharoa mba hikarakarana ireo fangatahana hafa ireo.

Zava-dehibe ny mandinika izany rehefa manomana ny asa izay hataon'ny ekipa ianao, na maharitra na fohy. Raha toa ka manana fiovàna adidy mahery vaika ny ekipanao, dia tokony hojerena amin'ny drafitra maharitra izany zava-misy izany, satria mety hisy toe-javatra misy ny mpiasa manontolo miasa tsara amin'ny fotoana rehetra, fa tsy manao asa hafa. Amin'ny fandrindrana fotoana fohy dia mety ho hitanao fa tsy afaka mahafeno fe-potoana ny olona an-telefaona noho ny andraikiny amin'ny fiantsoana azy - tokony andrasana izany ary ny ambiny amin'ny ekipa dia tokony ho vonona ny handray sy hanampy mba hahazoana antoka fa ny asa. vita ary tohanana amin'ny asany ny olona miantso azy. Na dia antsoina aza ilay olona miantso, dia hisy fiatraikany amin'ny fahafahan'ilay olona miantso hanao asa hafa ny fiovan'ny fiantsoana—aza manantena ny hiasa alina ilay olona miantso mba hamita ireo tetikasa voalahatra ankoatra ny maha-izy azy. miasa aorian'ny ora.

Ny ekipa dia tsy maintsy mitady fomba hiatrehana ny asa fanampiny ateraky ny adidy. Ity asa ity dia mety ho asa tena izy hamahana ny olana tena izy hita amin'ny alàlan'ny rafitra fanaraha-maso sy fanairana, na mety ho asa fanamboarana ny fanaraha-maso sy ny fanairana mba hampihenana ny isan'ny fanairana diso. Na inona na inona toetry ny asa noforonina dia zava-dehibe ny fizarana izany asa izany ara-drariny sy maharitra manerana ny ekipa. Tsy ny fifindran'ny antso rehetra no noforonina mitovy, ary ny sasany dia sarotra kokoa noho ny hafa, ka ny filazana fa ny olona mandray ny fanairana dia ny tompon'andraikitra amin'ny fiatrehana ny voka-dratsin'izany fanairana izany dia mety hitarika amin'ny fizarana asa tsy mitovy. Mety ho tonga saina kokoa ho an'ny tompon'andraikitra ny tompon'andraikitra amin'ny fandaharam-potoana na fizarana asa, miaraka amin'ny fanantenana fa ny sisa amin'ny ekipa dia ho vonona hanampy amin'ny fanatanterahana ny asa noforonina.

Mamorona sy mitazona ny fifandanjana eo amin'ny asa sy ny fiainana

Eritrereto ny fiantraikan'ny adidy eo amin'ny fiainanao ivelan'ny asa. Rehefa manao adidy ianao dia mety hahatsiaro ho voafatotra amin'ny findainao sy ny solosainao, midika izany fa mitondra solosaina finday sy router finday (modem usb) foana ianao na tsy mivoaka ny tranonao / birao. Ny fiantsoana matetika dia midika hoe miala amin'ny zavatra toy ny mahita namana na fianakaviana mandritra ny fotoananao. Midika izany fa miankina amin'ny isan'ny olona ao amin'ny ekipanao ny halavan'ny fiovan'ny tsirairay, ary mety hitondra enta-mavesatra ho an'ny olona ny fahamaroan'ny fiovana. Mety mila manandrana ny halavany sy ny fotoanan'ny fiovanao ianao mba hahitana fandaharam-potoana izay mety amin'ny ankamaroan'ny olona voakasik'izany farafaharatsiny, satria ny ekipa sy ny olona samihafa dia hanana laharam-pahamehana sy tiana.

Zava-dehibe ny mahafantatra ny fiantraikan'ny adidy amin'ny fiainan'ny olona, ​​na eo amin'ny sehatry ny fitantanana na eo amin'ny sehatra tsirairay. Marihina fa ny fiatraikany dia ho tsapan’ny olona tsy manana tombontsoa manokana. Ohatra, raha tsy maintsy mandany fotoana hikarakarana ankizy na olona hafa ao amin'ny fianakavianao ianao, na raha hitanao fa mianjera eo an-tsorokao ny ankamaroan'ny raharaha ao an-trano, dia efa kely kokoa ny fotoananao sy ny herinao noho ny olona tsy manana andraikitra. Ity karazana asa "fifindrana faharoa" na "fifindrana fahatelo" ity dia matetika misy fiantraikany amin'ny olona, ​​​​ary raha mametraka fihodinana an-tariby miaraka amin'ny fandaharam-potoana na hamafiny izay mihevitra ny mpandray anjara fa tsy manana fiainana manokana ivelan'ny birao, dia mametra ny olona ianao. afaka mandray anjara amin'ny ekipanao.

Amporisiho ny olona hiezaka hihazona bebe kokoa ny fandaharam-potoanany. Tokony handinika ny hanomezana ny ekipa ny router finday (modems usb) ianao mba hahafahan'ny olona mivoaka ny trano miaraka amin'ny solosaina findainy ary mbola manana endrika fiainana. Amporisiho ny olona hifampiraharaha amin'ny ora fiantsoana, raha ilaina, mandritra ny fotoana fohy mba hahafahan'ny olona mandeha any amin'ny toeram-panatanjahantena na manatona dokotera mandritra ny adidy. Aza mamorona kolontsaina izay midika fa ny injeniera dia tsy manao na inona na inona afa-tsy ny miantso. Ny fifandanjana eo amin'ny asa sy ny fiainana dia ampahany manan-danja amin'ny asa rehetra, fa indrindra rehefa mandinika ny ora tsy fiasana ianao dia tokony hanome ohatra ho an'ny hafa momba ny fifandanjana eo amin'ny asa sy ny fiainana ny mpikambana ambony kokoa ao amin'ny ekipanao, araka izay azo atao mandritra ny adidy.

Amin'ny sehatra tsirairay, aza adino ny manazava ny dikan'ny hoe miasa amin'ny namanao, fianakavianao, mpiara-miasa, biby fiompy, sns. , na dia tsy te hanampy anao hamaha izany aza izy ireo). Ataovy azo antoka fa manonitra ny fotoana very ianao aorian'ny fiafaran'ny asanao, na hihaona amin'ny namana, fianakaviana na torimaso, ohatra. Raha azonao atao dia eritrereto ny manangana fanairana mangina (toy ny famantaranandro maranitra) izay afaka mamoha anao amin'ny fitabatabana ny tananao mba tsy hamoha olona manodidina anao. Mitadiava fomba hikarakarana ny tenanao rehefa eo antenatenan'ny fiantsoana anao ianao ary rehefa tapitra izany. Azonao atao ny manangana “kits survival on-call” izay hanampy anao hiala sasatra: mihaino ny lisitry ny mozika tianao indrindra, mamaky ny boky tianao indrindra, na maka fotoana hilalaovana amin'ny biby fiompinao. Ny mpitantana dia tokony hamporisika ny fikarakarana tena amin'ny alàlan'ny fanomezana andro tsy fiasana ny olona aorian'ny adidy mandritra ny herinandro ary manao izay hahazoana antoka fa mangataka (ary mahazo) fanampiana ny olona rehefa mila izany.

Fanatsarana ny traikefa adidy

Amin'ny ankapobeny, tsy tokony hoheverina ho asa mahatsiravina fotsiny ny maha-adidy: manana fahafahana sy andraikitra amin'ny maha-mpiandraikitra anao ianao mba hiasa amim-pahavitrihana mba hanatsara kokoa ireo olona izay hiasa amin'ny ho avy, izany hoe ny olona. dia hahazo hafatra vitsy kokoa ary ho marina kokoa. Averina indray, ny fanaraha-maso ny sandan'ny fanairanao amin'ny fampiasana zavatra toy ny Opsweekly dia afaka manampy anao hamantatra hoe inona no mahasosotra anao amin'ny fiantsoanao sy manamboatra izany. Ho an'ny fampandrenesana tsy mavitrika, manontania tena raha misy fomba hanesorana ireo fampandrenesana ireo - angamba midika izany fa mandritra ny ora fiasana ihany no handehanany, satria misy zavatra tsy mila valianao amin'ny misasak'alina. Aza matahotra ny hamafa fanairana, hanova azy, na hanova ny fomba fandefasana avy amin'ny "alefaso amin'ny finday sy mailaka" ho "mailaka ihany". Ny fanandramana sy ny famerimberenana no fanalahidin'ny fanatsarana ny adidy amin'ny fotoana.

Ho an'ny fampandrenesana izay tena azo atao dia tokony hoheverinao fa mora ho an'ny injeniera ny manao ny hetsika ilaina. Ny fanairana mihazakazaka rehetra dia tokony hanana runbook miaraka aminy - eritrereto ny fampiasana fitaovana toy ny nagios-herald hanampiana rohy runbook amin'ny fanairanao. Raha tsotra ny fampandrenesana fa tsy mila runbook, dia mety ho tsotra fotsiny izany fa azonao atao ny mamadika ny valiny amin'ny fampiasana zavatra toy ny mpikarakara hetsika Nagios, izay mamonjy ny olona tsy maintsy mifoha na manapaka ny tenany amin'ny asa mandeha ho azy. Na ny runbooks na nagios-herald dia afaka manampy anao hampiditra teny manodidina sarobidy amin'ny fanairanao, izay hanampy ny olona hamaly azy ireo amin'ny fomba mahomby kokoa. Jereo raha afaka mamaly fanontaniana mahazatra toy ny hoe: Oviana no fotoana farany nandehana io fanairana io? Iza no namaly azy farany, ary inona no hetsika nataon'izy ireo tamin'ny farany (raha nisy)? Inona avy ireo fampandrenesana hafa miseho miaraka amin'ity ary mifandray ve izy ireo? Ity karazana fampahalalana momba ny teny manodidina ity dia matetika tsy miafara afa-tsy ao amin'ny atidohan'ny olona, ​​ka ny famporisihana ny kolontsain'ny fandraketana sy ny fizarana vaovao momba ny teny manodidina dia mety hampihena ny vola lany amin'ny famaliana fanairana.

Ny ampahany lehibe amin'ny havizanana azo avy amin'ny antso dia ny tsy hifaranan'izy ireo mihitsy—raha misy antso an-tariby ny ekipanao dia tsy azo inoana fa hifarana amin'ny fotoana mety izy ireo amin'ny hoavy. Tsy misy farany ny fiovana, ary mety ho tsapantsika fa hahomby foana izy ireo. Io tsy fahampian'ny fanantenana io dia olana ara-tsaina lehibe izay mety hahatonga ny adin-tsaina sy ny havizanana, ka ny fiatrehana ny fiheverana (ankoatra ny zava-misy) fa ny adidy dia ho mahatsiravina foana dia toerana tsara hanombohana mieritreritra momba ny adidinao amin'ny fotoana maharitra.

Mba hanomezana fanantenana ny olona fa hihatsara hatrany ny toe-draharaha eo amin'ny adidy dia ilaina ny fanaraha-maso ny rafitra (ny fanaraha-maso sy fanasokajiana ny adidy izay nolazaiko teo aloha). Araho ny isan'ny fampandrenesana anananao, firy isan-jaton'izy ireo no mitaky ny fandraisana andraikitra ataon'ny mpanatrika, firy amin'izy ireo no manaitra ny olona, ​​ary avy eo dia miasa hamorona kolontsaina mandrisika ny olona hanao zavatra tsara kokoa. Raha manana ekipa lehibe ianao, dia mety halaim-panahy, raha vao tapitra ny fiambenanao, ny maninjitra ny tananao ary miteny hoe "olan'ny tompon'andraikitra amin'ny ho avy izany" fa tsy mitsangatsangana hanamboatra zavatra - iza no te handany vola bebe kokoa ezaka amin'ny adidy mihoatra noho izay takina amin'izy ireo? Eto dia afaka mitondra fiovana lehibe ny kolontsain'ny fiaraha-miory, satria tsy ny fahasalamanao amin'ny adidy ihany no tadiavinao, fa ny mpiara-miasa aminao koa.

Miombom-pihetseham-po daholo izany

Ny fiaraha-miory dia ampahany manan-danja amin'ny zavatra ahafahantsika mitondra fahombiazana izay manatsara ny traikefa amin'ny antso. Amin'ny maha-mpitantana na mpikambana anao, azonao atao ny manombana tsara na manome valisoa ny olona amin'ny fitondrantena izay manatsara ny fiovana. Ny fanohanana amin'ny fampandehanana dia iray amin'ireo faritra izay matetika tsapan'ny injeniera fa tsy miraharaha azy ireo fotsiny ny olona rehefa misy zavatra tsy mety: ho eo ny olona hivazavaza amin'izy ireo rehefa midona amin'ny vohikala, saingy zara raha mianatra momba ny ezaka any ambadiky ny sehatra izay miasa izy ireo. ny injeniera dia nametraka ny fitazonana ny tranokala amin'ny fotoana sisa. Ny fahafantarana ny asa dia mety ho lasa lavitra, na misaotra olona iray ao amin'ny fivoriana na amin'ny mailaka ankapobe amin'ny fanatsarana ny fanairana manokana, ny lafiny ara-teknika amin'ny adidy, na ny fanomezana fotoana ho an'ny olona iray handrakotra ny injeniera hafa miasa mandritra ny fotoana fohy.

Amporisiho ny olona handany fotoana sy ezaka hanatsarana ny toe-javatra iantsoana azy mandritra ny fotoana maharitra. Raha misy antso an-tariby ny ekipanao dia tokony hanomana sy hataonao laharam-pahamehana ity asa ity toy ny amin'ny asa hafa rehetra ao amin'ny tondrozotranao. Ny on-call dia 90% entropy, ary raha tsy miasa mavitrika amin'ny fanatsarana azy ireo ianao, dia hiharatsy hatrany hatrany izy ireo rehefa mandeha ny fotoana. Miaraha miasa amin'ny ekipanao hamantatra hoe inona no tsara indrindra mandrisika sy manome valisoa ny olona, ​​ary ampiasao izany mba hamporisihana ny olona hampihena ny tabataba mailo, hanoratra boky firaketana, ary hamorona fitaovana hamahana ny olan'izy ireo amin'ny antso. Na inona na inona ataonao, aza mionona amin'ny adidy mahatsiravina amin'ny maha-ampahany maharitra ny raharaham-pirenena.

Source: www.habr.com

Add a comment