O le tele o le lavelave o le faiga, o le tele foi lea o le tupu tele i ituaiga uma o mataala. Ma o loʻo i ai se manaʻoga e tali atu i nei lava faʻasalalauga, faʻapipiʻi ma vaʻaia i latou. Ou te manatu o se tulaga lea e masani ai le toatele i le tulaga o le popolevale.
O le fofo o le a talanoaina e le o se mea e sili ona le faʻamoemoeina, ae o le suʻesuʻega e le toe faʻafoʻi mai se tusiga atoa i lenei autu.
O le mea lea, na ou filifili ai e faʻasoa le poto masani a FunCorp ma talanoa pe faʻafefea ona faʻatulagaina le tiute, o ai e valaʻau, aisea ma pe faʻapefea ona e vaʻai i ai.
O le a le PagerDuty?
O lea la, ina ia foia uma nei faafitauli, na amata ona matou sailia se meafaigaluega talafeagai. Ina ua maeʻa suʻesuʻega, na matou filifilia PagerDuty. O le PD na foliga mai ia i matou o se fofo lelei atoatoa ma puʻupuʻu ma se numera tele o tuʻufaʻatasiga ma faʻatulagaga. O ā ona uiga?
I se faapuupuuga, o le PagerDuty o se faʻatautaia o faʻalavelave faʻalavelave e mafai ona faʻatautaia mea e oʻo mai e ala i tuʻufaʻatasiga eseese, faʻatulagaina poloaiga tiute ma faʻailoa le inisinia ile tiute e faʻatatau i le tulaga o le mea na tupu (i se tulaga maualuga - o se valaau, i se tulaga maualalo - se tulei mai le talosaga / SMS) .
O ai le tagata ofisa tiute?
Masalo o le nofoaga muamua lea e amata ai ona seti PD.
I FunCorp, pei o isi kamupani, o loʻo i ai se tulaga mamalu o le ofisa tiute. E fa'asalalau mai le inisinia i le inisinia fa'atasi i le aso. O loʻo i ai se laina muamua ma lona lua o le tali atu i se mataala mai PagerDuty. Fa'apea e o'o mai se mataala maualuga, ma afai e 10 minute talu ona vala'au i le ofisa tiute mai le laina muamua e leai se tali i ai (o lona uiga, e le o fa'afeiloa'i i le tulaga fa'ailoa pe fo'ia), o le telefoni e alu i le lona lua. enisinia tiute. O lo'o fa'atulagaina lea i PagerDuty lava ia e ala i Faiga Fa'avae.
Afai e le tali mai le ofisa lona lua, e toe foʻi le faʻaaliga i autu i le ofisa tiute.
O le mea lea, so'o se fa'ailo fa'amuamua maualuga e o'o mai e le mafai ona tumau e le fa'agaioia.
Se'i o tatou va'ai po'o fea e tupu mai ai fa'alavelave.
O a fa'atasiga tatou te fa'aogaina?
E maua e PD le tele o fa'alavelave eseese mai auaunaga eseese. E tusa ma le 25 a matou auaunaga i le taimi nei, ma e faʻatautaia na matou faʻaaogaina nisi o tuʻufaʻatasiga ua saunia.
- Prometheus
O le faiga autu o le aoina o metotia o le Prometheus. E tele mea ua uma ona tusia e uiga i ai i luga o Habré, o le a ou fai atu o loʻo i ai le tele o latou mo siʻosiʻomaga eseese: tasi e aoina metrics mai masini masini ma dockers, o le isi mai auaunaga Amazon, lona tolu mai masini masini. Telegraf e masani ona faʻaaogaina e avea o se metrics exporter.
O iinei foi, ou te manatu, ua manino mea uma mai le ulutala. O lenei tu'ufa'atasiga e fa'aoga e lafo ai fa'amatalaga mai nisi o tusitusiga na fa'atinoina e cron. E avatu e PD se tuatusi patino e te lafo i ai tusi. Pe a fatuina se auaunaga faʻatasi ai ma se tuʻufaʻatasiga, e mafai ona e setiina mea e ave i ai le faʻamuamua, pe o le a le faʻasologa o mea o loʻo oʻo mai o le a faʻatautaia, pe faʻafefea tonu ona fatuina se mataala (mo tusi taʻitasi e oʻo mai, mo se tusi ulufale + o se tulafono patino, ma isi).
- faatuai
I loʻu manatu, o se tuʻufaʻatasiga manaia tele. E i ai taimi e tupu ai se mea ae e le o ufiufi i mea tutupu. O le mea lea, matou te faʻaopoopoina le tuʻufaʻatasia mai Slack e fatu ai se faʻalavelave. O lona uiga, e mafai ona e tusi i le kamupani Slack /callofduty e telegese mea uma ma o le a malepe vave ma o le PD o le a faʻatautaia ma lafo le faʻalavelave i le inisinia tiute.
Matou te faia:
Ua tatou vaai:
- API
HTTP tuufaatasia. O le mea moni, e leai se mea e sili ona manaia iinei, naʻo se POST talosaga ma se tino ile JSON format. Mo se faʻataʻitaʻiga, o se mea manaia: matou te faʻaaogaina mo le mataʻituina i fafo e faʻaaoga ai . O lenei 'au'aunaga e siaki le avanoa oa tatou nofoaga mai vaega eseese o le lalolagi. I le tulaga pe a tatou mauaina se tali e le taliaina (mo se faʻataʻitaʻiga, 502), o se faʻalavelave faʻafuaseʻi ona faia ona mulimuli lea o mea uma i le filifili o loʻo faʻamatalaina i luga. O le StatusCake lava ia e iai le malosi e mataʻituina ai URL i totonu, tusi faamaonia SSL poʻo le maeʻa o le domain.
- FreeNMS
O le isi lea faiga mata'ituina, e mafai ona e faitau atili i ai i luga o latou upega tafaʻilagi . Faatasi ai ma lana fesoasoani, matou te mataʻituina fesoʻotaʻiga fesoʻotaʻiga ma iDRAC mai 'auʻaunaga.
Sa i ai foʻi faʻatasi e pei o Datadog, CloudWatch. E mafai ona e vaʻai atili e uiga i le mea na tupu ia i latou .
Faʻaaliga vaaia
Ole faiga autu ole lipoti o mea tutupu ole Slack. O faʻalavelave uma e oʻo mai i le PD e tusia i se talatalanoaga faʻapitoa, ma afai e suia o latou tulaga, o loʻo faʻaalia foi i le talatalanoaga.
Ina ua tulaʻi mai le avanoa e faʻaalia ai faʻamatalaga aoga i luga o lau o siaki o loʻo tautau mai le taualuga, na faʻafuaseʻi ona matou iloa e leai se mea e faʻaalia ia i latou (i le matagaluega devops). O loʻo i ai se Grafana matagofie, ae e le aofia ai mea uma, ma e tali atu tagata faigaluega i faʻaaliga, ae le o siata.
Ina ua mae'a se su'esu'ega mae'ae'a ae le'i manuia ile GitHub mo se "papa" ma'oti ma fa'amatalaga mo le PD, sa tonu loa e tusi a tatou lava tusi - na'o mea na ma mana'omia. E ui lava i le taimi muamua sa i ai se manatu e faʻaalia le PD lava ia, na foliga mai e sili atu ona le talafeagai.
Ina ia tusia, pau lava le mea e tatau ona e faia o le mauaina lea o se ki mai se PD ma aia tatau faitau.
Ma o le mea lenei na matou maua:
O le lau o loʻo faʻaalia ai faʻalavelave tatala o loʻo i ai nei, le igoa o le inisinia o loʻo i ai nei o loʻo tiute mai le faʻatulagaga filifilia, ma le taimi e aunoa ma se faʻalavelave maualuga maualuga (o le laulau e maualuga le faʻamuamua faʻalavelave o le a faʻaalia i le mumu).
.
O le iʻuga, na matou mauaina se lisi faʻaoga talafeagai mo le matamataina o matou mea uma na tutupu. Ou te fiafia pe a maua e nisi o outou le aoga o la matou poto masani.
puna: www.habr.com