Þetta er stutt saga úr raunverulegri æfingu, þegar lítið vandamál, vel dulbúið af bilanaþoli, breytist í höfuðverk.
Lítil ráðstöfun:
Lítið útibú, það hefur sína eigin PBX (stjörnu + FreePBX) byggt á skrifborðsvélbúnaði og sama staðbundnu flugstöðvaþjóni með 1C, skráahaug og sýndar RO lénsstýringu. Netið dreifir Mikrotik. Útibúið er lítið, það er nóg fyrir þá.
Þetta byrjaði allt með eftirliti (vegna tímaleysis og leti er ekki allt fylgst með), sem tilkynnti um ofhitnun á einum netþjóni (með PBX) í útibúinu. Á meðan heimamenn voru að leysa vandamálið fraus gamli maðurinn og braut MySQL gagnagrunninn lítillega.
Margt boðaði vandræði, en ekki þetta...
Ekkert mál, búið er að gera við grunninn, allt ætti að virka. En heimamenn kvarta, símtöl eru lögð niður. Allt í lagi - það eru vandamál í FreePBX, ég tek öryggisafrit, set það upp, allt er í lagi.
En vandamálið er til staðar, heimamenn kvarta enn, símtöl ganga ekki eðlilega. Á undan þeim virðist símtalið ganga eðlilega í gegn, en þegar þeir hringja sjálfir, eða hringja hvort í annað, er nokkur sekúndna seinkun. Ég byrja að skoða umfangsmikla og óskiljanlega annála Asterisk og FreePBX, en ég get ekki komið auga á vandamálið í þeim. Ég man að það var vandamál með STUN og ICE sem gáfu svipaða töf. Ég slekk á öllu til fjandans, niðurstaðan er núll.
Niðurlægð er leiðin til að taka slæmar ákvarðanir:
Ég er að verða þunglynd, að fikta við ATS í marga klukkutíma leiðir ekki til neins góðs, það er nú þegar langt fram á nótt og vandamálið er ekki leyst.
Ég skildi vandamálið eftir til morguns í von um ferskt höfuð. Um morguninn var önnur misheppnuð ákvörðun tekin: þar sem kerfið var bilað (þó að ósjálfstæðin gæti ekki hafa verið svo eyðileggjandi) var ég að reyna að laga kerfið með því að setja alla pakkana upp aftur. Niðurstaðan er aðeins meira en núll, seinkunin hefur minnkað (ekki verulega, en þegar hefur tekist).
Ég tek aðra slæma ákvörðun: ef hlutaviðgerð á stýrikerfinu (og gagnagrunninum úr öryggisafritinu) skilaði litlum árangri og rót vandans er enn ekki ljós og mikill tími hefur þegar farið í að leita að orsökinni, þá ákveð ég að bregðast róttækt við: við rífum niður stýrikerfið og veltum öllu frá grunni (sem betur fer gerir sjálfvirkni ferlisins þetta á viðunandi tíma). Ég er að rúlla upp FreePBX stillingunni úr afriti. Önnur bilun. Niðurstaðan er núll!
Örvænting - hugurinn skýst, ákvarðanir verða enn verri
Ég er að falla í örvæntingu. Mjög slæmar hugsanir fara að koma held ég: kannski er confið í öryggisafritinu skakkt (það kom fyrir mig eftir nokkrar uppfærslur að það virkaði ekki eftir þær, og ég fann ekki ástæðuna), það er ekkert eftir : Ég þarf að velta öllu frá grunni með höndunum. Þvílík skömm! Niðurstaðan er algjörlega núll og miklum tíma sóað!
Samþykki er leiðin að meðvitund
Í örvæntingarfullum tilraunum til að skilja hvað er að gerast, byrja ég að rannsaka annálana vandlega. Ég tek eftir mynstri. Eftirnafn símtal á sér stað á nákvæmlega 5 sekúndum, og fyrir hóp símtala með 3 eftirnafn á 15! Ég byrja að googla um seinkun símtala, en er þegar að gefa til kynna sérstaka seinkun. Og ég rekst á svarið sem ég hef þegar fundið, fólk segir að vandamálið sé í DNS, en ég veit fyrir víst að það er ekkert vandamál, öll heimilisföng eru leyst!
Augljóst - ekki líklegt
Það er ekkert að gera, ég tek upp nslookup og bingó (vildi að ég gæti gert þetta strax)! Aðal DNS er til staðar (sýndarvél með stjórnandi), en ég tók ekki einu sinni eftir því! Ef það væri aðeins eitt DNS væri villa 😉
Samtals
Grundvallarvandamál sem hefði verið hægt að sjá með vöktun (sem ætti að vera stillt fyrir alla hnúta), gríma með DNS bilanaþoli, leiddi til þess að næstum tveir virkir dagar tapuðust við að leysa heimskulegar aðstæður. Leti er sársauki, að setja upp eftirlit tekur eina mínútu og að leita að vandamáli þar sem ekkert er tekur tvo daga.
Aðeins skráðir notendur geta tekið þátt í könnuninni. , takk.
Hefur þetta einhvern tíma komið fyrir þig?
-
Já, mjög sjaldan
-
Já, sjaldan
-
Oft
-
Mjög oft
-
Nei, með hverjum sem er, bara ekki með mér!
-
Nei, ég er óskeikull!
2 notendur kusu. 1 notandi sat hjá.
Heimild: www.habr.com