Ovo je mala priča iz stvarne prakse, kada se mala problematika, dobro prikrivena otpornošću, pretvara u glavobolju.
Mala dispozicija:
Mali ogranak, ima svoju PBX (Asterisk + FreePBX) na bazi desktop hardvera i takođe lokalni terminal server sa 1C, datotekama i virtuelnim RO kontrolerom domene. Internet deli Mikrotik. Ogranak je mali, njima je to dovoljno.
Sve je počelo sa monitoringom (zbog nedostatka vremena i lenjosti ne prati se sve), koji je prijavio pregrevanje jednog poslužitelja (sa PBX-om) u ogranku. Dok su lokalni rešavali problem, starac se zapleo i malo je pokvario MySQL bazu.
Mnogo toga je naslućivalo nesreću, ali ne ovu…
Nije problem, baza je popravljena, sve bi trebalo raditi. Ali lokalni se žale, pozivi se prekidaju. U redu — problem u FreePBX se dešava, uzimam bekap, obnavljam, sve u redu.
Ali problem ostaje, lokalni se i dalje žale, pozivi ne funkcionišu normalno. Čini se da je poziv do njih prošao normalno, ali kada oni pozivaju, ili se zovu međusobno, dolazi do kašnjenja od nekoliko sekundi. Počinjem da pregledam obimne i nerazumljive logove Asteriska i FreePBX-a, u njima ne uspevam da uočim problem. Pamtim da je bila problematika sa STUN i ICE-om, koja je davala slična kašnjenja. Isključujem sve dođavola, rezultat nula.
Beznađe — put ka donošenju loših odluka:
Upadam u beznađe, višesatno petljanje s PBX-om ne dovodi ni do čega dobrog, već je duboka noć i problem nije rešen.
Ostavio sam problem do jutra, nadajući se svežem razmišljanju. Ujutro je doneta nova neuspešna odluka: pošto se sistem pokvario (iako zamrzavanje nije moglo biti tako razarajuće) pokušavam da popravim sistem ponovnom instalacijom svih paketa. Rezultat malo iznad nule, kašnjenje se smanjilo (ne značajno, ali već uspeh).
Donosim još jednu lošu odluku: ako je delimična popravka OS-a (i baze podataka iz rezervne kopije) imala mali uspeh, a koren problema još uvek nije jasan, i pritom je već utrošeno vrlo puno vremena na pronalaženje uzroka, odlučujem da delujem radikalno: brišem OS i nalazim sve s čistog lista (na sreću, automatizacija ovog procesa to čini u razumnom vremenu). Preuzimam konfiguraciju FreePBX iz rezervne kopije. Još jedan neuspjeh. Rezultat nula!
Očaj — um se zamagljuje, rešenja postaju još gora.
Upadam u očaj. Počinju mi se javljati potpuno loše misli, mislim: možda je backup loš (istog sam se suočio nakon nekoliko ažuriranja, kada nije radilo i nisam uspio pronaći uzrok), ništa drugo ne preostaje: moram sve ručno obnoviti s čistim početkom. Kakva sramota! Rezultat je strogo nula, a i potrošeno je bezbroj vremena!
Prihvaćanje — put do spoznaje
U očajničkim pokušajima da shvatim što se događa, pažljivo proučavam logove. Primjećujem obrazac. Poziv Extension se događa točno nakon 5 sekundi, a za grupu poziva od 3 Extension nakon 15! Počinjem pretraživati o kašnjenju poziva, ali već navodeći konkretno kašnjenje. I naletim na već pronađeni odgovor, ljudi govore da je problem u DNS-u, no ja sigurno znam da problema nema, sve adrese se rješavaju!
Očito — ne vjerojatno
Nemam što drugo raditi, uzimam nslookup i bingo (da sam to odmah napravio)! Primarni DNS ne radi (virtualka s kontrolerom), a nisam ni primijetio! Da je bio jedan DNS, odmah bi bila greška 😉
Zaključak
Elementarni problem, koji bi monitoring mogao uočiti (a koji treba postaviti za sve čvorove), maskiran DNS-ovom otpornosti, doveo je do gubitka gotovo dva radna dana na rješavanje glupe situacije. Lijenost stvara probleme, postavljanje monitoringa traje minutu — tražiti problem gdje ga nema — dva dana.
Samo registrirani korisnici mogu sudjelovati u anketi. , molimo.
Da li se i vama slično dogodilo?
Da, vrlo rijetko
Da, rijetko
Da, često
Da, vrlo često
Ne, s kim god, samo ne sa mnom!
Ne, ja sam nepogrešiv!
Glasali su 2 korisnika. Suzdržan 1 korisnik.
Izvor: habr.com
