Ovo je mala priča iz stvarne prakse, kada se mala problem, dobro maskirana otpornosti na kvar, pretvara u glavobolju.
Mala dispozicija:
Mali ured, ima svoju ATE (asterisk + FreePBX) na osnovi desktop hardvera i lokalni terminalski server s 1C, odlagalištem datoteka i virtuelnim RO kontrolerom domene. Internet dijeli Mikrotik. Ured je mali, to im je dovoljno.
Sve je počelo s monitoringom (zbog nedostatka vremena i lenjosti ne prati se sve), koji je prijavio pregrijavanje jednog servera (s ATE) u uredu. Dok su lokalni rješavali problem, starac se zamrzao i malo pokvario MySQL bazu.
Mnogo toga je najavljivalo nevolju, ali ne ovo...
Nije problem, baza je popravljena, sve bi trebalo raditi. Ali lokalni se žale, pozivi prekidaju. Dobro — problemi u FreePBX se dešavaju, uzimam backup, pokrećem, sve je u redu.
No nevolja je na mjestu, lokalni se još uvijek žale, pozivi ne funkcionišu ispravno. Čini se da poziv prolazi normalno do njih, ali kada oni sami zovu ili zovu jedni druge, dobiju kašnjenje od nekoliko sekundi. Počnem gledati opsežne i nerazumljive logove Asteriska i FreePBX-a, ne uspijevam uočiti problem. Sjećam se da je bila problem sa STUN-om i ICE-om, koji su davali slična kašnjenja. Isključujem sve, rezultat nula.
Depresija — put ka donošenju loših odluka:
Upadam u depresiju, višesatno kopanje po ATE-u ne donosi ništa dobro, već je duboka noć, a problem nije riješen.
Ostavio sam problem do jutra, s nadom da će svježa glava pomoći. Jutro donosi još jednu neuspješnu odluku: kad je sistem već pokvaren (iako zamrzavanje nije moglo biti toliko destruktivno) pokušavam popraviti sistem reinstalacijom svih paketa. Rezultat nešto malo više od nule, kašnjenje se smanjilo (ne znatno, ali već uspjeh).
Donosim još jednu lošu odluku: ako je djelomična popravka OS-a (i baze podataka iz rezervne kopije) imala mali uspjeh, a korijen problema i dalje nije jasan, a pritom je već potrošeno jako puno vremena na pronalaženje uzroka, odlučujem djelovati radikalno: brišem OS i instaliram sve iz početka (na sreću, automatizacija procesa to čini za prihvatljivo vreme). Instaliram konfiguraciju FreePBX iz kopije. Ponovo neuspeh. Rezultat nula!
Očaj — um je zatvoren, odluke postaju još gori.
Upadam u očaj. Počinju dolaziti potpuno loše misli, mislim: možda je konfa u backupu loša (imao sam to nakon niza ažuriranja, kada nije radila i nisam uspeo da pronađem uzrok), ništa ne preostaje: treba sve instalirati ispočetka ručno. Kakva sramota! Rezultat je strogo nula, a uz to je potrošeno ogromno vreme!
Prihvatanje — put ka svesti.
U očajničkim pokušajima da razumem šta se dešava, počinjem pažljivo proučavati logove. Primećujem obrazac. Poziv Extension traje tačno 5 sekundi, a za grupu poziva od 3 Extension 15! Počinjem da tražim informacije o kašnjenju poziva, ali već ukazujući na konkretno kašnjenje. I nailazim na odgovor koji sam već pronašao, ljudi kažu da je problem u DNS-u, ali ja tačno znam da problema nema, sve adrese se rešavaju!
Očigledno — nije verovatno.
Nema šta da se radi, uzimam nslookup i bingo (trebalo je to odmah uraditi)! Prvi DNS je neaktivan (virtuelna mašina sa kontrolerom), a ja to nisam primetio! Da je bio samo jedan DNS, odmah bi bila greška 😉.
Zaključak
Elementarni problem koji je mogao biti uočen monitoringom (koji treba postaviti za sve čvorove), maskiran otpornošću DNS-a, doveo je do gubitka skoro dva radna dana rešavajući glupavu situaciju. Lenjost vodi do glavobolje, postaviti monitoring traje minut — tražiti problem tamo gde ga nema — dva dana.
Samo registrovani korisnici mogu učestvovati u anketi. , molim vas.
Da li se tako nešto desilo i vama?
Da, vrlo retko.
Da, retko.
Da, često.
Da, vrlo često.
Ne, sa kim god, samo ne sa mnom!
Ne, ja sam nepogrešiv!
Glasala su 2 korisnika. Uzdržao se 1 korisnik.
Izvor: habr.com
