Naš tim je veoma srećan što može da podeli vest da je objavljena slobodna sistema za praćenje sa otvorenim kodom !

Da li je verzija 4.2 odgovor na glavno pitanje života, univerzuma i praćenja u celini? Pogledajmo!
Podsećamo da je Zabbix univerzalni sistem za praćenje performansi i dostupnosti servera, inženjerske i mrežne opreme, aplikacija, baza podataka, sistema virtualizacije, kontejnera, IT usluga i veb usluga.
Zabbix implementira puni ciklus od prikupljanja podataka, njihove obrade i transformacije, analize prikupljenih podataka, do čuvanja tih podataka, vizualizacije i slanja upozorenja koristeći pravila eskalacije. Takođe, sistem pruža fleksibilne mogućnosti proširenja metoda prikupljanja podataka i upozorenja, kao i mogućnosti automatizacije putem API-ja. Jedinstveni veb interfejs implementira centralizovano upravljanje konfiguracijama praćenja i raspodelu prava pristupa različitim grupama korisnika. Kod projekta se slobodno deli pod licencom .
Zabbix 4.2 je nova ne LTS verzija sa kraćim vremenom zvanične podrške. Korisnicima koji se oslanjaju na duži ciklus eksploatacije softverskih proizvoda preporučujemo korišćenje LTS verzija kao što su 3.0 i 4.0.
Dakle, hajde da pričamo o novinama i glavnim unapređenjima verzije 4.2:
Više zvaničnih platformi

Pored već postojećih zvaničnih paketa, takođe nudimo nove verzije za:
- RaspberryPi, Mac OS/X, SUSE Enterprise Linux Server 12
- MSI za Windows agenta
- Docker slike
Ugrađena podrška za Prometheus za praćenje aplikacija
Zabbix može prikupljati podatke na različite načine (push/pull) iz različitih izvora podataka. Ovo uključuje JMX, SNMP, WMI, HTTP/HTTPS, RestAPI, XML Soap, SSH, Telnet, agente i skripte, kao i druge izvore. A sada vam predstavljamo podršku za Prometheus!
Strogo govoreći, prikupljanje podataka iz eksportera Prometheus je bilo moguće i ranije zahvaljujući tipu elemenata podataka HTTP/HTTPS i regularnim izrazima.
Međutim, nova verzija omogućava rad sa Prometheusom na maksimalno efikasan način zahvaljujući ugrađenoj podršci za jezik upita PromQL. A korišćenje zavisnih metrika omogućava prikupljanje i obradu podataka na najefikasniji način: jednom se obrate za podatke, a zatim se raspoređuju po potrebnim metrima.
Dohvatamo vrijednost određene metrike
Važno je napomenuti da trenutno nisko-nivojsko otkrivanje može koristiti prikupljene podatke za automatsko kreiranje metrika. U ovom slučaju, Zabbix pretvara prikupljene podatke u JSON format, koji je vrlo pogodan za rad.
Nalazimo metrike koristeći filter na jeziku upita PromQL
Trenutno postoji više od spoljnih servisa i aplikacija pomoću Zabbixa. Podrška za Prometheus omogućava dodavanje čitavog niza aplikacija koje imaju zvanične ili zajednički podržane Prometheus izvođače. To je monitoring popularnih servisa, kontejnera i cloud resursa.
Efikasan visokofrekventni monitoring
Želimo li da otkrivamo probleme što je pre moguće? Naravno, nema sumnje! Najčešće takav pristup dovodi do toga da moramo previše često komunicirati sa uređajima i prikupljati podatke, što dovodi do većeg opterećenja na sistem monitoringa. Kako to izbeći?
Implementirali smo mehanizam throttlinga u pravilima preprocesiranja. Throttling, u suštini, pruža nam mogućnost preskakanja identičnih vrednosti.
Pretpostavimo da pratimo stanje kritične aplikacije. Svake sekunde provjeravamo da li naša aplikacija funkcioniše ili ne. U tom trenutku, Zabbix prima kontinuirani tok podataka od 1 (radi) i 0 (ne radi). Na primer: 1111111111110001111111111111…
Kada je sa našom aplikacijom sve u redu, Zabbix prima tok od samo jednički. Da li ih treba obraditi? U suštini ne, jer nas samo zanima promena stanja aplikacije, ne želimo da prikupljamo i skladištimo toliko podataka. Tako, throttling omogućava preskakanje vrednosti ako je identična prethodnoj. Na kraju dobijamo samo podatke o promeni stanja, na primer, 01010101… Sasvim dovoljno informacija za otkrivanje problema!
Propuštene vrednosti Zabbix jednostavno ignoriše, ne beleže se u istoriju i ne utiču na okidače. Sa stanovišta Zabbixa, propuštene vrednosti ne postoje.
Ignorišemo ponavljajuće vrednosti
Super! Sada možemo vrlo često da komuniciramo s uređajima, istovremeno trenutnom otkrivanju problema bez skladištenja nepotrebnih informacija u bazi podataka.
A šta je s grafikonima? Oni će biti prazni zbog nedostatka podataka! Kako možemo znati prikuplja li Zabbix podatke, kada će većina tih podataka biti propuštena?
I na to smo mislili! Zabbix nudi još jedan tip usporavanja, usporavanje sa kontrolnim tačkama (throttling with heartbeat).
Jednom u minuti provjeravamo da li je metrika živa.
U tom slučaju, Zabbix, usprkos ponavljanju toka podataka, zadržat će najmanje jednu vrijednost u navedenom vremenskom intervalu. Ako se podaci prikupljaju svake sekunde, a interval je postavljen na jednu minutu, Zabbix će pretvoriti tok od jedan beš u minutni tok. Nije teško primijetiti da to dovodi do 60-strukog kompresovanja prikupljenih podataka.
Sada smo sigurni da se podaci prikupljaju, funkcija okidača nodata() radi, i sa grafikonima je sve u redu!
Validacija prikupljenih podataka i obrada grešaka.
Niko od nas ne želi prikupljati pogrešne ili nepouzdane podatke. Na primjer, znamo da senzor temperature treba vraćati podatke u rasponu od 0°C do 100°C, i svaka druga vrijednost treba se smatrati pogrešnom i/ili biti ignorisana.
Sada je to moguće putem ugrađenih pravila za validaciju podataka u preprocesingu po usklađenosti ili neusaglašenosti sa regularnim izrazima, rasponu vrijednosti, JSONPath i XMLPath.
Sada možemo upravljati reakcijom na grešku. Ako je temperatura izvan raspona, možemo jednostavno ignorisati takvu vrijednost, postaviti zadanu vrijednost (na primjer, 0°C), ili odrediti vlastitu poruku o grešci, poput "Senzor je oštećen" ili "Zamijenite bateriju."
Temperatura mora biti od 0 do 100, ostalo ignorišemo.
Dobar primjer korištenja validacije je mogućnost provjere ulaznih podataka na prisutnost poruke o grešci i postavljanje te greške za cijelu metriku. To je veoma korisna funkcionalnost prilikom dobijanja podataka iz vanjskih API-ja.
Svaka transformacija podataka pomoću JavaScripta.
Ako nam nisu dovoljna ugrađena pravila preprocesinga, sada nudimo potpunu slobodu korištenjem proizvoljnih skripti u JavaScriptu!
Samo jedan redak koda za pretvaranje stepeni po Fahrenheit-u u stepeni Celzijusa.
Ovo otvara beskrajne mogućnosti obrade ulaznih podataka. Praktična korist ove funkcionalnosti je u tome što nam više nisu potrebni eksterne skripte koje smo koristili za bilo kakve operacije s podacima. Sada se sve to može uraditi pomoću JavaScript-a.
Sada su mogući transformacija podataka, agregacija, filteri, aritmetičke i logičke operacije i još mnogo toga!
Izvlačimo korisne informacije iz izlaza Apache mod_status!
Testiramo preprocessing
Sada ne moramo nagađati kako funkcionišu naši složeni scenariji preprocessinga. Pojavila se zgodna provera tačnosti rada preprocessinga direktno iz interfejsa!
Obrađujemo milionske metrike u sekundi!
Do Zabbix 4.2 preprocessing se sprovodio isključivo na Zabbix serveru, što je ograničavalo mogućnosti primene proxy-ja za raspodelu opterećenja.
Počevši od verzije Zabbix 4.2, dobijamo neverovatno efikasno skaliranje opterećenja zahvaljujući podršci preprocessinga na strani proxy-ja. Sada se tim bave proxy-ji!
U kombinaciji sa throttlingom, ovakav pristup omogućava visokofrekventno skaliranje monitoringa i obavljanje miliona provera u sekundi, ne opterećujući pritom centralni Zabbix server. Proxy-ji obrađuju ogromne količine podataka, pri čemu do Zabbix servera zahvaljujući throttlingu dolazi samo mali deo, jedan do dva reda veličine manje.
Jednostavnije nisko-nivo otkriće
Podsećamo da je nisko-nivo otkriće (LLD) veoma moćan mehanizam za automatsko otkrivanje bilo koje vrste resursa za monitoring (fajl sistema, procesa, aplikacija, servisa, itd.) i automatsko kreiranje na njihovoj osnovi elemenata podataka, okidača, čvorova mreže i drugih objekata. Ovo neverovatno ušteda vreme, pojednostavljuje konfiguraciju i omogućava korišćenje jednog šablona za čvorove mreže koji imaju različite resurse za monitoring.
Nisko-nivo otkriće je zahtevalo posebno oblikovan JSON kao ulaz. Sada, to više neće biti slučaj!
Zabbix 4.2 omogućava niskonivojsko otkrivanje (LLD) korišćenje proizvoljno formatiranih podataka u JSON formatu. Zašto je to važno? To omogućava komunikaciju sa spoljnim API-jem, na primer, bez upotrebe skripti i korišćenje dobijenih informacija za automatsko kreiranje mrežnih čvorova, podataka i okidača.
U kombinaciji sa podrškom za JavaScript, ovo otvara fantastične mogućnosti za kreiranje šablona za rad sa različitim izvorima podataka, kao što su, na primer, oblačni API, aplikacijski API, podaci u formatima XML, CSV i mnogi drugi.
Povezujemo JSON sa informacijama o procesima koristeći LLD
Mogućnosti su zaista neograničene!
Podrška za TimescaleDB
Šta je TimescaleDB? To je obični PostgreSQL plus dodatak od tima TimescaleDB. TimescaleDB obećava bolju performansu zahvaljujući efikasnijim algoritmima i strukturi podataka.
Pored toga, još jedna prednost TimescaleDB-a je automatsko particionisanje tabela sa istorijom. TimescaleDB je brzina i jednostavno održavanje! Iako, moram napomenuti da naš tim još uvek nije sproveo ozbiljno poređenje performansi sa običnim PostgreSQL.
Trenutno je TimescaleDB dovoljno mlad i brzo se razvijajući proizvod. Koristite sa oprezom!
Lako upravljanje oznakama
Ako se ranije oznakama moglo upravljati samo na nivou okidača, sada je upravljanje oznakama mnogo fleksibilnije. Zabbix podržava oznake za šablone i mrežne čvorove!
Sve pronađene probleme dobijaju oznake ne samo okidača, već i mrežnog čvora, kao i šablona tog mrežnog čvora.
Definišemo oznake za mrežni čvor
Fleksibilnija automatska registracija
Zabbix 4.2 omogućava filtriranje mrežnih čvorova prema imenu koristeći regularne izraze. Ovo omogućava kreiranje različitih scenarija otkrivanja za različite grupe mrežnih čvorova. Posebno je korisno kada imamo složena pravila imenovanja uređaja.
Fleksibilnije mrežno otkrivanje
Još jedno poboljšanje se odnosi na imenovanje mrežnih čvorova. Postoji mogućnost upravljanja imenima uređaja prilikom mrežnog otkrivanja i dobijanja imena uređaja iz vrednosti metrike.
Ova funkcionalnost je vrlo potrebna, posebno prilikom mrežnog otkrivanja koristeći SNMP i Zabbix agenta.
Automatski dodeljujemo lokalno ime mrežnog čvora kao vidljivo ime
Provjeravanje funkcionalnosti obavještavanja
Sada možete slati sebi testnu poruku direktno iz web sučelja i provjeriti radi li način obavještavanja. Ova funkcionalnost je posebno korisna za testiranje skripti za integraciju Zabbixa s raznim sustavima obavještavanja, sustavima zadataka i drugim vanjskim programima i API-jima.
Udaljeno praćenje komponenti infrastrukture Zabbix
Uvođenje mogućnosti udaljenog praćenja internih metrika Zabbix poslužitelja i proxyja (metrika performansi i funkcionalnosti komponenti Zabbixa).
Zašto je to potrebno? Ova funkcionalnost omogućuje nadgledanje internih metrika poslužitelja i proxyja, omogućava brzo otkrivanje i obavještavanje o problemima čak i kada su same komponente preopterećene ili, na primjer, kada je na proxyju veliki volumen neposlanih podataka.
Podrška za HTML format za e-mail poruke
Sada nismo ograničeni na običan tekst i možemo oblikovati lijepe e-mail poruke zahvaljujući podršci za HTML format. Vrijeme je da naučite HTML + CSS!
Poruke su lakše za razumijevanje čak i uz minimalnu upotrebu HTML-a
Pristup vanjskim sustavima iz mrežnih karata
Uvedena je podrška za cijeli niz novih makroa u korisničkim URL-ovima za bolju integraciju karata s vanjskim sustavima. To omogućava da jednim ili dva klika na ikonicu mrežnog čvora otvorite, na primjer, tiket u sustavu zadataka.
Jednim klikom otvaramo tiket u Jiri
Pravila otkrivanja mogu biti zavisna od podataka
Zašto je to potrebno — pitate se. To omogućuje korištenje podataka osnovne metrike za otkrivanje i za neposredno prikupljanje podataka. Na primjer, u slučaju prikupljanja podataka iz Prometheus eksportera, Zabbix će izvršiti jedan HTTP zahtjev i odmah koristiti dobijene informacije za sve zavisne elemente podataka: vrijednosti metrika i pravila niskog nivoa otkrivanja.
Nov način vizualizacije problema na kartama
Uvedena je podrška za animirane GIF slike na kartama za bolje isticanje problema.
Problemi s uređajima postali su uočljiviji
Izvlačenje podataka iz HTTP zaglavlja u web monitoringu
U web monitoringu dodana je mogućnost odabira podataka iz primljenog HTTP zaglavlja.
Ovo omogućava kreiranje višestepenih skripti za web nadzor ili nadzor spoljnih API-a, koristeći token autorizacije dobijen u jednom od koraka.
Izvlačimo AuthID iz HTTP zaglavlja
Zabbix Sender koristi sve IP adrese
Zabbix Sender sada šalje podatke sa svih IP adresa iz parametra ServerActive konfiguracionog fajla agenta.
Praktični novi filter u konfiguraciji okidača
Stranica za konfiguraciju okidača je dobila napredni filter za brzi i jednostavni odabir okidača prema zadatim kriterijumima.
Biramo okidače povezane sa K8S servisom
Prikazujemo tačno vreme
Ovde je sve jednostavno, sada Zabbix prikazuje tačno vreme kada pređemo mišem preko grafikona.

Druga poboljšanja
- Implementiran je predvidljiviji algoritam za promenu reda rasporeda vidžeta na kontrolnoj tabli (dashboard)
- Mogućnost masovnog menjanja parametara prototipa elemenata podataka
- Podrška za IPv6 za DNS provere: «net.dns» i «new.dns.record»
- Dodat je parametar «skip» za provere «vmware.eventlog»
- Greška prilikom izvršenja koraka preprocesiranja uključuje broj koraka
Kako se nadograditi?
Za prelazak sa ranijih verzija potrebno je samo instalirati (servere i proksije) i novo sučelje. Zabbix će automatski izvršiti proceduru nadogradnje baze podataka. Instalacija novih agenata nije potrebna.
Organizujemo besplatne vebinare za sve koji žele da saznaju više o Zabbix 4.2 i imaju priliku da postave pitanja timu Zabbix.
Ne zaboravimo na popularni Zabbix zajednice, gde uvek možete dobiti savete i odgovore na svoja pitanja na ruskom jeziku od iskusnijih kolega, a, ako imate sreće, i od samih programera Zabbixa. Preporučujemo novajlijama .
Korisne poveznice
—
—
—
Izvor: habr.com
