3. Elastic stack: analiza sigurnosnih logova. Nadzorne ploče

3. Elastic stack: analiza sigurnosnih logova. Nadzorne ploče

U prethodnim člancima smo se malo upoznali sa ELK stekom i podešavanjem konfiguracijske datoteke Logstash za parsiranje logova. U ovom članku prelazimo na najvažniju stvar s gledišta analitike, ono što želite vidjeti iz sustava i za što je sve stvoreno — grafike i tablice povezane u nadgledne ploče. Danas ćemo se pobliže upoznati sa sustavom vizualizacije Kibana, razmotrit ćemo kako stvarati grafike i tablice, a kao rezultat izgradit ćemo jednostavnu nadglednu ploču na temelju logova s vatrozida Check Point.

Prvi korak u radu s Kibana-om je kreiranje uzorka indeksa, logično, to je skup indeksa jedinstvenih prema određenom principu. Naravno, to je isključivo konfiguracija kako bi Kibana lakše pretraživala informacije po svim indeksima istovremeno. Postavlja se na temelju podudaranja niza, recimo “checkpoint-*” i naziva indeksa. Na primjer, „checkpoint-2019.12.05“ odgovara uzorku, dok „checkpoint“ ne odgovara. Odvojeno vrijedi napomenuti da se u pretraživanju ne može tražiti informacije po različitim uzorcima indeksa istovremeno. U kasnijim člancima vidjet ćemo da se API zahtjevi šalju ili po nazivu indeksa, ili upravo prema jednom uzorku, slika je klikabilna:

3. Elastic stack: analiza sigurnosnih logova. Nadzorne ploče

Nakon toga provjeravamo u izborniku Otkriji, da li se svi logovi indeksiraju i da li je podešen pravi parser. Ako se uoče neka neslaganja, kao što je promjena tipa podataka iz stringa u cijeli broj, potrebno je urediti konfiguracijsku datoteku Logstash, a kao rezultat novi logovi će se ispravno zapisivati. Kako bi se stari logovi prilagodili potrebnom izgledu, pomaže samo proces ponovne indeksacije, a u kasnijim člancima ova operacija će biti detaljnije razmotrena. Uvjereni smo da je sve u redu, slika je klikabilna:

3. Elastic stack: analiza sigurnosnih logova. Nadzorne ploče

Logovi su na mjestu, što znači da se može pristupiti izgradnji nadglednih ploča. Na temelju analitike nadglednih ploča od sigurnosnih proizvoda može se shvatiti stanje informacijske sigurnosti u organizaciji, vizualno prikazati ranjiva mjesta u trenutnoj politici i kasnije razviti načine za njihovo otklanjanje. Izgradit ćemo malu nadglednu ploču koristeći nekoliko sredstava vizualizacije. Nadgledna ploča će se sastojati od 5 komponenti:

  1. tablica za brojanje ukupnog broja logova po bleydovima
  2. tablicu po kritičnim potpisima IPS
  3. kružnu dijagramu po događajima prevencije prijetnji
  4. dijagram o najpopularnijim posjećenim stranicama
  5. dijagram o korištenju najopasnijih aplikacija

Za izradu vizualizacijskih figura, potrebno je otići u izbornik Vizualiziraj, i odabrati potrebnu figuru koju želimo izraditi! Idemo redom.

Tablica za računanje ukupne količine logova po čeličnim strukturama

Za to odabiremo figuru Data Table, dolazimo do alata za izradu grafova, lijevo se postavljaju postavke figure, a desno kako će izgledati prema trenutnim postavkama. Prvo ću prikazati kako će izgledati gotova tablica, nakon toga ćemo proći kroz postavke, slika je klikabilna:

3. Elastic stack: analiza sigurnosnih logova. Nadzorne ploče

Detaljnije postavke figure, slika je klikabilna:

3. Elastic stack: analiza sigurnosnih logova. Nadzorne ploče

Razmotrit ćemo postavke.

Prvo se postavlja metrika, ta vrijednost će biti osnovna za agregaciju svih polja. Metričke vrijednosti se izračunavaju na temelju vrijednosti izvučenih različitim metodama iz dokumenata. Vrijednosti se obično izvode iz polja dokumenata, ali se također mogu generirati koristeći skripte. U ovom slučaju postavljamo u Agregacija: Broj (ukupna količina logova).

Nakon toga dijelimo tablicu po segmentima (poljima), prema kojima će se računati metrike. Ovu funkciju obavlja postavka Buckets, koja se sastoji od 2 opcije postavke:

  1. split rows — dodavanje kolona i naknadno dijeljenje tablice na redove
  2. split table — dijeljenje na više tablica prema vrijednostima određenog polja.

U buckets Moguće je dodati nekoliko dijeljenja za stvaranje više kolona ili tablica, ograničenje je uglavnom logično. U agregaciji možemo odabrati na koji način će se dijeljenje odvijati: ipv4 range, date range, Terms itd. Najzanimljiviji izbor je upravo Terms i Significant Terms, dijeljenje na segmente vrši se prema vrijednostima određenog polja indeksa, razlika između njih leži u broju vraćenih vrijednosti i njihovom prikazu. Budući da želimo podijeliti tablicu prema nazivima čeličnih struktura, biramo polje — product.keyword i postavljamo veličinu na 25 vraćenih vrijednosti.

Umjesto redova, u elasticsearchu se koriste 2 tipa podataka — text i keyword. Ako želite izvršiti punopisno pretraživanje, trebate koristiti tip text, što je vrlo zgodno prilikom pisanja vlastitog pretraživačkog servisa, na primjer, kada tražite spominjanje riječi u određenom značenju polja (tekstu). Ako želite samo točno podudaranje, trebate koristiti tip keyword. Također, tip podataka keyword treba koristiti za polja koja zahtijevaju sortiranje ili agregaciju, odnosno, u našem slučaju.

Kao rezultat, Elasticsearch broji broj logova za određeno vrijeme s agregacijom prema vrijednosti u polju product. U Custom Label postavljamo naziv kolone koja će se prikazivati u tabeli, postavljamo vrijeme za koje prikupljamo logove, pokrećemo vizualizaciju - Kibana šalje upit u Elasticsearch, čeka odgovor i zatim vizualizira prikupljene podatke. Tablica je spremna!

Kružna dijagrama za događaje Threat Prevention

Poseban interes predstavlja informacija koliko zapravo u postotnom omjeru reagiranja detect i prevent na incidente IB u trenutnoj politici sigurnosti. Za takav slučaj dobro odgovara kružna dijagrama. Biramo u Visualize - Pie chart. Također, u metričkim svojstvima postavljamo agregaciju prema broju logova. U buckets postavljamo Terms => action.

Izgleda da je sve ispravno, ali rezultati prikazuju vrijednosti za sve bladeove, potrebno ih je filtrirati samo po onim bladeovima koji rade u okviru Threat Prevention. Zato obavezno postavljamo filtr za traženje informacija samo po bladeovima odgovornim za incidente IB — product: ("Anti-Bot" OR "New Anti-Virus" OR "DDoS Protector" OR "SmartDefense" OR "Threat Emulation"). Slika je klikabilna:

3. Elastic stack: analiza sigurnosnih logova. Nadzorne ploče

I detaljnije postavke, slika je klikabilna:

3. Elastic stack: analiza sigurnosnih logova. Nadzorne ploče

Tablica za događaje IPS

Dalje, vrlo važno s aspekta IB je pregled i provjera događaja prema bladeu IPS i Threat Emulation, koji ne blokiraju trenutnom politikom, kako bismo u budućnosti ili prebacili potpis u prevent, ili ako je promet valjan - ne provjeravali potpis. Tablicu kreiramo također kao i za prvi primjer, samo s razlikom što kreiramo nekoliko kolona: protections.keyword, severity.keyword, product.keyword, originsicname.keyword. Obavezno postavljamo filtr za traženje informacija samo po bladeovima odgovornim za incidente IB — product: ("SmartDefense" OR "Threat Emulation"). Slika je klikabilna:

3. Elastic stack: analiza sigurnosnih logova. Nadzorne ploče

Detaljnije postavke, slika je klikabilna:

3. Elastic stack: analiza sigurnosnih logova. Nadzorne ploče

Grafikon o najpopularnijim posjećenim stranicama

Za to stvaramo figure — Vertical Bar. Metričku također koristimo count (os Y), a na os X kao vrijednosti koristimo nazive posjećenih stranica — "appi_name". Tu se skriva mala caka; ako pokrenemo postavke u trenutnoj varijanti, sve će stranice biti označene istom bojom na grafikonu. Da bismo ih učinili raznobojnim, koristimo dodatnu postavku — "split series", koja omogućuje dijeljenje već gotove kolone na još nekoliko vrijednosti, ovisno o odabranom polju, naravno! Ovo dijeljenje možemo koristiti kao jednu raznobojnu kolonu prema vrijednostima u režimu stacked, ili u režimu normal kako bismo stvorili nekoliko kolona prema određenim vrijednostima na os X. U ovom slučaju koristimo istu vrijednost kao i na os X, što omogućava da sve kolone budu raznobojne, a s desne strane bit će označene bojama. U filtru postavljamo — product: "URL Filtering" da bismo vidjeli informacije samo o posjećenim stranicama; slika je klikabilna:

3. Elastic stack: analiza sigurnosnih logova. Nadzorne ploče

Postavke:

3. Elastic stack: analiza sigurnosnih logova. Nadzorne ploče

Grafikon o korištenju najopasnijih aplikacija

Za to stvaramo figure — Vertical Bar. Metričku također koristimo count (os Y), a na os X kao vrijednosti koristimo nazive korištenih aplikacija — "appi_name". Najvažnije je postaviti filtar — product: "Application Control" AND app_risk: (4 OR 5 OR 3 ) AND action: "accept". Filtriramo logove prema bladu Application control, uzimamo samo one stranice koje su kategorizirane kao stranice s rizikom Critical, High, Medium i to samo u slučaju da je na te stranice pristup dopušten. Slika je klikabilna:

3. Elastic stack: analiza sigurnosnih logova. Nadzorne ploče

Postavke, klikabilno:

3. Elastic stack: analiza sigurnosnih logova. Nadzorne ploče

Nadzorna ploča

Pregled i izrada nadzorne ploče nalazi se u posebnoj stavci izbornika — Nadzorna ploča. Ovdje je sve jednostavno; kreira se nova nadzorna ploča, dodaje se vizualizacija, postavlja se na mjesta i to je to!

Kreiramo nadzornu ploču koja će omogućiti razumijevanje osnovne situacije stanja IB u organizaciji, naravno, samo na razini Check Point; slika je klikabilna:

3. Elastic stack: analiza sigurnosnih logova. Nadzorne ploče

Na temelju ovih grafikona možemo razumjeti koje kritične potpise nisu blokirane na vatrozidu, gdje se korisnici kreću i koje najopasnije aplikacije koriste.

Zaključak

Istražili smo mogućnosti osnovne vizualizacije u Kibani i stvorili nadzornu ploču, ali to je samo mali dio. U nastavku tečaja posebno ćemo se posvetiti postavkama karata, radu sa sustavom Elasticsearch, upoznati se s API pozivima, automatizacijom i još mnogo toga!

Stoga pratite novosti (Telegram, Facebook, VK, TS Solution Blog), Yandex.Zen.

Izvor: habr.com

Kupite pouzdan hosting za web stranice s DDoS zaštitom, VPS VDS servere 🔥 Kupite pouzdan hosting za web stranice s DDoS zaštitom, VPS VDS servere | ProHoster