3. Elastic stack: analiza sigurnosnih logova. Dashboardi

3. Elastic stack: analiza sigurnosnih logova. Dashboardi

U prethodnim člancima upoznali smo se sa ELK stekom i postavljanjem konfiguracionog fajla Logstash za parsiranje logova. U ovom članku prelazimo na ono najvažnije iz analitičkog aspekta, ono što želite da vidite od sistema i zbog čega je sve ovo stvoreno — grafike i tabele spojene u dashboarde. Danas ćemo se detaljnije upoznati sa sistemom vizualizacije Kibana, razmotrićemo kako se kreiraju grafike, tabele, i na kraju ćemo izraditi jednostavan dashboard na osnovu logova sa Check Point vatrozida.

Prvi korak u radu sa Kibana je kreiranje index pattern, to su logički podaci o indeksima jedinstvenima prema određenom principu. Naravno, ovo je isključivo podešavanje kako bi Kibana lakše pretraživala informacije kroz sve indekse odjednom. Postavlja se upoređivanjem niza, na primer "checkpoint-*" i nazivom indeksa. Na primer, "checkpoint-2019.12.05" odgovara šablonu, dok "checkpoint" ne. Takođe, važno je napomenuti da nije moguće pretraživati informacije po različitim šablonima indeksa istovremeno. Kasnije u sledećim člancima videćemo kako se API zahtevi podnose ili po nazivu indeksa ili po jednom nizu šablona; slika je klikabilna:

3. Elastic stack: analiza sigurnosnih logova. Dashboardi

Nakon toga proveravamo u meniju Discover da li se svi logovi indeksiraju i da li je ispravan parser podešen. Ako se otkriju neka neslaganja, na primer, ako je potrebno promeniti tip podataka iz niza u celo broj, neophodno je izmeniti konfiguracioni fajl Logstash. U tom slučaju, novi logovi će se ispravno beležiti. Da bi se stari logovi pre promena oblikovali na ispravan način, jedini način je proces reindeksacije, a o ovoj operaciji će se detaljnije govoriti u narednim člancima. Proverimo da li je sve u redu; slika je klikabilna:

3. Elastic stack: analiza sigurnosnih logova. Dashboardi

Logovi su na mestu, što znači da možemo preći na izradu dashboarda. Na osnovu analitike dashboarda iz proizvoda za bezbednost može se razumeti stanje bezbednosti informacija u organizaciji, videti ranjiva mesta u trenutnoj politici i kasnije razviti načine za njihovo rešavanje. Izgradićemo mali dashboard koristeći nekoliko vizualizacijskih alata. Dashboard će se sastojati od 5 komponenti:

  1. tabele za izračunavanje ukupnog broja logova po blade-ovima
  2. tabele za kritične IPS signaturе
  3. torte dijagrama za događaje Threat Prevention
  4. grafikon najpopularnijih posjećenih web stranica
  5. grafikon o korištenju najopasnijih aplikacija

Da bismo stvorili figure vizualizacije, potrebno je preći u izbornik Vizualiziraj, i odabrati potrebnu figuru koju želimo izgraditi! Krenimo redom.

Tabela za brojanje ukupnog broja logova po blaidovima

Za to ćemo odabrati figuru Data Table, ulazimo u alat za izradu grafikona, lijevo se postavljaju postavke figure, desno kako će izgledati prema trenutnim postavkama. Prvo ću pokazati kako će izgledati gotova tabela, nakon toga ćemo proći kroz postavke, slika je preklopiva:

3. Elastic stack: analiza sigurnosnih logova. Dashboardi

Detaljnije postavke figure, slika je preklopiva:

3. Elastic stack: analiza sigurnosnih logova. Dashboardi

Razgovarat ćemo o postavkama.

Prvobitno se postavlja metrika, ova vrijednost po kojoj će se agregirati sva polja. Metre se izračunavaju na temelju vrijednosti dobivenih na različite načine iz dokumenata. Vrijednosti se obično izdvajaju iz polja dokumenta, ali mogu se također generirati korištenjem skripti. U ovom slučaju postavljamo u Agregacija: Broj (ukupan broj logova).

Nakon toga dijelimo tabelu po segmentima (poljima) prema kojima će se računati metrika. Ovu funkciju obavlja postavka Buckets, koja se sastoji od 2 opcije postavke:

  1. split rows — dodavanje kolona i naknadno dijeljenje tabele na redove
  2. split table — dijeljenje na nekoliko tabela prema vrijednostima određenog polja.

U buckets može se dodati nekoliko podjela za stvaranje više kolona ili tabela, ograničenja su logična. U agregaciji se može odabrati na koji način će se vršiti dijeljenje na segmente: ipv4 range, date range, Terms itd. Najzanimljiviji izbor je upravo Terms i Significant Terms, dijeljenje na segmente vrši se prema vrijednostima određenog polja indeksa, razlika između njih leži u broju vraćenih vrijednosti i njihovom prikazivanju. Budući da želimo podijeliti tabelu prema nazivima blaidova, odabiremo polje — product.keyword i postavljamo veličinu na 25 vraćenih vrijednosti.

Umjesto redova, u elasticsearchu se koriste 2 tipa podataka — text i ključna riječ. Ako želite izvršiti puni tekstualni pretraživanje, trebate koristiti tip text, što je vrlo korisna stvar prilikom pisanja svoje pretrage servisa, na primjer, tražite pominjanje reči u određenom značenju polja (teksta). Ako želite samo tačno podudaranje, trebate koristiti tip keyword. Takođe, tip podataka keyword treba koristiti za polja koja zahtevaju sortiranje ili agregaciju, dakle, u našem slučaju.

Kao rezultat, Elasticsearch broji broj logova za određeno vreme sa agregacijom po vrednosti u polju product. U Custom Label postavljamo naziv kolone koja će se prikazivati u tabeli, postavljamo vreme za koje prikupljamo logove, pokrećemo prikaz — Kibana šalje zahtev u elasticsearch, čeka odgovor i zatim vizualizuje dobijene podatke. Tabela je spremna!

Kružna dijagrama po događajima Threat Prevention

Posebno zanimljive informacije su koliko uopšte ima u procentualnom odnosu reakcija detect i prevent na incidente IKT u trenutnoj politici sigurnosti. Za takav slučaj dobro odgovara kružna dijagrama. Biramo u Visualize — Pie chart. Takođe u metrikama postavljamo agregaciju po broju logova. U buckets stavljamo Terms => action.

Izgleda da je sve u redu, ali u rezultatu se prikazuju vrednosti za sve blade-ove, treba filtrirati samo one blade-ove koji rade unutar Threat Prevention. Zato obavezno podešavamo filtriranje da bismo tražili informacije samo o blade-ovima koji odgovaraju za incidente IKT — product: ("Anti-Bot" OR "New Anti-Virus" OR "DDoS Protector" OR "SmartDefense" OR "Threat Emulation"). Slika je klikabilna:

3. Elastic stack: analiza sigurnosnih logova. Dashboardi

I detaljnija podešavanja, slika je klikabilna:

3. Elastic stack: analiza sigurnosnih logova. Dashboardi

Tabela po događajima IPS

Zatim, vrlo važno sa aspekta IKT je pregled i provera događaja po blade-u IPS i Emulacija pretnji, koji ne blokiraju se trenutnom politikom, da bi se kasnije ili prevela potpis u prevent, ili ako je saobraćaj validan — ne proveriti potpis. Tabelu kreiramo kao i za prvi primer, samo sa tom razlikom što kreiramo nekoliko kolona: protections.keyword, severity.keyword, product.keyword, originsicname.keyword. Obavezno podešavamo filtriranje da bismo tražili informacije samo o blade-ovima koji odgovaraju za incidente IKT — product: ("SmartDefense" OR "Threat Emulation"). Slika je klikabilna:

3. Elastic stack: analiza sigurnosnih logova. Dashboardi

Detaljnija podešavanja, slika je klikabilna:

3. Elastic stack: analiza sigurnosnih logova. Dashboardi

Dijagrami po najpopularnijim posećenim sajtovima

Da bismo to uradili, kreiramo figuru — Vertical Bar. Također koristimo metrikui count (osi Y), dok ćemo na osi X koristiti nazive posjećenih web stranica — “appi_name”. Tu postoji mala caka, ako pokrenemo postavke u trenutnoj verziji, sve web stranice će biti označene na grafikonu istom bojom, da bismo ih učinili raznobojnim koristimo dodatnu postavku — “split series”, koja omogućuje da se već gotova kolona podijeli na još nekoliko vrijednosti, u zavisnosti od odabranog polja naravno! Ovo dijeljenje možemo koristiti kao jednu raznobojnu kolonu po vrijednostima u režimu stacked, ili u normalnom režimu za kreiranje više kolona prema određenim vrijednostima sa osi X. U ovom slučaju koristimo istu vrijednost kao i za os X, to omogućava da sve kolone budu raznobojne, a s desne strane će biti označene bojama. U filteru postavljamo — product:«URL Filtering» da bismo vidjeli informacije samo o posjećenim web stranicama, slika je klikabilna:

3. Elastic stack: analiza sigurnosnih logova. Dashboardi

Postavke:

3. Elastic stack: analiza sigurnosnih logova. Dashboardi

Grafikon korištenja najopasnijih aplikacija

Da bismo to uradili, kreiramo figuru — Vertical Bar. Također koristimo metrikui count (osi Y), dok ćemo na osi X koristiti nazive korištenih aplikacija — “appi_name”. Najvažnije je postaviti filter — product: «Application Control» AND app_risk: (4 OR 5 OR 3) AND action:«accept». Filtriramo logove prema blade-u Application control, uzimamo samo one web stranice koje su kategorizovane kao sa rizikom Critical, High, Medium i to samo u slučaju da je pristup tim web stranicama dozvoljen. Slika je klikabilna:

3. Elastic stack: analiza sigurnosnih logova. Dashboardi

Postavke, klikabilno:

3. Elastic stack: analiza sigurnosnih logova. Dashboardi

Kontrolna ploča

Pregled i kreiranje kontrolnih ploča nalazi se u posebnoj stavci menija — Nadzorna tabla. Ovde je sve jednostavno, kreira se nova kontrolna ploča, dodaje se vizualizacija, postavlja se na željena mesta i to je to!

Kreiramo kontrolnu ploču kako bismo mogli shvatiti osnovnu situaciju stanja bezbjednosti u organizaciji, jasno, samo na nivou Check Point, slika je klikabilna:

3. Elastic stack: analiza sigurnosnih logova. Dashboardi

Na osnovu ovih grafikona možemo shvatiti koje kritične signature nisu blokirane na vatrozidu, gdje korisnici odlaze, koje najopasnije aplikacije koriste.

Zaključak

Istražili smo mogućnosti osnovne vizualizacije u Kibani i izgradili kontrolnu ploču, ali to je samo mali deo. U nastavku kursa posebno ćemo se posvetiti podešavanju mapa, radu sa sistemom Elasticsearch, upoznaćemo se sa API zahtevima, automatizacijom i još mnogo čega!

Tako da pratite ažuriranja (Telegram, Facebook, VK, TS Solution Blog), Yandex.Dzen.

Izvor: habr.com

Kupite pouzdan hosting za sajtove uz zaštitu od DDoS, VPS VDS servere 🔥 Kupite pouzdan hosting za sajtove uz zaštitu od DDoS, VPS VDS servere | ProHoster