Ovog septembra, Broadcom (bivši CA) je objavio novu verziju 20.2 svog rješenja DX Operations Intelligence (DX OI). Ovaj proizvod je pozicioniran na tržištu kao krovni sistem za praćenje. Sistem je u stanju da prima i kombinuje podatke iz sistema za praćenje različitih domena (mreža, infrastruktura, aplikacije, baze podataka) kako CA tako i trećih proizvođača, uključujući rešenja otvorenog koda (Zabbix, Prometheus i drugi).

Glavna funkcija DX OI je stvaranje punopravnog modela resursa i usluga (RSM) zasnovanog na konfiguracijskim jedinicama (CU), koje popunjavaju bazu inventara kada su integrirane sa sistemima trećih strana. DX OI implementira funkcije strojnog učenja i umjetne inteligencije (ML i AI) na podatke koji ulaze u platformu, što vam omogućava da procijenite/predvidite vjerovatnoću kvara određenog KE-a i stepen uticaja kvara na poslovni servis koji zasniva se na specifičnom KE. Pored toga, DX OI je jedinstvena tačka za prikupljanje događaja praćenja i, shodno tome, integraciju sa Service Desk sistemom, što je neosporna prednost korišćenja sistema u jedinstvenim monitoring centrima za dežurstva organizacija. U ovom članku ćemo vam reći više o funkcionalnosti sistema i prikazati korisničko i administratorsko sučelje.

Arhitektura DX OI rješenja

DX platforma ima mikroservisnu arhitekturu, instaliranu i radi pod Kubernetes ili OpenShift. Na sljedećoj slici prikazane su komponente rješenja koje se mogu koristiti kao nezavisni alati za nadzor ili se mogu zamijeniti postojećim nadzornim sustavima sa sličnim funkcijama (na slici su primjeri takvih sistema) i zatim spojiti na DX OI kišobran. Na dijagramu ispod:

• Nadgledanje mobilnih aplikacija u DX App Experience Analytics;
• Praćenje performansi aplikacije u DX APM-u;
• Nadgledanje infrastrukture u DX Infrastructure Manageru;
• Nadgledanje mrežnih uređaja u DX NetOps Manageru.

DX komponente rade pod kontrolom Kubernetes klastera i skaliraju se jednostavnim pokretanjem novih POD-ova. Ispod je dijagram rješenja visokog nivoa.

Administriranje, skaliranje i ažuriranje DX platforme se vrši u administrativnoj konzoli. Sa jedne konzole možete upravljati arhitekturom sa više zakupaca koja može obuhvatiti više preduzeća ili više poslovnih jedinica unutar kompanije. U ovom modelu, svako preduzeće se može pojedinačno konfigurisati kao zakupac sa sopstvenim skupom konfiguracija.

Administrativna konzola je web-bazirani alat za operacije i upravljanje sistemom koji administratorima pruža konzistentan, objedinjeni interfejs za obavljanje zadataka upravljanja klasterom nadgledanja.

Novi zakupci za poslovne jedinice ili preduzeća unutar kompanije se raspoređuju za nekoliko minuta. Ovo daje prednost ako želite da imate objedinjeni sistem nadgledanja, ali na nivou platforme (a ne prava pristupa) da biste razlikovali objekte nadgledanja između odeljenja.

Resursno-uslužni modeli i praćenje poslovnih usluga

DX OI ima ugrađene mehanizme za kreiranje servisa i razvoj klasičnih PCM-ova sa postavljanjem logike uticaja i težina između komponenti usluge. Postoje i mehanizmi za izvoz PCM-a iz eksternog CMDB-a. Slika ispod prikazuje ugrađeni PCM editor (obratite pažnju na težine linkova).

DX OI pruža holističku sliku ključnih indikatora performansi poslovnih ili IT usluga sa detaljima, uključujući dostupnost usluge i predviđanje rizika od kvara. Alat takođe može pružiti uvid u uticaj problema sa performansama ili promene u dizajnu IT komponenti (aplikacije ili infrastrukture) na poslovnu uslugu. Slika ispod prikazuje interaktivnu kontrolnu tablu koja prikazuje status svih usluga.

Pogledajmo detalje koristeći uslugu Digitalno bankarstvo kao primjer. Klikom na naziv usluge prelazimo na detaljni PCM servisa. Vidimo da status usluge Digitalnog bankarstva zavisi od stanja infrastrukture i transakcijskih podusluga sa različitim težinama. Rad sa tegovima i njihovo prikazivanje je zabavna prednost DX OI.

Topologija je važan element operativnog nadzora postrojenja, omogućavajući operaterima i inženjerima da analiziraju odnose između komponenti, pronađu osnovni uzrok i uticaj.

DX OI Topology Viewer je usluga koja koristi topološke podatke koji dolaze iz sistema za praćenje domena koji prikupljaju podatke direktno iz objekata za praćenje. Alat je dizajniran za pretraživanje više slojeva topoloških skladišta i prikaz kontekstno specifične mape odnosa. Da biste istražili probleme, možete otići na problematičnu poduslugu Backend Banking i vidjeti topologiju i problematične komponente. Također možete analizirati alarmne poruke i metriku performansi za svaku komponentu.

Prilikom analize komponenti platnih transakcija (korisničkih transakcija), možemo pratiti poslovne KPI vrijednosti, koje se također uzimaju u obzir prilikom izračunavanja dostupnosti i zdravstvenog statusa usluge. Primjer poslovnog KPI-a dat je u nastavku:

Analitika događaja

Algoritamsko smanjenje šuma zbog grupiranja nezgoda

Jedna od ključnih karakteristika DX OI u obradi događaja je grupisanje. Motor radi na svim upozorenjima koja dolaze u sistem kako bi identificirao obrasce zasnovane na različitim kontekstima i grupirao ih zajedno. Ovi klasteri se sami uče i ne moraju se ručno konfigurirati.

Dakle, grupiranje omogućava korisnicima da kombinuju i grupišu ogroman broj događaja i analiziraju samo one koji imaju zajednički kontekst. Na primjer, skup događaja koji predstavljaju incident koji utječe na rad aplikacija ili podatkovnog centra. Situacije se kreiraju korišćenjem algoritama za grupisanje zasnovanih na mašinskom učenju koji koriste vremensku korelaciju, topološke odnose i obradu maternjeg jezika za analizu. Na slikama ispod prikazani su primjeri vizualizacije klaster grupa poruka, tzv. Situacijski alarmi i Evidence Timeline, prikazujući glavne parametre grupisanja i proces smanjenja broja šumnih događaja.

Analiza korijenskog problema i korelacija nezgoda

U današnjem hibridnom okruženju, korisnička transakcija može uticati na više sistema koji se koriste dinamički. Kao rezultat toga, višestruka upozorenja mogu biti generirana iz različitih sistema, ali se odnose na isti problem ili incident. DX OI koristi vlasničke mehanizme za suzbijanje suvišnih i dupliranih upozorenja i korelaciju povezanih upozorenja radi poboljšanog otkrivanja kritičnih problema i bržeg rješavanja.

Pogledajmo primjer kada sistem prima brojne alarmne poruke za različite objekte (OU) koji su u osnovi jedne usluge. U slučaju uticaja na dostupnost i performanse usluge, sistem će generisati servisni alarm (Service Alarm), ukazati i označiti verovatni osnovni uzrok (problematični KE i alarmna poruka za KE), koji je doprineo smanjenju performansi ili kvar usluge. Slika ispod prikazuje vizualizaciju hitne situacije za Webex uslugu.

DX OI vam omogućava da radite sa događajima kroz intuitivne radnje u web interfejsu sistema. Korisnici mogu ručno dodijeliti događaje odgovornom zaposleniku za rješavanje problema, resetiranje/potvrđivanje upozorenja, kreiranje tiketa ili slanje obavještenja putem e-pošte i pokretanje automatiziranih skripti za rješavanje hitnih slučajeva (tok rada sanacije, više o tome kasnije). Na ovaj način, DX OI omogućava dežurnim operaterima da se fokusiraju na poruku osnovnog alarma i takođe pomaže da se pojednostavi proces sortiranja poruka u grupisane nizove.

Algoritmi mašina za obradu metrike i analizu podataka o performansama

Mašinsko učenje vam omogućava da pratite, agregirate i vizualizirate ključne pokazatelje učinka za bilo koji određeni vremenski period, što korisniku daje sljedeće prednosti:

• Otkrivanje uskih grla i anomalija performansi;
• Poređenje nekoliko indikatora za iste uređaje, interfejse ili mreže;
• Poređenje identičnih indikatora na nekoliko lokacija;
• Poređenje različitih indikatora za jedan i više objekata;
• Poređenje višedimenzionalnih metrika u više objekata.

Za analizu metrike koja ulazi u sistem, DX OI koristi funkcije mašinske analitike koristeći matematičke algoritame, što pomaže u smanjenju vremena prilikom postavljanja statičkih pragova i generisanja upozorenja kada se pojave anomalije.

Rezultat primjene matematičkih algoritama je konstrukcija takozvanih distribucija vjerovatnoće metričke vrijednosti (Rijetka, Vjerovatna, Centar, Srednja, Stvarna). Slike iznad i ispod pokazuju distribuciju vjerovatnoće.

Dva gornja grafikona prikazuju sljedeće podatke:

• Stvarni podaci. Stvarni podaci se prikazuju na grafikonu kao puna crna linija (bez alarma) ili obojena puna linija (stanje alarma). Linija se izračunava na osnovu stvarnih podataka za metriku. Upoređujući stvarne podatke i medijanu, možete brzo vidjeti varijacije u metrici. Kada dođe do događaja, crna linija se mijenja u obojenu punu liniju koja odgovara kritičnosti događaja i prikazuje ikone s odgovarajućom kritičnošću iznad grafikona. Na primjer, crvena za kritičnu anomaliju, narandžasta za veliku anomaliju, a žuta za manju anomaliju.
• Srednja vrijednost indikatora. Srednja ili srednja vrijednost za indikator je prikazana na grafikonu kao siva linija. Prosjek se prikazuje kada nema dovoljno istorijskih podataka.
• Srednja vrijednost indikatora (centralna vrijednost). Srednja linija je sredina raspona i prikazana je kao zelena tačkasta linija. Zone najbliže ovoj liniji najbliže su tipičnim vrijednostima indikatora.
• Common Value. Podaci o ukupnoj zoni prate najbližu središnju liniju ili normalu za vašu metriku i pojavljuju se kao tamnozelena traka. Analitički proračuni postavljaju ukupnu zonu na jedan procentil iznad ili ispod normale.
• Probabilistički podaci. Podaci o zoni vjerovatnoće su prikazani kao zelena traka na grafikonu. Sistem postavlja zonu vjerovatnoće na dva percentila iznad ili ispod normale.
• Rijetki podaci. Podaci o rijetkim zonama prikazani su na grafikonu kao svijetlozelena traka. Sistem postavlja oblast sa retkim metričkim vrednostima na tri percentila iznad ili ispod norme i signalizira ponašanje indikatora izvan normalnog opsega, dok sistem generiše takozvano upozorenje o anomaliji.

Anomalija je mjerenje ili događaj koji nije u skladu s normalnim performansama metrike. Detekcija anomalija za identifikaciju problema i razumijevanje trendova u infrastrukturi i aplikacijama je ključna karakteristika DX OI. Otkrivanje anomalija vam omogućava da prepoznate neobično ponašanje (na primjer, server koji reaguje sporije nego inače, ili neuobičajenu mrežnu aktivnost uzrokovanu hakom) i da u skladu s tim odgovorite (pokretanje incidenta, pokretanje automatizirane skripte za popravak).

DX OI detekcija anomalija pruža sljedeće prednosti:

• Nema potrebe za postavljanjem pragova. DX OI će nezavisno uporediti podatke i identifikovati anomalije.
• DX OI uključuje više od deset algoritama za umjetnu inteligenciju i strojno učenje, uključujući EWMA (eksponencijalno ponderiran-pokretni prosjek) i KDE (procjena gustoće jezgra). Ovi algoritmi omogućavaju brzu analizu uzroka i predviđanje budućih metričkih vrijednosti.

Prediktivna analitika i obavještavanje o mogućim kvarovima

Prediktivni uvidi je funkcija koja koristi moć mašinskog učenja za prepoznavanje obrazaca i trendova. Na osnovu ovih trendova, sistem predviđa događaje koji se mogu dogoditi u budućnosti. Ove poruke ukazuju na potrebu da se poduzmu mjere prije nego što metričke vrijednosti odstupe od normalnih vrijednosti i utječu na kritične poslovne usluge. Prediktivni uvidi su prikazani na donjoj slici.

A ovo je vizualizacija prediktivnih upozorenja za određenu metriku.

Predviđanje opterećenja računarske snage sa funkcijom specificiranja scenarija opterećenja

Capacity Analytics planiranje kapaciteta pomaže vam da upravljate svojim IT resursima, osiguravajući da su resursi odgovarajuće veličine kako bi zadovoljili trenutne i buduće poslovne potrebe. Bićete u mogućnosti da optimizujete produktivnost i efikasnost postojećih resursa, planirate i opravdate svako finansijsko ulaganje.

Funkcija analize kapaciteta u DX OI pruža sljedeće prednosti:

• Kapacitet predviđanja tokom vrhunca sezone;
• Određivanje trenutka kada su potrebni dodatni resursi za kvalitetno funkcionisanje usluge;
• Kupovina dodatnih resursa samo kada je to potrebno;
• Učinkovito upravljanje infrastrukturom i mrežama;
• Ukloniti nepotrebne troškove energije identifikacijom nedovoljno iskorištenih resursa;
• Izvođenje procjene opterećenja resursa u slučaju planiranog povećanja potražnje za uslugom ili resursom.

Stranica Capacity Analytics DX OI (slika ispod) ima sljedeće widgete:

• Status kapaciteta resursa;
• Nadzirane grupe/usluge;
• Najveći potrošači kapaciteta.

Glavna stranica Analitike kapaciteta prikazuje komponente resursa koje su pretjerano iskorištene i nemaju dovoljno kapaciteta. Ova stranica pomaže administratorima platforme da pronađu previše korištene resurse i pomaže im da promijene veličinu i optimiziraju resurse. Status resursa se može analizirati na osnovu kodova boja i njihovih odgovarajućih značenja. Resursi su klasifikovani na osnovu njihovog nivoa zagušenja na stranici statusa kapaciteta resursa. Možete kliknuti na svaku boju da vidite listu komponenti uključenih u odabranu kategoriju. Zatim će se prikazati toplinska mapa sa svim objektima i prognozama za 12 mjeseci, što vam omogućava da identificirate resurse koji će biti iscrpljeni.

Za svaku metriku u Analitici kapaciteta možete odrediti filtere koje DX Operational Intelligence koristi za izradu prognoza (slika ispod).

Dostupni su sljedeći filteri:

• Metric. metrika koja će se koristiti za prognozu.
• Bazi se na. Odabir količine istorijskih podataka koji će se koristiti za izradu prognoza za budućnost. Ovo polje se koristi za poređenje i analizu trendova u proteklom mjesecu, trendova u posljednja 3 mjeseca, trendova tokom godine itd.
• Rast. Očekivana stopa rasta radnog opterećenja koju želite koristiti za modeliranje vaše prognoze snage. Ovi podaci se mogu koristiti za predviđanje rasta izvan projekcija. Na primjer, očekuje se da će se korištenje resursa povećati za još 40 posto zbog otvaranja nove kancelarije.

Analiza dnevnika

Funkcija analize DX OI dnevnika pruža:

• prikupljanje i agregiranje dnevnika iz različitih izvora (uključujući one dobivene metodama agenata i ne-agenta);
• raščlanjivanje i normalizacija podataka;
• analiza usklađenosti sa postavljenim uslovima i generisanje događaja;
• korelacija događaja na osnovu logova, uključujući događaje dobijene kao rezultat praćenja IT infrastrukture;
• vizualizacija podataka zasnovana na analizi u DX Dashboards;
• zaključci o dostupnosti usluge na osnovu analize podataka iz dnevnika.

Prikupljanje dnevnika pomoću metode bez agenta vrši sistem za Windows evidencije događaja i Syslog. Tekstualni zapisi se prikupljaju pomoću metode agenta.

Automatizirana funkcija hitnog rješavanja (Remediation)

Automatske radnje za ispravljanje hitne situacije (Remediation Workflow) omogućavaju vam da riješite probleme koji su uzrokovali generiranje događaja u DX OI. Na primjer, problem korištenja CPU-a generiše alarmnu poruku, tok rada sanacije rješava problem ponovnim pokretanjem servera na kojem se problem pojavio. Integracija između DX OI i sistema automatizacije omogućava vam da pokrenete procese sanacije sa konzole događaja u DX Operational Intelligence i nadgledate ih u konzoli za automatizaciju.

Jednom kada se integrišete u sistem automatizacije, možete pokrenuti automatske akcije za ispravljanje bilo koje alarmne situacije u DX OI konzoli iz konteksta poruke alarma. Možete vidjeti preporučene radnje zajedno s informacijama o postotku povjerenja (vjerovatnost rješavanja situacije poduzimanjem radnje).

U početku, kada nema statistike o rezultatima toka posla remedijacije, mehanizam za preporuke predlaže potencijalne opcije na osnovu pretraživanja ključnih riječi, zatim se koriste rezultati mašinskog učenja i motor počinje da preporučuje tehniku ​​sanacije zasnovanu na heuristici. Kada počnete procjenjivati ​​rezultate savjeta koje dobijete, tačnost vaših preporuka će se poboljšati.

Primjer povratne informacije od korisnika: korisnik bira da li mu se sviđa ili ne sviđa predložena radnja, a sistem uzima u obzir ovaj izbor prilikom davanja daljnjih preporuka. Sviđa mi se/ne sviđa mi se:

Preporučene korektivne radnje za određeni alarm zasnovane su na kombinaciji povratnih informacija koje određuju da li je radnja prihvatljiva. DX OI dolazi sa integracijom iz kutije sa Automatskom automatizacijom.

Integracija DX OI sa sistemima treće strane

Nećemo se detaljno zadržavati na integraciji podataka iz Broadcom-ovih izvornih proizvoda za praćenje (DX NetOps, DX Infrastructure Management, DX Application Performance Management). Umjesto toga, pogledajmo kako su integrirani podaci sa sistema trećih strana i pogledajmo primjer integracije sa jednim od najpopularnijih sistema - Zabbixom.

Za integraciju sa sistemima treće strane koristi se komponenta DX Gateway. DX Gateway se sastoji od 3 komponente - On-Prem Gateway, RESTmon i Log Collector (Logstash). Možete instalirati sve 3 komponente ili samo onu koja vam je potrebna promjenom opće konfiguracijske datoteke kada instalirate DX Gateway. Slika ispod prikazuje arhitekturu DX Gateway-a.

Pogledajmo posebno svrhu komponenti DX Gateway-a.

On-Prem Gateway. Ovo je interfejs koji prikuplja alarme sa DX platforme i šalje alarmne događaje sistemima treće strane. On-Prem Gateway djeluje kao provjeravač koji periodično prikuplja podatke o događajima iz DX OI koristeći HTTPS zahtjev API, a zatim šalje upozorenja na server treće strane koji je integriran sa DX platformom koristeći webhookove.

DX sakupljač dnevnika prima syslog sa mrežnih uređaja ili servera i postavlja ih na OI. DX Log Collector vam omogućava da odvojite softver koji generiše poruke, sistem koji ih skladišti i softver koji ih izveštava i analizira. Svaka poruka je označena kodom entiteta koji ukazuje na tip softvera koji generira poruku i dodjeljuje joj se nivo ozbiljnosti. Sve ovo možete pogledati kasnije u DX Dashboards.

DX RESTmon integriše se sa proizvodima/uslugama trećih strana preko REST API-ja i prenosi podatke u OI. Na slici ispod prikazan je dijagram funkcionisanja DX RESTmon na primjeru integracije sa Solarwinds i SCOM sistemima za praćenje.

Ključne karakteristike DX RESTmon:

• Povežite se s bilo kojim izvorom podataka treće strane za primanje podataka:
  • PULL: povezivanje i preuzimanje podataka iz javnih REST API-ja;
  • PUSH: protok podataka u RESTmon preko REST-a.
• Podrška za JSON i XML formate;
• Ingest metrike, upozorenja, grupe, topologiju, inventar i dnevnike;
• Gotovi konektori za razne alate/tehnologije, takođe je moguće razviti konektor na bilo koji izvor sa otvorenim API-jem (lista uokvirenih konektora je na slici ispod);
• Podrška za osnovnu autentifikaciju (podrazumevano) prilikom pristupa Swagger interfejsu i API-ju;
• HTTPS podrška (podrazumevano) za sve dolazne i odlazne poruke;
• Podrška za dolazne i odlazne proksije;
• Snažne mogućnosti raščlanjivanja teksta za dnevnike primljene putem REST-a;
• Prilagođeno raščlanjivanje sa RESTmon-om za efikasno raščlanjivanje i vizualizaciju dnevnika;
• Podrška za izdvajanje informacija o grupi uređaja iz aplikacija za praćenje i učitavanje u OI za analizu i vizualizaciju;
• Podrška za podudaranje regularnog izraza. Ovo se može koristiti za raščlanjivanje i uparivanje poruka dnevnika primljenih putem REST-a i za generiranje ili zatvaranje događaja na osnovu određenih uslova regularnog izraza.

Sada pogledajmo proces postavljanja DX OI integracije sa Zabbixom preko DX RESTmon. Okvirna integracija uzima sljedeće podatke iz Zabbixa:

• podaci o inventaru;
• topologija;
• Problemi;
• metrika.

Budući da je konektor za Zabbix dostupan iz kutije, sve što treba da uradite da biste postavili integraciju je da ažurirate svoj profil sa Zabbix server API IP adresom i nalogom, a zatim učitate profil preko Swagger web interfejsa. Primjer na sljedeće dvije slike.

Nakon postavljanja integracije, gore opisane analitičke funkcije DX OI bit će dostupne za podatke koji dolaze iz Zabbixa, a to su: Alarm Analytics, Performance Analytics, Predictive Insights, Service Analytics i Remediation. Slika ispod prikazuje primjer analize metrike performansi za objekte integrirane iz Zabbixa.

zaključak

DX OI je moderan alat za analitiku koji će IT odjelima pružiti značajnu operativnu efikasnost, omogućavajući brže i ispravnije donošenje odluka za poboljšanje kvaliteta IT i poslovnih usluga kroz kontekstualnu analizu između domena. Za vlasnike aplikacija i poslovne jedinice, DX OI će izračunati indikator dostupnosti i kvalitet usluga ne samo u kontekstu tehnoloških IT indikatora, već i poslovnih KPI-a izvađenih iz transakcijske statistike o krajnjim korisnicima.

Ako želite saznati više o ovom rješenju, pošaljite zahtjev za demo ili pilot na način koji Vama odgovara na našoj web stranici.

izvor: www.habr.com