Letos septembra je Broadcom (prej CA) izdal novo različico 20.2 svoje rešitve DX Operations Intelligence (DX OI). Ta izdelek je na trgu pozicioniran kot krovni nadzorni sistem. Sistem lahko sprejema in združuje podatke iz nadzornih sistemov različnih domen (omrežje, infrastruktura, aplikacije, baze podatkov) tako CA kot tretjih proizvajalcev, vključno z odprtokodnimi rešitvami (Zabbix, Prometheus in drugi).

Glavna funkcija DX OI je ustvarjanje popolnega modela virov in storitev (RSM), ki temelji na konfiguracijskih enotah (CU), ki zapolnjujejo bazo inventarja, ko so integrirane s sistemi tretjih oseb. DX OI implementira funkcije strojnega učenja in umetne inteligence (ML in AI) na podatke, ki vstopajo v platformo, kar vam omogoča, da ocenite/predvidite verjetnost okvare določenega KE in stopnjo vpliva okvare na poslovno storitev, kar temelji na določenem KE. Poleg tega je DX OI enotna točka za zbiranje spremljanja dogodkov in s tem integracijo s sistemom Service Desk, kar je nesporna prednost uporabe sistema v enotnih nadzornih centrih za dežurstva organizacij. V tem članku vam bomo povedali več o funkcionalnosti sistema ter prikazali uporabniški in skrbniški vmesnik.

Arhitektura rešitve DX OI

Platforma DX ima mikrostoritveno arhitekturo, ki je nameščena in deluje pod Kubernetes ali OpenShift. Naslednja slika prikazuje sestavne dele rešitve, ki jih je mogoče uporabiti kot samostojna nadzorna orodja ali pa jih nadomestiti z obstoječimi nadzornimi sistemi s podobnimi funkcijami (na sliki so primeri takšnih sistemov) in jih nato povezati z krovnim DX OI. V spodnjem diagramu:

• Spremljanje mobilnih aplikacij v DX App Experience Analytics;
• Spremljanje delovanja aplikacije v DX APM;
• Nadzor infrastrukture v DX Infrastructure Managerju;
• Spremljanje omrežnih naprav v DX NetOps Managerju.

Komponente DX delujejo pod nadzorom gruče Kubernetes in se spreminjajo s preprostim zagonom novih POD. Spodaj je diagram rešitve na visoki ravni.

Administriranje, skaliranje in posodabljanje platforme DX poteka v skrbniški konzoli. Z ene same konzole lahko upravljate arhitekturo z več najemniki, ki lahko obsega več podjetij ali več poslovnih enot znotraj podjetja. V tem modelu je mogoče vsako podjetje posebej konfigurirati kot najemnika s svojim naborom konfiguracij.

Skrbniška konzola je spletno orodje za upravljanje operacij in sistema, ki skrbnikom nudi dosleden, enoten vmesnik za izvajanje nadzornih nalog upravljanja gruče.

Novi najemniki za poslovne enote ali podjetja znotraj podjetja so nameščeni v nekaj minutah. To daje prednost, če želite imeti poenoten nadzorni sistem, vendar na ravni platforme (in ne pravic dostopa) za razlikovanje nadzornih objektov med oddelki.

Virsko-storitveni modeli in spremljanje poslovnih storitev

DX OI ima vgrajene mehanizme za ustvarjanje storitev in razvoj klasičnih PCM z nastavitvijo logike vpliva in uteži med komponentami storitev. Obstajajo tudi mehanizmi za izvoz PCM iz zunanjega CMDB. Spodnja slika prikazuje vgrajeni urejevalnik PCM (upoštevajte uteži povezav).

DX OI zagotavlja celostno sliko ključnih kazalnikov uspešnosti poslovnih ali IT storitev s podrobnostmi, vključno z razpoložljivostjo storitev in napovedjo tveganja napak. Orodje lahko nudi tudi vpogled v vpliv težave z zmogljivostjo ali spremembe v zasnovi komponent IT (aplikacije ali infrastrukture) na poslovno storitev. Spodnja slika prikazuje interaktivno nadzorno ploščo, ki prikazuje status vseh storitev.

Oglejmo si podrobnosti na primeru storitve digitalnega bančništva. S klikom na ime storitve se pomaknemo na podroben PCM storitve. Vidimo, da je status storitve digitalnega bančništva odvisen od stanja infrastrukture in transakcijskih podstoritev z različnimi utežmi. Delo z utežmi in njihovo prikazovanje je zabavna prednost DX OI.

Topologija je pomemben element operativnega spremljanja obrata, ki omogoča operaterjem in inženirjem, da analizirajo razmerja med komponentami, najdejo glavni vzrok in vpliv.

DX OI Topology Viewer je storitev, ki uporablja topološke podatke, ki prihajajo iz nadzornih sistemov domene, ki zbirajo podatke neposredno iz nadzornih objektov. Orodje je zasnovano za iskanje več plasti topoloških shramb in prikaz kontekstno specifičnega zemljevida odnosov. Če želite raziskati težave, lahko obiščete problematično podstoritev Backend Banking in si ogledate topologijo in problematične komponente. Prav tako lahko analizirate alarmna sporočila in meritve učinkovitosti za vsako komponento.

Pri analizi komponent plačilnega prometa (uporabniških transakcij) lahko sledimo poslovnim vrednostim KPI, ki se upoštevajo tudi pri izračunu razpoložljivosti in zdravstvenega stanja storitve. Spodaj je podan primer poslovnega KPI-ja:

Analitika dogodkov

Algoritemsko zmanjšanje hrupa zaradi združevanja nesreč

Ena ključnih lastnosti DX OI pri obdelavi dogodkov je združevanje v gruče. Motor deluje na vseh opozorilih, ki prihajajo v sistem, da prepozna vzorce na podlagi različnih kontekstov in jih združi skupaj. Te gruče se učijo same od sebe in jih ni treba ročno konfigurirati.

Tako združevanje v gruče uporabnikom omogoča združevanje in združevanje ogromnega števila dogodkov ter analizo le tistih, ki imajo skupen kontekst. Na primer niz dogodkov, ki predstavljajo incident, ki vpliva na delovanje aplikacij ali podatkovnega centra. Situacije so ustvarjene z uporabo algoritmov za združevanje v gruče, ki temeljijo na strojnem učenju in za analizo uporabljajo časovno korelacijo, topološka razmerja in obdelavo maternega jezika. Spodnje slike prikazujejo primere vizualizacije grozdnih skupin sporočil, tako imenovanih Situacijskih Alarmov in Evidence Timeline, ki prikazujejo glavne parametre združevanja in proces zmanjševanja števila šumnih dogodkov.

Analiza temeljnega problema in korelacija nesreč

V današnjem hibridnem okolju lahko uporabniška transakcija vpliva na več sistemov, ki se uporabljajo dinamično. Posledično je mogoče ustvariti več opozoril iz različnih sistemov, vendar povezanih z isto težavo ali incidentom. DX OI uporablja lastniške mehanizme za zatiranje odvečnih in podvojenih opozoril ter korelacijo povezanih opozoril za izboljšano odkrivanje kritičnih težav in hitrejše reševanje.

Oglejmo si primer, ko sistem prejme številna alarmna sporočila za različne objekte (OU), ki so del ene storitve. V primeru vpliva na razpoložljivost in delovanje storitve bo sistem generiral servisni alarm (Service Alarm), nakazal in označil verjetni vzrok (problematični KE in alarmno sporočilo za KE), ki je prispeval k zmanjšanju zmogljivosti oz. nedelovanje storitve. Spodnja slika prikazuje vizualizacijo zrušitve za storitev Webex.

DX OI vam omogoča delo z dogodki prek intuitivnih dejanj v spletnem vmesniku sistema. Uporabniki lahko ročno dodelijo dogodke odgovornemu uslužbencu za odpravljanje težav, ponastavijo/potrdijo opozorila, ustvarijo vstopnice ali pošljejo e-poštna obvestila ter zaženejo avtomatizirane skripte za reševanje nujnih primerov (Remediation Workflow, več o tem kasneje). Na ta način DX OI omogoča dežurnim operaterjem, da se osredotočijo na korensko alarmno sporočilo, in tudi pomaga racionalizirati postopek razvrščanja sporočil v nize v gruče.

Strojni algoritmi za obdelavo metrik in analizo podatkov o zmogljivosti

Strojno učenje vam omogoča sledenje, združevanje in vizualizacijo ključnih indikatorjev uspešnosti za katero koli določeno časovno obdobje, kar uporabniku daje naslednje prednosti:

• Odkrivanje ozkih grl in nepravilnosti delovanja;
• Primerjava več indikatorjev za iste naprave, vmesnike ali omrežja;
• Primerjava enakih indikatorjev na več mestih;
• Primerjava različnih indikatorjev za enega in več predmetov;
• Primerjava večdimenzionalnih metrik v več predmetih.

Za analizo metrik, ki vstopajo v sistem, DX OI uporablja strojne analitične funkcije z uporabo matematičnih algoritmov, kar pomaga skrajšati čas pri nastavljanju statičnih pragov in generiranju opozoril, ko pride do nepravilnosti.

Rezultat uporabe matematičnih algoritmov je konstrukcija tako imenovanih verjetnostnih porazdelitev metrične vrednosti (Rare, Probable, Center, Mean, Actual). Sliki zgoraj in spodaj prikazujeta porazdelitve verjetnosti.

Zgornja grafa prikazujeta naslednje podatke:

• Dejanski podatki. Dejanski podatki so na grafu prikazani kot polna črna črta (brez alarma) ali barvna polna črta (stanje alarma). Vrstica je izračunana na podlagi dejanskih podatkov za metriko. Če primerjate dejanske podatke in mediano, lahko hitro opazite razlike v meritvi. Ko pride do dogodka, se črna črta spremeni v barvno polno črto, ki ustreza kritičnosti dogodka, nad grafom pa prikaže ikone z ustrezno kritičnostjo. Na primer, rdeča za kritično anomalijo, oranžna za večjo anomalijo in rumena za manjšo anomalijo.
• Srednja vrednost indikatorja. Srednja ali mediana vrednost za indikator je prikazana v grafikonu kot siva črta. Povprečje je prikazano, ko ni dovolj zgodovinskih podatkov.
• Srednja vrednost indikatorja (Center value). Srednja črta je sredina razpona in je prikazana kot zelena pikčasta črta. Območja, ki so najbližje tej vrstici, so najbližja tipičnim vrednostim indikatorja.
• Skupna vrednost. Podatki celotnega območja sledijo najbližji srednji črti ali normali za vašo metriko in so prikazani kot temno zelena vrstica. Analitični izračuni postavijo celotno območje na en percentil nad ali pod normalno.
• Verjetnostni podatki. Podatki o območju verjetnosti so na grafu prikazani kot zelena vrstica. Sistem postavi območje verjetnosti na dva percentila nad ali pod normalno.
• Redki podatki. Podatki o redkih območjih so na grafu prikazani kot svetlo zelena vrstica. Sistem postavi območje z redkimi metričnimi vrednostmi na tri percentile nad ali pod normo in signalizira obnašanje indikatorja izven običajnega območja, medtem ko sistem ustvari tako imenovano opozorilo o anomaliji.

Anomalija je meritev ali dogodek, ki ni v skladu z običajnim delovanjem metrike. Zaznavanje anomalij za prepoznavanje težav in razumevanje trendov v infrastrukturi in aplikacijah je ključna značilnost DX OI. Zaznavanje anomalij vam omogoča, da prepoznate nenavadno vedenje (na primer strežnik, ki se odziva počasneje kot običajno, ali nenavadno omrežno dejavnost, ki jo povzroči vdor) in se ustrezno odzovete (sprožite incident, zaženete samodejni skript za odpravo napak).

DX OI Anomaly Detection zagotavlja naslednje prednosti:

• Ni potrebe po določanju pragov. DX OI bo neodvisno primerjal podatke in identificiral anomalije.
• DX OI vključuje več kot deset algoritmov umetne inteligence in strojnega učenja, vključno z EWMA (Exponentially-Weighted-Moving-Average) in KDE (Kernel Density Estimation). Ti algoritmi omogočajo hitro analizo vzroka in napovedovanje prihodnjih metričnih vrednosti.

Prediktivna analitika in obveščanje o morebitnih okvarah

Predictive Insights je funkcija, ki uporablja moč strojnega učenja za prepoznavanje vzorcev in trendov. Na podlagi teh trendov sistem napove dogodke, ki se lahko zgodijo v prihodnosti. Ta sporočila kažejo na potrebo po ukrepanju, preden vrednosti meritev odstopajo od normalnih vrednosti in vplivajo na kritične poslovne storitve. Napovedni vpogledi so prikazani na spodnji sliki.

In to je vizualizacija napovednih opozoril za določeno metriko.

Napovedovanje obremenitve računalniške moči s funkcijo podajanja scenarijev obremenitve

Načrtovanje zmogljivosti Capacity Analytics vam pomaga upravljati svoje vire IT, pri čemer zagotavlja, da so viri ustrezno velikosti za izpolnjevanje trenutnih in prihodnjih poslovnih potreb. Znali boste optimizirati produktivnost in učinkovitost obstoječih virov, načrtovati in upravičiti morebitne finančne naložbe.

Funkcija Capacity Analytics v DX OI zagotavlja naslednje prednosti:

• Zmogljivost napovedovanja v najvišjih sezonah;
• Določitev trenutka, ko so za zagotavljanje kakovostnega delovanja storitve potrebna dodatna sredstva;
• Nakup dodatnih sredstev le, kadar je to potrebno;
• Učinkovito upravljanje infrastrukture in omrežij;
• Odpravite nepotrebne stroške energije z ugotavljanjem premalo izkoriščenih virov;
• Izvajanje ocen obremenitve virov v primeru načrtovanega povečanja povpraševanja po storitvi ali viru.

Stran Capacity Analytics DX OI (slika spodaj) ima naslednje pripomočke:

• Stanje zmogljivosti virov;
• Nadzorovane skupine/storitve;
• Največji porabniki zmogljivosti.

Glavna stran Capacity Analytics prikazuje komponente virov, ki so preveč izkoriščene in jim primanjkuje zmogljivosti. Ta stran skrbnikom platform pomaga najti preveč uporabljene vire ter jim pomaga spremeniti velikost in optimizirati vire. Status virov je mogoče analizirati na podlagi barvnih kod in njihovih ustreznih pomenov. Viri so razvrščeni glede na stopnjo prezasedenosti na strani s statusom zmogljivosti vira. Lahko kliknete vsako barvo, da si ogledate seznam komponent, vključenih v izbrano kategorijo. Nato bo prikazan toplotni zemljevid z vsemi objekti in napovedmi za 12 mesecev, kar vam omogoča identifikacijo virov, ki bodo kmalu izčrpani.

Za vsako metriko v storitvi Capacity Analytics lahko določite filtre, ki jih DX Operational Intelligence uporablja za izdelavo napovedi (slika spodaj).

Na voljo so naslednji filtri:

• metrika. Meritev, ki bo uporabljena za napoved.
• Osnova na. Izbira količine zgodovinskih podatkov, ki bodo uporabljeni za izdelavo napovedi za prihodnost. To polje se uporablja za primerjavo in analizo trendov v zadnjem mesecu, trendov v zadnjih 3 mesecih, trendov v letu itd.
• Rast. Pričakovana stopnja rasti delovne obremenitve, ki jo želite uporabiti za modeliranje napovedi moči. Te podatke je mogoče uporabiti za napovedovanje rasti, ki presega projekcije. Na primer, zaradi odprtja nove pisarne naj bi se poraba virov povečala še za 40 odstotkov.

Analiza dnevnika

Funkcija analize dnevnika DX OI zagotavlja:

• zbiranje in združevanje dnevnikov iz različnih virov (vključno s tistimi, pridobljenimi z agentskimi in neagentskimi metodami);
• razčlenjevanje in normalizacija podatkov;
• analiza izpolnjevanja postavljenih pogojev in generiranje dogodkov;
• korelacija dogodkov na podlagi dnevnikov, vključno z dogodki, pridobljenimi kot rezultat spremljanja IT infrastrukture;
• vizualizacija podatkov na podlagi analize v DX Dashboards;
• sklepi o razpoložljivosti storitve na podlagi analize podatkov iz dnevnikov.

Zbiranje dnevnikov z uporabo metode brez agentov izvaja sistem za dnevnike dogodkov Windows in Syslog. Besedilni dnevniki se zbirajo z metodo agenta.

Samodejna funkcija reševanja izrednih razmer (Remediation)

Avtomatizirana dejanja za odpravo izrednih razmer (Remediation Workflow) vam omogočajo, da rešite težave, ki so povzročile nastanek dogodka v DX OI. Na primer, težava z porabo procesorja ustvari alarmno sporočilo, Remediation Workflow reši težavo s ponovnim zagonom strežnika, kjer je prišlo do težave. Integracija med DX OI in avtomatizacijskim sistemom vam omogoča, da izvajate postopke popravljanja s konzole dogodkov v DX Operational Intelligence in jih spremljate v avtomatizacijski konzoli.

Po integraciji s sistemom za avtomatizacijo lahko sprožite samodejna dejanja za popravljanje kakršne koli alarmne situacije v konzoli DX OI iz konteksta alarmnega sporočila. Ogledate si lahko priporočena dejanja skupaj z informacijami o odstotku zaupanja (verjetnost rešitve situacije z dejanjem).

Na začetku, ko ni statističnih podatkov o rezultatih popravljalnega toka dela, mehanizem za priporočila predlaga možne možnosti na podlagi iskanja ključnih besed, nato se uporabijo rezultati strojnega učenja in motor začne priporočati tehniko popravljanja na podlagi hevristike. Ko začnete ocenjevati rezultate nasvetov, ki jih prejmete, se bo točnost vaših priporočil izboljšala.

Primer povratne informacije od uporabnika: uporabnik izbere, ali mu je predlagano dejanje všeč ali ne, in sistem to izbiro upošteva pri nadaljnjih priporočilih. Všeč mi je/ni mi všeč:

Priporočeni korektivni ukrepi za določen alarm temeljijo na kombinaciji povratnih informacij, ki določajo, ali je ukrep sprejemljiv. DX OI prihaja z že pripravljeno integracijo s samodejno avtomatizacijo.

Integracija DX OI s sistemi drugih proizvajalcev

Ne bomo se podrobneje ukvarjali z integracijo podatkov iz domačih izdelkov za spremljanje Broadcom (DX NetOps, DX Infrastructure Management, DX Application Performance Management). Namesto tega si poglejmo, kako se integrirajo podatki iz sistemov tretjih oseb tretjih oseb, in si oglejmo primer integracije z enim najbolj priljubljenih sistemov - Zabbix.

Za integracijo s sistemi drugih proizvajalcev se uporablja komponenta DX Gateway. DX Gateway je sestavljen iz 3 komponent - On-Prem Gateway, RESTmon in Log Collector (Logstash). Namestite lahko vse 3 komponente ali samo tisto, ki jo potrebujete, tako da ob namestitvi DX Gateway spremenite splošno konfiguracijsko datoteko. Spodnja slika prikazuje arhitekturo DX Gateway.

Oglejmo si namen komponent DX Gateway posebej.

On-Prem Gateway. To je vmesnik, ki zbira alarme s platforme DX in pošilja alarmne dogodke v sisteme tretjih oseb. On-Prem Gateway deluje kot anketar, ki občasno zbira podatke o dogodkih iz DX OI z API-jem za zahteve HTTPS, nato pa pošlje opozorila strežniku tretje osebe, ki je integriran s platformo DX z uporabo spletnih kavljev.

Zbiralec dnevnikov DX prejme syslog od omrežnih naprav ali strežnikov in jih naloži v OI. DX Log Collector vam omogoča, da ločite programsko opremo, ki generira sporočila, sistem, ki jih shranjuje, in programsko opremo, ki jih poroča in analizira. Vsako sporočilo je označeno s kodo entitete, ki označuje vrsto programske opreme, ki generira sporočilo, in ji je dodeljena stopnja resnosti. Vse to si lahko ogledate pozneje v nadzornih ploščah DX.

DX RESTpon integrira se z izdelki/storitvami tretjih oseb prek REST API in prenaša podatke v OI. Spodnja slika prikazuje diagram delovanja DX RESTmon na primeru integracije s sistemoma za spremljanje Solarwinds in SCOM.

Ključne značilnosti DX RESTmon:

• Za prejemanje podatkov se povežite s katerim koli virom podatkov tretje osebe:
  • PULL: povezovanje in pridobivanje podatkov iz javnih REST API-jev;
  • PUSH: pretok podatkov v RESTmon prek REST.
• Podpora za formate JSON in XML;
• Zaužijte meritve, opozorila, skupine, topologijo, inventar in dnevnike;
• Pripravljeni konektorji za različna orodja/tehnologije, možno je tudi razviti konektor na poljuben vir z odprtim API-jem (seznam konektorjev v škatli je na spodnji sliki);
• Podpora za osnovno avtentikacijo (privzeto) pri dostopu do vmesnika in API-ja Swagger;
• Podpora HTTPS (privzeto) za vsa dohodna in odhodna sporočila;
• Podpora za dohodne in odhodne posrednike;
• Zmogljive zmožnosti razčlenjevanja besedila za dnevnike, prejete prek REST;
• Razčlenjevanje po meri z RESTmon za učinkovito razčlenjevanje dnevnika in vizualizacijo;
• Podpora za pridobivanje informacij o skupini naprav iz nadzornih aplikacij in nalaganje v OI za analizo in vizualizacijo;
• Podpora za ujemanje regularnih izrazov. To je mogoče uporabiti za razčlenjevanje in ujemanje dnevniških sporočil, prejetih prek REST, ter za ustvarjanje ali zapiranje dogodkov na podlagi določenih pogojev regularnega izraza.

Zdaj pa si poglejmo postopek nastavitve integracije DX OI z Zabbix prek DX RESTmon. Integracija v škatli vzame naslednje podatke iz Zabbixa:

• podatki o inventarju;
• topologija;
• težave;
• meritve.

Ker je konektor za Zabbix na voljo takoj, je vse, kar morate storiti za nastavitev integracije, posodobiti svoj profil z naslovom IP in računom API strežnika Zabbix ter nato naložiti profil prek spletnega vmesnika Swagger. Primer na naslednjih dveh slikah.

Po nastavitvi integracije bodo zgoraj opisane analitične funkcije DX OI na voljo za podatke, ki prihajajo iz Zabbixa, in sicer: analitika alarmov, analitika učinkovitosti, napovedni vpogledi, analitika storitev in sanacija. Spodnja slika prikazuje primer analize meritev zmogljivosti za objekte, integrirane iz Zabbixa.

Zaključek

DX OI je najsodobnejše analitično orodje, ki bo IT oddelkom zagotovilo znatno operativno učinkovitost ter vam omogočilo hitrejše in pravilnejše odločitve za izboljšanje kakovosti IT storitev in poslovnih storitev s pomočjo meddomenske kontekstualne analize. Za lastnike aplikacij in poslovne enote bo DX OI izračunal razpoložljivost in kakovost storitev ne le v kontekstu metrik IT tehnologije, ampak tudi poslovnih KPI-jev, izpeljanih iz transakcijske statistike končnih uporabnikov.

Če želite izvedeti več o tej rešitvi, pošljite zahtevo za predstavitev ali pilot na način, ki vam ustreza na naši spletni strani.

Vir: www.habr.com