Selle aasta septembris andis Broadcom (endine CA) välja oma DX Operations Intelligence (DX OI) lahenduse uue versiooni 20.2. See toode on turul positsioneeritud vihmavarjujälgimissüsteemina. Süsteem on võimeline vastu võtma ja kombineerima andmeid nii CA kui ka kolmandate osapoolte tootjate erinevate domeenide (võrk, infrastruktuur, rakendused, andmebaasid) monitooringusüsteemidest, sh avatud lähtekoodiga lahendustest (Zabbix, Prometheus jt).

DX OI põhifunktsioon on täisväärtusliku ressursiteenuse mudeli (RSM) loomine, mis põhineb konfiguratsiooniüksustel (CU), mis täidavad varude andmebaasi, kui see on integreeritud kolmandate osapoolte süsteemidega. DX OI rakendab masinõppe ja tehisintellekti (ML ja AI) funktsioone üle platvormile sisenevate andmete, mis võimaldab hinnata/prognoosida konkreetse CI rikke tõenäosust ja tõrke mõju astet äriteenusele põhinedes. konkreetne CI. Lisaks on DX OI ühtne seiresündmuste kogumise punkt ja sellest tulenevalt integratsioon Service Desk süsteemiga, mis on vaieldamatu eelis süsteemi kasutamisel ühtsetes seirekeskustes organisatsioonide töövahetustega. Selles artiklis räägime teile lähemalt süsteemi funktsionaalsusest ning näitame kasutaja- ja administraatoriliideseid.

DX OI lahenduse arhitektuur

DX-platvormil on mikroteenuse arhitektuur, installitud ja töötab Kubernetes või OpenShift. Järgmisel joonisel on toodud lahenduse komponendid, mida saab kasutada iseseisvate seirevahenditena või asendada olemasolevate sarnaste funktsioonidega seiresüsteemidega (selliste süsteemide näited on joonisel) ja seejärel ühendada DX OI vihmavarjuga. Alloleval diagrammil:

• Mobiilirakenduste jälgimine DX App Experience Analyticsis;
• Rakenduse jõudluse jälgimine DX APM-is;
• Infrastruktuuri monitooring DX infrastruktuurihalduris;
• Võrguseadmete jälgimine DX NetOps Manageris.

DX-i komponendid töötavad Kubernetese klastri kontrolli all ja mastaapivad, käivitades lihtsalt uued POD-id. Allpool on tipptaseme lahendusskeem.

DX-platvormi haldamine, skaleerimine ja värskendamine toimub halduskonsoolis. Ühelt konsoolilt saate hallata mitme rentniku arhitektuuri, mis võib hõlmata mitut ettevõtet või ettevõtte mitut äriüksust. Selles mudelis saab iga ettevõtet eraldi konfigureerida rentnikuks oma konfiguratsioonikomplektiga.

Halduskonsool on veebipõhine toimingute ja süsteemihaldustööriist, mis pakub administraatoritele ühtset ja ühtset liidest jälgimisklastri haldusülesannete täitmiseks.

Ettevõtte äriüksuste või ettevõtete uued rentnikud võetakse kasutusele minutitega. See annab eelise, kui soovid omada ühtset seiresüsteemi, kuid platvormi tasemel (ja mitte juurdepääsuõigusi) eristada seireobjekte osakondade vahel.

Ressursi-teenuse mudelid ja äriteenuste monitooring

DX OI-l on sisseehitatud mehhanismid teenuste loomiseks ja klassikalise PCM-i arendamiseks, mille ülesandeks on teenuse komponentide mõju ja kaalu loogika. Samuti on olemas mehhanismid PCM-i eksportimiseks välisest CMDB-st. Alloleval joonisel on näidatud sisseehitatud PCM-redaktor (pöörake tähelepanu linkide kaalule).

DX OI annab tervikliku ülevaate äri- või IT-teenuste peamistest tulemusnäitajatest üksikasjalikul tasemel, sealhulgas teenuse kättesaadavuse ja tõrkeohu prognoosimise kohta. Tööriist võib anda ülevaate ka jõudlusprobleemi või IT-komponentide (rakenduse või infrastruktuuri) struktuuri muutuse mõjust äriteenusele. Allolev joonis on interaktiivne armatuurlaud, mis kuvab kõigi teenuste olekut.

Vaatame näitena digipangateenust lähemalt. Klõpsates teenuse nimel, läheme üksikasjalikule PCM-teenusele. Näeme, et Digipanga teenuse staatus sõltub erineva kaaluga infrastruktuuri ja tehingute alamteenuste seisust. Kaaludega töötamine ja nende kuvamine on DX OI huvitav eelis.

Topoloogia on ettevõtte operatiivseire oluline element, mis võimaldab operaatoritel ja inseneridel analüüsida komponentide vahelisi seoseid, leida algpõhjus ja mõju.

DX OI Topology Viewer on teenus, mis kasutab domeeni jälgimissüsteemide topoloogilisi andmeid, mis koguvad andmeid otse monitooringuobjektidelt. Tööriist on loodud otsima mitmest topoloogiasalvestuskihist ja kuvama kontekstispetsiifilise seosekaardi. Probleemide uurimiseks võite minna probleemsele Backend Bankingu alamteenusele ja vaadata topoloogiat ja probleemseid komponente. Iga komponendi puhul saab analüüsida ka häiresõnumeid ja jõudlusmõõdikuid.

Maksete tehingukomponentide (kasutajate tehingute) analüüsimisel saame jälgida äritegevuse KPI väärtusi, mida võetakse arvesse ka teenuse saadavuse ja tervisliku seisundi arvutamisel. Ettevõtte KPI näide on toodud allpool:

Sündmuste analüüs (Alarm Analytics)

Algoritmiline müra vähendamine õnnetuste klastrite tõttu

Üks DX OI põhifunktsioone sündmuste töötlemisel on rühmitamine. Mootor töötab kõigi süsteemi saabuvate hoiatustega, et tuvastada erinevatel kontekstidel põhinevad mustrid ja rühmitada need kokku. Need klastrid on iseõppivad ja neid ei pea käsitsi konfigureerima.

Seega võimaldab klasterdamine kasutajatel kombineerida ja rühmitada tohutul hulgal sündmusi ning analüüsida ainult neid, millel on ühine kontekst. Näiteks sündmuste kogum, mis esindab rakendusi või andmekeskust mõjutavat juhtumit. Olukorrad luuakse masinõppepõhiste klasterdamisalgoritmide abil, mis kasutavad analüüsiks ajalist korrelatsiooni, topoloogilist seost ja emakeeletöötlust. Allolevatel joonistel on näiteid rühmitatud sõnumirühmade visualiseerimisest, nn olukordade häiretest ja tõendite ajajoonest, mis kuvavad peamised rühmitamise parameetrid ja mürasündmuste arvu vähendamise protsessi.

Juurprobleemide analüüs ja õnnetuste korrelatsioon

Tänapäeva hübriidkeskkonnas võib kasutaja tehing mõjutada mitut süsteemi, mida kasutatakse dünaamiliselt. Selle tulemusena saab erinevatest süsteemidest genereerida mitu hoiatust, mis on seotud sama probleemi või juhtumiga. DX OI kasutab üleliigsete ja dubleerivate hoiatuste mahasurumiseks ja seotud hoiatusteadete korreleerimiseks patenteeritud mehhanisme, et parandada kriitiliste probleemide tuvastamist ja kiiremat lahendust.

Vaatame näidet, kui süsteem saab ühe teenuse aluseks olevate erinevate objektide (OU-de) kohta arvukalt häireteateid. Teenuse kättesaadavuse ja toimivuse mõjutamise korral genereerib süsteem teenusehäire (Service Alarm), näitab ja määrab tõenäolise algpõhjuse (probleemne KE ja KE jaoks häireteade), mis aitas kaasa jõudluse vähenemisele või teenuse rike. Alloleval joonisel on kujutatud Webexi teenuse hädaolukorra visualiseerimine.

DX OI võimaldab teil töötada sündmustega läbi intuitiivsete toimingute süsteemi veebiliideses. Kasutajad saavad käsitsi määrata sündmused vastutavale töötajale tõrkeotsinguks, lähtestada/kinnitada hoiatusi, luua pileteid või saata meiliteatisi ning käivitada automaatskripte hädaolukorra lahendamiseks (Remediation Workflow, sellest lähemalt hiljem). Sel viisil võimaldab DX OI valveoperaatoritel keskenduda juurhäiresõnumile ja samuti aitab sujuvamaks muuta sõnumite rühmitatud massiividesse sortimist.

Masinaalgoritmid mõõdikute töötlemiseks ja jõudlusandmete analüüsimiseks

Masinõpe võimaldab teil jälgida, koondada ja visualiseerida peamisi jõudlusnäitajaid mis tahes ajaperioodi kohta, mis annab kasutajale järgmised eelised.

• Kitsaskohtade ja jõudlusanomaaliate tuvastamine;
• Mitmete samade seadmete, liideste või võrkude näitajate võrdlus;
• Identsete näitajate võrdlus mitmel objektil;
• Erinevate näitajate võrdlus ühe ja mitme objekti kohta;
• Mitmemõõtmeliste mõõdikute võrdlus mitme objekti vahel.

Süsteemi sisenevate mõõdikute analüüsimiseks kasutab DX OI matemaatilisi algoritme kasutavaid masinanalüüsi funktsioone, mis aitab vähendada staatiliste lävede määramise ja kõrvalekallete ilmnemisel hoiatuste genereerimise aega.

Matemaatiliste algoritmide rakendamise tulemuseks on meetrika väärtuse nn tõenäosusjaotuste konstrueerimine (Rare, Probable, Center, Mean, Actual). Ülaltoodud ja allolevad joonised näitavad tõenäosusjaotust.

Kaks ülaltoodud diagrammi näitavad järgmisi andmeid:

• Tegelikud andmed. Tegelikud andmed joonistatakse pideva musta joonena (häireid pole) või värvilise pideva joonena (häireseisund). Rida arvutatakse mõõdiku tegelike andmete põhjal. Võrreldes tegelikke andmeid ja mediaani, näete kiiresti mõõdiku erinevust. Sündmuse toimumisel muutub must joon värviliseks pidevaks jooneks, mis vastab sündmuse tõsidusele ja kuvab graafiku kohal vastava raskusastmega ikoone. Näiteks punane kriitilise kõrvalekalde jaoks, oranž suurema kõrvalekalde jaoks ja kollane väiksema kõrvalekalde jaoks.
• Indikaatori keskmine väärtus. Mõõtme mediaan või keskmine on diagrammil näidatud halli joonena. Keskmist väärtust kuvatakse, kui ajaloolisi andmeid pole piisavalt.
• Indikaatori mediaanväärtus (Center value). Keskmine joon on vahemiku keskpunkt ja seda näidatakse rohelise punktiirjoonena. Sellele joonele lähimad tsoonid on indikaatori tüüpilistele väärtustele kõige lähemal.
• Ühine väärtus. Üldised tsooniandmed jälgivad teie mõõdiku lähimat keskjoont või tavalist ja kuvatakse tumerohelise ribana. Analüütilised arvutused asetavad üldise tsooni ühe protsentiili võrra normaalsest kõrgemale või madalamale.
• Tõenäosuslikud andmed. Tõenäosuse tsooni andmed kuvatakse graafikul rohelise ribana. Süsteem asetab tõenäosustsooni kahe protsentiili võrra normaalsest kõrgemale või allapoole.
• Haruldased andmed. Haruldaste tsoonide andmed kuvatakse graafikul helerohelise ribana. Süsteem asetab haruldaste meetriliste väärtustega tsooni kolm protsentiili normist kõrgemale või allapoole ja annab signaali näidiku käitumisest väljaspool normaalset vahemikku, samal ajal kui süsteem genereerib nn anomaaliateate.

Anomaalia on mõõtmine või sündmus, mis on vastuolus mõõdiku normaalse toimimisega. Anomaaliate tuvastamine probleemide tuvastamiseks ning infrastruktuuri ja rakenduste suundumuste mõistmiseks on DX OI põhifunktsioon. Anomaaliate tuvastamine võimaldab teil nii ebatavalist käitumist ära tunda (nt tavapärasest aeglasemalt reageeriv server või häkkimisest põhjustatud ebatavaline võrgutegevus) kui ka sellele vastavalt reageerida (intsidendi algatamine, automaatse parandusskripti käivitamine).

DX OI anomaaliate tuvastamise funktsioon pakub järgmisi eeliseid:

• Künniseid pole vaja seada. DX OI võrdleb andmeid iseseisvalt ja tuvastab kõrvalekalded.
• DX OI sisaldab enam kui kümmet tehisintellekti ja masinõppe algoritmi, sealhulgas EWMA (Exponentially-Weighted-Moving-Average) ja KDE (Kernel Density Estimation). Need algoritmid võimaldavad kiiret algpõhjuste analüüsi ja tulevaste mõõdikute väärtuste prognoosimist.

Ennustav analüüs ja võimalikest riketest teavitamine

Predictive Insights on funktsioon, mis kasutab mustrite ja suundumuste tuvastamiseks masinõppe võimsust. Nende suundumuste põhjal ennustab süsteem sündmusi, mis võivad tulevikus aset leida. Need sõnumid viitavad vajadusele tegutseda enne, kui mõõdikute väärtused kalduvad kõrvale tavaväärtustest ja mõjutavad kriitilisi äriteenuseid. Ennustavad ülevaated on kujutatud alloleval joonisel.

Ja see on konkreetse mõõdiku ennustavate hoiatuste visualiseerimine.

Arvutusvõimsuse koormuse prognoosimine koormusstsenaariumide seadmise funktsiooniga

Capacity Analytics võimsuse planeerimine aitab teil hallata oma IT-ressursse, tagades, et ressursid on praeguste ja tulevaste ärivajaduste jaoks õige suurusega. Oskad optimeerida olemasolevate ressursside tootlikkust ja efektiivsust, planeerida ja põhjendada kõiki finantsinvesteeringuid.

DX OI võimsusanalüüsi funktsioon pakub järgmisi eeliseid.

• Prognoosimisvõimsused kõrghooajal;
• Momendi kindlaksmääramine, millal teenuse kvaliteedi tagamiseks on vaja lisaressursse;
• Täiendavate ressursside ostmine ainult vajaduse korral;
• Infrastruktuuri ja võrkude tõhus juhtimine;
• Likvideerida mittevajalikud energiakulud, tuvastades alakasutatud ressursid;
• Ressursikoormuse hindamine teenuse või ressursi nõudluse kavandatud kasvu korral.

Capacity Analytics DX OI lehel (pilt allpool) on järgmised vidinad:

• Ressursi võimsuse olek;
• Kontrollitud rühmad / teenused (jälgitavad rühmad / teenused);
• Suured ressursside tarbijad (Top Capacity Consumers).

Võimsuse analüüsi avalehel kuvatakse ressursikomponente, mis on ülekasutatud ja võimsus hakkab otsa saama. See leht aitab platvormi administraatoritel leida ülekasutatud ressursse ning aitab neil ressursside suurust muuta ja optimeerida. Ressursside olekut saab analüüsida värvikoodide ja neile vastavate tähenduste põhjal. Ressursid liigitatakse ressursivõimsuse oleku lehel nende ülekoormatuse taseme alusel. Valitud kategooriasse kuuluvate komponentide loendi kuvamiseks võite klõpsata igal värvil. Järgmisena kuvatakse kõigi objektide ja 12 kuu prognoosidega soojuskaart, mis võimaldab tuvastada ammenduma hakkavaid ressursse.

Iga Capacity Analyticsi mõõdiku jaoks saate määrata filtrid, mida DX Operational Intelligence kasutab prognooside tegemiseks (joonis allpool).

Saadaval on järgmised filtrid:

• Mõõdik. Prognoosi jaoks kasutatav mõõdik.
• Lähtume. Ajalooliste andmete hulga valimine, mida tulevikuprognooside tegemiseks kasutatakse. Seda välja kasutatakse viimase kuu trendide, viimase 3 kuu trendide, aasta trendide jms võrdlemiseks ja analüüsimiseks.
• Kasv. Töökoormuse eeldatav kasvumäär, mida soovite kasutada võimsuse prognoosi modelleerimiseks. Neid andmeid saab kasutada prognoositust suurema kasvu prognoosimiseks. Näiteks eeldatakse, et ressursikasutus kasvab uue kontori avamise tõttu veel 40 protsenti.

Logi analüüs

DX OI logi analüüsi funktsioon pakub:

• logide kogumine, koondamine erinevatest allikatest (sealhulgas agentuuri ja agentideta meetoditel saadud);
• sõelumine ja andmete normaliseerimine;
• seatud tingimustele vastavuse analüüs ja sündmuste genereerimine;
• sündmuste korrelatsioon logide alusel, sh IT infrastruktuuri monitooringu tulemusena saadud sündmused;
• andmete visualiseerimine, mis põhineb DX armatuurlaudade analüüsil;
• järeldused teenuste kättesaadavuse kohta logide andmete analüüsi põhjal.

Windowsi sündmuste logide ja Syslogi logide kogumine toimub agentideta meetodi abil. Tekstilogid kogutakse agentmeetodi abil.

Automaatne hädaolukorra lahendamise funktsioon (parandus)

Automaatsed toimingud hädaolukorra parandamiseks (Remediation Workflow) võimaldavad teil lahendada probleeme, mis põhjustasid DX OI-s sündmuse genereerimise. Näiteks CPU kasutusprobleem genereerib häireteate, parandamise töövoog lahendab probleemi, taaskäivitades serveri, kus probleem ilmnes. Integratsioon DX OI ja automatiseerimissüsteemi vahel võimaldab teil DX Operational Intelligence'is sündmuste konsoolist parandusprotsesse käivitada ja neid automatiseerimiskonsoolis jälgida.

Pärast automaatikasüsteemiga integreerimist saate DX OI konsoolis häire kontekstis käivitada automaatsed toimingud mis tahes hädaolukorra lahendamiseks. Saate vaadata soovitatud toiminguid koos teabega usaldusprotsentide kohta (tõenäosus, et olukord toiminguga laheneb).

Esialgu, kui parandustöövoo tulemuste kohta statistikat pole, soovitab soovitusmootor kandidaate märksõnaotsingu põhjal, seejärel kasutatakse masinõppe tulemusi ja mootor hakkab soovitama heuristilistel meetoditel põhinevat parandustehnikat. Niipea, kui hakkate saadud vihjete tulemusi hindama, paraneb soovituste täpsus.

Näide kasutajate tagasisidest: kasutaja valib, kas talle meeldib või ei meeldi pakutud toiming ning süsteem võtab seda valikut edasiste soovituste tegemisel arvesse. Meeldib/ei meeldi:

Konkreetse häire jaoks soovitatavad parandusmeetmed põhinevad tagasiside kombinatsioonil, mis määrab, kas tegevus on vastuvõetav. DX OI on integreeritud automaatse automatiseerimisega.

DX OI integreerimine kolmandate osapoolte süsteemidega

Me ei peatu Broadcomi natiivsete jälgimistoodete (DX NetOps, DX infrastruktuuri haldus, DX rakenduste jõudluse haldus) andmete integreerimisel. Selle asemel vaatleme, kuidas integreeritakse kolmandate osapoolte kolmanda osapoole süsteemide andmeid, ja vaatleme näidet integreerimisest ühe populaarseima süsteemiga – Zabbix.

Kolmandate osapoolte süsteemidega integreerimiseks kasutatakse komponenti DX Gateway. DX Gateway koosneb 3 komponendist – On-Prem Gateway, RESTmon ja Log Collector (Logstash). Saate installida kõik 3 komponenti või ainult selle, mida vajate, muutes DX Gateway installimisel üldist konfiguratsioonifaili. Allolev joonis näitab DX Gateway arhitektuuri.

Vaatleme eraldi DX Gateway komponentide eesmärki.

On-Prem Gateway. See on liides, mis kogub DX-platvormilt häireid ja saadab häiresündmused kolmandate osapoolte süsteemidele. On-Prem Gateway toimib pollerina, mis kogub perioodiliselt sündmuste andmeid DX OI-st, kasutades HTTPS-i päringu API-d, ja saadab seejärel hoiatused kolmanda osapoole serverisse, mis on veebihaagide abil integreeritud DX-platvormiga.

DX logikoguja võtab võrguseadmetelt või serveritelt vastu süsteemilogi ja laadib need üles OI-sse. DX Log Collector võimaldab eraldada sõnumeid genereeriva tarkvara, neid salvestava süsteemi ning neid raporteeriva ja analüüsiva tarkvara. Iga sõnum on märgistatud objektikoodiga, mis näitab sõnumi genereeriva tarkvara tüüpi, ja sellele määratakse raskusaste. DX armatuurlaudades saab seda kõike seejärel vaadata.

DX RESTmon integreerub REST API kaudu kolmandate osapoolte toodete/teenustega ja edastab andmed OI-le. Allolev joonis näitab DX RESTmoni tööd Solarwindsi ja SCOM seiresüsteemidega integreerimise näitel.

DX RESTmoni põhifunktsioonid:

• Andmete saamiseks looge ühendus mis tahes kolmanda osapoole andmeallikaga:
  • PULL: andmete ühendamine ja toomine avalikest REST API-dest;
  • PUSH: andmevoog RESTmoni kaudu RESTi kaudu.
• JSON- ja XML-vormingute tugi;
• Mõõdikute, märguannete, rühmade, topoloogia, inventari ja logide sisestamine;
• Erinevate tööriistade/tehnoloogiate jaoks valmis pistikud, samuti on võimalik välja töötada ühendus mistahes allikaga avatud API-ga (alloleval joonisel karbis olevate pistikute loetelu);
• Põhiautentimise tugi (vaikimisi) Swaggeri liidesele ja API-le juurdepääsul;
• HTTPS-i tugi (vaikimisi) kõikidele sissetulevatele ja väljaminevatele sõnumitele;
• Sissetulevate ja väljaminevate puhverserverite tugi;
• Võimsad teksti sõelumisvõimalused REST-i kaudu saadud logidele;
• Kohandatav sõelumine RESTmoniga logide tõhusaks sõelumiseks ja visualiseerimiseks;
• Tugi seadmerühma teabe väljavõtmiseks jälgimisrakendustest ja laadimiseks OI-sse analüüsiks ja visualiseerimiseks;
• Regulaaravaldise sobitamise tugi. Seda saab kasutada REST-i kaudu saadud logiteadete sõelumiseks ja sobitamiseks ning sündmuste genereerimiseks või sulgemiseks teatud regulaaravaldise tingimuste alusel.

Nüüd vaatame DX OI integreerimise seadistamise protsessi Zabbixiga DX RESTmoni kaudu. Kasti integreerimine võtab Zabbixilt järgmised andmed:

• inventuuriandmed;
• topoloogia;
• Probleemid;
• mõõdikud.

Kuna Zabbixi pistik on karbist väljas saadaval, ei pea integreerimise seadistamiseks tegema muud, kui värskendama oma profiili Zabbixi serveri API IP-aadressi ja kontoga ning seejärel laadima profiil üles Swaggeri veebiliidese kaudu. Näide kahel järgmisel pildil.

Pärast integratsiooni seadistamist on ülalkirjeldatud DX OI analüütilised funktsioonid saadaval Zabbixist tulevate andmete jaoks, nimelt: häireanalüüs, jõudlusanalüüs, prognoosiv ülevaade, teenuseanalüüs ja parandus. Alloleval joonisel on näide Zabbixist integreeritud objektide toimivusmõõdikute analüüsimisest.

Järeldus

DX OI on tipptasemel analüütiline tööriist, mis tagab IT-osakondadele olulise tööefektiivsuse, võimaldades teha kiiremini ja õigemaid otsuseid IT-teenuste ja äriteenuste kvaliteedi parandamiseks läbi domeenideülese kontekstianalüüsi. Rakenduste omanike ja äriüksuste jaoks arvutab DX OI kättesaadavuse ja teenuse kvaliteedi mitte ainult IT-tehnoloogia mõõdikute kontekstis, vaid ka äritegevuse KPI-de, mis on tuletatud lõppkasutajate tehingustatistikast.

Kui soovite selle lahenduse kohta rohkem teada saada, taotlege demo- või pilootprojekti teile sobival viisil meie veebisaidil.

Allikas: www.habr.com