Sel septembril teatas Broadcom (endine CA) uue versiooni 20.2 väljastamisest oma lahendusest DX Operations Intelligence (DX OI). Turul positsioneeritakse seda toodet kui universaalset jälgimissüsteemi. Süsteem on võimeline saama ja ühendama andmeid erinevate domeenide jälgimisse sistemite (võrk, infrastruktuur, rakendused, andmebaasid) nii CA kui ka kolmandate osapoolte tootjatelt, sealhulgas avatud lähtekoodiga lahendustelt (Zabbix, Prometheus ja teised).

DX OI peamine funktsioon on täieliku ressursside-teenuste mudeli (RSM) loomine konfiguratsioonielementide (KE) põhjal, mis täidavad inventaaribaasi kolmandate osapoolte süsteemide integreerimise käigus. DX OI-s on rakendatud masinõppe (ML) ja tehisintellekti (AI) funktsioonid voogudesse, mis jõuavad platvormi, mis võimaldab hinnata/prognoosida spetsiifilise KE rikke tõenäosust ja selle mõju ulatust äriteenusele, mille põhjal on konkretne KE. Peale selle on DX OI ainus sündmuste kogumise koht jälgimise süsteemide ja seega ka Service Desk'i süsteemi integreerimise jaoks, mis on vaieldamatu eelis süsteemi kasutamisel organisatsioonide ühistes jälgimiskeskustes vahetustega töötajate jaoks. Selles artiklis räägime süsteemi funktsionaalsusest lähemalt ning näitame kasutaja ja administraatori liideseid.

Lahenduse DX OI arhitektuur

DX platvorm omab mikroteenuste arhitektuuri, paigaldatakse ja töötab Kubernetes'i või OpenShift'i haldusel. Järgneval joonisel on toodud lahenduse komponendid, mida saab kasutada iseseisvate jälgimistööriistadena või asendada juba olemasolevate sarnaste funktsioonidega jälgimissüsteemidega (joonisel on toodud selliste süsteemide näited), ühendades need hiljem DX OI universaalsüsteemiga. Allolevas skeemis:

• Mobiilirakenduste jälgimine DX App Experience Analytics'is;
• Rakenduste jõudluse jälgimine DX APM-is;
• Infrastruktuuri jälgimine DX Infrastructure Manager'is;
• Võrguseadmete jälgimine DX NetOps Manager'is.

DX komponendid töötavad Kubernetes'i klastri haldusel ja skaleeritakse lihtsalt uute POD-ide käivitamisega. Allpool on kõrgetasemeline lahenduse skeem.

DX platvormi haldamine, skaleerimine ja värskendamine toimub halduskonsolis. Ühest konsolist saab hallata mitmeüürilist arhitektuuri, mis võib hõlmata mitmeid ettevõtteid või mitmeid ärivaldkondi ettevõtte sees. Selles mudelis saab iga ettevõtte individuaalselt seadistada kui üürnik oma konfiguratsioonide kogumiga.

Halduskonsol on veebitööriist operatsioonide ja süsteemi haldamiseks, mis pakub administraatoritele ühtset ja kooskõlastatud liidest klastrite jälgimise haldamise ülesannete täitmiseks.

Uued üürnikud ettevõtte või ärivaldkondade jaoks ettevõtte koosseisus paigaldatakse mõne minutiga. See annab eelise, kui soovite omada ühte jälgimissüsteemi, kuid samas eraldada jälgimisobjekte osakondade vahel platvormi tasemel (mitte ligipääsu õiguste kaudu).

Ressursside- ja teenusmudelid ning äriteenuste jälgimine

DX OI-l on sisseehitatud mehhanismid teenuste loomiseks ja klassikaliste RSM-de arendamiseks, määrates seose ja kaalude loogika teenuse komponentide vahel. Samuti on olemas mehhanismid RSM-de eksportimiseks välistest CMDB-dest. Alloleval joonisel on RSM-i sisseehitatud redaktor (pöörake tähelepanu sidemete kaaludele).

DX OI annab tervikliku ülevaate äriteenuste või IT-teenuste võtmeindikaatoritest, sealhulgas teenuste kättesaadavusest ja tõrke riskide prognoosimisest. Tööriist võib samuti anda arusaama, kuidas jõudlusprobleem või IT-komponentide struktuuri muutus (rakendused või infrastruktuur) mõjutab äriteenust. Alloleval joonisel on interaktiivne juhtpaneel, mis näitab kõigi teenuste seisundit.

Vaatame detaile Digital Banking teenuse näitel. Teenuse nime klikates jõuame teenuse RSM-i detailidesse. Näeme, et Digital Banking teenuse staatus sõltub infrastruktuuri ja tehingu alamteenuste seisundist erinevate kaaludega. Kaaludega tegelemine ja nende kuvamine on DX OI naljakas eelis.

Topoloogia on oluline element ettevõtte operatiivses jälgimises, mis võimaldab operaatoritel ja inseneridel analüüsida komponentide vahelisi suhteid, leida põhjuseid ja mõju.

DX OI Topology Viewer on teenus, mis kasutab oma töös topoloogilisi andmeid, mis on saadud domeenimonitoringu süsteemidest, mis koguvad andmeid otse jälgitavatelt objektidelt. Tööriist on mõeldud mitme kihi topoloogia salvestuste otsimiseks ja seose kaardi kuvamiseks, mis sõltub kontekstist. Probleemide uurimiseks saab liikuda probleemsete teenuste Backend Banking juurde ja näha topoloogiat ning probleemseid komponente. Iga komponendi puhul on võimalik analüüsida ka tõrge teateid ja jõudlusmõõdikuid.

Analüüsides maksesüsteemide (kasutajate tehingute) komponentide väärtusi, saame jälgida ärilisi KPI-sid, mida arvesse võetakse ka teenuse kättesaadavuse ja kvaliteedi määramisel. Näide ärilisest KPI-st on toodud allpool:

Sündmuste analüüs (Alarm Analytics)

Algotmiline mürasummutamine õnnetuste klasterdamise kaudu

Üks DX OI võtmefunktsioonidest sündmuste töötlemisel on klasterdamine. Mehhanism töötab kõikide süsteemi saadetud teavituste üle, et tuvastada mustrid erinevate kontekstide põhjal ja grupeerida need. Need klastrid on iseõppivad, neid ei pea käsitsi seadistama.

Seega võimaldab klasterdamine kasutajatel ühendada ja grupeerida tohutul hulgal sündmusi ning analüüsida ainult neid, millel on ühine kontekst. Näiteks sündmuste kogum, mis esindab intsidenti, millel on mõju rakenduste või andmekeskuse toimimisele. Situatsioonid luuakse, kasutades masinõppimise põhjal teostatavaid klasterdamise algoritme, analüüsides ajaliselt korrelatsiooni, topoloogilisi seoseid ja loomuliku keele töötlemist (native language). Allpool on toodud näidised klastergruppide teavituste visualiseerimisest, nn Situations Alarms, ja Evidence Timeline, mis kuvavad grupeerimise peamisi parameetreid ja müra sündmuste arvu vähendamise protsessi.

Juureprobleemide analüüs ja häirete korrelatsioon

Kaasaegses hübriidkeskkonnas võib kasutaja tehing hõlmata mitmeid süsteeme, mida kasutatakse dünaamiliselt. Selle tulemusel võib tekkida mitmeid hoiatuseid erinevatest süsteemidest, kuid need on seotud ühe ja sama probleemi või sündmusega. DX OI kasutab patenteeritud mehhanisme liigsete ja dubleeritud teavituste summutamiseks ning seotud teavituste korreleerimiseks, et tõhustada kriitiliste probleemide avastamist ja kiiremaks lahendamiseks.

Vaatame näidet, kui süsteemi siseneb arvukalt eriobjektide (KE) avariiteateid, mis on seotud ühe teenusega. Kui see mõjutab teenuse kättesaadavust ja töövõimet, genereerib süsteem teenuse avariiteate (Service Alarm), märkides ja tuvastades tõenäolise juurpõhjuse (probleemne KE ja avariiteade KE kohta), mis viis teenuse jõudluse langemiseni või rikke ilmnemiseni. Allpool on toodud visuaal avariisituatsiooni kohta Webex teenuses.

DX OI võimaldab sündmustega toimetada intuitiivsete toimingute kaudu süsteemi veebi kasutajaliideses. Kasutajad saavad käsitsi määrata sündmused vastutavale töötajale tõrgete kõrvaldamiseks, tühistada/kinnitada teavitusi, luua taotlusi või saata e-kirju, käivitada automatiseeritud stsenaariume avarii olukordade kõrvaldamiseks (Remediation Workflow, sellest räägime hiljem). Nii saab DX OI aidata vahetuste operaatoritel keskenduda juurprobleemile ning lihtsustada teavituste sorteerimise protsessi klusterkletidele.

Masinõppimise algoritmid meetrite töötlemiseks ja jõudlusteadete analüüsiks.

Masinõpe võimaldab jälgida, koguda ja visualiseerida võtme jõudluse näitajaid mistahes konkreetse ajaperioodi jooksul, andes kasutajale järgmised eelised:

• Tõkestuste ja jõudluse anomaaliate avastamine;
• Mitme näitaja võrdlemine samade seadmete, liidesete või võrkude jaoks;
• Sarnaste näitajate võrdlemine mitmesugustes objektides;
• Erinevate näitajate võrdlemine ühes või mitmes objektis;
• Mitmemõõtmeliste näitajate võrdlemine mitmes objektis.

Süsteemi sissetulevate näitajate analüüsimiseks kasutab DX OI masinanalüüsi funktsioone matemaatiliste algoritmide rakendamisega, mis aitab vähendada aega staatiliste piirsätete seadistamisel ja hoiatussignaalide genereerimisel anomaaliate ilmnemisel.

Matemaatiliste algoritmide rakendamise tulemus on nn tõenäosuslikud jaotused näitaja väärtusest (Haruldane, Tavaline, Keskne, Keskmine, Tegelik). Ülal ja all olevates joonistes on kujutatud tõenäosuslikke jaotusi.

Ülaltoodud kahel graafikul on esitatud järgmised andmed:

• Tegelikud andmed (Actual). Tegelikud andmed kuvatakse graafikul pideva musta joonega (ilma hoiatussignaalideta) või pideva värvilise joonega (hoiatuse seisund). Joon arvutatakse näitaja tegelike andmete põhjal. Võrreldes tegelikke andmeid ja mediaani väärtust, saate kiiresti näha näitaja variatsioone. Kui toimub sündmus, muutub must joon värviliseks pidevaks jooneks, mis vastab sündmuse kriitilisusele ja kuvab graafiku kohal vastava kriitilisuse ikoonid. Näiteks punane värv kriitilise anomaalia jaoks, oranž oluline anomaalia jaoks ja kollane väheoluline anomaalia jaoks.
• Näitajate keskmine väärtus (Mean value). Näitajate keskmine või keskmine väärtus on graafikul kujutatud halli joonena. Keskmine väärtus kuvatakse, kui ajaloolisi andmeid on puudu.
• Näitajate mediaanväärtus (Center value). Mediaanijoon on vahemiku keskel ja on esitatud rohelise katkendlikuna. Selle joone lähedal asuvad tsoonid on kõige lähemal näitaja tüüpilistele väärtustele.
• Üldised andmed (Common Value). Üldise tsooni andmed jälgivad lähedased, keskjoon või norm teie näitaja jaoks ja kuvatakse tumeroheilise ribana. Analüütilised arvutused asetavad üldise tsooni ühe protsendi üle või alla normaali.
• Tõenäosuslikud andmed. Tõenäosusliku tsooni andmed on graafikul esitatud rohelise ribana. Süsteem asetab tõenäosusliku tsooni kaks protsenti normaali üle või alla.
• Haruldased andmed. Haruldaste tsoonide andmed kuvatakse diagrammil helesinise ribana. Süsteem paigutab haruldased meetrika väärtuste tsoonid kolm protsentiili normist kõrgemale või madalamale ja teavitab olme käitumise kõrvalekaldumisest normi piires, samal ajal genereerides nn Anomaalia Hoiatuse.

Anomaalia on mõõtmine või sündmus, mis ei vasta meetrika normaalsele mõõtepunkile. Anomaaliate tuvastamine probleemide avastamiseks ja suundumuste mõistmiseks infrastruktuuris ja rakendustes on DX OI peamine omadus. Anomaaliate tuvastamine võimaldab tuvastada ebatavalist käitumist (nt server, mis vastab aeglasemalt kui tavaliselt, või ebatavaline võrgutegevus, mis on tingitud häkkimisest) ning vastavalt reageerida (sündmuse registreerimine, automaatse parandusotsuse käivitamine).

Anomaaliate tuvastamise funktsioon DX OI pakub järgmisi eeliseid:

• Ei ole vaja seadistada läviväärtusi. DX OI võrdleb andmeid automaatselt ja tuvastab anomaaliad.
• DX OI sisaldab rohkem kui kümmet tehisintellekti ja masinõppe algoritmi, sealhulgas EWMA (Exponential-Weighted Moving Average) ja KDE (Kernel Density Estimation). Need algoritmid võimaldavad kiiret põhjusanalüüsi ja tulevaste meetrika väärtuste ennustamist.

Tuleviku analüütika ja võimalike tõrgete teavitamine

Predictive Insights on funktsioon, mis kasutab masinõppe võimeid mustrite ja suundumuste tuvastamiseks. Töötluse põhjal prognoosib süsteem sündmusi, mis võivad tulevikus juhtuda. Need teated näitavad vajadust tegutseda enne, kui meetrika väärtused ületavad normaalseid väärtusi, mis mõjutab kriitiliselt olulisi äriteenuseid. Predictive Insights on kujutatud alloleval joonisel.

Ja see on visuaal selle konkreetse meetrika prognoosimise hoiatustest.

Arvutusvõimsuse koormuse prognoosimine koos koormusstsenaariumide määramise funktsiooniga

Kapatsiite analüüsi planeerimise funktsioon aitab hallata IT-ressursse, tagades õige ressursside suuruse vastamiseks praegustele ja tulevastele äri vajadustele. Saate optimeerida olemasolevate ressursside tulemuslikkust ja efektiivsust, kavandada ja põhjendada kõiki rahalisi investeeringuid.

DX OI Capacity Analytics funktsioon pakub järgmisi eeliseid:

• Kapitali ennustamine tipphooaegadel;
• Hetke tuvastamine, mil on vaja täiendavaid ressursse teenuste kvaliteetse toimimise tagamiseks;
• Madalaim tasemel ressursi ostmine ainult vajaduse korral;
• Tõhus infrastruktuuri ja võrkude haldamine;
• Ülemääraste elektrikulu vähendamine tuvastades alakasutatud ressursid;
• Ressursside koormuse hindamine, kui teenuse või ressursi vajamise kavandatud suurenemine on olemas.

DX OI Capacity Analytics lehelt (allolev joonis) leiate järgmised vidinad:

• Ressursi mahutavuse seisund (Resource Capacity Status);
• Jälgitud grupid/teenused (Monitored Groups/Services);
• Suured ressursikasutajad (Top Capacity Consumers).

Capacity Analytics peamine leht näitab ressursikomponente, mis on ülemäära koormatud ja mille mahutavus on peaaegu otsa saamas. See leht aitab platvormi administraatoritel leida ülemäära kasutatavaid ressursse ning aidata neil suurust muuta ja ressursse optimeerida. Ressursside seisundit saab analüüsida värvikoodide ja nende vastavate väärtuste põhjal. Ressursid klassifitseeritakse nende ülemäärase koormuse astme põhjal ressursi mahutavuse seisundi leheküljel. Iga värvi peale saab klikata, et näha nimekirja valitud kategooriasse kuuluvatest komponentidest. Edasi kuvatakse soojuskaart kõikide objektide ja 12 kuu prognoosidega, mis võimaldab tuvastada ressursse, mis on varsti otsakorral.

Capacity Analytics iga mõõdiku puhul saab määrata filtreid, mida DX Operational Intelligence kasutab prognooside koostamiseks (allolev joonis).

Saadaval on järgmised filtrid:

• Mõõdik. Mõõdik, mida kasutatakse prognoosimiseks.
• Base on. Ajalooliste andmete mahu valimine, mida kasutatakse tuleviku prognooside koostamiseks. Seda välja kasutatakse võrreldes ja analüüsides viimase kuu, viimase 3 kuu, viimase aasta ja nii edasi suundumusi.
• Kasv. Oodatav koormuse kasvukiirus, mida soovite kasutada energia prognoosi modelleerimiseks. Nende andmete abil on võimalik prognoosida kasvu, mis ületab olemasolevad prognoosid. Näiteks prognoositakse, et ressursi kasutamine suureneb veel 40 protsenti uue kontori avamise tõttu.

Logide analüüs

DX OI logianalüüsi funktsioon tagab:

• logide kogumise ja konsolideerimise erinevatest allikatest (sealhulgas agentide ja agentideta meetoditega);
• andmete parsimise ja normaliseerimise;
• tingimustele vastavuse analüüsi ja sündmuste genereerimise;
• sündmuste korrelatsiooni logide põhjal, sealhulgas IT-infrastruktuuri jälgimise protsessidest saadud sündmuste põhjal;
• andmete visualiseerimise analüüsi alusel DX Dashboardsis;
• järeldused teenuste kättesaadavuse kohta logide andmete analüüsi põhjal.

Logide kogumine agentideta meetodil toimub Windows Event logs ja Syslog süsteemi jaoks. Agentide meetodil kogutakse tekstipõhiseid logisid.

Automatiseeritud hädaolukordade lahendamise funktsioon (Remediation)

Automatiseeritud hädaolukordade lahendamise toimingud (Remediation Workflow) võimaldavad lahendada probleeme, mis põhjustasid sündmuse genereerimise DX OIs. Näiteks, kui protsessori koormuse probleem genereerib hädaolukorra teate, lahendab lahendamise protsess (Remediation Workflow) probleemi serveri taaskäivitamise teel, kus probleem tekkis. DX OI ja automatiseerimissüsteemi vaheline integratsioon võimaldab käivitada parandamisprotsesse DX Operational Intelligence sündmete konsoolist ja jälgida neid automatiseerimissüsteemi konsoolis.

Pärast integratsiooni automatiseerimissüsteemiga on võimalik käivitada automaatseid lahendustoiminguid igasuguste hädaolukordade korral DX OI konsoolist, lähtudes hädaolukorra teate kontekstist. Te saate vaadata soovitatud toiminguid koos tõenäosuse (võimaluse) teabega, et olukorra lahendamine toimub vastava toiminguga.

Alguses, kui Remediation Workflow tulemuste kohta statistika puudub, pakub soovituste mehhanism potentsiaalseid variatsioone märksõnade põhise otsingu alusel, seejärel kasutatakse masinõppe tulemusi ja mehhanism hakkab soovitama parandamise meetodeid heuristika alusel. Niipea kui te hakkate hindama saadud soovituste tulemusi, paraneb soovituste täpsus.

Kasutajate tagasiside näide: kasutaja valib meelepärase või mitte meelepärase ettepaneku, ning süsteem arvestab seda valikut edasistes soovitustes. Meeldib / ei meeldi:

Konkreetse mure puhul soovitatud korrigeerivad tegevused põhinevad tagasiside kombinatsioonil, mis määrab, kas tegevus on vastuvõetav. DX OI tuleb koos eelneva integratsiooniga Automic Automationi automatiseerimissüsteemiga.

DX OI integratsioon kolmandate osapoolte süsteemidega

Keskendume andmete integreerimisele Broadcomi kodusüsteemidest (DX NetOps, DX Infrastructure Management, DX Application Performance Management) üksikasjalikult. Selle asemel vaatame, kuidas andmed integreeritakse kolmandate osapoolte süsteemidest, ning toome välja näite integratsioonist ühe populaarseima süsteemiga — Zabbix.

Kolmandate osapoolte süsteemidega integreerimiseks kasutatakse komponenti DX Gateway. DX Gateway koosneb kolmest komponendist — On-Prem Gateway, RESTmon ja Log Collector (Logstash). Kõik kolm komponenti saab installida või installida ainult vajaliku, muutes DX Gateway paigaldamise ajal üldfaili konfiguratsiooni. Alloleval joonisel on kujutatud DX Gateway arhitektuuri.

Vaadakem DX Gateway komponente eraldi.

On-Prem Gateway. See on liides, mis kogub avariisignaale DX platvormilt ja saadab avariid kolmandate osapoolte süsteemidele. On-Prem Gateway toimib kui poller, mis perioodiliselt kogub üritusteandmeid DX OIst, kasutades API päringuid HTTPS protokolli abil, ning seejärel saadab HOI-le teateid kolmandale serverile, mis on integreeritud DX platvormiga, kasutades veebihüvesid.

DX Log Collector vastutab syslog'i vastuvõtmise eest võrguseadmetelt või serverid ja laadib need OI-sse. DX Log Collector võimaldab eraldada tarkvara, mis genereerib sõnumeid, süsteemi, mis neid talletab, ning tarkvara, mis analüüsib ja edastab neid. Iga sõnum märgistatakse objekti koodiga, mis näitab sõnumi genereerimise tarkvara tüüpi, ning sellele antakse kriitilisuse tase. DX juhtpaneelides on võimalik seda kõik hiljem vaadata.

DX RESTmon integreerub kolmandate osapoolte toodete/teenustega läbi REST API ja edastab andmeid OI-sse. Alloleval joonisel on kujutatud DX RESTmon'i toimimise skeemi, tuues esile integreerimise Solarwinds ja SCOM-monitooringu süsteemidega.

DX RESTmon peamised funktsioonid:

• Ühendage mis tahes kolmanda osapoole andmeallikaga andmete vastuvõtmiseks:
  • PULL: andmete ühendamine ja väljavõte avalikest REST API-dest;
  • PUSH: andmevoog RESTmoni kaudu RESTi kaudu.
• Toetatakse JSON ja XML formaate;
• Mõõdikute, häirete, gruppide, topoloogia, inventari ja logide vastuvõtt;
• Valmis ühendused erinevate tööriistade/tehnoloogiate jaoks, samuti on võimalik arendada ühendus mis tahes avatud API allikaga (kapoti all olevate ühenduste loetelu);
• Toetatakse põhivautentimist (vaikimisi) Swaggeri ja API liidese juurdepääsu jaoks;
• Toetatakse HTTPS-i (vaikimisi) kõigi sissetulevate ja väljaminevate sõnumite jaoks;
• Toetatakse sissetulevaid ja väljaminevaid seadmeid;
• Võimas tekstianalüüsi võimalus logide analüüsimiseks, mis on saadud RESTi kaudu;
• Kohandatav analüüs RESTmoni abil, mis tagab logide tõhusa analüüsi ja visualiseerimise;
• Toetatakse seadmete gruppide teabe väljavõtmist järelevalve rakendustest ja üleslaadimist OI jaoks analüüsimiseks ja visualiseerimiseks;
• Toetatakse regulaaravaldustega vastavuse kontrollimist. Seda saab kasutada logi sõnumite analüüsimiseks ja vastavuse kontrollimiseks, mis on saadud RESTi kaudu, ning sündmuste genereerimiseks või sulgemiseks määratud regulaaravalduse tingimuste põhjal.

Nüüd vaatame DX OI integreerimise seadistamise protsessi Zabbixi kaudu DX RESTmoni. Valmis integreerimine võtab Zabbixist järgmised andmed:

• inventariandmed;
• topoloogia;
• probleemid;
• mõõdikud.

Kuna Zabbixile mõeldud ühendus on saadaval, on kõik, mis on vajalik integreerimise seadistamiseks, API serveri Zabbixi IP-aadressi ja konto määramine profiilis ning seejärel profiili üleslaadimine Swaggeri veebiliidese kaudu. Näite kaks järgmist pilti.

Pärast integreerimise seadistamist on Zabbixist voolavate andmete jaoks saadaval DX OI analüüsi funktsioonid, nagu on eespool kirjeldatud: Alarm Analytics, Performance Analytics, Predictive Insights, Service Analytics ja Remediation. Alloleval pildil on näide jõudluse mõõdikute analüüsist, mis on integreeritud Zabbixist.

Kokkuvõte

DX OI — kaasaegne analüüsitööriist, mis tagab IT-osakondade jaoks märkimisväärse operatiivse efektiivsuse, võimaldades teha kiiremaid ja õigemaid otsuseid IT-teenuste ja äriteenuste kvaliteedi tõstmiseks vahe-domain konteksti analüüsi abil. Rakenduste ja äriosakondade omanikele arvutab DX OI teenuste kättesaadavuse ja kvaliteedi näitajaid mitte ainult tehniliste IT-mõõdikute kontekstis, vaid ka äri-KPI-sid, mis saadakse lõppkasutajate tehingu statistika põhjal.

Kui soovite selle lahenduse kohta rohkem teada, jätke taotlus demonstraatsiooni või pilotprojekti jaoks teile sobival viisil meie veebilehel.

Allikas: habr.com