IBM Storwize’i salvestuslahenduste jälgimine Zabbixi abil

Selles artiklis räägime veidi IBM Storwize ladustussüsteemide jälgimisest ja muudest ladustussüsteemidest, mis toetavad CIM/WBEM protokolle. Sellise jälgimise vajadus on selge, peame seda aksioomiks. Jälgimissüsteemina kasutame Zabbixit.

Zabbixi viimaselt versioonilt on ettevõte hakanud mallidele palju rohkem tähelepanu pöörama - on tekkinud malli, mis võimaldab jälgida teenuseid, andmebaase, Servers hardware (IMM/iBMC) läbi IPMI. Ladustussüsteemide jälgimine jääb siiski pakettidest välja, seetõttu on vajalik kohandatud mallide kasutamine Zabbixis ladustussüsteemi komponentide oleku ja jõudluse jälgimiseks. Üks selline mall on teile tutvumiseks.

Alustame mõningate teooriatega.

IBM Storwize ladustussüsteemi oleku ja statistika juurde pääsemiseks võib kasutada:

1. CIM/WBEM protokolle;
2. RESTful API (IBM Storwize puhul toetatakse alates tarkvara versioonist 8.1.3);
3. SNMP traps (piiratud trapide komplekt, puudub statistika);
4. SSH kaudu ühendamine järgmise kaugsalvestuse sobib aeglaseks bash-skriptimiseks.

Huvi korral saavad huvilised tutvuda erinevate jälgimismeetoditega vastavate tootja dokumentatsioonide lõikudes ning dokumendis IBM Spectrum Virtualize scripting.

Kasutame CIM/WBEM protokolle, mis võimaldavad saada ladustussüsteemide tööparameetreid ilma oluliste süsteemimuudatusteta erinevate ladustussüsteemide jaoks. CIM/WBEM protokollid toimivad vastavalt Storage Management Initiative Specification (SMI-S). Storage Management Initiative – Specification põhineb avatud standarditel CIM (Common Information Model) ja WBEM (Web-Based Enterprise Management), mida määratleb Distributed Management Task Force.

WBEM töötab HTTP protokoli peal. WBEM'i kaudu saab töötada mitte ainult ladustussüsteemide, vaid ka HBA, lülitite ja teipraamatute süsteemidega.

Vastavalt SMI arhitektuur ja Määra infrastruktuur, SMI tõhususe põhikomponent on WBEM-server, mis töötleb CIM-XML päringuid WBEM-kliendilt (meie juhul jälgimisskriptid):

CIM on objektorienteeritud mudel, mis põhineb Unified Modeling Language (UML) põhjal.
Haldate elemente, mis on määratletud kui CIM-klassid, millel on omadused ja meetodid hallatava teabe ja funktsioonide esitamiseks.

Vastavalt www.snia.org/pywbem, et saladuslaudadele pääsemiseks CIMi/WBEMi kaudu saab kasutada PyWBEMi — avatud koodi teeki, mis on kirjutatud Pythonis ja tagab arendajatele ja süsteemiadministraatoritele CIMi protokolli rakendamise CIM-objektidele juurdepääsuks ja erinevate toimingute sooritamiseks WBEM-serveriga, mis töötab vastavalt SMI-S või muude CIMi spetsifikatsioonide järgi.

WBEM-serveriga ühenduse loomiseks kasutame klassi konstruktorit WBEMConnection:

conn = pywbem.WBEMConnection(server_uri, (self.login, self.password),
            namespace, no_verification=True)

See on virtuaalne ühendus, kuna CIM-XML/WBEM töötab HTTP peal, tegelik ühendus toimub WBEMConnection klassi meetodite kutsumise hetkel. Vastavalt IBM System Storage SAN Volume Controller ja Storwize V7000 parimate tavade ja jõudluse suunistele (näide C-8, leht 412) kasutame IBM Storwize SCSI nimiruumi „root/ibm“.

Pange tähele, et statistikakogumiseks CIM-XML/WBEM protokolli kaudu peab kasutaja olema lisatud vastavasse turvagruppi. Vastasel juhul, kui WBEM-päringuid tehakse, on objekti atribuudi väljund tühi..

Statistikale juurdepääsuks peab kasutaja, kes kutsub üles konstruktorit WBEMConnection(), omama vähemalt RestrictedAdmin õigusi (see on saadaval kooditasemele > 7.8.0) või Administrator õigusi (turbe kaalutlustel ei soovita).

Ühendame CSD-ga SSH kaudu ja vaatame grupinumbreid:

> lsusergrp
id name            role            remote
0  SecurityAdmin   SecurityAdmin   no    
1  Administrator   Administrator   no    
2  CopyOperator    CopyOperator    no    
3  Service         Service         no    
4  Monitor         Monitor         no    
5  RestrictedAdmin RestrictedAdmin no    

Lisame kasutaja zabbix vajaliku rühma:

> chuser -usergrp 5 zabbix

Lisaks sellele peab IBM System Storage SAN Volume Controller ja Storwize V7000 parimate tavade ja jõudluse suuniste järgi (leht 415) olema statistikakogumine aktiveeritud CSD-l. Statistikakogumiseks iga minuti järel:

> startstats -interval 1 

Kontrollime:

> lssystem | grep statistics
statistics_status on
statistics_frequency 1

Kogu olemasolevate CSD klasside saamiseks tuleb kasutada meetodit EnumerateClassNames().

Näide:

classnames = conn.EnumerateClassNames(namespace='root/ibm', DeepInheritance=True)
for classname in classnames:
     print(classname)

CSD-de parameetrite väärtuste saamiseks on mõeldud meetod EnumerateInstances() WBEMConnection klass, mis tagastab eksemplaride loendi CIMInstance().

Näide:

instances = conn.EnumerateInstances(classname,
                   namespace=nd_parameters['name_space'])
for instance in instances:
     for prop_name, prop_value in instance.items():
          print('  %s: %r' % (prop_name, prop_value))

Mõnede klasside jaoks, mis sisaldavad suurt hulka eksemplare, nagu IBMTSSVC_StorageVolume, võib kõigi eksemplaride täielik päring olla üsna aeglane. See võib genereerida suuri andmemahtusid, mis tuleb ette valmistada, edastada võrgus ja töödelda skripti abil. Sellise juhtumi jaoks on olemas meetod ExecQuery(), mis võimaldab saada ainult meid huvitavad klassi eksemplari omadused. See meetod eeldab päringu keele kasutamist, mis on sarnane SQL-ile — kas CIM Query Language (DMTF:CQL) või WBEM Query Language (WQL), et küsida CIM-objekte:

request = 'SELECT Name FROM IBMTSSVC_StorageVolumeStatistics'
objects_perfs_cim = wbem_connection.ExecQuery('DMTF:CQL', request)

Kuna määrata, millised klassid on vajalikud Salvestusseadmete objektide parameetrite saamiseks, loeme dokumentatsiooni, näiteks Kuidas süsteemi kontseptsioonid vastavad CIM kontseptsioonidele.

Seega füüsiliste ketaste (Disk Drives) parameetrite saamiseks küsime klassilt IBMTSSVC_DiskDrive, mahtude (Volumes) parameetrite saamiseks klassilt IBMTSSVC_StorageVolume, massiivide parameetrite saamiseks klassilt IBMTSSVC_Array, MDisks parameetrite saamiseks klassilt IBMTSSVC_BackendVolume jne.

Toimealaste näitajate kohta saad lugeda Ühise teabe mudeli agendi funktsionaalsed skeemid (konkreetselt — Bloki serveri jõudluse alamprofiil) ja IBM System Storage SAN Volume Controller ja Storwize V7000 parimad praktikad ja jõudluse juhised (Näide C-11, lk 415).

Volume'ide jaoks Salvestusseadmest saadud statistikate saamiseks tuleb ClassName parameetri väärtus määrata IBMTSSVC_StorageVolumeStatistics. Klassist IBMTSSVC_StorageVolumeStatistics vajalikud omaduste statistika kogumiseks võib vaadata Sõlme statistika.

Samuti saab jõudluse analüüsimiseks kasutada klasse IBMTSSVC_BackendVolumeStatistics, IBMTSSVC_DiskDriveStatistics, IBMTSSVC_NodeStatistics.

Andmete salvestamiseks jälgimisse süsteemi kasutame mehhanismi zabbix traps, mis on rakendatud pythonis moodulis py-zabbix. Salvestusseadme klasside ja nende omaduste struktuur paigutatakse sõnastikku JSON formaadis.

Laadime Zabbixi malli serverisse, veendum, et jälgimisse serverist on pääs STH-le protokolli WEB (TCP/5989) kaudu, paigaldame konfigureerimisfailid, avastamise ja jälgimise skriptid jälgimisse serverisse. Jätkame skriptide käivitamise lisamist ajastusse. Lõpuks: avastame STH objekte (massivid, füüsilised ja virtuaalsed kettad, enclosureid ja palju muud), edastame need Zabbixi avastustele, loeme nende parameetrite staatust, loeme jõudlusstatistikat (perfomance counters) ja edastame kõik sageli vastavatesse Zabbixi objektidesse meie mallis.

Zabbixi mall, python-skriptid, STH klasside struktuur ja nende omadused, ning konfigureerimisfailide näidised on leidmiseks siin.

Allikas: habr.com