Eta frogatu, edo nola gainditu genuen Uptime Institutuko Operazio Iraunkortasunaren auditoretza

Eta frogatu, edo nola gainditu genuen Uptime Institutuko Operazio Iraunkortasunaren auditoretza
Operazio-saileko burua lurpeko erregaien biltegiaren eskotilara igo zen solenoide balbulako markak erakusteko.

Otsailaren hasieran, gure Tier III datu-zentro handiena NORD-4 Uptime Institute-k (UI) Eragiketa Iraunkortasunaren estandarrarekin berretsi du. Gaur ikuskariak zer ikusten ari diren eta zein emaitzarekin amaitu dugun kontatuko dizuegu.

Datu-zentroak ezagutzen dituztenentzat, goazen hardwarea laburki. Maila estandarrak Datu-zentroak ebaluatu eta ziurtatzen ditu hiru fasetan:

  • proiektua (Diseinua): proiektuaren dokumentazioaren paketea egiaztatzen da.Hemen ezaguna tier. 4 dira guztira: I–IV maila. Azken hau da, beraz, altuena.
  • eraikitako instalazioa (Instalazioa): datu-zentroaren ingeniaritza-azpiegitura egiaztatzen da eta proiektuarekin bat datorren. Datu-zentroa diseinu-karga osoarekin egiaztatzen da hainbat probaren bidez, gutxi gorabehera, eduki hau dutenak: UPSetako bat (DGS, hozgailuak, doitasuneko aire girotuak, banaketa-armairuak, barra-barrak, etab.) zerbitzutik kanpo uzten da mantentze-lanetarako edo konpontzeko. , eta hiriko elikadura hornidura itzalita dago. Tier III eta goiko datu-zentroek egoera kudeatzeko gai izan beharko lukete IT kargan inolako eraginik gabe.

    Instalazioa hartu daiteke datu-zentroak Diseinuaren ziurtagiria gainditu badu.
    NORD-4k Diseinu ziurtagiria jaso zuen 2015ean, eta Instalazioa 2016an.

  • Iraunkortasun operatiboa. Izan ere, ziurtapen garrantzitsuena eta konplexuena. Ezarritako Tier-maila duen datu-zentro bat mantentzeko eta kudeatzeko operadore baten prozesuak eta gaitasunak oso-osoan ebaluatzen ditu (Jasangarritasun Operatiboa gainditzeko, Instalazioen ziurtagiria izan behar duzu). Azken finean, behar bezala egituratutako prozesu operatiborik eta talde kualifikaturik gabe, Tier IV datu-zentroa ere ekipamendu oso garestiak dituen eraikin alferrikako bilaka daiteke.

    Hemen ere mailak daude: Brontzea, Zilarrezkoa eta Urrea. Azken birziurtapenean 88,95 puntu posibleetatik 100eko puntuazioarekin amaitu genuen, eta hau Zilarrezkoa da. Urretik urrun geratu da: 1,05 puntu. 

Eta frogatu, edo nola gainditu genuen Uptime Institutuko Operazio Iraunkortasunaren auditoretza

Nola egiaztatu behar diren prozesuak behar bezala eraiki eta funtzionatzen direla? Gainera, nola egin bi egunetan - zenbat denbora behar da berriro ziurtatzeko. Laburbilduz, ziurtapena araudian idatzitakoaren, β€œdenak nola funtzionatzen duen” istorioen eta praktika errealen konparaketa zorrotzean oinarritzen da. Azken honi buruzko informazioa datu-zentroko ibilaldietatik eta datu-zentroko ingeniariekin izandako elkarrizketetatik lortzen da - "konfrontazioek", maitasunez deitzen diegun moduan. Hori da begiratzen dutena.

Team

Lehenik eta behin, UI ikuskariek datu-zentroak laguntza-langile nahikoa duen egiaztatzen dute. Langileen mahaia, lan-egutegia hartzen dute eta txandakako txostenekin eta sarbide-kontroleko datuekin selektiboki egiaztatzen dute beharrezko ingeniari kopurua egun horretan bertan zegoela ziurtatzeko.

Ikuskariek ere arreta handiz begiratzen dute aparteko ordu kopurua. Hori batzuetan gertatzen da bezero handi bat sartzen denean eta dozenaka rack instalatu behar dira aldi berean. Halako momentuetan, beste txandetako mutilak etortzen dira erreskatatzera, eta diru gehigarria ordaintzen zaie horregatik.

NORD-4n 7 ingeniari ari dira lanean txanda bakoitzean: 6 lanean eta goi mailako ingeniari bat. Hauek dira 24x7 monitorizazioa kontrolatzen dutenak, bezeroak biltzen dituztenak, ekipamenduak instalatzen laguntzen dutenak eta beste ohiko eskaera batzuk. Hau da bezeroen laguntza teknikoaren lehen lerroa. Haien ardurak larrialdi-egoerak erregistratzea eta ingeniari espezializatuetara igotzea dira. Ingeniaritza-azpiegituren lana pertsona indibidualek kontrolatzen dute - azpiegiturako arduradunek. 24x7 ere.

Eta frogatu, edo nola gainditu genuen Uptime Institutuko Operazio Iraunkortasunaren auditoretza
NORDeko produkzio-zuzendari eta guneko zuzendariak ikuskariei esaten die zenbat pertsona ari diren lanean oraintxe bertan.

Zenbakiak ordenatzen direnean, taldearen titulazioak egiaztatzen dira. Ikuskariek ausaz berrikusten dituzte ingeniarien langileen fitxategiak, lanpostu jakin batean lan egiteko beharrezko diplomak, ziurtagiriak eta baimen-agiriak (adibidez, segurtasun elektrikoaren ziurtagiriak) dituztela ziurtatzeko.

Gure langileak nola prestatzen ditugun ere egiaztatzen dute. Azken auditorian ere, zerbitzuko ingeniari berriak trebatzeko gure sistemak UI espezialistak harritu zituen. Hiru hilabete ematen ditugu haientzat prestakuntza ikastaroa ordaindutako praktika gisa, eta horietan gure datu-zentroko lan-prozesuak eta printzipioak aurkezten dizkiegu.

Dagoeneko lanean ari diren ingeniariek ere ohiko prestakuntza jaso behar dute, baita larrialdi egoeretan lan egiteko ere. Ikuskariek behin betiko egiaztatuko dituzte prestakuntza-programak eta prestakuntza horien materialak, eta ingeniariak ere ausaz aztertuko dituzte. Inori ez zaio eskatuko diesel generadore batera aldatzeko, baina hiriko elektrizitatea itzaltzen denean zer egin behar den pausoz pauso esateko eskatuko zaio. Ikuskaritzaren emaitzen arabera, prestakuntza- eta hezkuntza-programa guztiak estandar bakar batera eramango ditugu, talde ezberdinen arabera desberdinak izan ez daitezen.

Eta frogatu, edo nola gainditu genuen Uptime Institutuko Operazio Iraunkortasunaren auditoretza
Ikuskariei txandako ingeniarientzako atseden gela erakusten diegu.

Ingeniaritza-sistemen ustiapena eta mantentze-lanak 

Ikuskaritzaren atal handi honetan, ingeniaritza-ekipamendu eta sistema guztiek saltzaileek gomendatutako programazioaren arabera mantentze-lanak jasotzen dituztela erakusten dugu, biltegiak beharrezko ordezko piezak dituela, kontratistarekin baliozko zerbitzu-akordioak dituela eta ekipoekin egindako eragiketa bakoitzak berea duela. hainbat kasu lantzeko prozedurak eta algoritmoak.

MMS. Dozenaka UPS, diesel-sorgailu, aire girotu eta beste gauza batzuk erabiltzen dituzunean, instalazio honi buruzko informazio guztia bildu behar duzu nonbait. Gutxi gorabehera, honako dosier hau sortzen dugu ekipamendu bakoitzeko:

  • eredua eta serie zenbakia;
  • markatzea;
  • ezaugarri teknikoak eta ezarpenak;
  • instalazioaren kokapena;
  • produkzio-datak, martxan jartzea, bermearen iraungipena;
  • zerbitzu-kontratuak;
  • mantentze-egutegia eta historia;
  • eta "historia medikoa" osoa - matxurak, konponketak.

Informazio hori guztia nola eta non bildu datu-zentroko operadore bakoitzak bere kabuz erabakiko du. UI ez dago tresnetan mugatuta. Hau Excel soil bat izan daiteke (honekin hasi ginen) edo auto-idatzitako Mantentze-lanak Kudeatzeko Sistema (MMS), orain dugun bezala. Bide batez, zerbitzu mahaia, biltegiko kontabilitatea, sareko erregistroa, jarraipena ere norberak idatzita daude.

Eta frogatu, edo nola gainditu genuen Uptime Institutuko Operazio Iraunkortasunaren auditoretza
Ekipamendu bakoitzeko "fitxategi pertsonal" bat dago.

Zentzu honetan ditugun praktikak erakutsi genituen, azpiegitura UPS honen adibidea (argazkian) erabiliz, zeinak bere zatietako bat IT karga zerbitzatzen zuen UPSari eman zion. Bai, arauaren arabera, "dohaintza" hori aire girotua eta larrialdietako argiteria elikatzen duten azpiegitura-ekipoek bakarrik egin dezakete, baina ez informatika-kargak.

Eta frogatu, edo nola gainditu genuen Uptime Institutuko Operazio Iraunkortasunaren auditoretza

Ondoren, auditoreek dagokion txartela erakusteko eskatu zuten Zerbitzu Mahaian:

Eta frogatu, edo nola gainditu genuen Uptime Institutuko Operazio Iraunkortasunaren auditoretza

Eta UPS profila MMSn:

Eta frogatu, edo nola gainditu genuen Uptime Institutuko Operazio Iraunkortasunaren auditoretza

Ordezko piezak Ingeniaritza ekipoen mantentze-lanak eta larrialdietarako konponketak egiteko, gure ordezko piezak eta osagarriak gordetzen ditugu. Biltegi orokor bat dago ekipoetarako ordezko pieza handiak eta ingeniaritza geletan ordezko piezak dituzten armairu txikiak (urrutira korri egin behar izan ez dezazun).

Argazkian: diesel generadorearen ordezko piezak dauden egiaztatzen ari gara. 12 iragazki zenbatu ditugu. Ondoren, datuak MMSan egiaztatu zituzten.  

Eta frogatu, edo nola gainditu genuen Uptime Institutuko Operazio Iraunkortasunaren auditoretza

Biltegi nagusian antzeko ariketa bat egin zen, non ordezko pieza handiak gordetzen diren: konpresoreak, kontrolagailuak, automatizazioak, haizagailuak, lurrun-hezegailuak eta beste ehunka elementu. Markaketak selektiboki berridatzi eta MMS bidez "zulatu" egin ditugu.

Eta frogatu, edo nola gainditu genuen Uptime Institutuko Operazio Iraunkortasunaren auditoretza

Eta frogatu, edo nola gainditu genuen Uptime Institutuko Operazio Iraunkortasunaren auditoretza
Ordezko piezen inbentarioaren datuak. Gorria - Hau da falta dena eta erosi beharrekoa.

Mantentze prebentiboa. Mantentze eta konponketez gain, UI-k prebentziozko mantentze-lanak egitea gomendatzen du. Balizko istripu bat planifikatutako konponketa bihurtzen laguntzen du. Parametro bakoitzerako, atalase-balioak konfiguratzen ditugu monitorizazioan. Gainditzen badira, arduradunek alarmak jasotzen dituzte eta beharrezko neurriak hartzen dituzte. Adibidez, guk:

  • Irudi termiko batekin panel elektrikoak egiaztatzen ditugu, instalazio elektrikoetako akatsak azkar detektatzeko: kontaktu txarra, eroale edo etengailu baten tokiko gainberotzea. 
  • Hozte-sistemaren ponpen bibrazio-adierazleak eta egungo kontsumoa kontrolatzen ditugu. Horri esker, denboran desbideratzeak identifikatu eta ordezko piezak planifika ditzakezu presarik gabe.
  • Gasolio-sorgailuen eta konpresoreen erregai- eta olio-analisiak egiten ditugu.
  • Hozte sisteman glikola probatzen dugu kontzentraziorako.

Eta frogatu, edo nola gainditu genuen Uptime Institutuko Operazio Iraunkortasunaren auditoretza
Ponparen bibrazio diagrama konpondu aurretik eta ondoren.

Kontratistarekin lan egitea. Ekipoen mantentze-lanak eta konponketak kanpoko kontratistek egiten dituzte. Gure aldetik, beren funtzionamendua kontrolatzen duten diesel-sorgailuetan, aire girotzaileetan eta UPS-etan espezialistak daude. Kontratistak konponketa-lanak/mantentze-lanak, profesionaltasun-ziurtagiriak, segurtasun elektrikoaren ziurtagiriak eta baimenak egiteko beharrezko tresnak eta materialak dituzten egiaztatzen dute. Lan guztiak onartzen dituzte.

Eta frogatu, edo nola gainditu genuen Uptime Institutuko Operazio Iraunkortasunaren auditoretza
Hauxe da aire girotuaren mantentze lanak onartzeko kontrol-zerrenda.

Eta frogatu, edo nola gainditu genuen Uptime Institutuko Operazio Iraunkortasunaren auditoretza
Pasaden bulegoan egiaztatzen dugu abonoak kontratistak baimendutako ordezkariei eman ote zaizkien, zehaztutako unean mantentze-lanak egin ote dituzten eta arauak irakurri dituzten.

Dokumentazioa. Sistemak eta ekipamenduak mantentzeko ezarritako prozesuak borrokaren erdia dira. Datu-zentroan gizakiek egiten dituzten prozedura guztiak dokumentatu behar dira. Honen helburua sinplea da: dena pertsona zehatz batera mugatu ez dadin, eta istripurik gertatuz gero, edozein ingeniari argibide argiak har ditzake eta hori ezabatzeko beharrezko eragiketa guztiak egin ditzake.

UI-k bere metodologia du dokumentazio hori egiteko.

Jarduera sinple eta errepikakorrak egiteko, prozedura operatibo estandarrak (SOP) ezartzen dira. Adibidez, hozkailua pizteko/izteko eta UPSa saihesteko ezartzeko SOPak daude.

Mantentze-lanetarako edo eragiketa konplexuetarako, hala nola UPS batean bateriak ordezkatzeko, mantentze-prozedurak (Prozedura-metodoak, MOP-ak) sortzen dira. Hauek SOPak izan ditzakete. Ingeniaritza-ekipo bakoitzak bere MOP-ak izan behar ditu.

Azkenik, Larrialdi Funtzionamenduko Prozedurak (EOP) daude, larrialdi kasuetarako argibideak. Larrialdi-egoera zehatzen zerrenda bat osatzen da eta argibideak idazten dira. Hona hemen larrialdi egoeren zerrendaren zati bat, non istripu baten zantzuak, ekintzak, arduradunak eta jakinarazi beharreko pertsonak zehazten dituena:

  • hiriko elektrizitate-hornidura itzaltzea: diesel-sorgailuak hasi/ez dira martxan;
  • UPS istripuak; 
  • istripuak datu-zentroaren monitorizazio sisteman;
  • makina-gela gehiegi berotzea;
  • hozte-sistemaren ihesa;
  • sareko eta informatika-ekipoetan hutsegitea;

eta abar.

Dokumentazio bolumen hori biltzea berez lan intentsiboa da. Are zailagoa da eguneratuta mantentzea (bide batez, ikuskariek ere hori egiaztatzen dute). Eta garrantzitsuena, langileek argibide hauek ezagutu behar dituzte, horien arabera lan egin eta behar izanez gero hobekuntzak egin.

Eta frogatu, edo nola gainditu genuen Uptime Institutuko Operazio Iraunkortasunaren auditoretza
Bai, argibideak behar izan daitezkeen lekuetan egon behar dira eskuragarri, eta ez artxiboetan hautsak biltzea soilik.

Eta frogatu, edo nola gainditu genuen Uptime Institutuko Operazio Iraunkortasunaren auditoretza
Datu-zentroetako ingeniaritza sistemen mantentze-arauetan izandako aldaketei buruzko oharrak.

Ikuskaritzan zehar, sistemei buruzko dokumentazio teknikoa, dokumentazio exekutiboa eta laneko dokumentazioa eta sistemak martxan jartzeko egintzak ere aztertzen dituzte. 

Markatuz. Datu-zentroan zehar ibiltzen ziren bitartean, iristen ziren toki guztietan egiaztatu zuten. Iritsi ezin ziren tokira, eskailera batetik heldu ziren :). Zentrala, makina eta balbula guztietan duen presentzia aztertu dugu. As-built dokumentazioaren berezitasuna, anbiguotasuna eta egungo eskemak betetzen direla egiaztatu dugu. Beheko argazkian: erregaia biltegiratzeko ponparen gelan gaude, elektrobalbulen markak eraikitako dokumentazioaren eskemarekin alderatzen. 

Eta frogatu, edo nola gainditu genuen Uptime Institutuko Operazio Iraunkortasunaren auditoretza

Dena ados zegoen berarekin, baina parametro batean horman tokiko diagrama axonometriko "apaingarriarekin" ez zetorren bat.

Eta frogatu, edo nola gainditu genuen Uptime Institutuko Operazio Iraunkortasunaren auditoretza

Bertan kokatutako sistemen diagramak ere jarri behar dira datu-zentroko lokaletan. Istripurik gertatuz gero, dena non dagoen azkar jakin eta erabaki informatua hartzen laguntzen dizute. Argazkian, adibidez, lerro bakarreko diagrama bat ageri da zentrala nagusiko gelan.

Eta frogatu, edo nola gainditu genuen Uptime Institutuko Operazio Iraunkortasunaren auditoretza

Diagramen garrantzia honako era honetan egiaztatu zen: diagraman dagoen elementuaren marka izendatu zuten eta "bizitza errealean" erakusteko eskatu zuten. 

Eta frogatu, edo nola gainditu genuen Uptime Institutuko Operazio Iraunkortasunaren auditoretza

Bertan ikuskariak koadro nagusiko sarrerako etengailuaren ezarpenen (ezarpenen) argazkiak ateratzen ditu, gero paperezko eta kopia elektronikoetan lerro bakarreko eskemaren adierazleekin alderatzeko. Makinetako batean, QF-3, adierazlea ez zetorren paper-diagramarekin bat, eta zigor puntu bat irabazi genuen. Orain bi ingeniari egiaztatuko dute lerro bakarreko eskemetako markak egiarekin bat datozen ala ez.

Eta frogatu, edo nola gainditu genuen Uptime Institutuko Operazio Iraunkortasunaren auditoretza

Hau ez da ikuskariek zerbitzu prozesuei dagokienez egiaztatu duten guztia. Hona hemen agendan zer gehiago zegoen:

  • jarraipen-sistema. Hemen karma onurak lortu genituen bistaratze onarekin, aplikazio mugikor baten presentziarekin eta datu-zentroetako korridoreetan kokatutako egoera-pantailak. Hemen lan egiteko moduari buruz zehatz-mehatz idatzi dugu jarraipena.

    Eta frogatu, edo nola gainditu genuen Uptime Institutuko Operazio Iraunkortasunaren auditoretza
    NORD-4ko ingeniaritza-sistema nagusien eta gunean lan egiten duten gure beste datu-zentroen egoerari buruzko informazio bisuala duen MCC da.

  • ingeniaritza-ekipoen bizi-zikloaren plangintza;
  • gaitasunaren kudeaketa (gaitasunaren kudeaketa);
  • aurrekontua (pixka bat hitz egin du Hemen);
  • istripuak aztertzeko prozedura;
  • ekipoak onartzeko, martxan jartzeko eta probatzeko prozesua (probei buruz idatzi genuen Hemen).

Zer gehiago ikusten ari zen UI-a?

Segurtasuna eta sarbide kontrola. Ikuskaritzak segurtasun eta segurtasun sistemen funtzionamendua ere egiaztatzen du. Esate baterako, auditorea sarbiderik ez zuen lokal batean sartzen saiatu zen, eta gero egiaztatu zuen hori sarbide-kontrol sisteman islatzen ote zen eta segurtasunari horri buruz jakinarazi ote zen (spoiler - hala zen).

Gure datu-zentroetan edozein gelarako atea irekita geratzen bada bi minutu baino gehiagoz, orduan alerta bat piztuko da segurtasun-postuan. Hori probatzeko, ikuskariek ateetako bat ireki zuten su-itzalgailu batekin. Egia da, ez dugu inoiz sirenarik lortu - segurtasunak bideo kameren bidez zerbait gaizki zegoela ikusi zuen eta lehenago iritsi ziren "krimenaren lekura".

Ordena eta garbitasuna. Ikuskariek hautsa, ekipamendu-kutxak kaotikoki etzanda dauden eta lokalak zenbat aldiz garbitzen diren bilatzen dituzte. Hemen, adibidez, ikuskariak aireztapen korridorean identifikatu gabeko objektu batekin interesatu ziren. Hau aireztapen sistemaren bloke bat da, jada bere lekua hartzeko prestatzen ari zena. Baina oraindik sinatzeko eskatu zidaten.

Eta frogatu, edo nola gainditu genuen Uptime Institutuko Operazio Iraunkortasunaren auditoretza

Era berean, datu-zentroko ordenaren gaiari buruz - ekipamenduetan larrialdietarako lanetarako beharrezko tresna guztiak dituzten armairu hauek koadroko gela nagusian daude. 

Eta frogatu, edo nola gainditu genuen Uptime Institutuko Operazio Iraunkortasunaren auditoretza

Kokalekua. Datu-zentroa kokapen-baldintzen arabera ebaluatzen da: inguruan base militarrak, aireportuak, ibaiak, sumendiak eta bestelako objektu arriskutsuak dauden ala ez. Argazkian erakusten dugu 2017ko azken ziurtagiriaz geroztik, ez dela zentral nuklearrik edo petrolio biltegiratzerik hazi datu-zentroaren inguruan. Baina han NORD-5 datu-zentro berri bat eraikitzen ari da, Uptime Institute Tier III ziurtagiriaren maila guztiak ere gainditu beharko dituena. Baina hori guztiz bestelako istorio bat da).

Eta frogatu, edo nola gainditu genuen Uptime Institutuko Operazio Iraunkortasunaren auditoretza

Iturria: www.habr.com

Gehitu iruzkin berria