Ug ipakita, o Giunsa namon gipasa ang pag-audit sa Operational Sustainability sa Uptime Institute

Ang ulo sa departamento sa operasyon misaka sa hatch sa underground nga pasilidad sa pagtipig sa gasolina aron ipakita ang mga marka sa solenoid valve.

Sa sayong bahin sa Pebrero, ang among pinakadako nga Tier III data center NORD-4 Gi-certify pag-usab sa Uptime Institute (UI) sa sukdanan sa Operational Sustainability. Karon isulti namon kanimo kung unsa ang gitan-aw sa mga auditor ug kung unsang mga resulta ang among nahuman.

Alang sa mga pamilyar sa mga sentro sa datos, atong hisgotan ang hardware. Tier nga mga Sumbanan pagtimbang-timbang ug pag-certify sa mga sentro sa datos sa tulo ka yugto:

• proyekto (Disenyo): ang pakete sa dokumentasyon sa proyekto gisusi. Dinhi ang ilado Tier. Adunay 4 niini sa kinatibuk-an: Tier I–IV. Ang ulahi mao, sumala niana, ang labing taas.
• gitukod nga pasilidad (Facility): ang inprastraktura sa inhenyero sa data center gisusi ug ang pagsunod niini sa proyekto. Ang data center gisusi ubos sa bug-os nga disenyo nga load gamit ang lain-laing mga pagsulay nga adunay gibana-bana nga mosunod nga sulod: usa sa mga UPS (DGS, chillers, precision air conditioner, distribution cabinets, busbars, ug uban pa) gikuha gikan sa serbisyo alang sa maintenance o pag-ayo. , ug ang suplay sa kuryente sa siyudad gipalong. . Ang Tier III ug labaw sa mga sentro sa datos kinahanglan nga makahimo sa pagdumala sa sitwasyon nga walay epekto sa IT payload.

  Mahimong makuha ang pasilidad kung ang data center nakapasar na sa sertipikasyon sa Disenyo.
  Nadawat sa NORD-4 ang sertipiko sa Disenyo kaniadtong 2015, ug ang Pasilidad kaniadtong 2016.

• Pagpadayon sa Operasyon. Sa tinuud, ang labing hinungdanon ug komplikado nga sertipikasyon. Kini komprehensibo nga nagtimbang-timbang sa mga proseso ug mga katakus sa usa ka operator sa pagmentinar ug pagdumala sa usa ka sentro sa datos nga adunay usa ka natukod nga lebel sa Tier (aron makapasar sa Operational Sustainability, kinahanglan nga ikaw adunay sertipiko sa Pasilidad). Pagkahuman, kung wala’y husto nga pagkahan-ay nga mga proseso sa operasyon ug usa ka kwalipikado nga grupo, bisan ang usa ka sentro sa datos sa Tier IV mahimong usa ka wala’y kapuslanan nga bilding nga adunay mahal kaayo nga kagamitan.
  
  Adunay mga lebel usab dinhi: Bronze, Silver ug Gold. Sa kataposang recertification nahuman namo ang score nga 88,95 gikan sa 100 ka posibleng puntos, ug kini mao ang Silver. Nahulog lang kini sa Gold - 1,05 puntos. 

Giunsa pagsusi nga ang gikinahanglan nga mga proseso gitukod ug nagtrabaho sumala sa kinahanglan nila? Dugang pa, kung giunsa kini buhaton sa duha ka adlaw - kana kung unsa kadugay ang pag-re-certification. Sa laktod nga pagkasulti, ang sertipikasyon gibase sa usa ka makuti nga pagtandi sa kung unsa ang nahisulat sa mga regulasyon, mga istorya sa "kung giunsa ang tanan molihok" ug tinuod nga mga gawi. Ang kasayuran bahin sa naulahi nakuha gikan sa mga walk-through sa data center ug mga panag-istoryahanay sa mga inhenyero sa sentro sa datos - "mga komprontasyon", ingon sa among mabination nga pagtawag kanila. Mao na ilang gitan-aw.

team

Una sa tanan, susihon sa mga auditor sa UI kung ang data center adunay igo nga kawani sa suporta. Gikuha nila ang lamesa sa mga kawani, iskedyul sa katungdanan ug pilion nga susihon kini sa mga taho sa pagbalhin ug data sa pagkontrol sa pag-access aron masiguro nga ang gikinahanglan nga gidaghanon sa mga inhenyero naa gyud sa site nianang adlawa.

Gitan-aw usab pag-ayo sa mga auditor ang gidaghanon sa mga oras sa overtime. Kini usahay mahitabo kung ang usa ka dako nga kliyente mosulod ug daghang mga rack ang kinahanglan nga i-install sa parehas nga oras. Sa ingon nga mga higayon, ang mga lalaki gikan sa ubang mga pagbalhin moabut aron sa pagluwas, ug sila gibayran og dugang nga salapi alang niini.

Adunay 4 ka mga inhenyero nga nagtrabaho sa NORD-7 kada shift: 6 ang nag-duty ug usa ka senior engineer. Kini ang mga nag-monitor sa 24x7 nga pag-monitor, nakigtagbo sa mga kliyente, nagtabang sa pag-instalar sa kagamitan ug uban pang naandan nga mga hangyo. Kini ang una nga linya sa suporta sa teknikal sa kostumer. Ang ilang mga responsibilidad naglakip sa pagrekord sa mga sitwasyon sa emerhensya ug pagpadako niini ngadto sa mga espesyalista nga mga inhenyero. Ang trabaho sa imprastraktura sa engineering gibantayan sa indibidwal nga mga tawo - mga opisyal sa katungdanan sa imprastraktura. ug 24x7.

Ang direktor sa produksiyon ug manager sa site sa NORD nagsulti sa mga auditor kung pila ang mga tawo nga nagtrabaho sa site karon.

Kung ang mga numero nahan-ay, ang mga kwalipikasyon sa team gisusi. Ang mga tig-audit sa random nga pagrepaso sa mga file sa kawani sa mga inhenyero aron masiguro nga sila adunay gikinahanglan nga mga diploma, sertipiko, ug mga dokumento sa pagtugot (pananglitan, mga sertipiko sa kaluwasan sa elektrisidad) aron magtrabaho sa usa ka gihatag nga posisyon.

Gisusi usab nila kung giunsa namo pagbansay ang among mga kawani. Bisan sa katapusan nga pag-audit, ang among sistema sa pagbansay sa bag-ong mga inhenyero sa katungdanan nakadayeg sa mga espesyalista sa UI. Tulo ka bulan mi para nila kurso sa pagbansay isip usa ka bayad nga internship, diin among gipaila sila sa mga proseso ug mga prinsipyo sa trabaho sa among data center.

Ang mga nagtrabaho na nga mga inhenyero kinahanglan usab nga moagi sa regular nga pagbansay, lakip ang pagtrabaho sa mga emerhensya nga sitwasyon. Siguradong susihon sa mga auditor ang mga programa sa pagbansay ug mga materyales sa maong mga pagbansay, ug suwayan usab nga susihon ang mga inhenyero. Walay usa nga hangyoon nga mobalhin sa usa ka diesel generator set, apan sila hangyoon sa pagsulti kanimo sa matag lakang kung unsa ang kinahanglan nga buhaton kung ang suplay sa kuryente sa lungsod gipalong. Base sa mga resulta sa pag-audit, among dad-on ang tanang mga programa sa pagbansay ug edukasyon sa usa ka sumbanan aron dili kini magkalahi alang sa lain-laing mga team.

Gipakita namo sa mga auditor ang break room alang sa mga shift engineer.

Operasyon ug pagmentinar sa mga sistema sa engineering 

Niining dako nga seksyon sa pag-audit, gipakita namon nga ang tanan nga kagamitan sa engineering ug sistema nakadawat regular nga pagmentinar sumala sa iskedyul nga girekomenda sa mga tigbaligya, ang bodega adunay kinahanglan nga mga spare parts, balido nga mga kasabutan sa serbisyo sa mga kontraktor, ug ang matag operasyon nga adunay kagamitan adunay kaugalingon. mga pamaagi ug mga algorithm alang sa pagtrabaho sa lainlaing mga kaso.

Ang MMS. Kung nag-operate ka daghang mga UPS, diesel generator set, air conditioner ug uban pang mga butang, kinahanglan nimo nga kolektahon ang tanan nga kasayuran bahin sa kini nga pasilidad sa usa ka lugar. Gihimo namo ang gibana-bana nga mosunod nga dossier alang sa matag piraso sa kagamitan:

• modelo ug serial number;
• pagmarka;
• teknikal nga mga kinaiya ug mga setting;
• dapit sa pag-instalar;
• petsa sa produksyon, commissioning, expiration sa warranty;
• mga kontrata sa serbisyo;
• eskedyul sa pagmentinar ug kasaysayan;
• ug ang tibuuk nga "kasaysayan sa medikal" - pagkaguba, pag-ayo.

Giunsa ug asa kolektahon ang tanan nga kini nga kasayuran naa sa matag operator sa data center nga magdesisyon alang sa iyang kaugalingon. Ang UI dili limitado sa mga himan. Kini mahimo nga usa ka yano nga Excel (atong gisugdan niini) o usa ka kaugalingon nga gisulat nga Maintenance Management System (MMS), sama sa naa nato karon. By the way, service desk, warehouse accounting, online log, monitoring kay gisulat usab sa kaugalingon.

Adunay ingon nga "personal nga file" alang sa matag piraso sa kagamitan.

Gipakita namo ang among mga gawi bahin niini, lakip ang paggamit sa panig-ingnan niining imprastraktura nga UPS (gihulagway), nga nagdonar sa usa sa mga bahin niini ngadto sa UPS nga nagsilbi sa IT load. Oo, sumala sa sumbanan, ang ingon nga "donasyon" mahimo ra nga himuon sa mga kagamitan sa imprastraktura nga nagpaandar sa mga air conditioner ug emergency nga suga, apan dili ang load sa IT.

Pagkahuman, gihangyo sa mga auditor nga ipakita ang katugbang nga tiket sa Service Desk:

Ug ang profile sa UPS sa MMS:

Mga piyesa Alang sa tukma sa panahon nga pagmentinar ug emerhensya nga pag-ayo sa mga kagamitan sa inhenyero, among gitipigan ang among kaugalingon nga mga spare parts ug accessories. Adunay usa ka kinatibuk-ang bodega nga adunay dagkong mga spare parts alang sa mga ekipo ug gagmay nga mga kabinet nga adunay mga spare parts sa mga lawak sa engineering (aron dili ka kinahanglan nga modagan sa layo).

Sa litrato: among gisusi ang pagkaanaa sa mga spare parts para sa diesel generator set. Nag-ihap kami og 12 ka mga filter. Dayon ilang gisusi ang datos sa MMS.  

Ang usa ka susama nga ehersisyo gihimo sa nag-unang bodega, diin gitipigan ang dagkong mga spare parts: compressor, controllers, automation, fans, steam humidifiers ug gatusan ka uban pang mga butang. Gipili namo nga gisulat pag-usab ang mga marka ug "gisuntok" kini pinaagi sa MMS.

Data sa imbentaryo sa mga spare parts. Pula - Mao ni ang kulang ug kinahanglang paliton.

Pagmentinar sa pagpugong. Agi og dugang sa pagmentinar ug pag-ayo, girekomenda sa UI ang paghimo og preventive maintenance. Nakatabang kini sa paghimo sa usa ka potensyal nga aksidente nga usa ka giplano nga pag-ayo. Alang sa matag parameter, among gi-configure ang mga kantidad sa threshold sa pag-monitor. Kung kini molapas, ang mga responsable makadawat og mga alarma ug mohimo sa gikinahanglan nga mga aksyon. Pananglitan, kami:

• Gisusi namon ang mga de-koryenteng panel nga adunay thermal imager aron dali nga makit-an ang mga depekto sa mga instalasyon sa elektrisidad: dili maayo nga kontak, lokal nga overheating sa usa ka konduktor o circuit breaker. 
• Among gimonitor ang vibration indicators ug ang kasamtangang konsumo sa refrigeration system pumps. Kini nagtugot kanimo sa pag-ila sa mga pagtipas sa panahon ug pagplano sa mga kapuli nga mga bahin nga walay pagdali.
• Naghimo kami og pag-analisar sa gasolina ug lana sa mga diesel generator set ug compressor.
• Gisulayan namon ang glycol sa sistema sa pagpabugnaw alang sa konsentrasyon.

Pump vibration diagram sa wala pa ug pagkahuman sa pag-ayo.

Pagtrabaho uban sa mga kontraktor. Ang pagmentinar ug pag-ayo sa mga ekipo gihimo sa mga kontraktor sa gawas. Sa among bahin, adunay lahi nga mga espesyalista sa diesel generator set, air conditioner, ug UPS nga nagkontrol sa ilang operasyon. Ilang susihon kung ang mga kontratista adunay gikinahanglan nga mga himan ug materyales alang sa pag-ayo sa trabaho/pagmentinar, propesyonal nga mga sertipiko, electrical safety certificates, ug mga permit. Gidawat nila ang tanan nga trabaho.

Mao kini ang hitsura sa checklist alang sa pagdawat sa trabaho sa pagmentinar sa air conditioner.

Sa opisina sa pass, atong susihon kung ang mga pases na-isyu ba sa mga awtorisadong representante sa mga kontraktor, kung sila ba nag-ayo sa gitakda nga oras ug kung nabasa ba nila ang mga lagda.

Dokumentasyon. Ang natukod nga mga proseso alang sa pagmintinar sa mga sistema ug kagamitan mao ang katunga sa gubat. Ang tanan nga mga pamaagi nga gihimo sa mga tawo sa data center kinahanglan nga dokumentado. Ang katuyoan niini yano ra: aron ang tanan dili limitado sa usa ka piho nga tawo, ug kung adunay usa ka aksidente, ang bisan kinsa nga inhenyero makakuha og klaro nga mga panudlo ug buhaton ang tanan nga kinahanglan nga mga operasyon aron mapapas kini.

Ang UI adunay kaugalingon nga pamaagi alang sa ingon nga dokumentasyon.

Alang sa yano ug balik-balik nga mga kalihokan, ang mga standard operating procedures (SOPs) gitukod. Pananglitan, adunay mga SOP alang sa pag-on/off sa chiller ug pag-set sa UPS aron malaktawan.

Alang sa pagmentinar o komplikado nga mga operasyon, sama sa pag-ilis sa mga baterya sa usa ka UPS, ang mga pamaagi sa pagmentinar (Methods of Procedures, MOPs) gihimo. Mahimong maglakip kini sa mga SOP. Ang matag matang sa kagamitan sa inhenyero kinahanglang adunay kaugalingong MOP.

Sa katapusan, adunay Emergency Operating Procedures (EOPs)—mga instruksyon kung adunay emerhensya. Ang usa ka lista sa piho nga mga sitwasyon sa emerhensya gihipos ug ang mga panudlo gisulat alang kanila. Ania ang bahin sa lista sa mga sitwasyon sa emerhensya, nga nagdetalye sa mga timailhan sa usa ka aksidente, aksyon, responsable nga mga tawo ug mga tawo nga ipahibalo:

• pagsira sa suplay sa kuryente sa siyudad: ang mga diesel generator set nagsugod/wala magsugod;
• mga aksidente sa UPS; 
• mga aksidente sa sistema sa pagmonitor sa data center;
• sobrang kainit sa lawak sa makina;
• leakage sa refrigeration system;
• kapakyasan sa network ug computing ekipo;

ug uban pa.

Ang pag-compile sa ingon nga gidaghanon sa dokumentasyon usa ka labor-intensive nga buluhaton sa iyang kaugalingon. Mas lisud pa nga ipadayon kini (sa paagi, gisusi usab kini sa mga auditor). Ug ang labing hinungdanon, ang mga kawani kinahanglan mahibal-an kini nga mga panudlo, magtrabaho sumala niini ug maghimo mga pagpaayo kung kinahanglan.

Oo, ang mga instruksyon kinahanglan nga magamit kung diin kini kinahanglan, ug dili lamang ang pagkolekta sa abog sa mga archive.

Mga nota sa mga pagbag-o sa mga regulasyon sa pagpadayon alang sa mga sistema sa engineering sa sentro sa datos.

Atol sa pag-audit, gitan-aw usab nila ang teknikal nga dokumentasyon sa mga sistema, ehekutibo ug dokumentasyon sa pagtrabaho, ug mga buhat sa pagbutang sa mga sistema sa operasyon. 

Pagmarka. Samtang naglakaw libot sa data center, ilang gisusi kini bisan asa nga ilang maabot. Kung diin dili nila maabot, naabot sila gikan sa hagdanan :). Among gitan-aw ang presensya niini sa matag switchboard, makina, ug balbula. Among gisusi ang pagkatalagsaon, pagkadili klaro ug pagsunod sa kasamtangang mga laraw sa as-built nga dokumentasyon. Sa litrato sa ubos: naa kami sa fuel storage pump room nga nagtandi sa mga marka sa solenoid valves sa diagram sa as-built documentation. 

Ang tanan miuyon kaniya, apan sa lokal nga "dekorasyon" nga axonometric diagram sa bungbong sa usa ka parameter wala kini magkatakdo.

Ang mga diagram sa mga sistema nga nahimutang didto kinahanglan usab nga ibutang sa lugar sa data center. Kung adunay usa ka aksidente, gitabangan ka nila nga dali nga mahibal-an kung diin ang tanan ug maghimo usa ka nahibal-an nga desisyon. Ang litrato, pananglitan, nagpakita sa usa ka linya nga diagram sa main switchboard room.

Ang kalabutan sa mga diagram gisusi sa mosunod nga paagi: ilang ginganlan ang elemento nga nagmarka sa diagram ug gihangyo nga ipakita kini "sa tinuod nga kinabuhi". 

Dinhi ang auditor nagkuha og mga litrato sa mga setting (setting) sa main switchboard input circuit breaker, aron sa ulahi itandi kini sa mga indicators sa single-line diagram sa papel ug electronic nga mga kopya. Sa usa sa mga makina, QF-3, ang timailhan wala motakdo sa papel nga diagram, ug nakaangkon kami og penalty point. Karon ang duha ka mga inhenyero magsusi kung ang mga marka sa usa ka linya nga diagram nahiuyon sa kamatuoran.

Dili lang kini ang gisusi sa mga auditor bahin sa mga proseso sa serbisyo. Ania kung unsa pa ang naa sa agenda:

• sistema sa pagmonitor. Dinhi nakakuha kami mga benepisyo sa karma nga adunay maayo nga pagtan-aw, ang presensya sa usa ka mobile application ug mga screen sa sitwasyon nga gibutang sa mga koridor sa mga sentro sa datos. Dinhi gisulat namon ang detalye kung giunsa kami nagtrabaho pagmonitor.

  
  Kini ang MCC nga adunay biswal nga kasayuran bahin sa kahimtang sa mga nag-unang sistema sa engineering sa NORD-4 ug uban pang mga sentro sa datos nga nagtrabaho sa site.

• pagplano sa siklo sa kinabuhi sa mga kagamitan sa engineering;
• pagdumala sa kapasidad (pagdumala sa kapasidad);
• pagbadyet (nagsulti og gamay dinhi);
• pamaagi sa pagtuki sa aksidente;
• ang proseso sa pagdawat, pag-komisyon ug pagsulay sa mga kagamitan (nagsulat kami bahin sa mga pagsulay dinhi).

Unsa pa ang gitan-aw sa UI?

Seguridad ug kontrol sa pag-access. Gisusi usab sa audit ang operasyon sa mga sistema sa kaluwasan ug seguridad. Pananglitan, ang auditor misulay sa pagsulod sa usa sa mga lugar diin siya walay access, ug unya gisusi kon kini gipakita sa access control system ug kon ang seguridad gipahibalo mahitungod niini (spoiler - kini mao).

Kung sa among mga sentro sa datos ang pultahan sa bisan unsang kwarto nagpabiling bukas sa sobra sa duha ka minuto, nan usa ka alerto ang ma-trigger sa post sa seguridad. Aron sulayan kini, giablihan sa mga auditor ang usa sa mga pultahan gamit ang fire extinguisher. Tinuod, wala gyud kami nakakuha og sirena - nakita sa seguridad nga adunay sayup pinaagi sa mga video camera ug nakaabut sa "eksena sa krimen" sa sayo pa.

Kahusay ug kalimpyo. Gipangita sa mga auditor ang abog, mga kahon sa kagamitan nga nagbuy-od sa palibot nga gubot, ug kung unsa kadaghan ang paglimpyo sa lugar. Dinhi, pananglitan, ang mga auditor nahimong interesado sa usa ka wala mailhi nga butang sa koridor sa bentilasyon. Kini usa ka bloke gikan sa sistema sa bentilasyon, nga nangandam na sa pagkuha sa lugar niini. Pero gihangyo gihapon ko nila nga pirmahan.

Usab sa hilisgutan sa pagkahan-ay sa data center - kini nga mga kabinet nga adunay tanan nga gikinahanglan nga mga himan alang sa emerhensya nga trabaho sa mga ekipo nahimutang sa main switchboard room. 

Lokasyon. Ang data center gi-assess base sa mga kondisyon sa lokasyon - kung adunay mga base militar, tugpahanan, suba, bulkan ug uban pang peligro nga mga butang sa duol. Sa litrato gipakita ra namon nga sukad sa katapusan nga sertipikasyon sa 2017, wala’y mga planta sa nuclear power o mga pasilidad sa pagtipig sa lana nga mitubo sa palibot sa data center. Apan didto gitukod ang bag-ong sentro sa datos sa NORD-5, nga kinahanglan usab nga ipasa ang tanan nga lebel sa sertipikasyon sa Uptime Institute Tier III. Apan kana usa ka lahi nga istorya).

Source: www.habr.com