It haad fan 'e operaasjeôfdieling klom yn' e lûk fan 'e ûndergrûnske brânstofopslach om de markearring op' e solenoïdeklep te sjen.
Begjin febrewaris, ús grutste Tier III-datasintrum Op 'e nij sertifisearre troch it Uptime Institute (UI) nei de standert Operational Sustainability. Hjoed sille wy jo fertelle wêr't de auditors nei sjogge en mei hokker resultaten wy klear binne.
Foar dyjingen dy't bekend binne mei datasintra, litte wy koart oer de hardware gean. evaluearret en sertifisearret datasintra yn trije stadia:
- projekt (Design): it pakket fan projekt dokumintaasje wurdt kontrolearre.Hjir de bekende . D'r binne 4 fan har yn totaal: Tier I–IV. Dat lêste is dus de heechste.
- konstruearre foarsjenning (Fasyl): de technyske ynfrastruktuer fan it datasintrum wurdt kontrolearre en har neilibjen fan it projekt. It datasintrum wurdt kontrolearre ûnder folsleine ûntwerplast mei in ferskaat oan tests mei sawat de folgjende ynhâld: ien fan 'e UPS's (DGS, chillers, presysairconditioners, distribúsjekasten, busbars, ensfh.) wurdt út tsjinst nommen foar ûnderhâld of reparaasje , en de stêd stroomfoarsjenning is útskeakele. . Tier III en boppe gegevenssintra moatte de situaasje kinne behannelje sûnder ynfloed op 'e IT-lading.
Fasiliteit kin wurde nommen as it datasintrum al Design-sertifikaasje hat trochjûn.
NORD-4 krige syn ûntwerpsertifikaat yn 2015, en fasiliteit yn 2016. - Operasjonele Duorsumens. Yn feite, de meast wichtige en komplekse sertifisearring. It evaluearret wiidweidich de prosessen en kompetinsjes fan in operator by it ûnderhâlden en behearen fan in datasintrum mei in fêststeld Tier-nivo (om Operational Sustainability te passearjen, moatte jo al in Facility-sertifikaat hawwe). Ommers, sûnder goed strukturearre operasjonele prosessen en in kwalifisearre team, sels in Tier IV datasintrum kin feroarje yn in nutteloos gebou mei hiel djoere apparatuer.
D'r binne hjir ek nivo's: Brûns, Sulver en Goud. By de lêste recertification wy einige mei in skoare fan 88,95 fan 100 mooglike punten, en dit is Sulver. It foel krekt ûnder Goud - 1,05 punten.
Hoe kinne jo kontrolearje dat de nedige prosessen binne boud en wurkje sa't se moatte? Boppedat, hoe te dwaan it yn twa dagen - dat is hoe lang it duorret foar re-sertifikaasje. Koartsein, sertifisearring is basearre op in pynlike ferliking fan wat skreaun is yn 'e regeljouwing, ferhalen fan "hoe't alles wurket" en echte praktiken. Ynformaasje oer dat lêste wurdt krigen fan trochrinners fan it datasintrum en petearen mei datacenter-yngenieurs - "konfrontaasjes", sa't wy se leafhawwe neame. Dêr sjogge se nei.
team
Alderearst kontrolearje UI-auditors oft it datasintrum genôch stipepersoniel hat. Se nimme de personielstafel, plichtskema en kontrolearje it selektyf mei ferskowingsrapporten en tagongskontrôlegegevens om te soargjen dat it fereaske oantal yngenieurs dy dei eins op it plak wie.
Rekkenkeamers sjogge ek goed nei it tal oeren oeren. Dit bart soms as in grutte klant komt en tsientallen rekken moatte wurde ynstallearre tagelyk. Op sokke mominten komme jonges fan oare shifts te rêden, en se krije dêr ekstra jild foar betelle.
D'r wurkje 4 yngenieurs oan NORD-7 per skift: 6 yn tsjinst en ien senior yngenieur. Dit binne dejingen dy't 24x7-monitoring kontrolearje, kliïnten moetsje, helpe by ynstallaasje fan apparatuer en oare routine oanfragen. Dit is de earste line fan klant technyske stipe. Har ferantwurdlikheden omfetsje it opnimmen fan needsituaasjes en it eskalearjen nei spesjalisearre yngenieurs. It wurk fan 'e technyske ynfrastruktuer wurdt kontrolearre troch yndividuele minsken - amtners fan ynfrastruktuerplicht. ek 24x7.
De produksjedirekteur en sitemanager fan NORD fertelt de auditors hoefolle minsken op it stuit op it terrein wurkje.
As de nûmers binne sorteare, wurde de kwalifikaasjes fan it team kontrolearre. Auditors kontrolearje willekeurige personielsbestannen fan yngenieurs om te soargjen dat se de nedige diploma's, sertifikaten en autorisaasjedokuminten hawwe (bygelyks sertifikaten foar elektryske feiligens) om yn in bepaalde posysje te wurkjen.
Se kontrolearje ek hoe't wy ús personiel opliede. Sels tidens de lêste kontrôle hat ús systeem foar it oplieden fan nije yngenieurs yn tsjinst UI-spesjalisten ûnder de yndruk makke. Wy besteegje trije moanne foar harren as in betelle staazje, wêryn't wy se yntrodusearje oan de prosessen en prinsipes fan wurk yn ús datasintrum.
Al wurkjende yngenieurs moatte ek reguliere training ûndergean, ynklusyf oer wurkjen yn needsituaasjes. Auditors sille perfoarst de trainingsprogramma's en materialen fan sokke trainingen kontrolearje, en ek yngenieurs willekeurich ûndersykje. Nimmen wurdt frege om te wikseljen nei in diesel generator set, mar se wurde frege om te fertellen jo stap foar stap wat moat dien wurde as de stêd macht oanbod wurdt útskeakele. Op grûn fan 'e kontrôleresultaten sille wy alle training- en opliedingsprogramma's op ien standert bringe, sadat se net ferskille foar ferskate teams.
Wy litte de rekkenkeamer de brekkeamer foar skiftyngenieurs sjen.
Operaasje en ûnderhâld fan engineering systemen
Yn dizze grutte seksje fan 'e kontrôle litte wy sjen dat alle yngenieursapparatuer en systemen regelmjittich ûnderhâld krije neffens it skema oanrikkemandearre troch de leveransiers, it pakhús hat de nedige reservedielen, jildige tsjinstôfspraken mei oannimmers, en elke operaasje mei apparatuer hat syn eigen prosedueres en algoritmen foar wurkjen oan ferskate gefallen.
MMS. As jo tsientallen UPS's, dieselgeneratorsets, airconditioning en oare dingen operearje, moatte jo earne alle ynformaasje oer dizze foarsjenning sammelje. Wy meitsje sawat it folgjende dossier foar elk stik apparatuer:
- model en serial number;
- marking;
- technyske skaaimerken en ynstellings;
- ynstallaasje lokaasje;
- datums fan produksje, commissioning, ferfal fan garânsje;
- tsjinst kontrakten;
- ûnderhâld skema en skiednis;
- en de hiele "medyske skiednis" - breakdowns, reparaasjes.
Hoe en wêr't al dizze ynformaasje te sammeljen is oan elke datacenteroperator om foar himsels te besluten. De UI is net beheind yn ark. Dit kin in ienfâldige Excel wêze (wy binne hjirmei begongen) of in selsskreaun Maintenance Management System (MMS), lykas wy no hawwe. Trouwens, , Warehouse accounting, online log, monitoring binne ek sels skreaun.
Der is sa'n "persoanlik bestân" foar elk stik apparatuer.
Wy demonstrearren ús praktiken yn dit ferbân, ynklusyf it brûken fan it foarbyld fan dizze ynfrastruktuer UPS (foto), dy't ien fan har dielen skonken oan 'e UPS dy't de IT-lading tsjinnet. Ja, neffens de standert kin sa'n "donaasje" allinich wurde útfierd troch ynfrastruktuerapparatuer dy't airconditioning en needljochting oandriuwt, mar net de IT-last.
Nei ôfrin fregen de rekkenkeamers om it korrespondearjende kaartsje yn de Service Desk te toanen:
En it UPS-profyl yn MMS:
Spare parts Foar aktueel ûnderhâld en needreparaasjes fan yngenieurapparatuer hâlde wy ús eigen spare dielen en accessoires. Der is in algemien pakhús mei grutte reserveûnderdielen foar apparatuer en lytse kasten mei reserveûnderdielen yn yngenieurkeamers (dat jo net fier hoege te rinnen).
Op de foto: wy kontrolearje de beskikberens fan reserve dielen foar de diesel generator set. Wy telden 12 filters. Dêrnei hawwe wy de gegevens yn 'e MMS kontrolearre.
In soartgelikense oefening waard útfierd yn 'e wichtichste pakhús, dêr't grutte reserve dielen wurde opslein: compressors, controllers, automatisearring, fans, stoom luchtbevochtigers en hûnderten oare items. Wy skreau selektyf de markearring en "punched" se fia MMS.
Spare parts ynventarisaasje gegevens. Read - Dit is wat mist en moat wurde kocht.
Previntyf ûnderhâld. Neist ûnderhâld en reparaasjes advisearret UI it útfieren fan previntyf ûnderhâld. It helpt om in potinsjele ûngelok te feroarjen yn in plande reparaasje. Foar elke parameter konfigurearje wy drompelwearden yn tafersjoch. As se oerhelle wurde, krije de ferantwurdliken alaarms en nimme de nedige aksjes. Bygelyks, wy:
- Wy kontrolearje elektryske panielen mei in termyske imager om fluch defekten yn elektryske ynstallaasjes te ûntdekken: min kontakt, lokale oerverhitting fan in dirigint of circuit breaker.
- Wy kontrolearje trillingsindikatoren en aktuele konsumpsje fan kuolsysteempompen. Hjirmei kinne jo ôfwikingen yn 'e tiid identifisearje en ferfangende dielen sûnder haast planje.
- Wy dogge brânstof- en oaljeanalyses fan dieselgeneratorsets en kompressors.
- Wy testen glycol yn it kuolsysteem foar konsintraasje.
Pomp trillingsdiagram foar en nei reparaasje.
Wurkje mei oannimmers. Underhâld en reparaasjes fan apparatuer wurde útfierd troch eksterne oannimmers. Oan ús kant binne d'r aparte spesjalisten yn dieselgeneratorsets, airconditioning en UPS dy't har wurking kontrolearje. Se kontrolearje oft oannimmers de nedige ark en materialen hawwe foar reparaasjewurk/ûnderhâld, profesjonele sertifikaten, sertifikaten foar elektryske feiligens en fergunningen. Se akseptearje alle wurk.
Dit is hoe't de checklist foar it akseptearjen fan ûnderhâld fan airconditioning derút sjocht.
Op it paskantoar kontrolearje wy oft de pasjes útjûn binne oan autorisearre fertsjintwurdigers fan oannimmers, oft se op de opjûne tiid ûnderhâld hawwe ûndergien en oft se de regels lêzen hawwe.
Dokumintaasje. Fêstige prosessen foar it behâld fan systemen en apparatuer binne de helte fan 'e slach. Alle prosedueres útfierd troch minsken yn it datasintrum moatte wurde dokumintearre. It doel fan dit is ienfâldich: sadat alles net beheind is ta ien spesifike persoan, en yn it gefal fan in ûngelok kin elke yngenieur dúdlike ynstruksjes nimme en alle nedige operaasjes dwaan om it te eliminearjen.
UI hat in eigen metodyk foar sokke dokumintaasje.
Foar ienfâldige en repetitive aktiviteiten wurde standert operaasjeprosedueres (SOP's) fêststeld. D'r binne bygelyks SOP's foar it yn- en útskeakeljen fan de koeler en it ynstellen fan de UPS om te omgean.
Foar ûnderhâld as komplekse operaasjes, lykas it ferfangen fan batterijen yn in UPS, wurde ûnderhâldprosedueres (Methods of Procedures, MOP's) makke. Dizze kinne SOP's omfetsje. Elk type technyske apparatuer moat syn eigen MOP's hawwe.
Uteinlik binne d'r Emergency Operating Procedures (EOP's) - ynstruksjes yn gefal fan in need. In list mei spesifike needsituaasjes wurdt gearstald en dêr wurde ynstruksjes foar skreaun. Hjir is in diel fan 'e list fan needsituaasjes, dy't detail de tekens fan in ûngelok, aksjes, ferantwurdlike persoanen en persoanen om te melden:
- shutdown fan stêd macht oanbod: diesel generator sets begûn / net starte;
- UPS-ûngemakken;
- ûngemakken op it tafersjochsysteem fan it datasintrum;
- oververhitting fan de masine keamer;
- lekkage fan it koelsysteem;
- mislearjen op netwurk- en kompjûterapparatuer;
Ensafuorthinne.
It gearstallen fan sa'n folume fan dokumintaasje is op himsels in arbeidsintensive taak. It is noch dreger om it by de aktualiteit te hâlden (dit kontrolearje trouwens ek rekkenkeamer). En it wichtichste is dat it personiel dizze ynstruksjes kennen moat, der neffens wurkje en as it nedich is ferbetteringen oanbringe.
Ja, ynstruksjes moatte beskikber wêze wêr't se miskien nedich binne, en net allinich stof sammelje yn argiven.
Notysjes oer feroarings yn 'e ûnderhâldsregeljouwing foar datacentertechnyksystemen.
Tidens de kontrôle sjogge se ek nei technyske dokumintaasje oer systemen, útfierende en wurkdokumintaasje, en hannelingen fan it ynstellen fan systemen.
Marking. Wylst se rûn it datasintrum rûnen, kontrolearren se it oeral wêr't se berikke koene. Wêr't se net berikke koenen, berikten se fan in treppen :). Wy seagen nei syn oanwêzigens op elke skeakel, masine en klep. Wy kontrolearren de unykens, unambiguity en konformiteit mei de hjoeddeistige skema's fan 'e as-built dokumintaasje. Op de foto hjirûnder: wy binne yn 'e brânstof opslach pomp keamer te fergelykjen de markearring op' e solenoid kleppen mei it diagram fan de as-boud dokumintaasje.
Alles wie mei har iens, mar mei it lokale "dekorative" axonometryske diagram op 'e muorre yn ien parameter kaam it net oerien.
Diagrammen fan 'e systemen dy't dêr lizze moatte ek pleatst wurde yn' e datacenters. By in ûngelok helpe se jo fluch út te finen wêr't alles is en in ynformearre beslút te nimmen. De foto, bygelyks, toant in single-line diagram yn 'e wichtichste switchboard keamer.
De relevânsje fan 'e diagrammen waard op' e folgjende manier kontrolearre: se neamden de elemintmarkearring op it diagram en fregen om it "yn it echte libben" te sjen.
Dit is wêr't de kontrôler foto's makket fan 'e ynstellings (ynstellings) fan' e haadynfier-ynput-skeakel, om se letter te fergelykjen mei de yndikatoaren op it single-line diagram yn papieren en elektroanyske kopyen. Op ien fan 'e masines, QF-3, kaam de yndikator net oerien mei it papierdiagram, en wy hawwe in strafpunt fertsjinne. No sille twa yngenieurs kontrolearje oft de markearring yn single-line diagrammen oerienkomme mei it feit.
Dit is net alles dat de auditors kontroleare yn termen fan tsjinstprosessen. Hjir is wat oars op 'e aginda stie:
- tafersjoch systeem. Hjir hawwe wy karma-foardielen fertsjinne mei goede fisualisaasje, de oanwêzigens fan in mobile applikaasje en situasjonele skermen pleatst yn 'e korridors fan datasintra. Hjir hawwe wy yn detail skreaun oer hoe't wy wurkje .
Dit is de MCC mei fisuele ynformaasje oer de status fan 'e wichtichste yngenieursystemen fan NORD-4 en ús oare datasintra dy't op' e side wurkje. - libbenssyklusplanning fan technyske apparatuer;
- kapasiteit behear ();
- budzjetearring (praat in bytsje );
- proseduere foar analyse fan ûngelokken;
- it proses fan akseptaasje, yn gebrûk nommen en testen fan apparatuer (wy skreaunen oer testen ).
Wat oars seach de UI nei?
Feiligens en tagong kontrôle. De kontrôle kontrolearret ek de wurking fan feiligens- en befeiligingssystemen. Bygelyks, de auditor besocht te krijen yn ien fan 'e pânen dêr't hy hie gjin tagong, en dan kontrolearre oft dit waard wjerspegele yn it tagong kontrôle systeem en oft de feiligens waard op 'e hichte oer dit (spoiler - it wie).
As yn ús datasintra de doar nei elke keamer mear dan twa minuten iepen bliuwt, dan wurdt in warskôging op 'e befeiligingspost trigger. Om dit te testen, stutsen auditors ien fan de doarren iepen mei in brânblusser. Wier, wy hawwe noait in sirene krigen - de feiligens seach dat der wat mis wie fia fideokamera's en kamen earder by it "misdiedssêne" oan.
Oarder en skjinens. Auditors sykje nei stof, apparatuerdoazen dy't chaotysk lizze, en hoe faak it pân skjinmakke wurdt. Hjir, bygelyks, de rekkenkeamer waard ynteressearre yn in ûnbekend foarwerp yn de fentilaasje korridor. Dit is in blok fan it fentilaasjesysteem, dat al klear wie om syn plak yn te nimmen. Mar se hawwe my noch frege om te tekenjen.
Ek op it ûnderwerp fan oarder yn it datasintrum - dizze kasten mei alle nedige ark foar needwurk op 'e apparatuer lizze yn' e wichtichste switchboard keamer.
Lokaasje It datasintrum wurdt beoardiele op basis fan lokaasjebetingsten - oft d'r militêre bases, fleanfjilden, rivieren, fulkanen en oare gefaarlike objekten yn 'e buert binne. Op 'e foto litte wy gewoan sjen dat sûnt de lêste sertifikaasje yn 2017 gjin kearnsintrales of oalje-opslachfoarsjenningen om it datasintrum groeid binne. Mar dêr wurdt in nij NORD-5-datasintrum boud, dat ek alle nivo's fan Uptime Institute Tier III-sertifikaasje moat passe. Mar dat is in folslein oar ferhaal).
Boarne: www.habr.com