De Chef vun der Operatiounsabteilung ass an d'Luucht vun der ënnerierdescher Brennstofflagerung geklommen fir d'Markéierungen op dem Magnetventil ze weisen.
Am fréie Februar, eise gréisste Tier III Rechenzentrum Rezertifizéiert vum Uptime Institute (UI) zum Operational Sustainability Standard. Haut wäerte mir Iech soen wat d'Revisoren kucken a wéi eng Resultater mir fäerdeg gemaach hunn.
Fir déi, déi mat Datenzentere vertraut sinn, loosst eis kuerz iwwer d'Hardware goen. evaluéiert an zertifizéiert Datenzenteren an dräi Etappen:
- Projet (Design): de Pak vun Projet Dokumentatioun iwwerpréift Hei déi bekannt . Et gi 4 vun hinnen am Ganzen: Tier I–IV. Déi lescht ass deementspriechend déi héchst.
- gebaut Ariichtung (Facilitéit): d'Ingenieursinfrastruktur vum Rechenzentrum gëtt iwwerpréift a seng Konformitéit mam Projet. Den Datenzenter gëtt ënner voller Designbelaaschtung iwwerpréift mat enger Vielfalt vun Tester mat ongeféier dem folgenden Inhalt: ee vun den UPSen (DGS, Chiller, Präzisiounsklimaanlagen, Verdeelungskabinetten, Busbars, asw.) gëtt aus dem Service geholl fir Ënnerhalt oder Reparatur , an d'Stad Stroumversuergung ass ausgeschalt. . Tier III an iwwer Datenzentere solle fäeg sinn d'Situatioun ouni Impakt op d'IT Notzlaascht ze handhaben.
Ariichtung kann geholl ginn wann den Rechenzentrum schonn Design Zertifizéierung passéiert ass.
NORD-4 krut säin Design Zertifika am Joer 2015, an d'Facilitéit am Joer 2016. - Operationell Nohaltegkeet. Tatsächlech, déi wichtegst a komplex Zertifizéierung. Et evaluéiert ëmfaassend d'Prozesser a Kompetenzen vun engem Bedreiwer fir en Datenzenter mat engem etabléierten Tierniveau z'erhalen an ze managen (fir Operationell Nohaltegkeet ze passéieren, musst Dir schonn e Facility Zertifikat hunn). No all, ouni korrekt strukturéiert Operatiounsprozesser an e qualifizéiert Team, kann och e Tier IV-Datenzentrum zu engem nëtzlosen Gebai mat ganz deier Ausrüstung ginn.
Et ginn och Niveauen hei: Bronze, Sëlwer a Gold. Bei der leschter Rezertifizéierung si mir mat engem Score vun 88,95 vun 100 méigleche Punkten ofgeschloss, an dëst ass Sëlwer. Et ass knapp Gold gefall - 1,05 Punkten.
Wéi kontrolléiert datt déi néideg Prozesser gebaut a funktionnéieren wéi se sollen? Ausserdeem, wéi et an zwee Deeg ze maachen - dat ass wéi laang et dauert fir nei Zertifizéierung. Kuerz gesot, d'Zertifizéierung baséiert op engem ustrengenden Verglach vun deem wat an de Reglementer geschriwwen ass, Geschichte vu "wéi alles funktionnéiert" a richteg Praktiken. D'Informatioun iwwer déi lescht gëtt aus Walkthroughs vum Datenzenter a Gespréicher mat Datenzenteringenieuren kritt - "Konfrontatiounen", wéi mir se häerzlech nennen. Dat ass wat se kucken.
Equipe
Éischt vun all, UI Auditeuren kontrolléieren ob den Rechenzentrum genuch Ënnerstëtzung Personal huet. Si huelen d'Personal Dësch, Pflicht Zäitplang a selektiv kontrolléieren et mat Verréckelung Rapporten an Zougang Kontroll Donnéeën ze suergen, datt déi néideg Zuel vun Ingenieuren waren eigentlech op der Plaz dass Dag.
D'Revisoren kucken och d'Zuel vun den Iwwerstonnen genee. Dëst geschitt heiansdo wann e grousse Client kënnt an Dosende vu Racken musse gläichzäiteg installéiert ginn. Zu esou Momenter kommen Kärelen aus anere Schichten zur Rettung, a si kréien extra Sue fir dëst bezuelt.
Et gi 4 Ingenieuren déi um NORD-7 pro Schicht schaffen: 6 op Flicht an ee Senior Ingenieur. Dëst sinn déi, déi 24x7 Iwwerwachung iwwerwaachen, Clienten treffen, hëllefen mat Ausrüstungsinstallatioun an aner Routinufroen. Dëst ass déi éischt Linn vun der technescher Clientssupport. Hir Verantwortung beinhalt d'Notzung vun Noutsituatiounen an d'Eskalatioun vun hinnen op spezialiséiert Ingenieuren. D'Aarbecht vun der Ingenieursinfrastruktur gëtt vun eenzelne Leit iwwerwaacht - Infrastrukturflicht Offizéier. Och 24x7.
De Produktiounsdirekter a Site Manager vun NORD erzielt den Auditeure wéi vill Leit elo um Site schaffen.
Wann d'Zuelen zortéiert sinn, ginn d'Qualifikatioune vun der Equipe iwwerpréift. Auditeure iwwerpréiwen zoufälleg d'Personaldateien vun Ingenieuren fir sécherzestellen datt se déi néideg Diplomer, Certificaten an Autorisatiounsdokumenter hunn (zum Beispill elektresch Sécherheetszertifikater) fir an enger bestëmmter Positioun ze schaffen.
Si kontrolléieren och wéi mir eist Personal trainéieren. Och während dem leschten Audit huet eise System fir nei Pflichtingenieuren ze trainéieren UI Spezialisten beandrockt. Mir verbréngen dräi Méint fir si als bezuelte Stage, wärend mir hinnen d'Prozesser an d'Prinzipien vun der Aarbecht an eisem Rechenzentrum virstellen.
Scho schaffend Ingenieuren mussen och reegelméisseg Ausbildung maachen, och iwwer d'Aarbecht an Noutsituatiounen. Auditeure wäerten definitiv d'Formatiounsprogrammer an d'Material vun esou Trainingen iwwerpréiwen, an och zoufälleg Ingenieuren iwwerpréiwen. Keen wäert gefrot ginn op en Diesel Generator Set ze wiesselen, awer si ginn gefrot fir Iech Schrëtt fir Schrëtt ze soen wat muss gemaach ginn wann d'Stad Energieversuergung ausgeschalt ass. Baséierend op den Auditresultater wäerte mir all Trainings- an Erzéiungsprogrammer op een eenzegen Standard bréngen, sou datt se net fir verschidden Teams ënnerscheeden.
Mir weisen den Auditeuren de Pausraum fir Schichtingenieuren.
Operatioun an Ënnerhalt vun Ingenieurssystemer
An dëser grousser Sektioun vum Audit weisen mir datt all Ingenieursausrüstung a Systemer reegelméissegen Ënnerhalt kréien no dem Zäitplang recommandéiert vun de Verkeefer, de Lager huet déi néideg Ersatzstécker, valabel Serviceverträg mat Entrepreneuren, an all Operatioun mat Ausrüstung huet seng eegen Prozeduren an Algorithmen fir op verschiddene Fäll ze schaffen.
mms. Wann Dir Dosende vun UPS, Diesel Generator Sets, Klimaanlagen an aner Saachen bedreift, musst Dir all Informatioun iwwer dës Ariichtung iergendwou sammelen. Mir kreéieren ongeféier de folgenden Dossier fir all Ausrüstungsstéck:
- Modell a Serien Zuel;
- Marquage;
- technesch Charakteristiken an Astellungen;
- Installatioun Plaz;
- Datumer vun der Produktioun, Inbetriebnahme, Verfall vun der Garantie;
- Service Kontrakter;
- Ënnerhalt Zäitplang a Geschicht;
- an déi ganz "medizinesch Geschicht" - Pann, Reparaturen.
Wéi a wou all dës Informatioun ze sammelen ass un all Datenzenter Bedreiwer fir sech selwer ze entscheeden. D'UI ass net limitéiert op Tools. Dëst kann en einfachen Excel sinn (mir hunn domat ugefaang) oder e selbstgeschriwwene Maintenance Management System (MMS), wéi mir elo hunn. Iwwregens, , Warehouse Accounting, Network Log, Iwwerwachung sinn och selwer geschriwwen.
Et gëtt esou eng "perséinlech Datei" fir all Ausrüstung.
Mir hunn eis Praktiken an dëser Hisiicht bewisen, ënner anerem d'Beispill vun dëser Infrastruktur UPS (Foto), déi ee vun hiren Deeler un d'UPS gespent huet, déi d'IT Laascht servéiert. Jo, laut dem Standard kann esou "Spenden" nëmmen duerch Infrastrukturausrüstung duerchgefouert ginn, déi Klimaanlagen an Noutbeleuchtung dréit, awer net d'IT-Laascht.
Duerno hunn d'Revisoren gefrot, den entspriechende Ticket am Service Desk ze weisen:
An den UPS Profil am MMS:
Ersatzdeeler Fir fristgerecht Ënnerhalt an Noutreparatur vun Ingenieursausrüstung behalen mir eis eegen Ersatzdeeler an Accessoiren. Et gëtt en allgemengt Lagerhaus mat groussen Ersatzdeeler fir Ausrüstung a klenge Schränke mat Ersatzdeeler an Ingenieursraim (sou datt Dir net wäit lafe musst).
Op der Foto: Mir kontrolléieren d'Disponibilitéit vun Ersatzdeeler fir den Diesel Generator Set. Mir hunn 12 Filtere gezielt. Duerno hunn se d'Donnéeën am MMS gepréift.
Eng ähnlech Übung gouf am Haaptlager gemaach, wou grouss Ersatzdeeler gelagert sinn: Kompressoren, Controller, Automatioun, Fans, Dampbefeuchter an Honnerte vun aneren Artikelen. Mir hunn d'Markéierungen selektiv nei geschriwwen an se iwwer MMS "gepuncht".
Ersatzstécker Inventar Daten. Rout - Dëst ass wat fehlt a muss kaaft ginn.
Präventiv Ënnerhalt. Zousätzlech zu Ënnerhalt a Reparaturen, UI recommandéiert präventiv Ënnerhalt ze maachen. Et hëlleft e potenziellen Accident an eng geplangte Reparatur ze maachen. Fir all Parameter konfiguréiere mir Schwellwäerter bei der Iwwerwaachung. Wa se iwwerschratt ginn, kréien déi Responsabel Alarmer an huelen déi néideg Moossnamen. Zum Beispill, mir:
- Mir iwwerpréiwen elektresch Paneele mat engem thermesche Imager fir séier Mängel an elektresche Installatiounen z'entdecken: schlechte Kontakt, lokal Iwwerhëtzung vun engem Dirigent oder Circuit Breaker.
- Mir iwwerwaachen Schwéngungsindikatoren an aktuelle Verbrauch vu Kältesystempompelen. Dëst erlaabt Iech Ofwäichungen an der Zäit z'identifizéieren an Ersatzdeeler ouni séier ze plangen.
- Mir maachen Brennstoff an Ueleg Analyse vun Diesel Generator Sets a Kompressere.
- Mir testen Glykol am Kältesystem fir Konzentratioun.
Pompel Schwéngungsdiagramm virun an no Reparatur.
Schafft mat Optraghueler. Ausrüstung Ënnerhalt a Reparatur gi vun externen Optraghueler duerchgefouert. Op eiser Säit ginn et separat Spezialisten an Diesel Generator Sets, Klimaanlagen, an UPS déi hir Operatioun kontrolléieren. Si kontrolléieren ob Optraghueler déi néideg Tools a Material fir Reparaturaarbechten / Ënnerhalt hunn, berufflech Certificaten, elektresch Sécherheetszertifikater an Genehmegungen. Si akzeptéieren all Aarbecht.
Dëst ass wéi d'Checklëscht fir d'Akzeptanz vun Klimaanlag Ënnerhaltsaarbechten ausgesäit.
Am Passbüro kontrolléiere mir ob d'Pässen un autoriséiert Vertrieder vun den Optraghueler ausgestallt goufen, ob se an der spezifizéierter Zäit Ënnerhalt gemaach hunn an ob se d'Regele gelies hunn.
Dokumentatioun. Etabléiert Prozesser fir Systemer an Ausrüstung z'erhalen sinn d'Halschent vun der Schluecht. All Prozedure vun de Mënschen am Rechenzentrum mussen dokumentéiert ginn. Den Zweck vun dësem ass einfach: sou datt alles net op eng spezifesch Persoun limitéiert ass, an am Fall vun engem Accident kann all Ingenieur kloer Instruktiounen huelen an all déi néideg Operatiounen maachen fir se ze eliminéieren.
UI huet seng eege Methodik fir esou Dokumentatioun.
Fir einfach a repetitive Aktivitéiten ginn Standardbetribsprozeduren (SOPs) etabléiert. Zum Beispill ginn et SOPs fir de Chiller un / auszeschalten an d'UPS op Bypass ze setzen.
Fir Ënnerhalt oder komplex Operatiounen, wéi Ersatz vun Batterien an enger UPS, ginn Ënnerhaltprozeduren (Method of Procedures, MOPs) erstallt. Dës kënnen SOPs enthalen. All Typ vun Ingenieursausrüstung muss seng eege MOPs hunn.
Schlussendlech sinn et Emergency Operating Procedures (EOPs) - Instruktiounen am Noutfall. Eng Lëscht vu spezifesche Noutsituatioune gëtt zesummegesat an Instruktioune gi fir si geschriwwen. Hei ass en Deel vun der Lëscht vun Noutsituatiounen, déi d'Zeeche vun engem Accident, d'Aktiounen, d'Verantwortungspersounen an d'Persounen detailléiert:
- Ausschaltung vun der Stadkraaftversuergung: Dieselgeneratorsets ugefaang / net ugefaang;
- UPS Accidenter;
- Accidenter am Datenzenter Iwwerwachungssystem;
- Iwwerhëtzung vun der Maschinn Sall;
- Leckage vum Kältesystem;
- Feeler am Netz a Rechenausrüstung;
an esou weider.
D'Zesummesetzung vun esou engem Volume vun Dokumentatioun ass eng Aarbechtsintensiv Aufgab u sech. Et ass nach méi schwéier et aktuell ze halen (iwwregens, Auditeuren kontrolléieren dat och). A virun allem muss d'Personal dës Instruktioune kennen, no hinnen schaffen a wann néideg Verbesserunge maachen.
Jo, Instruktioune solle verfügbar sinn, wou se eventuell gebraucht ginn, an net nëmmen Stëbs an Archiven sammelen.
Notizen iwwer Ännerungen an den Ënnerhalt Reglementer fir Datacenter Engineering Systemer.
Wärend dem Audit kucken se och d'technesch Dokumentatioun iwwer Systemer, exekutiv an Aarbechtsdokumentatioun, an Akte fir Systemer a Betrib ze setzen.
Markéieren Wärend den Datenzenter ronderëm trëppelen, hunn se et iwwerall iwwerpréift wou se erreechen konnten. Wou se net erreeche konnten, si si vun enger Trappladder erreecht :). Mir hunn seng Präsenz op all Tafel, Maschinn a Ventil gekuckt. Mir hunn d'Eenzegaartegkeet, d'Eenduerheet an d'Konformitéit mat den aktuellen Schemae vun der as-built Dokumentatioun gepréift. Op der Foto hei drënner: mir sinn am Brennstofflagerpompelraum, vergläicht d'Markéierungen op de Solenoidventile mam Diagramm vun der as-built Dokumentatioun.
Alles ass mat hatt ausgemaach, awer mat dem lokalen "dekorativen" axonometresche Diagramm op der Mauer an engem Parameter ass et net zesummegefall.
Diagrammer vun de Systemer, déi do sinn, sollten och an den Rechenzentrum gepost ginn. Am Fall vun engem Accident hëllefen si Iech séier erauszefannen wou alles ass an eng informéiert Entscheedung treffen. D'Foto, zum Beispill, weist e Single-Line-Diagramm am Haaptschalterraum.
D'Relevanz vun den Diagrammer gouf op déi folgend Manéier gepréift: Si hunn d'Elementmarkéierung am Diagramm genannt a gefrot et "am richtege Liewen" ze weisen.
Dëst ass wou den Auditeur Fotoe vun den Astellungen (Astellungen) vum Haaptschaltbord Input Circuit Breaker mécht, fir se spéider mat den Indikatoren op der Single-Line Diagram a Pabeier an elektronesch Kopien ze vergläichen. Op enger vun de Maschinnen, QF-3, huet den Indikator net dem Pabeierdiagramm gepasst, a mir hunn e Strofpunkt verdéngt. Elo wäerten zwee Ingenieuren iwwerpréiwen ob d'Markéierungen an Single-Line Diagrammer der Tatsaach entspriechen.
Dëst ass net alles wat d'Revisoren a punkto Serviceprozesser gepréift hunn. Hei ass wat nach um Ordre du jour stoung:
- Iwwerwachung System. Hei hu mir Karma Virdeeler mat gudder Visualiséierung verdéngt, d'Präsenz vun enger mobiler Applikatioun a situativen Schiirme, déi an de Korridore vun Datenzenteren plazéiert sinn. Hei hu mir am Detail geschriwwen wéi mir schaffen .
Dëst ass de MCC mat visuellen Informatioun iwwer de Status vun den Haaptingenieurssystemer vun NORD-4 an eis aner Datenzenteren déi um Site schaffen. - Liewenszyklus Planung vun Ingenieursausrüstung;
- Kapazitéit Gestioun ();
- Budgetéierung (e bësse geschwat );
- Accident Analyse Prozedur;
- de Prozess vun Akzeptanz, Inbetriebnis an Testen vun Ausrüstung (mir geschriwwen iwwer Tester ).
Wat soss huet d'UI gekuckt?
Sécherheet an Zougang Kontroll. Den Audit kontrolléiert och d'Operatioun vu Sécherheets- a Sécherheetssystemer. Zum Beispill huet den Auditeur probéiert an ee vun de Raimlechkeeten ze kommen, wou hien keen Zougang huet, an huet dann iwwerpréift ob dëst am Zougangskontrollsystem reflektéiert gouf an ob d'Sécherheet doriwwer informéiert gouf (Spoiler - et war).
Wann an eisen Datenzenteren d'Dier zu all Raum méi wéi zwou Minutten op bleift, da gëtt eng Alarm op der Sécherheetspost ausgeléist. Fir dëst ze testen, hunn d'Revisoren eng vun den Diere mat engem Feierläscher opgemaach. Richteg, mir kruten ni eng Sirène - d'Sécherheet huet gesinn datt eppes falsch war duerch Videokameraen an ass fréier op der "Kriminalitéit" ukomm.
Uerdnung an Propretéit. Auditeure kucken no Stëbs, Ausrüstungskëschten déi chaotesch ronderëm leien, a wéi dacks d'Raimlechkeete gebotzt ginn. Hei hunn sech zum Beispill d'Revisoren un engem onidentifizéierten Objet am Ventilatiounskorridor interesséiert. Dëst ass e Block vum Belëftungssystem, dee scho virbereet war fir seng Plaz ze huelen. Awer si hunn mech ëmmer gefrot fir z'ënnerschreiwen.
Och op d'Thema vun Uerdnung am Rechenzentrum - dës cabinets mat all déi néideg Instrumenter fir Noutfall Aarbecht op der Ausrüstung sinn am Haapt switchboard Sall etabléiert.
Standuert D'Datenzentrum gëtt op Basis vu Standuertbedéngungen bewäert - ob et Militärbasen, Fluchhäfen, Flëss, Vulkaner an aner geféierlech Objeten an der Géigend sinn. Op der Foto weisen mir just datt zënter der leschter Zertifizéierung am Joer 2017 keng Atomkraaftwierker oder Ueleglagerungsanlagen ronderëm den Rechenzentrum gewuess sinn. Awer do gëtt en neien NORD-5 Datenzenter gebaut, deen och all Niveau vun der Uptime Institute Tier III Zertifizéierung muss passéieren. Awer dat ass eng ganz aner Geschicht).
Source: will.com