Lan nduduhake, utawa Kepiye kita lulus audit Kelestarian Operasional ing Uptime Institute

Kepala departemen operasi munggah menyang lawang ngisor fasilitas panyimpenan bahan bakar kanggo nuduhake tandha ing katup solenoid.

Ing awal Februari, pusat data Tier III paling gedhe NORD-4 Disertifikasi ulang dening Uptime Institute (UI) menyang standar Keberlanjutan Operasional. Dina iki kita bakal ngandhani apa sing dideleng para auditor lan asil apa sing wis rampung.

Kanggo sing wis kenal karo pusat data, ayo goleki hardware. Standar Tier ngevaluasi lan menehi sertifikasi pusat data ing telung tahap:

• project (Desain): paket dokumentasi project wis dicenthang kene kondhang tier. Gunggunge ana 4: Tingkat I–IV. Sing terakhir, miturut, paling dhuwur.
• fasilitas dibangun (Fasilitas): infrastruktur engineering saka pusat data wis dicenthang lan selaras karo project. Pusat data dicenthang kanthi beban desain kanthi nggunakake macem-macem tes kanthi kira-kira isi ing ngisor iki: salah sawijining UPS (DGS, chillers, AC presisi, lemari distribusi, busbar, lan sapiturute) dijupuk metu saka layanan kanggo pangopènan utawa ndandani. , lan catu daya kutha dipateni. . Pusat data Tier III lan ndhuwur kudu bisa nangani kahanan kasebut tanpa ana pengaruh ing muatan IT.

  Fasilitas bisa dijupuk yen pusat data wis lulus sertifikasi Desain.
  NORD-4 nampa sertifikat Desain ing 2015, lan Fasilitas ing 2016.

• Keberlanjutan Operasional. Nyatane, sertifikasi sing paling penting lan kompleks. Iki ngevaluasi kanthi lengkap proses lan kompetensi operator kanggo njaga lan ngatur pusat data kanthi tingkat Tier sing diadegake (kanggo lulus Kelestarian Operasional, sampeyan kudu duwe sertifikat Fasilitas). Sawise kabeh, tanpa proses operasional sing terstruktur kanthi bener lan tim sing mumpuni, malah pusat data Tier IV bisa dadi bangunan sing ora ana gunane kanthi peralatan sing larang banget.
  
  Ana uga tingkat kene: Bronze, Silver lan Gold. Ing recertification pungkasan kita rampung karo skor 88,95 saka 100 TCTerms bisa, lan iki Silver. Iku ambruk mung cendhak Gold - 1,05 TCTerms. 

Kepiye cara mriksa manawa proses sing dibutuhake wis dibangun lan bisa digunakake? Kajaba iku, carane nindakake ing rong dina - suwene suwene kanggo sertifikasi maneh. Cekakipun, sertifikasi adhedhasar comparison painstaking saka apa sing ditulis ing peraturan, crita "carane kabeh bisa" lan laku nyata. Informasi babagan sing terakhir dipikolehi saka lumaku saka pusat data lan obrolan karo insinyur pusat data - "konfrontasi", kaya sing diarani kanthi tresna. Sing lagi dideleng.

tim

Kaping pisanan, auditor UI mriksa manawa pusat data duwe staf dhukungan sing cukup. Dheweke njupuk meja staf, jadwal tugas lan selektif mriksa laporan shift lan data kontrol akses kanggo mesthekake yen jumlah insinyur sing dibutuhake ana ing situs kasebut.

Auditor uga ndeleng kanthi teliti babagan jumlah jam lembur. Iki kadhangkala kedadeyan nalika klien gedhe teka lan puluhan rak kudu diinstal ing wektu sing padha. Ing wektu kuwi, wong lanang saka shift liyane teka kanggo ngluwari, lan padha mbayar dhuwit ekstra kanggo iki.

Ana 4 insinyur sing kerja ing NORD-7 saben shift: 6 tugas lan siji insinyur senior. Iki sing ngawasi ngawasi 24x7, ketemu klien, mbantu instalasi peralatan lan panjaluk rutin liyane. Iki minangka baris pisanan dhukungan teknis pelanggan. Tanggung jawabe kalebu ngrekam kahanan darurat lan nambah menyang insinyur khusus. Karya infrastruktur teknik dipantau dening wong individu - petugas tugas infrastruktur. ugi 24x7.

Direktur produksi lan manajer situs NORD ngandhani auditor babagan jumlah wong sing kerja ing situs saiki.

Nalika nomer diurutake, kualifikasi tim dicenthang. Auditor kanthi acak mriksa file personel insinyur kanggo mesthekake yen dheweke duwe diploma, sertifikat, lan dokumen wewenang sing dibutuhake (contone, sertifikat safety listrik) supaya bisa kerja ing posisi tartamtu.

Dheweke uga mriksa cara kita nglatih staf. Malah sajrone audit pungkasan, sistem kita kanggo nglatih insinyur tugas anyar narik kawigaten para spesialis UI. We nglampahi telung sasi kanggo wong-wong mau kursus latihan minangka magang sing dibayar, sajrone kita ngenalake proses lan prinsip kerja ing pusat data kita.

Insinyur sing wis kerja uga kudu ngalami latihan biasa, kalebu nggarap kahanan darurat. Auditor mesthi bakal mriksa program latihan lan materi pelatihan kasebut, lan uga mriksa insinyur kanthi acak. Ora ana sing bakal dijaluk ngalih menyang pesawat generator diesel, nanging bakal dijaluk pitutur marang kowe langkah dening langkah apa sing kudu dilakoni nalika sumber daya kutha dipateni. Adhedhasar asil audit, kita bakal nggawa kabeh program latihan lan pendidikan menyang standar siji supaya ora beda kanggo tim sing beda.

We nuduhake auditor kamar break kanggo engineers shift.

Operasi lan pangopènan sistem engineering 

Ing bagean audit sing gedhe iki, kita nuduhake manawa kabeh peralatan lan sistem teknik nampa pangopènan rutin miturut jadwal sing disaranake para vendor, gudang duwe suku cadang sing dibutuhake, perjanjian layanan sing sah karo kontraktor, lan saben operasi nganggo peralatan duwe dhewe. prosedur lan algoritma kanggo nggarap macem-macem kasus.

MMS Nalika sampeyan operate Welasan UPS, genset diesel, AC lan liyane iku, sampeyan kudu ngumpulake kabeh informasi bab fasilitas iki nang endi wae. Kita nggawe kira-kira dossier ing ngisor iki kanggo saben piranti:

• model lan nomer seri;
• menehi tandha;
• ciri teknis lan setelan;
• lokasi instalasi;
• tanggal produksi, komisioning, kadaluwarsa garansi;
• kontrak layanan;
• jadwal pangopènan lan riwayat;
• lan kabeh "sajarah medis" - rusak, ndandani.

Carane lan ngendi kanggo ngumpulake kabeh informasi iki nganti saben operator pusat data arep kanggo awake dhewe. UI ora diwatesi ing piranti. Iki bisa dadi Excel prasaja (kita miwiti karo iki) utawa Sistem Manajemen Maintenance (MMS) ditulis dhewe, kaya saiki. Miturut cara, meja layanan, akuntansi gudang, log jaringan, ngawasi uga ditulis dhewe.

Ana kuwi "file pribadi" kanggo saben Piece saka peralatan.

Kita nuduhake praktik kita babagan iki, kalebu nggunakake conto UPS infrastruktur iki (digambarake), sing nyumbang salah sawijining bagean menyang UPS sing ngladeni beban IT. Ya, miturut standar, "sumbangan" kasebut mung bisa ditindakake dening peralatan infrastruktur sing nguwasani AC lan lampu darurat, nanging dudu beban IT.

Sawise iku, para auditor njaluk nuduhake tiket sing cocog ing Meja Layanan:

Lan profil UPS ing MMS:

Spare parts Kanggo pangopènan pas wektune lan ndandani darurat peralatan engineering, kita nyimpen suku cadang lan aksesoris kita dhewe. Ana gudang umum karo spare parts gedhe kanggo peralatan lan lemari cilik karo spare parts ing kamar engineering (supaya sampeyan ora kudu mbukak adoh).

Ing foto: kita mriksa kasedhiyan suku cadang kanggo set generator diesel. Kita ngetung 12 saringan. Banjur padha mriksa data ing MMS.  

Latihan sing padha ditindakake ing gudang utama, ing ngendi spare parts gedhe disimpen: kompresor, pengontrol, otomatisasi, penggemar, humidifier uap lan atusan barang liyane. We selektif rewrote tandha lan "punched" wong liwat MMS.

Data persediaan suku cadang. abang - Iki sing ilang lan kudu dituku.

Pangopènan preventif. Saliyane pangopènan lan ndandani, UI nyaranake nindakake pangopènan pencegahan. Iku mbantu ngowahi kacilakan potensial dadi ndandani sing direncanakake. Kanggo saben parameter, kita ngatur nilai ambang ing ngawasi. Yen wis ngluwihi, sing tanggung jawab bakal nampa weker lan njupuk tindakan sing perlu. Contone, kita:

• Kita mriksa panel listrik kanthi imager termal supaya bisa ndeteksi kanthi cepet cacat ing instalasi listrik: kontak sing kurang, overheating lokal saka konduktor utawa pemutus sirkuit. 
• Kita ngawasi indikator geter lan konsumsi pompa sistem pendingin saiki. Iki ngidini sampeyan ngenali panyimpangan ing wektu lan ngrancang bagean panggantos tanpa kesusu.
• Kita nindakake analisis bahan bakar lan lenga saka set generator diesel lan kompresor.
• Kita nguji glikol ing sistem pendingin kanggo konsentrasi.

Diagram geter pompa sadurunge lan sawise ndandani.

Nggarap kontraktor. Pangopènan lan ndandani peralatan ditindakake dening kontraktor eksternal. Ing sisih kita, ana spesialis kapisah ing set generator diesel, AC, lan UPS sing ngontrol operasi. Dheweke mriksa manawa kontraktor duwe alat lan bahan sing dibutuhake kanggo ndandani / pangopènan, sertifikat profesional, sertifikat safety listrik, lan ijin. Padha nampa kabeh karya.

Iki minangka dhaptar priksa kanggo nampa karya perawatan AC.

Ing kantor pass, kita mriksa apa pas ditanggepi kanggo wakil sah saka kontraktor, apa padha ngalami pangopènan ing wektu tartamtu lan apa padha wis maca aturan.

Dokumentasi. Proses sing diadegake kanggo njaga sistem lan peralatan minangka setengah perang. Kabeh prosedur sing ditindakake dening manungsa ing pusat data kudu didokumentasikake. Tujuane iki prasaja: supaya kabeh ora diwatesi karo wong tartamtu, lan yen ana kacilakan, insinyur apa wae bisa njupuk instruksi sing jelas lan nindakake kabeh operasi sing dibutuhake kanggo ngilangi.

UI duwe metodologi dhewe kanggo dokumentasi kasebut.

Kanggo kegiatan sing prasaja lan bola-bali, prosedur operasi standar (SOP) ditetepake. Contone, ana SOP kanggo nguripake / mateni chiller lan nyetel UPS kanggo lulus.

Kanggo pangopènan utawa operasi rumit, kayata ngganti baterei ing UPS, prosedur pangopènan (Metode Prosedur, MOP) digawe. Iki bisa uga kalebu SOP. Saben jinis peralatan teknik kudu duwe MOP dhewe.

Pungkasan, ana Prosedur Operasi Darurat (EOPs) - instruksi yen ana darurat. Dhaptar kahanan darurat tartamtu disusun lan instruksi ditulis kanggo wong-wong mau. Iki minangka bagean saka dhaptar kahanan darurat, sing rinci babagan tandha-tandha kacilakan, tumindak, wong sing tanggung jawab lan wong sing kudu dilaporake:

• mateni sumber daya kutha: set generator diesel diwiwiti / ora diwiwiti;
• kacilakan UPS; 
• kacilakan ing sistem pemantauan pusat data;
• overheating saka kamar mesin;
• bocor saka sistem refrigerasi;
• Gagal ing jaringan lan peralatan komputer;

lan liya-liyane.

Nglumpukake volume dokumentasi kasebut minangka tugas sing mbutuhake tenaga kerja. Malah luwih angel supaya tetep anyar (kanthi cara, auditor uga mriksa iki). Lan sing paling penting, staf kudu ngerti instruksi kasebut, makarya miturut dheweke lan nggawe dandan yen perlu.

Ya, instruksi kudu kasedhiya ing ngendi wae sing dibutuhake, lan ora mung ngumpulake bledug ing arsip.

Cathetan babagan owah-owahan ing peraturan pangopènan kanggo sistem teknik pusat data.

Sajrone audit, dheweke uga ndeleng dokumentasi teknis babagan sistem, dokumentasi eksekutif lan kerja, lan tumindak ngetrapake sistem. 

menehi tandha. Nalika mlaku-mlaku ngubengi pusat data, dheweke mriksa ing endi wae sing bisa digayuh. Ing ngendi ora bisa tekan, tekan saka tangga :). We katon ing ngarsane ing saben switchboard, mesin, lan katup. Kita mriksa uniqueness, unambiguity lan tundhuk karo rencana saiki saka dokumentasi minangka-dibangun. Ing foto ing ngisor iki: kita ana ing kamar pompa panyimpenan bahan bakar mbandhingake tandha ing katup solenoid kanthi diagram dokumentasi sing wis dibangun. 

Kabeh setuju karo dheweke, nanging karo diagram aksonometrik "dekoratif" lokal ing tembok ing siji parameter ora pas.

Diagram sistem sing ana ing kono uga kudu dipasang ing papan pusat data. Yen ana kacilakan, dheweke mbantu sampeyan ngerteni kanthi cepet ing endi kabeh lan nggawe keputusan sing tepat. Foto kasebut, contone, nuduhake diagram siji-baris ing kamar switchboard utama.

Relevansi diagram kasebut dicenthang kanthi cara ing ngisor iki: dijenengi tandha unsur ing diagram lan dijaluk nuduhake "ing urip nyata". 

Iki ngendi auditor njupuk foto saka setelan (setelan) saka switchboard input circuit breaker utama, supaya mengko mbandhingaké karo pratondho ing diagram siji-line ing kertas lan salinan elektronik. Ing salah sawijining mesin, QF-3, indikator kasebut ora cocog karo diagram kertas, lan entuk titik paukuman. Saiki loro insinyur bakal mriksa apa tandha ing diagram baris siji cocog karo kasunyatan.

Iki ora kabeh sing dipriksa auditor babagan proses layanan. Mangkene apa maneh sing ana ing agenda:

• sistem monitoring. Ing kene kita entuk keuntungan karma kanthi visualisasi sing apik, anane aplikasi seluler lan layar situasional sing diselehake ing koridor pusat data. Ing kene kita nulis kanthi rinci babagan cara kerja ngawasi.

  
  Iki minangka MCC kanthi informasi visual babagan status sistem teknik utama NORD-4 lan pusat data liyane sing digunakake ing situs kasebut.

• perencanaan siklus urip saka peralatan engineering;
• manajemen kapasitas (manajemen kapasitas);
• budgeting (ngomong sethithik kene);
• prosedur analisis kacilakan;
• proses panriman, komisioning lan uji coba peralatan (kita nulis babagan tes kene).

Apa maneh sing dideleng UI?

Keamanan lan kontrol akses. Audit uga mriksa operasi sistem safety lan keamanan. Contone, auditor nyoba kanggo njaluk menyang salah siji saka panggonan kang ora duwe akses, lan banjur mriksa apa iki dibayangke ing sistem kontrol akses lan apa keamanan wis dilaporake bab iki (spoiler - iku).

Yen ing pusat data kita, lawang menyang kamar apa wae tetep mbukak luwih saka rong menit, banjur ana tandha ing pos keamanan. Kanggo nguji iki, auditor mbukak salah sawijining lawang nganggo alat pemadam kebakaran. Bener, kita ora nate sirene - keamanan weruh ana sing salah liwat kamera video lan wis teka ing "pemandangan kejahatan" sadurunge.

Tatanan lan karesikan. Auditors nggoleki bledug, kothak peralatan lying watara chaotically, lan sepira kerepe panggonan wis di resiki. Ing kene, contone, auditor dadi kasengsem ing obyek sing ora dingerteni ing koridor ventilasi. Iki minangka blok saka sistem ventilasi, sing wis siyap kanggo njupuk Panggonan. Nanging dheweke isih njaluk aku mlebu.

Uga ing topik urutan ing pusat data - lemari iki karo kabeh alat sing dibutuhake kanggo karya darurat ing peralatan dumunung ing kamar switchboard utama. 

lokasi. Pusat data ditaksir adhedhasar kahanan lokasi - apa ana pangkalan militer, bandara, kali, gunung berapi lan obyek mbebayani liyane ing cedhak. Ing foto kasebut mung nuduhake yen wiwit sertifikasi pungkasan ing 2017, ora ana pembangkit listrik tenaga nuklir utawa fasilitas panyimpenan minyak sing tuwuh ing sekitar pusat data. Nanging ing kana ana pusat data NORD-5 anyar, sing uga kudu ngliwati kabeh tingkat sertifikasi Uptime Institute Tier III. Nanging iki crita sing beda).

Source: www.habr.com