Uptime institutida Operatsion barqarorlik auditidan qanday o‘tganimizni ko‘rsating

Operatsion bo'lim boshlig'i elektromagnit klapandagi belgilarni ko'rsatish uchun er osti yoqilg'i saqlash omborining lyukiga chiqdi.

Fevral oyi boshida bizning eng katta III darajali ma'lumotlar markazimiz NORD-4 Operatsion barqarorlik standarti uchun Uptime Institute (UI) tomonidan qayta sertifikatlangan. Bugun biz sizga auditorlar nimani ko'rib chiqayotganini va qanday natijalar bilan yakunlaganimizni aytib beramiz.

Ma'lumotlar markazlari bilan tanish bo'lganlar uchun keling, apparat haqida qisqacha to'xtalib o'tamiz. Darajali standartlar ma'lumotlar markazlarini uch bosqichda baholaydi va sertifikatlaydi:

• loyiha (Dizayn): loyiha hujjatlari to'plami tekshiriladi.Bu erda hammaga ma'lum bosqichli. Ulardan jami 4 tasi bor: I-IV daraja. Ikkinchisi, shunga ko'ra, eng yuqori hisoblanadi.
• qurilgan ob'ekt (ob'ekt): ma'lumotlar markazining muhandislik infratuzilmasi va uning loyihaga muvofiqligi tekshiriladi. Ma'lumotlar markazi taxminan quyidagi tarkibga ega bo'lgan turli sinovlar yordamida to'liq dizayn yuki ostida tekshiriladi: UPSlardan biri (DGS, sovutgichlar, nozik konditsionerlar, tarqatish shkaflari, shinalar va boshqalar) texnik xizmat ko'rsatish yoki ta'mirlash uchun ishdan chiqarilgan. , va shahar elektr ta'minoti o'chirilgan. . III darajali va undan yuqori darajadagi ma'lumotlar markazlari vaziyatni AT yukiga hech qanday ta'sir qilmasdan boshqarishi kerak.

  Agar ma'lumotlar markazi dizayn sertifikatidan o'tgan bo'lsa, ob'ektni olish mumkin.
  NORD-4 dizayn sertifikatini 2015 yilda, ob'ektni 2016 yilda oldi.

• Operatsion barqarorlik. Aslida, eng muhim va murakkab sertifikatlash. U o'rnatilgan darajali ma'lumotlar markaziga xizmat ko'rsatish va boshqarish bo'yicha operatorning jarayonlari va vakolatlarini har tomonlama baholaydi (Operatsion barqarorlikdan o'tish uchun siz allaqachon Ta'sis sertifikatiga ega bo'lishingiz kerak). Axir, to'g'ri tuzilgan operatsion jarayonlar va malakali jamoa bo'lmasa, hatto IV darajali ma'lumotlar markazi ham juda qimmat uskunalar bilan yaroqsiz binoga aylanishi mumkin.
  
  Bu erda ham darajalar mavjud: bronza, kumush va oltin. Oxirgi qayta attestatsiyada biz 88,95 balldan 100 ball bilan yakunladik va bu kumush. U “Oltin”dan atigi 1,05 ballga qisqardi. 

Kerakli jarayonlar qurilgan va ular kerak bo'lganda ishlayotganligini qanday tekshirish mumkin? Bundan tashqari, buni ikki kun ichida qanday qilish kerak - qayta sertifikatlash uchun qancha vaqt ketadi. Muxtasar qilib aytganda, sertifikatlash qoidalarda yozilgan narsalarni, "hamma narsa qanday ishlashi" haqidagi hikoyalarni va haqiqiy amaliyotlarni mashaqqatli taqqoslashga asoslanadi. Ikkinchisi haqidagi ma'lumotlar ma'lumotlar markazini aylanib o'tish va ma'lumotlar markazi muhandislari bilan suhbatlar - biz ularni mehr bilan ataydigan "qarama-qarshiliklar" dan olinadi. Bu ular ko'rayotgan narsa.

komanda

Birinchidan, UI auditorlari ma'lumotlar markazida etarli yordamchi xodimlar mavjudligini tekshiradilar. Ular shtat jadvalini, navbatchilik jadvalini olib, o'sha kuni kerakli miqdordagi muhandislar mavjudligiga ishonch hosil qilish uchun smena hisobotlari va kirishni boshqarish ma'lumotlari bilan tanlab tekshiradilar.

Auditorlar qo'shimcha ish soatlari soniga ham diqqat bilan qarashadi. Bu ba'zan katta mijoz kelganda va bir vaqtning o'zida o'nlab raftlarni o'rnatish kerak bo'lganda sodir bo'ladi. Bunday paytlarda boshqa smenadagi yigitlar yordamga kelishadi va buning uchun ularga qo'shimcha pul to'lanadi.

NORD-4 da smenada 7 nafar muhandis ishlaydi: 6 nafar navbatchi va bitta katta muhandis. Bular 24x7 monitoringni kuzatadigan, mijozlar bilan uchrashadigan, uskunani o'rnatishda va boshqa muntazam so'rovlarda yordam beradiganlardir. Bu mijozlarga texnik yordam ko'rsatishning birinchi qatoridir. Ularning majburiyatlari favqulodda vaziyatlarni qayd etish va ularni maxsus muhandislarga etkazishni o'z ichiga oladi. Muhandislik infratuzilmasi ishi alohida shaxslar - infratuzilma navbatchilari tomonidan nazorat qilinadi. Shuningdek, 24x7.

NORD ishlab chiqarish direktori va sayt menejeri auditorlarga hozirda qancha odam ishlayotganligini aytadi.

Raqamlar saralanganda, jamoaning malakasi tekshiriladi. Auditorlar ma'lum bir lavozimda ishlash uchun zarur diplomlar, sertifikatlar va ruxsat beruvchi hujjatlar (masalan, elektr xavfsizligi sertifikatlari) mavjudligini tekshirish uchun muhandislarning shaxsiy fayllarini tasodifiy ko'rib chiqadilar.

Shuningdek, ular bizning xodimlarimizni qanday o'qitishimizni tekshiradilar. Oxirgi audit paytida ham yangi navbatchi muhandislarni tayyorlash tizimi UI mutaxassislarini hayratda qoldirdi. Biz ular uchun uch oy vaqt sarflaymiz o'quv kursi pullik stajirovka sifatida, biz ularni ma'lumotlar markazimizda ishlash jarayonlari va tamoyillari bilan tanishtiramiz.

Allaqachon ishlayotgan muhandislar, shuningdek, favqulodda vaziyatlarda ishlash bo'yicha muntazam treningdan o'tishlari kerak. Auditorlar, albatta, o'quv dasturlari va bunday treninglar materiallarini tekshiradilar, shuningdek, muhandislarni tasodifiy tekshiradilar. Hech kim dizel generator majmuasiga o'tishni so'ramaydi, lekin ular shahar elektr ta'minoti o'chirilganda nima qilish kerakligini bosqichma-bosqich aytib berishlarini so'rashadi. Audit natijalariga ko'ra, biz barcha o'quv va ta'lim dasturlarini turli jamoalar uchun farq qilmasligi uchun yagona standartga keltiramiz.

Biz auditorlarga smena muhandislari uchun dam olish xonasini ko'rsatamiz.

Muhandislik tizimlarini ishlatish va ularga xizmat ko'rsatish 

Auditning ushbu katta qismida biz barcha muhandislik uskunalari va tizimlari sotuvchilar tomonidan tavsiya etilgan jadvalga muvofiq muntazam texnik xizmat ko'rsatishini, omborda zarur ehtiyot qismlar mavjudligini, pudratchilar bilan haqiqiy xizmat ko'rsatish shartnomalari mavjudligini va asbob-uskunalar bilan har bir operatsiya o'z turli holatlar ustida ishlash protseduralari va algoritmlari.

MMS. O'nlab UPS, dizel generatorlari, konditsionerlar va boshqa narsalarni ishlatsangiz, bu ob'ekt haqida barcha ma'lumotlarni biron bir joyda to'plashingiz kerak. Har bir uskuna uchun taxminan quyidagi faylni yaratamiz:

• model va seriya raqami;
• belgilash;
• texnik xususiyatlar va sozlamalar;
• o'rnatish joyi;
• ishlab chiqarish, ishga tushirish, kafolat muddati tugash sanalari;
• xizmat ko'rsatish shartnomalari;
• texnik xizmat ko'rsatish jadvali va tarixi;
• va butun "tibbiy tarix" - buzilishlar, ta'mirlashlar.

Bu ma'lumotlarni qanday va qayerda to'plashni har bir ma'lumot markazi operatori o'zi hal qiladi. UI asboblar bilan cheklanmagan. Bu oddiy Excel (biz shu bilan boshladik) yoki bizda bo'lgani kabi o'z-o'zidan yozilgan Xizmatni boshqarish tizimi (MMS) bo'lishi mumkin. Aytmoqchi, xizmat ko'rsatish stoli, ombor hisobi, onlayn jurnal, monitoring ham o'z-o'zidan yoziladi.

Har bir uskuna uchun bunday "shaxsiy fayl" mavjud.

Biz bu boradagi amaliyotlarimizni, jumladan, UPS infratuzilmasi misolida, uning qismlaridan birini IT yukiga xizmat qiluvchi UPS ga hadya qilgan holda namoyish etdik (rasmda). Ha, standartga ko'ra, bunday "ehson" faqat konditsionerlar va favqulodda yoritishni ta'minlaydigan infratuzilma uskunalari tomonidan amalga oshirilishi mumkin, lekin IT yukini emas.

Shundan so'ng, auditorlar xizmat ko'rsatish stolida tegishli chiptani ko'rsatishni so'radilar:

MMS-dagi UPS profili:

Ehtiyot qismlar Muhandislik asbob-uskunalariga o'z vaqtida texnik xizmat ko'rsatish va favqulodda ta'mirlash uchun biz o'z ehtiyot qismlar va aksessuarlarimizni saqlab qolamiz. Uskunalar uchun katta ehtiyot qismlarga ega umumiy ombor va muhandislik xonalarida ehtiyot qismlarga ega kichik shkaflar mavjud (uzoqqa yugurmasligingiz uchun).

Suratda: biz dizel generator majmuasi uchun ehtiyot qismlar mavjudligini tekshirmoqdamiz. Biz 12 ta filtrni hisobladik. Keyin biz MMS-dagi ma'lumotlarni tekshirdik.  

Shunga o'xshash mashg'ulot yirik ehtiyot qismlar saqlanadigan asosiy omborda o'tkazildi: kompressorlar, kontrollerlar, avtomatlashtirish, fanatlar, bug' namlagichlari va boshqa yuzlab narsalar. Biz belgilarni tanlab qayta yozdik va ularni MMS orqali “zarb qildik”.

Ehtiyot qismlar inventarizatsiyasi ma'lumotlari. Qizil - Bu etishmayotgan narsa va uni sotib olish kerak.

Profilaktik parvarishlash. Texnik xizmat ko'rsatish va ta'mirlashdan tashqari, UI profilaktik xizmat ko'rsatishni tavsiya qiladi. Bu mumkin bo'lgan baxtsiz hodisani rejalashtirilgan ta'mirlashga aylantirishga yordam beradi. Har bir parametr uchun biz monitoringda chegara qiymatlarini sozlaymiz. Agar ular oshib ketgan bo'lsa, mas'ul shaxslar signallarni oladi va zarur choralarni ko'radi. Masalan, biz:

• Elektr qurilmalaridagi nuqsonlarni tezda aniqlash uchun biz elektr panellarini termal tasvirlagich bilan tekshiramiz: yomon aloqa, o'tkazgich yoki o'chirgichning mahalliy qizib ketishi. 
• Biz tebranish ko'rsatkichlarini va sovutish tizimi nasoslarining joriy iste'molini kuzatamiz. Bu sizga o'z vaqtida og'ishlarni aniqlash va ehtiyot qismlarni shoshilmasdan rejalashtirish imkonini beradi.
• Biz dizel generatorlari va kompressorlarning yoqilg'i va moy tahlillarini qilamiz.
• Biz glikolni kontsentratsiya uchun sovutish tizimida sinab ko'ramiz.

Ta'mirlashdan oldin va keyin nasosning tebranish diagrammasi.

Pudratchilar bilan ishlash. Uskunalarga texnik xizmat ko'rsatish va ta'mirlash tashqi pudratchilar tomonidan amalga oshiriladi. Biz tomonda dizel generatorlari, konditsionerlar va UPS bo'yicha alohida mutaxassislar mavjud, ular ularning ishlashini nazorat qiladi. Ular pudratchilarda ta'mirlash ishlari/xizmat ko'rsatish uchun zarur vositalar va materiallar, professional sertifikatlar, elektr xavfsizligi sertifikatlari va ruxsatnomalar mavjudligini tekshiradilar. Ular barcha ishlarni qabul qilishadi.

Konditsionerga texnik xizmat ko'rsatish bo'yicha ishlarni qabul qilish bo'yicha nazorat ro'yxati shunday ko'rinadi.

O'tish ofisida biz ruxsatnomalar pudratchilarning vakolatli vakillariga berilganmi yoki yo'qmi, ular belgilangan vaqtda texnik xizmat ko'rsatganmi yoki qoidalar bilan o'qiganmi yoki yo'qligini tekshiramiz.

Hujjatlar. Tizimlar va jihozlarga texnik xizmat ko'rsatish bo'yicha o'rnatilgan jarayonlar urushning yarmidir. Ma'lumotlar markazida odamlar tomonidan amalga oshirilgan barcha protseduralar hujjatlashtirilgan bo'lishi kerak. Buning maqsadi oddiy: hamma narsa aniq bir shaxs bilan chegaralanib qolmasligi va baxtsiz hodisa sodir bo'lgan taqdirda har qanday muhandis aniq ko'rsatmalar olishi va uni bartaraf etish uchun barcha kerakli operatsiyalarni bajarishi mumkin.

UI bunday hujjatlar uchun o'z metodologiyasiga ega.

Oddiy va takrorlanuvchi harakatlar uchun standart operatsion protseduralar (SOP) o'rnatiladi. Misol uchun, chillerni yoqish/o'chirish va UPSni aylanib o'tishga sozlash uchun SOPlar mavjud.

Texnik xizmat ko'rsatish yoki murakkab operatsiyalar uchun, masalan, UPSda batareyalarni almashtirish, texnik xizmat ko'rsatish tartib-qoidalari (Protseduralar usullari, MOP) yaratiladi. Bular SOPlarni o'z ichiga olishi mumkin. Har bir turdagi muhandislik uskunalari o'z MOPlariga ega bo'lishi kerak.

Va nihoyat, Favqulodda Operatsion Protseduralar (EOPs) - favqulodda vaziyatlarda ko'rsatmalar mavjud. Muayyan favqulodda vaziyatlar ro'yxati tuziladi va ular uchun ko'rsatmalar yoziladi. Bu erda avariya belgilari, harakatlar, mas'ul shaxslar va xabardor qilish kerak bo'lgan shaxslar batafsil tavsiflangan favqulodda vaziyatlar ro'yxatining bir qismi:

• shahar elektr ta'minotini o'chirish: dizel generatorlari to'plamlari ishga tushdi / ishga tushmadi;
• UPS avariyalari; 
• ma'lumotlar markazi monitoring tizimidagi baxtsiz hodisalar;
• mashina xonasining haddan tashqari qizishi;
• sovutish tizimining oqishi;
• tarmoq va hisoblash uskunalarida nosozlik;

va hokazo.

Bunday hajmdagi hujjatlarni tuzish o'z-o'zidan ko'p mehnat talab qiladigan ishdir. Uni yangilab turish yanada qiyinroq (Aytgancha, auditorlar ham buni tekshiradilar). Va eng muhimi, xodimlar ushbu ko'rsatmalarni bilishlari, ularga muvofiq ishlashlari va kerak bo'lganda yaxshilashlari kerak.

Ha, ko'rsatmalar arxivlarda chang to'plash emas, balki kerak bo'lishi mumkin bo'lgan joyda mavjud bo'lishi kerak.

Ma'lumotlar markazi muhandislik tizimlariga texnik xizmat ko'rsatish qoidalariga o'zgartirishlar bo'yicha eslatmalar.

Audit davomida ular tizimlar bo'yicha texnik hujjatlarni, ijro va ishchi hujjatlarni, tizimlarni ishga tushirish aktlarini ham ko'rib chiqadilar. 

Belgilar Ma'lumotlar markazi atrofida aylanib yurganlarida, ular hamma joyda uni tekshirdilar. Ular yeta olmagan joyga zinapoyadan yetib kelishdi :). Biz uning har bir kommutator, mashina va valfda mavjudligini ko'rib chiqdik. Biz o'ziga xoslik, noaniqlik va o'rnatilgan hujjatlarning joriy sxemalariga muvofiqligini tekshirdik. Quyidagi fotosuratda: biz yonilg'i saqlash nasosi xonasida turibmiz, solenoid klapanlardagi belgilarni o'rnatilgan hujjatlar diagrammasi bilan taqqoslaymiz. 

Hammasi u bilan kelishib oldi, lekin bitta parametrda devordagi mahalliy "dekorativ" aksonometrik diagramma bilan mos kelmadi.

U erda joylashgan tizimlarning diagrammalari ma'lumotlar markazi binolarida ham joylashtirilishi kerak. Baxtsiz hodisa sodir bo'lgan taqdirda, ular sizga hamma narsa qaerdaligini tezda aniqlashga va ongli qaror qabul qilishga yordam beradi. Fotosuratda, masalan, asosiy kommutator xonasida bitta chiziqli diagramma ko'rsatilgan.

Diagrammalarning dolzarbligi quyidagi tarzda tekshirildi: ular diagrammadagi element belgisini nomladilar va uni "haqiqiy hayotda" ko'rsatishni so'rashdi. 

Bu erda auditor asosiy kommutatorning kirish elektron to'xtatuvchisi sozlamalarini (sozlamalarini) keyinchalik qog'oz va elektron nusxalardagi bir qatorli diagrammadagi ko'rsatkichlar bilan solishtirish uchun fotosuratlarni oladi. Mashinalardan birida, QF-3da indikator qog'oz diagrammasiga mos kelmadi va biz jarima balliga ega bo'ldik. Endi ikkita muhandis bitta chiziqli diagrammalardagi belgilar haqiqatga mos keladimi yoki yo'qligini tekshiradi.

Bu auditorlar xizmat ko'rsatish jarayonlari nuqtai nazaridan tekshirganlarning hammasi emas. Kun tartibida yana nimalar bor edi:

• monitoring tizimi. Bu erda biz yaxshi vizualizatsiya, mobil ilovaning mavjudligi va ma'lumotlar markazlari koridorlarida joylashtirilgan situatsion ekranlar bilan karma imtiyozlarini oldik. Bu erda biz qanday ishlayotganimiz haqida batafsil yozdik monitoring.

  
  Bu NORD-4 asosiy muhandislik tizimlari va saytda ishlaydigan boshqa ma'lumotlar markazlarimiz holati haqida vizual ma'lumotlarga ega MCC.

• muhandislik jihozlarining hayot aylanishini rejalashtirish;
• salohiyatni boshqarish (salohiyatni boshqarish);
• byudjetlashtirish (bir oz gapirdi shu yerda);
• baxtsiz hodisalarni tahlil qilish tartibi;
• uskunalarni qabul qilish, ishga tushirish va sinovdan o'tkazish jarayoni (sinovlar haqida yozgan edik shu yerda).

UI yana nimaga qaradi?

Xavfsizlik va kirishni boshqarish. Audit, shuningdek, xavfsizlik va xavfsizlik tizimlarining ishlashini tekshiradi. Masalan, auditor o'zi kirish imkoni bo'lmagan binolardan biriga kirishga harakat qildi va keyin bu kirishni boshqarish tizimida aks ettirilganmi yoki yo'qmi va xavfsizlik bu haqda xabardor qilinganmi yoki yo'qligini tekshirdi (spoiler - shunday).

Agar bizning ma'lumotlar markazlarimizda biron bir xonaning eshigi ikki daqiqadan ko'proq ochiq qolsa, xavfsizlik postida ogohlantirish paydo bo'ladi. Buni sinab ko'rish uchun auditorlar eshiklardan birini o't o'chirgich bilan ochishdi. To'g'ri, biz hech qachon sirenaga ega bo'lmaganmiz - xavfsizlik xodimlari videokameralar orqali nimadir noto'g'ri ekanligini ko'rdi va "jinoyat joyiga" oldinroq etib keldi.

Tartib va ​​tozalik. Auditorlar changni, xaotik tarzda yotgan jihoz qutilarini va binolar qanchalik tez-tez tozalanishini qidiradi. Bu erda, masalan, auditorlar ventilyatsiya koridoridagi noma'lum ob'ektga qiziqish bildirishdi. Bu allaqachon o'z o'rnini egallashga tayyorgarlik ko'rayotgan shamollatish tizimining blokidir. Lekin baribir imzo qo‘yishimni so‘rashdi.

Shuningdek, ma'lumotlar markazida tartib mavzusida - uskunada favqulodda ishlarni bajarish uchun barcha zarur vositalarga ega bu kabinetlar asosiy kommutator xonasida joylashgan. 

Manzil. Ma'lumotlar markazi joylashuv sharoitlari - yaqin atrofda harbiy bazalar, aeroportlar, daryolar, vulqonlar va boshqa xavfli ob'ektlar mavjudligiga qarab baholanadi. Suratda biz 2017-yildagi so‘nggi sertifikatlashdan buyon ma’lumotlar markazi atrofida hech qanday atom elektr stansiyalari yoki neft omborlari o‘smaganligini ko‘rsatamiz. Ammo u erda yangi NORD-5 ma'lumotlar markazi qurilmoqda, u ham Uptime Institute Tier III sertifikatining barcha darajalaridan o'tishi kerak. Ammo bu butunlay boshqacha hikoya).

Manba: www.habr.com