Və nümayiş etdirin və ya Uptime İnstitutunda Əməliyyat Davamlılıq auditindən necə keçdiyimiz

İstismar şöbəsinin rəisi elektromaqnit klapandakı işarələri göstərmək üçün yeraltı yanacaq anbarının lyukuna qalxıb.

Fevralın əvvəlində ən böyük III səviyyəli məlumat mərkəzimiz NORD-4 Operativ Davamlılıq standartı üçün Uptime İnstitutu (UI) tərəfindən yenidən sertifikatlaşdırılıb. Bu gün sizə auditorların nəyə baxdığını və hansı nəticələrlə başa vurduğumuzu söyləyəcəyik.

Məlumat mərkəzləri ilə tanış olanlar üçün qısaca aparat üzərindən keçək. Səviyyə Standartları məlumat mərkəzlərini üç mərhələdə qiymətləndirir və sertifikatlaşdırır:

• layihə (Dizayn): layihə sənədlərinin paketi yoxlanılır.Burada hamıya məlumdur heyvan. Onlardan cəmi 4-ü var: I-IV səviyyə. Sonuncu, müvafiq olaraq, ən yüksəkdir.
• tikilmiş obyekt (Obyekt): məlumat mərkəzinin mühəndis infrastrukturu yoxlanılır və onun layihəyə uyğunluğu yoxlanılır. Məlumat mərkəzi təxminən aşağıdakı məzmunlu müxtəlif testlərdən istifadə etməklə tam dizayn yükü altında yoxlanılır: UPS-lərdən biri (DGS, soyuducular, dəqiq kondisionerlər, paylayıcı şkaflar, şinlər və s.) texniki xidmət və ya təmir üçün istismardan çıxarılıb. , və şəhərin enerji təchizatı söndürülür. . III səviyyəli və yuxarıdakı məlumat mərkəzləri İT yükünə heç bir təsir etmədən vəziyyəti idarə edə bilməlidir.

  Məlumat mərkəzi artıq Dizayn sertifikatından keçibsə, obyekt götürülə bilər.
  NORD-4 Dizayn sertifikatını 2015-ci ildə, Obyekti isə 2016-cı ildə alıb.

• Əməliyyat Davamlılığı. Əslində, ən vacib və mürəkkəb sertifikatlaşdırma. O, müəyyən səviyyəli məlumat mərkəzinin saxlanması və idarə edilməsində operatorun proseslərini və səriştələrini hərtərəfli qiymətləndirir (Əməliyyat Davamlılığını keçmək üçün artıq Obyekt sertifikatına sahib olmalısınız). Axı, düzgün qurulmuş əməliyyat prosesləri və ixtisaslı komanda olmadan, hətta IV səviyyəli məlumat mərkəzi çox bahalı avadanlıqla yararsız bir binaya çevrilə bilər.
  
  Burada da səviyyələr var: Bürünc, Gümüş və Qızıl. Son təkrar attestasiyada biz 88,95 mümkün baldan 100 balla başa vurduq və bu Gümüşdür. Qızıldan bir qədər geri qaldı - 1,05 bal. 

Lazımi proseslərin qurulduğunu və lazım olduğu kimi işlədiyini necə yoxlamaq olar? Üstəlik, bunu iki gündə necə etmək olar - yenidən sertifikatlaşdırma üçün nə qədər vaxt lazımdır. Bir sözlə, sertifikatlaşdırma qaydalarda yazılanların, “hər şeyin necə işlədiyi” hekayələrinin və real təcrübələrin zəhmətli müqayisəsinə əsaslanır. Sonuncu haqqında məlumat məlumat mərkəzinin gəzintilərindən və məlumat mərkəzinin mühəndisləri ilə söhbətlərdən - bizim onları məhəbbətlə adlandırdığımız "qarşıdurmalardan" əldə edilir. Baxdıqları budur.

Komanda

Əvvəla, UI auditorları məlumat mərkəzində kifayət qədər dəstək işçisi olub-olmadığını yoxlayır. Onlar ştat cədvəlini, növbətçilik cədvəlini götürürlər və onu növbə hesabatları və girişə nəzarət məlumatları ilə seçərək yoxlayırlar ki, həmin gün lazımi sayda mühəndisin həqiqətən yerində olduğundan əmin olsunlar.

Auditorlar əlavə iş saatlarının sayına da diqqətlə baxırlar. Bu, bəzən böyük bir müştəri daxil olduqda baş verir və eyni zamanda onlarla rəf quraşdırılmalıdır. Belə anlarda başqa növbələrdən olan uşaqlar köməyə gəlir və bunun üçün onlara əlavə pul verilir.

NORD-4-də bir növbədə 7 mühəndis işləyir: 6 növbətçi və bir baş mühəndis. Bunlar 24x7 monitorinqi izləyən, müştərilərlə görüşən, avadanlığın quraşdırılmasında və digər gündəlik sorğularda kömək edənlərdir. Bu, müştəri texniki dəstəyinin ilk xəttidir. Onların vəzifələrinə fövqəladə halların qeydə alınması və onların ixtisaslaşdırılmış mühəndislərə çatdırılması daxildir. Mühəndis infrastrukturunun işinə ayrı-ayrı şəxslər - infrastruktur növbətçiləri tərəfindən nəzarət edilir. Həmçinin 24x7.

NORD-un istehsal direktoru və sahə meneceri auditorlara hazırda saytda neçə nəfərin işlədiyini bildirir.

Nömrələr sıralandıqdan sonra komandanın ixtisasları yoxlanılır. Auditorlar müəyyən vəzifədə işləmək üçün lazımi diplomlara, sertifikatlara və icazə sənədlərinə (məsələn, elektrik təhlükəsizliyi sertifikatlarına) malik olmasını təmin etmək üçün mühəndislərin şəxsi sənədlərini təsadüfi şəkildə nəzərdən keçirirlər.

Onlar da əməkdaşlarımızı necə öyrətdiyimizi yoxlayırlar. Hətta son audit zamanı yeni növbətçi mühəndislərin hazırlanması sistemimiz UI mütəxəssislərini heyran etdi. Onlar üçün üç ay vaxt sərf edirik təlim kursu ödənişli staj kimi, biz onları data mərkəzimizdəki proseslər və iş prinsipləri ilə tanış edirik.

Artıq işləyən mühəndislər fövqəladə hallarda işləmək də daxil olmaqla, müntəzəm təlim keçməlidirlər. Auditorlar mütləq təlim proqramlarını və bu cür təlimlərin materiallarını yoxlayacaq, həmçinin mühəndisləri təsadüfi şəkildə yoxlayacaqlar. Heç kim dizel generator dəstinə keçməyi tələb etməyəcək, ancaq şəhərin elektrik təchizatı söndürüldükdə nə etmək lazım olduğunu addım-addım izah etmələri xahiş olunacaq. Auditin nəticələrinə əsasən, biz bütün təlim və təhsil proqramlarını vahid standarta çatdıracağıq ki, onlar müxtəlif komandalar üçün fərqlənməsin.

Biz auditorlara növbə mühəndisləri üçün istirahət otağını göstəririk.

Mühəndislik sistemlərinin istismarı və texniki xidməti 

Auditin bu böyük hissəsində biz göstəririk ki, bütün mühəndis avadanlıqları və sistemləri təchizatçılar tərəfindən tövsiyə olunan qrafikə uyğun olaraq müntəzəm texniki xidmət göstərir, anbarda lazımi ehtiyat hissələri var, podratçılarla etibarlı xidmət müqavilələri var və avadanlıqla aparılan hər bir əməliyyatın öz xüsusiyyətləri var. müxtəlif hallar üzərində işləmək üçün prosedurlar və alqoritmlər.

MMS. Onlarla UPS, dizel generator dəstləri, kondisionerlər və digər əşyaları işlətdiyiniz zaman bu obyekt haqqında bütün məlumatları hardasa toplamaq lazımdır. Hər bir avadanlıq üçün təxminən aşağıdakı faylı yaradırıq:

• model və seriya nömrəsi;
• işarələmə;
• texniki xüsusiyyətlər və parametrlər;
• quraşdırma yeri;
• istehsal, istismara vermə, zəmanət müddətinin bitmə tarixləri;
• xidmət müqavilələri;
• texniki xidmət cədvəli və tarixçəsi;
• və bütün "tibbi tarix" - nasazlıqlar, təmirlər.

Bütün bu məlumatların necə və harada toplanacağına hər bir məlumat mərkəzi operatoru özü qərar verəcək. UI alətlərlə məhdudlaşmır. Bu, indiki kimi sadə Excel (biz bununla başladıq) və ya öz-özünə yazılmış Baxım İdarəetmə Sistemi (MMS) ola bilər. Yeri gəlmişkən, xidmət Masası, anbar uçotu, online log, monitorinq də öz-özünə yazılır.

Hər bir avadanlıq üçün belə bir "şəxsi fayl" var.

Biz bununla bağlı öz təcrübələrimizi, o cümlədən UPS infrastrukturunun (şəkildə) bir hissəsini İT yükünə xidmət edən UPS-ə bağışlayan bu infrastrukturun nümunəsindən istifadə edərək nümayiş etdirdik. Bəli, standarta görə, bu cür "ianə" yalnız kondisionerləri və qəza işıqlandırmasını təmin edən infrastruktur avadanlığı ilə həyata keçirilə bilər, lakin İT yükü deyil.

Bundan sonra auditorlar müvafiq bileti Xidmət masasında göstərməyi xahiş ediblər:

Və MMS-də UPS profili:

Ehtiyat hissələri Mühəndislik avadanlıqlarına vaxtında texniki qulluq və qəza təmiri üçün biz öz ehtiyat hissələrimizi və aksesuarlarımızı saxlayırıq. Avadanlıqlar üçün böyük ehtiyat hissələri olan ümumi anbar və mühəndis otaqlarında ehtiyat hissələri olan kiçik şkaflar var (uzağa qaçmaq lazım deyil).

Fotoda: dizel generator dəsti üçün ehtiyat hissələrinin mövcudluğunu yoxlayırıq. 12 filtr saydıq. Sonra MMS-dəki məlumatları yoxladıq.  

Analoji məşq iri ehtiyat hissələrinin saxlandığı əsas anbarda həyata keçirilib: kompressorlar, nəzarətçilər, avtomatlaşdırma, ventilyatorlar, buxar nəmləndiriciləri və yüzlərlə digər əşyalar. İşarələri seçərək yenidən yazdıq və MMS vasitəsilə “zımbaladıq”.

Ehtiyat hissələrinin inventar məlumatları. Qırmızı - Bu çatışmayan və satın alınmalı olan şeydir.

Profilaktik qulluq. Baxım və təmirə əlavə olaraq, UI profilaktik texniki xidmət göstərməyi tövsiyə edir. Potensial qəzanı planlı təmirə çevirməyə kömək edir. Hər bir parametr üçün monitorinqdə eşik dəyərlərini konfiqurasiya edirik. Həddindən artıq olduqda, məsul şəxslər həyəcan siqnalı alır və lazımi tədbirlər görür. Məsələn, biz:

• Elektrik qurğularındakı qüsurları tez bir zamanda aşkar etmək üçün elektrik panellərini termal görüntü cihazı ilə yoxlayırıq: zəif təmas, dirijorun və ya elektrik açarının yerli həddindən artıq istiləşməsi. 
• Soyuducu sistem nasoslarının vibrasiya göstəricilərinə və cari istehlakına nəzarət edirik. Bu, vaxtında sapmaları müəyyən etməyə və tələsmədən əvəz hissələrini planlaşdırmağa imkan verir.
• Dizel generator dəstləri və kompressorların yanacaq və yağ analizlərini edirik.
• Konsentrasiya üçün qlikolun soyuducu sistemində sınaqdan keçiririk.

Təmirdən əvvəl və sonra nasosun vibrasiya diaqramı.

Podratçılarla işləmək. Avadanlıqlara texniki qulluq və təmir işləri xarici podratçılar tərəfindən həyata keçirilir. Bizim tərəfimizdə dizel generator dəstləri, kondisionerlər və onların işinə nəzarət edən UPS üzrə ayrıca mütəxəssislər var. Onlar podratçıların təmir işləri/xidməti üçün lazımi alət və materiallara, peşəkar sertifikatlara, elektrik təhlükəsizliyi sertifikatlarına və icazələrə malik olub-olmadığını yoxlayırlar. Bütün işləri qəbul edirlər.

Kondisionerə texniki qulluq işini qəbul etmək üçün yoxlama siyahısı belə görünür.

Keçid məntəqəsində biz vəsiqələrin podratçıların səlahiyyətli nümayəndələrinə verilib-verilmədiyini, onlara göstərilən vaxtda texniki baxışdan keçib-keçmədiyini və qaydaları oxuyub-oxumadıqlarını yoxlayırıq.

Sənədlər. Sistemlərin və avadanlıqların saxlanması üçün müəyyən edilmiş proseslər döyüşün yarısıdır. Məlumat mərkəzində insanlar tərəfindən həyata keçirilən bütün prosedurlar sənədləşdirilməlidir. Bunun məqsədi sadədir: belə ki, hər şey konkret bir şəxslə məhdudlaşmasın və qəza zamanı istənilən mühəndis aydın göstərişlər götürə və onu aradan qaldırmaq üçün bütün lazımi əməliyyatları yerinə yetirə bilsin.

UI-nin bu cür sənədlər üçün öz metodologiyası var.

Sadə və təkrarlanan fəaliyyətlər üçün standart əməliyyat prosedurları (SOP) qurulur. Məsələn, soyuducunun yandırılması/söndürülməsi və UPS-in yan keçməsi üçün SOP-lar mövcuddur.

Baxım və ya mürəkkəb əməliyyatlar üçün, məsələn, UPS-də batareyaların dəyişdirilməsi üçün texniki xidmət prosedurları (Prosedurların Metodları, MOP) yaradılır. Bunlara SOP-lar daxil ola bilər. Hər bir mühəndislik avadanlığının öz MOP-ları olmalıdır.

Nəhayət, Fövqəladə Əməliyyat Prosedurları (EOPs) - fövqəladə hallar üçün təlimatlar var. Xüsusi fövqəladə halların siyahısı tərtib edilir və onlar üçün təlimatlar yazılır. Qəza əlamətlərini, hərəkətləri, məsul şəxsləri və xəbərdar etməli olan şəxsləri təfərrüatlandıran fövqəladə halların siyahısının bir hissəsi:

• şəhər elektrik təchizatının dayandırılması: dizel generator dəstləri işə salındı ​​/ başlamadı;
• UPS qəzaları; 
• məlumat mərkəzinin monitorinq sistemində qəzalar;
• maşın otağının həddindən artıq istiləşməsi;
• soyuducu sistemin sızması;
• şəbəkə və hesablama avadanlıqlarında nasazlıq;

və s.

Belə bir həcmdə sənədləşmənin tərtib edilməsi özlüyündə əmək tutumlu işdir. Onu yeni saxlamaq daha çətindir (yeri gəlmişkən, bunu auditorlar da yoxlayır). Ən əsası isə işçi heyəti bu təlimatları bilməli, onlara uyğun işləməli və lazım gəldikdə təkmilləşdirmə aparmalıdır.

Bəli, təlimatlar sadəcə arxivlərdə toz toplamaq deyil, lazım ola biləcək yerlərdə mövcud olmalıdır.

Məlumat mərkəzi mühəndis sistemləri üçün texniki xidmət qaydalarına dəyişikliklər haqqında qeydlər.

Audit zamanı onlar həmçinin sistemlər üzrə texniki sənədlərə, icra və işçi sənədlərə, sistemlərin işə salınması aktlarına baxırlar. 

İşarələmə Məlumat mərkəzinin ətrafında gəzərkən, çata bildikləri hər yerdə onu yoxladılar. Çata bilmədikləri yerə pilləkəndən çatdılar :). Biz onun hər bir kommutatorda, maşında və klapanda mövcudluğuna baxdıq. Biz unikallığı, birmənalılığı və qurulmuş sənədlərin mövcud sxemlərinə uyğunluğunu yoxladıq. Aşağıdakı fotoşəkildə: biz yanacaq saxlama nasosu otağındayıq, solenoid klapanlardakı işarələri qurulmuş sənədlərin diaqramı ilə müqayisə edirik. 

Hər şey onunla razılaşdı, ancaq bir parametrdə divardakı yerli "dekorativ" aksonometrik diaqramla üst-üstə düşmədi.

Orada yerləşən sistemlərin diaqramları məlumat mərkəzinin binalarında da yerləşdirilməlidir. Qəza zamanı onlar sizə hər şeyin harada olduğunu tez bir zamanda tapmağa və əsaslandırılmış qərar qəbul etməyə kömək edirlər. Fotoşəkildə, məsələn, əsas kommutator otağında bir xətt diaqramı göstərilir.

Diaqramların aktuallığı aşağıdakı şəkildə yoxlanıldı: onlar diaqramda işarələnmiş elementi adlandırdılar və onu "real həyatda" göstərməyi xahiş etdilər. 

Burada auditor, sonradan kağız və elektron nüsxələrdə tək sətirli diaqramdakı göstəricilərlə müqayisə etmək üçün əsas kommutatorun giriş elektron açarının parametrlərinin (parametrlərinin) fotoşəkillərini çəkir. Maşınlardan birində, QF-3-də göstərici kağız diaqramına uyğun gəlmədi və biz cərimə xalını qazandıq. İndi iki mühəndis tək sətirli diaqramlardakı işarələrin fakta uyğun olub-olmadığını yoxlayacaq.

Bu, auditorların xidmət prosesləri baxımından yoxladıqlarının hamısı deyil. Gündəmdə daha nələr var idi:

• monitorinq sistemi. Burada yaxşı vizuallaşdırma, mobil proqramın mövcudluğu və məlumat mərkəzlərinin dəhlizlərində yerləşdirilən situasiya ekranları ilə karma faydaları qazandıq. Burada necə işlədiyimizi ətraflı yazdıq monitorinqi.

  
  Bu, NORD-4 və saytda işləyən digər məlumat mərkəzlərimizin əsas mühəndislik sistemlərinin vəziyyəti haqqında vizual məlumatı olan MM-dir.

• mühəndis avadanlıqlarının həyat dövrünün planlaşdırılması;
• potensialın idarə edilməsi (potensialın idarə edilməsi);
• büdcələşdirmə (bir az danışdım burada);
• qəzanın təhlili proseduru;
• avadanlıqların qəbulu, istismara verilməsi və sınaqdan keçirilməsi prosesi (sınaqlar haqqında yazdıq burada).

UI başqa nəyə baxırdı?

Təhlükəsizlik və giriş nəzarəti. Audit həmçinin təhlükəsizlik və təhlükəsizlik sistemlərinin işini yoxlayır. Məsələn, auditor girişi olmayan binalardan birinə girməyə çalışdı, sonra bunun girişə nəzarət sistemində əks olunub-olunmadığını və bu barədə mühafizəyə məlumat verilib-verilmədiyini yoxladı (spoiler - bu idi).

Əgər məlumat mərkəzlərimizdə hər hansı bir otağın qapısı iki dəqiqədən çox açıq qalırsa, təhlükəsizlik postunda xəbərdarlıq işə salınır. Bunu yoxlamaq üçün auditorlar qapılardan birini yanğınsöndürənlə açdılar. Düzdür, biz heç vaxt siren almadıq - təhlükəsizlik kameraları vasitəsilə nəyinsə səhv olduğunu gördü və "cinayət yerinə" daha əvvəl gəldi.

Sifariş və təmizlik. Auditorlar toz, xaotik şəkildə uzanan avadanlıq qutularını və binaların nə qədər tez-tez təmizləndiyini axtarırlar. Burada, məsələn, auditorlar ventilyasiya dəhlizindəki naməlum obyektlə maraqlanıblar. Bu, artıq yerini almağa hazırlaşan ventilyasiya sistemindən bir blokdur. Amma yenə də imza atmağımı istədilər.

Həmçinin məlumat mərkəzində sifariş mövzusunda - avadanlıqda fövqəladə iş üçün bütün lazımi alətləri olan bu kabinetlər əsas kommutator otağında yerləşir. 

Yerləşmə. Məlumat mərkəzi yer şəraitinə görə qiymətləndirilir - yaxınlıqda hərbi bazalar, hava limanları, çaylar, vulkanlar və digər təhlükəli obyektlərin olub-olmaması. Şəkildə sadəcə olaraq göstəririk ki, 2017-ci ildəki son sertifikatlaşdırmadan bəri məlumat mərkəzinin ətrafında heç bir nüvə elektrik stansiyası və ya neft anbarı böyüməyib. Lakin orada yeni NORD-5 məlumat mərkəzi tikilir ki, o da Uptime Institute Tier III sertifikatının bütün səviyyələrini keçməli olacaq. Ancaq bu tamamilə fərqli bir hekayədir).

Mənbə: www.habr.com