Прывітанне, Хабр! Я Тарас Чыркоў, дырэктар ЦАД Linxdatacenter у Санкт-Пецярбургу. І сёння ў нашым блогу я раскажу пра тое, якую ролю ў нармальнай працы сучаснага дата-цэнтра іграе падтрыманне чысціні ў памяшканні, як правільна яе вымяраць, дасягаць і падтрымліваць на патрэбным узроўні.
Трыгер чысціні
Аднойчы да нас звярнуўся кліент дата-цэнтра ў Санкт-Пецярбургу з нагоды пласта пылу ў ніжняй частцы стойкі з абсталяваннем. Гэта і стала адпраўной кропкай расследавання, першыя гіпотэзы якога меркавалі наступнае:
- пыл трапляе ў серверныя залы з падэшваў абутку супрацоўнікаў і кліентаў дата-цэнтра,
- заносіцца праз сістэму вентыляцыі,
- і тое і іншае.
Сінія бахілы - на звалку гісторыі
Пачалі з абутку. На той момант праблема чысціні вырашалася традыцыйным спосабам: кантэйнер з бахілы пры ўваходзе. Эфектыўнасць падыходу не дасягала жаданага ўзроўню: кантраляваць іх выкарыстанне гасцямі ЦАД было цяжка, а сам фармат - нязручны. Хутка адмовіліся на карысць больш прасунутых тэхналогій у выглядзе бахільнай машыны. Першая ўсталяваная ў нас мадэль такога апарата правалілася: машына занадта часта рвала бахілы пры спробе надзець іх на абутак, яе выкарыстанне больш ятрыла, чым палягчала жыццё.
Зварот да вопыту калег у Варшаве і Маскве не вырашыў задачу, і ў выніку выбар быў зроблены на карысць тэхналогіі наплаўлення тэрмаплёнкі на абутак. З дапамогай тэрмаплёнкі можна надзець "бахілы" на абутак з любой падэшвай - аж да тонкага жаночага абцаса. Так, плёнка таксама, бывае, саслізгвае, але куды радзей, чым класічныя сінія бахілы, а сама тэхналогія - у разы зручней для наведвальніка і сучасней. Яшчэ важны (для мяне) плюс – плёнка лёгка пакрывае самыя вялікія памеры абутку, у адрозненні ад традыцыйных бахілаў, якія ірвуцца пры спробе надзець іх на 45-й памер. Для мацнейшай сучаснасці працэсу ўсталявалі скрыні з аўтаматызаваным адкрыццём вечка па датчыку руху.
Выглядае гэты працэс так:
Госці адразу ацанілі навіну.
Пыл на ветры
Давёўшы ў парадак найбольш відавочны канал магчымага забруджвання прасторы, мы ўзяліся за больш тонкія матэрыі - за паветра. Цалкам верагодна, што значная частка пылу паступае ў серверныя праз вентыляцыю з прычыны недастатковага фільтравання, ці заносіцца з вуліцы. Ці ўся справа ў нізкай якасці ўборкі? Расследаванне працягнулася.
Мы вырашылі ўзяць замеры ўтрымання часціц у паветры ўнутры дата-цэнтра і запрасілі для правядзення гэтых работ лабараторыю, якая спецыялізуецца на кантролі якасці паветра ў чыстых памяшканнях спецыяльнага прызначэння.
Супрацоўнікі лабараторыі замералі колькасць кантрольных кропак (20), склалі расклад агароджы проб для адсочвання дынамікі і стварэння максімальна дакладнай карціны. Кошт поўнага працэсу замераў лабараторыяй склала каля 1 млн. руб., што падалося нам зусім немэтазгодным, аднак дало шэраг ідэй для самастойнай рэалізацыі. Адначасна стала зразумела, што лабараторыя - гэта добра, але аналізы трэба праводзіць у дынаміцы і пастаянна звяртацца да іх паслуг вельмі нязручна.
Паглядзеўшы на плануемыя дзеянні лабараторыі, вырашылі паглядзець на больш утылітарныя прылады для самастойнай працы. У выніку нам атрымалася знайсці неабходную для дадзенай задачы прылада - аналізатар якасці паветра. Вось такі:
Прыбор паказвае змест часціц рознага дыяметра (у мікраметрах).
Пераглядаючы стандарты
Гэты прыбор аналізуе колькасць часціц, тэмпературы, вільготнасці і паказвае вынікі ў адзінках вымярэння адпаведна са стандартамі ISO па дадзеным параметры. На дысплеі бачныя ўзроўні ўтрымання часціц з рознымі дыяметрамі ў спробе паветра.
Паралельна грашылі на фільтры: на той момант выкарыстоўвалі ўсярэдзіне серверных памяшканняў мадэлі фільтраў G4. Гэтая мадэль забяспечвае грубіянскую ачыстку паветра, таму дапушчалі верагоднасць пропуску часціц, якія прыводзілі да забруджвання. Вырашылі закупіць на спробу фільтры тонкай ачысткі F5, якія ўжываюцца ў сістэмах кандыцыянавання і вентыляцыі ў якасці фільтраў другой ступені ачысткі (даачысткі).
Расследаванне правялі - можна прыступаць да кантрольных замераў. У якасці арыентыру вырашылі выкарыстаць патрабаванні стандарта ISO 14644-1 па колькасці ўзважаных часціц.
Класіфікацыя чыстых памяшканняў па колькасці ўзважаных часціц.
Здавалася б - вымярай і параўноўвай па табліцы. Але не ўсё так проста: на практыцы аказалася дастаткова цяжка знайсці стандарты чысціні паветра для серверных памяшканняў ЦАД. У відавочным выглядзе гэта нідзе не прапісана, ніводнай арганізацыяй або галіновым інстытутам. І толькі на ўнутраным форуме Uptime Inside Track (доступ да яго маюць асобы, якія прайшлі навучанне па праграмах Uptime Institute) знайшлася асобная дыскусія на гэтую тэму. Па выніках яе вывучэння схіліліся да арыентацыі на стандарт ISO 8 - перадапошні ў класіфікацыі.
Першыя ж замеры паказалі, што мы сябе недаацэньвалі - вынікі праверак унутранага паветра далі адпаведнасць патрабаванням ISO 5 ва ўнутраных памяшканнях, што значна перавышала жаданыя ўдзельнікамі Uptime Inside Track нарматывы. Пры гэтым - з вялікім запасам. У нас дата-цэнтр, а не біялагічныя лабараторыя, вядома, але, каб канцэнтрацыя часціц у паветры была роўная ISO 8 - гэта павінен быць аб'ект класа мінімум "цэментны завод". І як можна ўжываць той жа стандарт да дата-цэнтра - не вельмі зразумела. Пры гэтым, вынік на ISO 5 мы атрымалі, робячы замеры пры фільтрацыі паветра фільтрамі G4. Гэта значыць, пыл у стойкі праз паветра пападаць не можа, фільтры F5 апынуліся залішнімі, і іх нават не сталі ўжываць.
Адмоўны вынік - таксама вынік: мы працягнулі пошукі прычыны забруджвання ў іншых напрамках, а кантроль якасці паветра ўключылі ў штоквартальныя праверкі, сумясціўшы з праверкамі датчыкаў BMS паверанымі прыладамі (патрабаванні ISO 9000 і аўдытаў кліентаў).
Ніжэй – прыклад справаздачы, якая запаўняецца на падставе дадзеных, атрыманых пры замеры. Для большай дакладнасці замеры вырабляюцца двума прыборамі - Testo 610 і датчыкам БМС. У шапцы табліцы пазначаны гранічныя значэнні для прыбораў. Адхіленне паказаных параметраў аўтаматычна вылучаецца колерам для палягчэння ідэнтыфікацыі праблемных участкаў ці часавых перыядаў.
У нас усё выразна: розніца ў паказчыках прыбораў мінімальная, а канцэнтрацыя часціц нашмат ніжэй лімітавай мяжы.
Праз чорны ўваход
Бо ў чыстыя памяшканні меліся яшчэ і іншыя ўваходы апроч галоўнага ўваходу для кліентаў, дзе мы ўсталявалі бахільную машыну, заставалася неабходнасць выключэння траплення бруду ў ЦАД праз іх.
Апранаць/здымаць бахілы падчас працэдур па разгрузцы абсталявання няёмка, таму знайшлі аўтамат для чысткі падэшваў. Зручна, функцыянальна, але адбіваецца чалавечы фактар у выглядзе неабавязковасці падыходу да гэтага апарата. Па сутнасці, тое самае, што з бахіламі на галоўным уваходзе.
Для рашэння задачы сталі шукаць варыянты ачысткі, ад якіх нельга ўхіліцца: з гэтым лепш за ўсё спраўляліся ліпкія дываны з якія адлучаюцца пластамі. Падчас аўтарызацыі каля ўваходных дзвярэй, наведвальнік абавязкова ўстае на такі кілімок, выдаляючы лішні пыл з падэшваў свайго абутку.
Прыбіральшчыцы адрываюць верхні пласт такога кілімка кожны дзень, усяго ў ім 60 пластоў - хапае прыкладна на 2 месяцы.
Наведаўшы ЦАД Ericsson у Стакгольме, у ліку іншага я звярнуў увагу на тое, як вырашаюць гэтыя пытанні там: нараўне з адрываць пластамі ў Швецыі выкарыстоўваюць шматразовыя антыбактэрыйныя дываны Dycem. Ідэя спадабалася з-за прынцыпу шматразовасці выкарыстання і магчымасці забяспечыць вялікі пляц пакрыцця.
Чароўны антыбактэрыйны дыван. Шкада, не самалёт, а мог бы - па такім кошце!
З цяжкасцю знайшлі ў Расіі прадстаўнікоў кампаніі і зрабілі ацэнку кошту рашэння для нашага дата-цэнтра. У выніку атрымалі лічбу амаль у 100 разоў даражэй рашэнні з шматслойнымі дыванамі - прыкладна той жа самы 1 млн рублёў, што і ў праекце з замерамі чысціні паветра. Акрамя таго, высветлілася неабходнасць выкарыстання спецсродкаў для ачысткі, натуральна, даступных толькі ў гэтага вытворцы. Рашэнне таксама адпала само сабою, спыніліся на шматслойным варыянце.
Ручная праца
Асабліва хацелася б звярнуць увагу, што ўсе названыя меры не адмянялі выкарыстанне працы прыбіральшчыц. У рамках падрыхтоўкі да атэстацыі ЦАД Linxdatacenter па стандарце Uptime Institute Management & Operations патрабавалася дакладна рэгламентаваць дзеянні супрацоўнікаў службы клінінгу на тэрыторыі ЦАД. Былі складзеныя падрабязныя інструкцыі, якія прадпісваюць, дзе, што і якім чынам ім неабходна рабіць.
Пара вынятак з інструкцыі:
Як бачна, прапісваецца ўсё, літаральна кожны аспект працы ў канкрэтным памяшканні, дапушчальныя для выкарыстання чысцячыя сродкі, матэрыялы і г.д. Без увагі не застаецца ніводная дэталь, нават самая дробная. Інструктаж - пад подпіс кожнага супрацоўніка службы. У серверных памяшканнях, электра-памяшканнях і г.д. яны прыбіраюцца толькі ў прысутнасці ўпаўнаважаных супрацоўнікаў ЦАДа, напрыклад, дзяжурнага інжынера.
Але і гэта яшчэ не ўсё
Таксама ў пераліку мер, якія гарантуюць чысціню ў ЦАД: абыходы з візуальным аглядам памяшканняў, у тым ліку штотыднёвыя агляды стоек на прадмет выяўлення пакінутых усярэдзіне іх абрэзкаў правадоў, рэштак упаковак ад абсталявання і кампанентаў. Па кожным такім эпізодзе заводзіцца інцыдэнт, кліент атрымлівае апавяшчэнне аб неабходнасці ўхілення парушэнняў у найкароткія тэрміны.
Таксама, для распакавання і налады абсталявання намі створаны асобны пакой - гэта таксама частка клінінгавай палітыкі кампаніі.
Яшчэ адна мера, якую мы запазычылі з практыкі Ericsson падтрыманне сталага падпора паветра ў серверных памяшканнях: усярэдзіне памяшканняў ціск больш, чым звонку, каб не было цягі ўнутр аб гэтым рашэнні падрабязней распавядзем у асобным матэрыяле.
Нарэшце, мы завялі сабе робатаў-памочнікаў для памяшканняў, якія выключаны з пераліку даступных для наведвання клінінгавым персаналам.
Рашотка зверху не толькі дае 10 да абароны робата, але і дазваляе яму не захрасаць пад вертыкальнымі кабельнымі латкамі стоек.
Нечаканая знаходка як выснова
Чысціня ў ЦАД важна для эксплуатацыі сервернага і сеткавага абсталявання, якое цягне паветра праз сябе. Перавышэнне дапушчальных паказчыкаў запылення прывядзе да навалы пылу на кампанентах і сумарнаму павышэнню тэмпературы ў межах да 1 градуса па Цэльсіі. Пыл зніжае эфектыўнасць астуджэння, што ў пераліку на год можа абарочвацца прыкметнымі ўскоснымі выдаткамі, а таксама ўплываць на адмоваўстойлівасць аб'екта ў цэлым.
Можна сказаць, што гэта абстрактнае дапушчэнне, але эксперты Uptime Institute, якія праводзілі сертыфікацыю ЦОДа Linxdatacenter па стандарце якасці аперацыйнага кіравання (Management & Operations) надаюць самую сур'ёзную ўвагу чысціні. І тым прыямнейшае было атрымаць па гэтым кірунку самыя пахвальныя адзнакі: патрабаванні сертыфікацыі наш дата-цэнтр у Пецярбургу сур'ёзна перавышае. Эксперт інстытута назваў нас "самым чыстым ЦАДам, які ён бачыў", больш за тое, наш ЦАД выкарыстоўваецца Uptime у якасці прыкладу вырашэння пытання з чысцінёй серверных памяшканняў. Таксама, мы з лёгкасцю праходзім любы кліенцкі аўдыт па гэтым параметры - самыя сур'ёзныя патрабаванні самых капрызных кліентаў задавальняюцца з перавышэннем.
Вернемся да пачатку гісторыі. Адкуль жа ўзяліся забруджванні па той самай скарзе з пачатку артыкула? Тая частка стойкі кліента, якая стала прычынай запуску ўсяго праекта "чысціня ў ЦАД", была забруджана з моманту ўвозу і ўстаноўкі стойкі ў дата-цэнтр. Кліент не ачысціў стойку да моманту ўвозу ў сервернае памяшканне - пры праверцы суседніх стоек, устаноўленых у той жа час, высветлілася, што там з пылам тая ж самая сітуацыя. Гэтая сітуацыя паслужыла падставай для дадання пункта кантролю ачысткі ў кліенцкі чэк-ліст па ўстаноўцы стойкі. Аб верагоднасці падобных рэчаў таксама ніколі нельга забываць = папярэджаны, значыць, узброены. Гэта ўсё пра «чысціню і дыктатуру» ў нашым ЦАД, у наступным артыкуле раскажу пра датчыкі ціску, а пакуль задавайце пытанні ў каментарах.
Крыніца: habr.com