Здраво, Хабр! Ја сам Тарас Чирков, директор центра података Линкдатацентер у Санкт Петербургу. И данас ћу у нашем блогу говорити о томе какву улогу игра одржавање чистоће собе у нормалном раду модерног центра података, како то правилно измерити, постићи и одржавати на потребном нивоу.
Окидач чистоће
Однажды к нам обратился клиент дата-центра и в Санкт-Петербурге по поводу слоя пыли в нижней части стойки с оборудованием. Это и стало отправной точкой расследования, первые гипотезы которого предполагали следующее:
- прашина улази у серверске собе са ђона ципела запослених у дата центру и клијената,
- доведен кроз вентилациони систем,
- и једно и друго.
Плаве навлаке за ципеле - послате на сметлиште историје
Почели смо са ципелама. У то време проблем чистоће је решаван на традиционалан начин: контејнер са навлакама за ципеле на улазу. Ефикасност приступа није достигла жељени ниво: било је тешко контролисати њихову употребу од стране гостију дата центра, а сам формат је био незгодан. Брзо су напуштени у корист напредније технологије у виду машине за покривање ципела. Први модел таквог уређаја који смо уградили био је квар: машина је пречесто цепала навлаке за ципеле када је покушавала да их обуче, њена употреба је више сметала него олакшавала живот.
Обраћање искуству колега у Варшави и Москви није решило проблем, и на крају је направљен избор у корист технологије спајања термо филма на ципеле. Користећи термални филм, можете ставити "навлаке за ципеле" на ципеле са било којим ђоном - чак и танку женску потпетицу. Да, филм такође понекад склизне, али много ређе од класичних плавих навлака за ципеле, а сама технологија је много погоднија за посетиоца и модернија. Још један важан (за мене) плус је то што филм лако покрива највеће величине ципела, за разлику од традиционалних навлака за ципеле које се цепају када покушавате да их ставите на величину 45. Да би процес био модернији, уградили су канте са аутоматским отварањем поклопца помоћу сензора покрета.
Процес изгледа овако:
Гости су одмах оценили иновацију.
Прашина на ветру
Доводећи у ред најочигледнији канал могућег загађења свемира, ми смо се позабавили суптилнијим стварима - ваздухом. Вероватно је да значајан део прашине због недовољне филтрације улази у серверске просторије кроз вентилацију или се уноси са улице. Или је све у лошем квалитету чишћења? Истрага је настављена.
Одлучили смо да извршимо мерења садржаја честица у ваздуху унутар дата центра и позвали лабораторију специјализовану за праћење квалитета ваздуха у чистим просторијама посебне намене да обави овај посао.
Особље лабораторије је измерило број контролних тачака (20) и направило распоред узорковања како би се пратила динамика и створила најтачнија слика. Трошкови целог процеса лабораторијског мерења били су око милион рубаља, што нам се чинило потпуно непрактичним, али нам је дало низ идеја за самосталну имплементацију. Успут је постало јасно да је лабораторија добра, али анализе морају да се спроводе динамично и стално прибегавање њиховим услугама је крајње незгодно.
Сагледавши планиране активности лабораторије, одлучили смо да погледамо више утилитарне уређаје за самосталан рад. Као резултат тога, успели смо да пронађемо алат неопходан за овај задатак - анализатор квалитета ваздуха. Овако:
Уређај показује садржај честица различитих пречника (у микрометрима).
Редефинисање стандарда
Овај уређај анализира број честица, температуру, влажност и приказује резултате у мерним јединицама према ИСО стандардима за овај параметар. Дисплеј приказује нивое честица различитих пречника у узорку ваздуха.
Истовремено су направили грешку са филтерима: у то време су користили моделе филтера Г4 унутар серверских соба. Овај модел обезбеђује грубо пречишћавање ваздуха, па је претпостављена могућност да недостају честице које доводе до загађења. Одлучили смо да за тестирање набавимо фине филтере Ф5, који се користе у системима за климатизацију и вентилацију као филтери другог степена (после третмана).
Истрага је спроведена - можете започети контролна мерења. Одлучили смо да као водич користимо захтеве стандарда ИСО 14644-1 за број суспендованих честица.
Класификација чистих просторија према броју суспендованих честица.
Рекло би се - измерите и упоредите према табели. Али није све тако једноставно: у пракси се показало да је прилично тешко пронаћи стандарде чистоће ваздуха за серверске собе центара података. Ово није експлицитно наведено нигде, од стране било које организације или индустријског института. И само на интерном форуму Уптиме Инсиде Трацк (приступ му је доступан особама које су завршиле обуку у програмима Уптиме Институте) одвојена је дискусија на ову тему. На основу резултата његовог проучавања, били смо склони да се фокусирамо на стандард ИСО 8 - претпоследњи у класификацији.
Већ прва мерења су показала да смо сами себе потценили – резултати унутрашњих испитивања ваздуха показали су усаглашеност са захтевима ИСО 5 у унутрашњим просторијама, што је значајно премашило стандарде које желе учесници Уптиме Инсиде Трацк. Истовремено, са великом маргином. Имамо дата центар, а не биолошку лабораторију, наравно, али да би концентрација честица у ваздуху била једнака ИСО 8, он мора бити објекат бар класе „цементара”. А како се исти стандард може применити на центар података није баш јасно. Истовремено смо добили резултат на ИСО 5 мерењем при филтрирању ваздуха помоћу Г4 филтера. То јест, прашина не може ући у полице кроз ваздух, Ф5 филтери су се показали сувишним, а нису ни коришћени.
Негативан резултат је и резултат: наставили смо са потрагом за узроком загађења у другим правцима, а праћење квалитета ваздуха је укључено у тромесечне провере, комбиновано са прегледима БМС сензора верификованим уређајима (захтеви ИСО 9000 и ревизије купаца).
Испод је пример извештаја који се попуњава на основу података добијених током мерења. За већу тачност мерења се врше са два уређаја - Тесто 610 и БМС сензором. Заглавље табеле приказује граничне вредности за уређаје. Одступања у наведеним параметрима се аутоматски означавају бојом како би се олакшала идентификација проблематичних подручја или временских периода.
Код нас је све јасно: разлика у индикаторима уређаја је минимална, а концентрација честица је много нижа од максималне границе.
Кроз задњи улаз
Пошто су поред главног улаза за купце постојали и други улази у чисте просторије где смо инсталирали машину за покривање ципела, и даље је постојала потреба да се спречи улазак прљавштине у центар података кроз њих.
Незгодно је стављати/скидати навлаке за ципеле током поступака истовара опреме, па смо пронашли аутоматску машину за чишћење ђона. Погодан, функционалан, али људски фактор утиче на то у виду опционог приступа овом уређају. У суштини исто као и са навлакама за ципеле на главном улазу.
Да би решили проблем, почели су да траже опције чишћења које се нису могле избећи: лепљиви теписи са одвојивим слојевима најбоље су се носили са овим. Током процеса ауторизације на улазним вратима, посетилац мора да стоји на таквој простирци, уклањајући вишак прашине са ђона својих ципела.
Чистачи скидају горњи слој таквог тепиха сваки дан, укупно има 60 слојева - довољно за око 2 месеца.
Након што сам, између осталог, посетио Ерицссонов дата центар у Стокхолму, приметио сам како се ови проблеми решавају тамо: заједно са слојевима који се одвајају, у Шведској се користе вишекратни антибактеријски теписи Дицем. Идеја ми се допала због принципа поновне употребе и могућности да се обезбеди велико подручје покривања.
Магични антибактеријски тепих. Штета, није авион, али могао је бити – по тој и таквој цени!
Са муком смо пронашли представнике компаније у Русији и проценили цену решења за наш дата центар. Као резултат тога, добили смо цифру која је била скоро 100 пута скупља од решења са вишеслојним теписима - отприлике исти милион рубаља као у пројекту са мерењем чистоће ваздуха. Поред тога, постало је јасно да је неопходно користити посебне производе за чишћење, природно доступни само од овог произвођача. Решење је такође нестало само од себе, одлучили смо се за вишеслојну опцију.
Физички посао
Посебно бих скренуо пажњу да све ове мере нису укинуле коришћење рада чистача. У припреми за сертификацију Линкдатацентер дата центра по стандарду Уптиме Институте Манагемент & Оператионс, било је неопходно јасно регулисати поступање запослених у сервису за чишћење на територији дата центра. Састављена су детаљна упутства у којима је прописано где, шта и како треба да раде.
Пар извода из упутства:
Као што видите, све је прописано, буквално сваки аспект рада у конкретној просторији, средства за чишћење, материјали итд прихватљиви за употребу. Ниједан детаљ не остаје без пажње, чак ни најмањи. Упутство – потписује сваки службеник сервиса. У сервер собама, електричним просторијама итд. уклањају се само у присуству овлашћених запослених у дата центру, на пример, дежурног инжењера.
Али то није све
Такође укључено у листу мера за гарантовање чистоће у дата центру: обиласци са визуелним прегледом просторија, укључујући недељне прегледе регала за откривање остатака жице у њима, остатака амбалаже од опреме и компоненти. За сваку такву епизоду отвара се инцидент, а клијент добија обавештење о потреби отклањања прекршаја у најкраћем могућем року.
Такође, направили смо засебну просторију за распакивање и постављање опреме - то је такође део политике чишћења компаније.
Још једна мера коју смо научили из Ериксонове праксе је одржавање константног притиска ваздуха у серверским просторијама: притисак унутар просторија је већи него споља, тако да нема унутрашњег промаја – о овом решењу ћемо детаљније говорити у посебном чланку.
Коначно, набавили смо себи роботске асистенте за просторије које су искључене са листе расположивих за посету спремачима.
Решетка на врху не само да даје +10 заштити робота, већ и спречава да се заглави испод вертикалних носача каблова регала.
Неочекивано откриће као закључак
Чистоћа у дата центру је важна за рад серверске и мрежне опреме која увлачи ваздух кроз њега. Прекорачење дозвољених нивоа прашине ће довести до накупљања прашине на компонентама и укупног повећања температуре до 1 степен Целзијуса. Прашина смањује ефикасност хлађења, што може резултирати значајним индиректним трошковима годишње и такође утицати на толеранцију грешака објекта у целини.
Ово може бити спекулативна претпоставка, али стручњаци Уптиме Института који су сертификовали центар података Линкдатацентер према стандарду квалитета менаџмента и операција посвећују највећу пажњу чистоћи. А још пријатније је било добити најласкавије оцене у овој области: наш дата центар у Санкт Петербургу озбиљно превазилази захтеве за сертификацију. Експерт института нас је назвао „најчистијим дата центром који је видео“, штавише, наш дата центар користи Уптиме као пример како да се реши проблем чистих серверских соба. Такође, лако пролазимо било коју ревизију клијента по овом параметру - најозбиљнији захтеви најкаприциознијих клијената су преко сваке мере задовољени.
Вратимо се на почетак приче. Одакле контаминација према самој жалби са почетка чланка? Део клијентовог рек-а који је био повод за покретање целог пројекта „чисто у дата центру” био је контаминиран од тренутка увоза река и инсталирања у дата центар. Клијент није очистио рацк до уношења у серверску собу – приликом провере суседних рекова који су истовремено инсталирани, показало се да је и тамо иста ситуација са прашином. Ова ситуација је подстакла додавање ставке контроле чишћења на контролну листу за инсталацију сталка клијента. Такође никада не треба заборавити на вероватноћу таквих ствари = унапред упозорен је наоружан. Ово је све о „чистоћи и диктатури“ у нашем дата центру у следећем чланку ћу говорити о сензорима притиска, али за сада постављајте питања у коментарима.
Извор: ввв.хабр.цом