Здравей, Хабр! Аз съм Тарас Чирков, директор на центъра за данни Linxdatacenter в Санкт Петербург. И днес в нашия блог ще говоря за това каква роля играе поддържането на чистота в стаята в нормалната работа на модерен център за данни, как правилно да го измерваме, да го постигнем и поддържаме на необходимото ниво.
Чистота на задействане
Един ден клиент на център за данни в Санкт Петербург се свърза с нас относно слой прах на дъното на стелаж за оборудване. Това стана отправната точка на разследването, чиито първи хипотези предполагат следното:
- прахът навлиза в сървърните помещения от подметките на обувките на служителите и клиентите на центъра за данни,
- вкаран през вентилационната система,
- и двете.
Сините калъфи за обувки - изпратени на бунището на историята
Започнахме с обувки. По това време проблемът с чистотата беше решен по традиционния начин: контейнер с покривала за обувки на входа. Ефективността на подхода не достигна желаното ниво: беше трудно да се контролира използването им от гостите на центъра за данни, а самият формат беше неудобен. Те бързо бяха изоставени в полза на по-модерна технология под формата на машина за покривала за обувки. Първият модел на такова устройство, което инсталирахме, беше провал: машината твърде често късаше калъфите за обувки, когато се опитваше да ги постави на обувките, използването му беше по-досадно, отколкото улесняваше живота.
Обръщането към опита на колегите от Варшава и Москва не реши проблема и в крайна сметка изборът беше направен в полза на технологията за сливане на термичен филм върху обувки. С помощта на термофолио можете да поставите „калъфи за обувки“ на обувки с всякаква подметка - дори и на тънък дамски ток. Да, филмът също понякога се изплъзва, но много по-рядко от класическите сини калъфи за обувки, а самата технология е много по-удобна за посетителя и по-модерна. Друг важен (за мен) плюс е, че фолиото лесно покрива и най-големите размери обувки, за разлика от традиционните калъфи за обувки, които се късат при опит за поставяне на 45 номер. За да направят процеса по-модерен, те инсталираха кошчета с автоматично отваряне на капака с помощта на сензор за движение.
Процесът изглежда така:
Гостите веднага оцениха иновацията.
Прах във вятъра
След като подредихме най-очевидния канал за възможно замърсяване на космоса, се заехме с по-фините неща - въздуха. Вероятно значителна част от праха навлиза в сървърните помещения чрез вентилация поради недостатъчна филтрация или се внася от улицата. Или всичко е заради лошото качество на почистването? Разследването продължи.
Решихме да направим измервания на съдържанието на частици във въздуха в центъра за данни и поканихме лаборатория, специализирана в мониторинга на качеството на въздуха в специални чисти помещения, за да извърши тази работа.
Персоналът на лабораторията измери броя на контролните точки (20) и създаде график за вземане на проби, за да проследи динамиката и да създаде най-точната картина. Цената на пълния процес на лабораторно измерване беше около 1 милион рубли, което ни се стори напълно непрактично, но ни даде редица идеи за самостоятелно изпълнение. По пътя стана ясно, че лабораторията е добра, но анализите трябва да се извършват динамично и непрекъснатото прибягване до техните услуги е изключително неудобно.
След като разгледахме планираните дейности на лабораторията, решихме да разгледаме по-утилитарни устройства за самостоятелна работа. В резултат на това успяхме да намерим необходимия инструмент за тази задача - анализатор на качеството на въздуха. Като този:
Устройството показва съдържанието на частици с различен диаметър (в микрометри).
Предефиниране на стандарти
Това устройство анализира броя на частиците, температурата, влажността и извежда резултатите в мерни единици според ISO стандартите за този параметър. Дисплеят показва нивата на частици с различни диаметри във въздушната проба.
В същото време те направиха грешка с филтрите: по това време те използваха G4 филтърни модели в сървърните стаи. Този модел осигурява грубо пречистване на въздуха, така че се допуска възможността за липсващи частици, водещи до замърсяване. Решихме да закупим за тестване фини филтри F5, които се използват в климатични и вентилационни системи като филтри втори етап (последващо третиране).
Разследването е извършено - можете да започнете контролни измервания. Решихме да използваме изискванията на стандарта ISO 14644-1 за броя на суспендираните частици като ориентир.
Класификация на чистите помещения според броя на суспендираните частици.
Изглежда - измервайте и сравнявайте според таблицата. Но не всичко е толкова просто: на практика се оказа доста трудно да се намерят стандарти за чистота на въздуха в сървърните стаи на центъра за данни. Това не е изрично посочено никъде, от нито една организация или индустриален институт. И само във вътрешния форум Uptime Inside Track (достъпът до него е достъпен за лица, които са завършили обучение в програмите на Uptime Institute) имаше отделна дискусия по тази тема. Въз основа на резултатите от неговото изследване бяхме склонни да се спрем на стандарта ISO 8 - предпоследният в класификацията.
Още първите измервания показаха, че сме се подценили - резултатите от тестовете на вътрешния въздух показаха съответствие с изискванията на ISO 5 във вътрешните помещения, което значително надхвърли стандартите, желани от участниците в Uptime Inside Track. При това с голям марж. Имаме център за данни, а не биологична лаборатория, разбира се, но за да бъде концентрацията на частици във въздуха равна на ISO 8, той трябва да е обект поне от клас „циментов завод“. И как същият стандарт може да се приложи към център за данни не е много ясно. В същото време получихме резултат при ISO 5, като направихме измервания при филтриране на въздуха с филтри G4. Тоест прахът не може да влезе в стелажите през въздуха, филтрите F5 се оказаха излишни и дори не бяха използвани.
Отрицателният резултат също е резултат: продължихме търсенето на причината за замърсяването в други посоки, като мониторингът на качеството на въздуха беше включен в тримесечни проверки, съчетани с проверки на BMS сензори от проверени устройства (изисквания на ISO 9000 и одити на клиенти).
По-долу е даден пример за отчет, който се попълва въз основа на данните, получени по време на измерването. За по-голяма точност измерванията се извършват с два уреда - Testo 610 и BMS сензор. Заглавието на таблицата показва граничните стойности за устройствата. Отклоненията в посочените параметри се маркират автоматично в цвят, за да се улесни идентифицирането на проблемни зони или времеви периоди.
При нас всичко е ясно: разликата в показателите на уредите е минимална, а концентрацията на частици е много по-ниска от максималната граница.
През задния вход
Тъй като имаше други входове към чистите стаи освен основния вход за клиенти, където инсталирахме машината за покриване на обувки, все още имаше нужда да се предотврати навлизането на мръсотия в центъра за данни през тях.
По време на процедурите за разтоварване на оборудването е неудобно да се поставят/свалят банели, затова намерихме автоматична машина за почистване на подметки. Удобен, функционален, но човешкият фактор го засяга под формата на незадължителен подход към това устройство. По същество същото като с покривките за обувки на главния вход.
За да решат проблема, те започнаха да търсят възможности за почистване, които не могат да бъдат избегнати: лепкавите килими с отделящи се слоеве се справят най-добре с това. По време на процеса на упълномощаване на входните врати посетителят трябва да стои върху такава постелка, като премахва излишния прах от подметките на обувките си.
Почистващите откъсват горния слой на такъв килим всеки ден, има общо 60 слоя - достатъчно за около 2 месеца.
След като посетих центъра за данни на Ericsson в Стокхолм, наред с други неща, забелязах как тези проблеми са решени там: заедно с разкъсващите се слоеве в Швеция се използват антибактериални килими Dycem за многократна употреба. Хареса ми идеята заради принципа на повторно използване и възможността за осигуряване на голяма площ на покритие.
Вълшебен антибактериален килим. Жалко, не самолет, но можеше – на такава и такава цена!
Трудно намерихме представители на компанията в Русия и оценихме цената на решението за нашия център за данни. В резултат на това получихме цифра, която беше почти 100 пъти по-скъпа от решението с многослойни килими - приблизително същите 1 милион рубли като в проекта с измервания на чистотата на въздуха. Освен това стана ясно, че е необходимо използването на специални почистващи препарати, естествено налични само от този производител. Решението също изчезна от само себе си, спряхме се на многослоен вариант.
Ръчен труд
Особено искам да обърна внимание на факта, че всички тези мерки не отмениха използването на труда на чистачите. При подготовката за сертифициране на центъра за данни Linxdatacenter съгласно стандарта Uptime Institute Management & Operations беше необходимо ясно да се регламентират действията на служителите на услугата за почистване на територията на центъра за данни. Бяха изготвени подробни инструкции, в които се разписваше къде, какво и как трябва да се направи.
Няколко извадки от инструкциите:
Както можете да видите, всичко е предписано, буквално всеки аспект от работата в конкретно помещение, почистващи препарати, материали и т.н., допустими за използване. Нито един детайл не остава без внимание, дори и най-малкият. Инструкция – подписана от всеки обслужващ служител. В сървърни помещения, електрически помещения и др. премахват се само в присъствието на оторизирани служители на центъра за данни, например дежурен инженер.
Но това не е всичко
Включени в списъка с мерки за гарантиране на чистотата в центъра за данни: обходи с визуална проверка на помещенията, включително ежеседмични проверки на стелажи за откриване на остатъци от кабели, оставени в тях, остатъци от опаковки от оборудване и компоненти. За всеки такъв епизод се отваря инцидент и клиентът получава известие за необходимостта от отстраняване на нарушенията възможно най-скоро.
Също така, създадохме отделна стая за разопаковане и настройка на оборудването - това също е част от политиката за почистване на фирмата.
Друга мярка, която научихме от практиката на Ericsson, е поддържането на постоянно въздушно налягане в сървърните помещения: налягането вътре в помещенията е по-голямо от това навън, така че няма вътрешно течение - ще говорим за това решение по-подробно в отделна статия.
Най-накрая се сдобихме с роботизирани асистенти за помещения, които са изключени от списъка на достъпните за посещение от почистващия персонал.
Решетката отгоре не само дава +10 на защитата на робота, но и го предпазва от заклещване под вертикалните кабелни скари на стелажите.
Неочаквана находка като заключение
Чистотата в центъра за данни е важна за работата на сървърното и мрежовото оборудване, което изкарва въздух през него. Превишаването на допустимите нива на прах ще доведе до натрупване на прах върху компонентите и общо повишаване на температурата с до 1 градус по Целзий. Прахът намалява ефективността на охлаждане, което може да доведе до значителни непреки разходи на година и също така да повлияе на устойчивостта на грешки на съоръжението като цяло.
Това може да е спекулативно предположение, но експертите от Uptime Institute, които сертифицираха центъра за данни Linxdatacenter по стандарта за качество на Management & Operations, обръщат най-голямо внимание на чистотата. И беше още по-приятно да получим най-ласкателните оценки в тази област: нашият център за данни в Санкт Петербург сериозно надхвърля изискванията за сертифициране. Експерт от института ни нарече „най-чистият център за данни, който е виждал“, освен това нашият център за данни се използва от Uptime като пример за това как да се реши проблемът с чистите сървърни стаи. Също така, ние лесно преминаваме всеки клиентски одит по този параметър - най-сериозните изисквания на най-капризните клиенти се задоволяват безупречно.
Да се върнем към началото на историята. Откъде идва заразата според самото оплакване от началото на статията? Частта от стелажа на клиента, която беше причината за стартирането на целия проект "чисти в центъра за данни", беше замърсена от момента, в който стелажът беше импортиран и инсталиран в центъра за данни. Клиентът не е почистил стелажа до момента на внасянето му в сървърното помещение - при проверка на съседни стелажи, инсталирани по същото време, се оказа, че там ситуацията с прах е същата. Тази ситуация подтикна добавянето на контролен елемент за почистване към контролния списък за инсталиране на стелаж на клиента. Също така никога не трябва да забравяме за вероятността от подобни неща = предупреденият е предварително въоръжен. Това е всичко за „чистота и диктатура“ в нашия център за данни; в следващата статия ще говоря за сензори за налягане, но засега задавайте въпроси в коментарите.
Източник: www.habr.com