Адразу скажу: той пацук у прывезеным серверы, якую мы пару гадоў таму адпаілі гарбатай пасля ўдару токам, хутчэй за ўсё, збегла. Бо мы ўбачылі неяк на абходзе яе сяброўку. І адразу вырашылі паставіць ультрагукавыя адпужвальнікі.
Цяпер вакол дата-цэнтра праклятая зямля: на будынак не садзяцца птушкі, і, мусіць, збеглі ўсе краты і чарвякі. Турбаваліся, што выклікаць выхад са строю HDD, але праверылі, частоты не тыя.
Наступная гісторыя значна весялей. Мы неяк атрымалі жалязяку за пару мільёнаў рублёў у скрынцы з датчыкамі нахілу, вібрацыі і вільготнасці. Усё цэлае. Акуратна знялі пакаванне, а жалязяка гнутая. Містыка.
Корпус прама дугой. Прыгожа так.
дэтэктыў
Мы б не надалі гэтаму значэння, таму што выгінасты металічны корпус быў амаль дызайнерскай выявай. Прыгожа так, без сколаў. І калі б не іншыя такія ж жалязякі побач, мы б на распакаванні нават не падумалі, што нешта не так. Але побач былі такія ж, толькі больш правільнай геаметрычнай формы.
На шчасце, распакаванне такога жалеза здымаецца на відэа (рэкамендую ўсім завесці такую звычку), таму ўдалося даказаць вытворцу, што яна такой прыехала. Цэлая ўпакоўка і акуратна сагнуты корпус - гэта не ўдар ад грузчыкаў. Хутчэй за ўсё гэта яна пашкодзілася яшчэ да выезду ў Расію.
Вендар кажа: «Эээ, хлопцы, а давайце мы яе вам адразу па гарантыі памяняем». І тут нас чакала эпічная засада.
Справа ў тым, што мытня дазваляе ўвозіць нам такое абсталяванне па дакументах без права экспарту. То бок, можна прывезці, але перапрадаваць камусьці за межы Расіі нельга. Калі мы адпраўляем назад згарэлы блок харчавання, напрыклад, усё зразумела. Гэта запчастка, блок харчавання.
А тут спатрэбілася адправіць назад усё:
- Хлопцы, глядзіце, мы жалязяку назад вытворцу адпраўляем.
- Абсталяванне цалкам?
- Так.
- Мадэль вось такая?
- Так.
- Можа працаваць?
- Не ведаем, не ўключалі.
- Значыць, гэта цэлае абсталяванне.
- Ну, яна ж не працуе.
- Ну глядзіце, цэлае абсталяванне вось такой мадэлі. Без права рээкспарту. Не пусцім.
Увогуле, было шмат прысяданняў, перш чым разабраліся, што мы яго не экспартуем, а аддаём зваротна. У выніку ўдалося ўсё зрабіць.
Яшчэ былі бахільніцы
У нас спачатку шмат гадоў таму была першая аўтаматычная, мара адміна. Загружаеш туды бахілы пачкам, яна іх сама распакоўвае, адчыняе і ставіць у становішча, дзе трэба толькі наступіць. Чпок-чпок і гатова.
Прыкладна праз паўгода яна перажавала каля ста пачкаў бахілаў і падавілася. Аказалася, там столькі рухомых частак, што трэба або рамантаваць яе раз у месяц на нашай нагрузцы (у нас вельмі шмат інжынераў-заказчыкаў па аб'екце ходзіць, таму што мы камерцыйны ЦАД), або ж трэба купляць новую.
Другая праблема ў тым, што потым на адной з рэгулярных уборак мы неяк знайшлі «сіненькую анучку», якая боўтаецца на рашотцы адной са стоек свайго тэстынгу. Судмедэксперт у асобе інжынера ікс-каманды апазнаў фрагмент цела бахілы. Аказалася, што гэта ў паліклініцы з бахіламі зручна: паўгадзіны пахадзіў - і ўсё. А некаторыя інжынеры могуць цэлы дзень працаваць з жалезам. Шоргаючы нагамі. Моцна шоргаючы. І бахілы пры гэтым сціраюцца ў гэтыя вось маленькія шматкі, якія лётаюць па машзале.
Мы амаль адразу купілі новую бахільніцу. Узялі термобахильницу: гэта машына, у якую зараджаецца плёнка, і яна гэтую плёнку акуратна тэрмаўсаджвае па-над чаравіком. Прыгожа, эфектыўна, трывала. Менш разлятаецца. Даволі доўга яна ў нас стаяла, але трэба было прыкладна раз у 1-2 гадзіны мяняць парніковай плёнкі, таму што падэшва мела ўласцівасць адвальвацца сама.
Мы спачатку думалі, што гэта нам не шанцуе, а ў людзей неяк гэтая праблема вырашаецца. Але не. Спыталі заходніх калегаў - тая ж гісторыя. У выніку сталі думаць, як жа зрабіць нармальна. Вяртацца з машзала за новымі бахіламі - ідэя, прама скажам, так сабе. Знайшлі прамысловыя ачышчальнікі для будпляцовак і вытворчасцей. Гэта нешта накшталт дарожак, па якіх у цэх заходзіць змена. Дарожкі з кучай ролікаў чысцяць усё, і зроблены так, што хочаш ці не - зловіць і пачысціць. Яны каштуюць па паўмільёна-мільёны рублёў. Мы пакалупаліся і знайшлі такую ж за 200 тысяч, але нагу ў яе трэба соваць самому. Па габарытах падобная на машынку для чысткі абутку. Падыходзіш, пхаеш туды нагу, яна яе жуе і аддае назад чыстай. Паставілі на ўваходзе ў ЦАД.
Працуе выдатна за выключэннем двух нюансаў. Першы - даволі хутка высветлілася, што гэта яна нам, інжынерам нармальна. А на практыцы ў ЦАД прыходзяць паглядзець самыя розныя людзі, сярод якіх - топы буйных кампаній. З абуткам са скуры з дупы дракона. А ў іх нават для нанясення крэму на абутак шчотка каштуе даражэй, чым мае трэніровачныя красоўкі, яны там спецыяльна ворс падбіраюць. Яны-то і адмаўляліся пхаць ногі ў наш цуд-дэвайс. Другая праблема ўзнікла зімой: калі абутак прамы вось вельмі ў месіве, ён з глыбокага пратэктара можа дастаць не ўсё. Потым ходзіш па зале, пакідаеш сляды эктаплазмы.
Вырашылі проста. Паставілі побач рулонную бахільніцу. Усё роўна ў нас усё трэба дубліраваць па стандарце.
Узнікла новая праблема. Назіраючы за паводзінамі інжынераў-заказчыкаў, мы бачылі такую карціну: яны спачатку савалі нагу ў машыну для ачысткі, а потым чаплялі бахілы з рулоннай бахільніцы. Цяпер павесілі таблічку, што альбо тое, альбо іншае, і лепш ачысціцца, але калі жыццёвыя прынцыпы забараняюць чысціць абутак, то апранайце бахілы. Накшталт тыкет, які быў на пару дзён, а расцягнуўся надоўга, зачыніўся. Вось прылада:
Два разы "ку"
Па патрабаваннях PCI DSS, трэба мець магчымасць візуальна адрозніваць ролі людзей, якія знаходзяцца ў ЦАД. Не прыглядаючыся да пропуску і чытаючы там нешта, а прамы візуальна, як вайскоўцы адзін аднаго адрозніваюць па пагонах, толькі яшчэ ярчэй. Мы вырашылі не вылузвацца і выкарыстоўвалі стары добры чатланскі метад - каляровую дыферэнцыяцыю штаноў. Канкрэтна - сталі рабіць стужкі пропускаў рознага колеру. Зялёны як свой каханы адразу забралі нашы адміны.
Гучыць проста, але гэта выклікала тры нечаканыя эфекты:
- Патрэбны былі ретракторы для аўтаматычнага ўцягвання гэтых пропускаў пры нашэнні (гэта такія штукі, якія самі рэгулююць даўжыню стужкі). Мы напісалі ТЗ, дзе ўлічылі ўсе пажаданні ўсіх дэпартаментаў. Гэта была стратэгічная памылка. Колер, фармат, матэрыял, рэтрактар не пластыкавы, лёска з металу, каб логава нанесці, каб ён быў ушыты ў стужку. Штукі атрымаліся такімі дарагімі, што прыйшлося потым парэзаць патрабаванні і памяняць фармат.
- Калі дыферэнцыяцыя штаноў зарабіла, стала вельмі зручна. У падрадчыкаў адны стужкі, у вонкавых адмінаў іншыя, у нашых адмінаў трэція. Відаць, у каго якая роля. У электрыку - толькі шэрыя, у кандыцыянаванні - сінія. І тут спатрэбіліся стужачкі для кіроўцаў (гэта асобная роля, яны могуць заходзіць у зону разгрузкі, але не могуць яе пакідаць акрамя як вонкі). Пры гэтым пропуску вадзіцелям не трэба. Спачатку мы ім давалі стужачкі без пропускаў. Потым бяспечнікі вырашылі, што гэта зусім дзіўна і зневажае чалавечую годнасць кіроўцаў. У іх свая ваенная логіка, таму зараз вадзіцелі прыходзяць атрымліваць пропуск адразу са стужкай, але гэты пропуск нікуды не пускае. З пункту гледжання аховы атрымліваецца маркер, што ахова гэтага чалавека праверыла.
- Адзін з нашых інжынераў прапанаваў замест стужкі зрабіць форменныя швэдры зялёнага колеру. І адправіў рацыяналізатарскую прапанову. Зрабілі напалову: пропускі са стужкай пакінулі, плюс яшчэ сапраўды пашылі зялёныя форменныя швэдры. Цяпер у нас ёсць уніформа адміна. Бяспекі падтрымалі жарт і ўнеслі яго ў рэгламенты. Цяпер яна абавязковая (штаны, кашуля, швэдар, але швэдар можна здымаць).
Яшчэ нашы замоўцы часта скардзіліся на крывыя маршруты ў картах да ўезду ў наш дата-цэнтр «Кампрэсар». Забіваеш адрас, а дарога паказваецца няправільна. Наведвальнікі ў выніку зарульвалі не туды, таму што там чыгунка, а за ёй пробка, і там не разгарнуцца. Спачатку мы хацелі павесіць паказальнікі над дарогай. Ёсць такая паслуга ў горада - пад звычайнымі паказальнікамі размясціць жоўтыя дадатковыя, яны лічацца рэкламай. І кошт на іх як на рэкламу: на шашы Энтузіястаў адна таблічка абыходзіцца ў мільён рублёў за год. Паралельна мы напісалі ў Яндэкс, і яны нават раптоўна адказалі. І перасталі агіднічаць. Нават можна паказаць дыёды варот: уезд праз адну, выезд праз іншую.
Google, калі вы нас чытаеце, то ведайце: у вас праблема ўсё яшчэ ёсць, і мы не ведаем, каму пра гэта сказаць, каб нас пачулі.
У лісты-запрашэнні ўставілі спасылкі не проста на адрас, а на адрас з маршрутам ад геапазіцыі карыстальніка. У выніку прамахвацца сталі менш.
Гоба-праектары і іншыя дробязі
Вось вы ведаеце, што такое габа-праектары? Мы таксама не ведалі. Неяк думалі, як маркіраваць шэрагі стоек. Самі стойкі, натуральна, прамаркіраваны спецыяльнымі хутказдымнымі маркіроўкамі, але іх відаць з адлегласці 1-2 метры. Сама зала 500 кв.м, таму заблудзіцца там ёсць дзе. Таму ўсё ж такі падступіліся да маркіроўкі радоў. Пачаўся брэйнштарм. Як маркіраваць, чым і куды? На падлозе, на сцяне, паказальнікі на столі і т.д. І тут наш калега ўбачыў, што ў «Ікеі» на падлозе раней былі сціраюцца налепкі, а потым з'явіліся светлавыя стрэлачкі. Ну мы вырашылі адрэверсіць простым спосабам: пайсці ў «Икею» і вывярнуць адзін з праектараў паглядзець. Дастаць яго не ўдалося: пакуль мы насілі крэслы, прадавец спытаўся, што мы робім. І адразу дапамог, сказаўшы, што гэта габа. Аказваецца, гэта не сам праектар, а пласціна ці лінза для каляровага малюнка. Вось гэты святлафільтр і ёсць габо. Адзін праектар каштуе ад 40 тысяч рублёў (там магутная лямпа для дзённага выкарыстання), а ў нас 14 шэрагаў у кожным з чатырох машзалаў. Таму паклеілі налепкі.
Яшчэ ў нас схемы на сценах з гадамі выцвітаюць. Мы іх памянялі на ламінаваныя, з «ўшытымі» спецыяльнымі кішэнямі для рэвізора. Рэвізорра ў нашым выпадку - гэта галоўны інжынер, у абавязкі якога ўваходзіць праверка на актуальнасць усіх схем, размешчаных у ЦАД. Дык вось, усе схемы павінны штогод правярацца і падпісвацца такім рэвізора. А наяўнасць спецыяльнага маленькага часопіса ў кішэні схемы робіць гэтую працэдуру прасцей і не патрабуе замены самай схемы кожныя тры гады. Профіт!
Рабілі ротарную чыстку фальшполу звонку. У нас ёсць уборкі рэгулярныя, ёсць методыкі і час правядзення ўборак. Але ад колаў цяжкіх стоек застаюцца сляды. Зрабілі чыстку. Цяпер нервуемся: моцна акуратней з выгляду не стала, затое з'явіліся блікі пад пэўнымі ракурсамі ў пэўных людзей, ну ў якіх свае фламастары на свой густ. Зараз задумаліся і шукаем нейкую хімію, якая выбяліць падлогу і надасць глянец. Каб нават у абраных пытанняў не было.
Бачылі кансольныя стойкі? Гэта якія раз'язныя фуршэтныя столікі, толькі замест напояў тамака тэрмінал для падлучэння ў стойку. Дык вось у гэтых кансольных стоек колы адвальваюцца і кліняць, як у калясак у супермаркеце. Дастала нас неймаверна. У выніку адзіны магчымы спосаб рэанімаваць - купіць новае кола. А колы дастаць менавіта да нашых мадэляў ужо не адбылося, мы ўсіх падрадчыкаў апыталі. У выніку самі спраектавалі стойку пад сябе, робячы акцэнт на зручнасць перамяшчэння па машзале і ремонтопригодность. Вельмі добрае атрымалася.
Была гісторыя з сінтэтычнымі шкарпэткамі. Ёсць такая штука - антыстатычныя бранзалеты. Гэта калі ты падыходзіш да стойкі, падлучаеш бранзалет да зямлі на стойцы, і ён злучаецца з сістэмай раўнавання патэнцыялаў. Дык вось, стойка-то заземлена, але можа аказацца, што інжынер не заземлены. Калегі з мінулых месцаў працы расказвалі, як пару разоў бачылі іскры на відэаназіранні, і мы ў сябе вырашылі ад граху абавязаць усіх прама па рэгламенце карыстацца.
Крытычныя інцыдэнты
З сур'ёзнага - была сітуацыя, калі разам адсеклі ўсе чылеры. Чылеры ў нас не абаронены КБС, таму што мы верым у фізіку, і ў якасці рэзерву па тэмпературы ў нас басейн з захопленай вадой. Калі нешта адключаецца, патрэбны не батарэі для харчавання чылераў, якія астуджаюць ваду, а проста сама халодная вада, ужо гатовая. Зручна і проста, але ёсць нюанс. На чылерах варта ахоўная аўтаматыка, якая пры небяспечных параметрах электрычнай сеткі іх адключае. Калі ўвод адключаецца, мы ўключаем ДДУ, і далей чылеры сілкуюцца ад іх. Усё б добра, калі б мы жылі не ў Расіі. У нас шмат разоў былі прасадкі сеткі, але ўсё было добра. А вось аднойчы скачок быў рэзкі спачатку ўніз, потым рэзка ўверх, потым зноў уніз - за некалькі секунд параметры ўводу мяняліся прыкладна ў 4 разы. Чылеры адключыліся, натуральна. Мы іх спачатку паспрабавалі ўключыць аддалена, але яны абаранілі сябе вельмі надзейна, па-аварыйнаму. Прыйшлося змене ісці ножкамі на дах і ўключаць іх уручную. Што важна, па TierIII-стандарту, такая сітуацыя - гэта легітымная прычына прыпынку ЦАД. У нас прыпынку не было, таму што людзі на месцах з галавой, і ёсць муштра з вучэннямі. За гэта нас UI сноша проста рэгулярна, каб быць упэўненымі пра TIII Operational. Калі што, мы прайшлі рэсертыфікацыю UI на TIII Gold – Operational Sustainability. На расійскім камерцыйным рынку дата-цэнтраў нічога страмчэй няма, акрамя нашага такой жа ачыўкай валодае ўсяго адзін . Адзначу, што рэсертыфікавацца цяжэй, чым атрымаць сертыфікат з нуля, паколькі яны правяраюць яшчэ мінулы перыяд як не ў сабе, і доказаў патрабуецца куды больш.
Быў цікавы інцыдэнт з камерамі. Вырашылі пералічыць сляпыя зоны на ўсялякі выпадак, намалявалі скрыжаванні, пабудавалі дыяганалі кутоў агляду на плане, і раптам знайшлі мёртвую зону прыкладна 30 сантыметраў на 15 метраў прама ў цэнтры адной з зал. Вузкая і доўгая. У суседняй залі такой няма. Аказалася, што паваротная камера павольна ссунулася за гады так, што стала паказваць прыкладна на паўтара градуса лявей, чым трэба ў крайнім становішчы.
Яшчэ вялікі выпадак быў у пасце .
Спасылкі
- и
- Мая пошта: [электронная пошта абаронена]
Крыніца: habr.com