Ми з колегами подумали: чому б перед улюбленим хорор-святом замість успіхів та цікавих проектів не згадати всяких жахів, з якими стикаються люди у цодобудівництві. Отже, вимкніть світло, увімкніть тривожну музику, зараз будуть історії, від яких ми досі іноді прокидаємось у холодному поті.
Привид офісу
В одній офісно-офісній будівлі ми робили серверну, і будь-яку автоматику для кліматичних систем, у тому числі - шторки з приводами. На даху стоїть метеостанція, що визначає, з якого боку сонце світить, і прикриває шторки, якщо надто яскраво. Об'єкт здали та забули, через деякий час дзвонять, запитують:
— А ви не могли б штори розавтоматизувати назад? Ми хочемо все самі закривати.
- Чому?!
— У нас прибиральниці лякаються. Та й ми теж таке відчуття, що там привид.
Саме так виглядає страшний сон фахівця з автоматики: спочатку замовник хоче автоматику та енергоефективність, ти йому це все радісно робиш, а потім з'ясовується, що керівник любить керувати сам. І в кімнаті, де повністю автоматизовано керування кліматом, у результаті все працює у ручному режимі.
Ми в кабінетах всяких топів часто робимо тач-панель, з якою можна керувати сценаріями освітлення, кондиціонером, вентиляцією, шторками. Один особливо консервативний топ сказав: не хочу алгоритми, хочу дві кнопки: "включити все" та "вимкнути все". Приїжджав програміст, плакав, прибираючи стандартний інтерфейс керування, малював замість нього дві кнопки та їхав плакати додому.
А де у нас дизелі?
Темної-темної ночі, у темній темній кімнаті техмена Олега задзвонив мобільник.
— У нас тут у дизельній установці температура рідини, що охолоджує, занадто велика. Зараз принтскрін надішлю.
То був диспетчер ЦОДу, який ми місяць тому із чистою душею здали. Його не збентежило ні те, що на дворі три години ночі, ні те, що система показувала ту саму «температуру» в дизелі та в приміщенні. Тому що це була взагалі не температура, а код помилки "немає зв'язку з датчиком". Олег чесно сказав диспетчеру, куди йому варто вирушити вночі з такими запитами. Буквально:
— Сходи до дизелів, глянь, швидше за все, в датчику просто батарейка села. Батарейний модуль у дизелях живить цю панель управління, там є рубильник — якщо хтось із ваших його чіпав, його треба повернути назад.
Взагалі диспетчер — це саме та людина, яка має знати об'єкт як досвідчений фрезерувальник свої три пальці, але тут прозвучало дивовижне запитання:
- А дизеля - вони де?
— Піднімися на другий поверх, спитай у електриків, вони тебе відведуть.
Наступні 20 хвилин Олег віддалено працював навігатором, намагаючись звести диспетчера та електриків, які не дуже хотіли влаштовувати комусь екскурсії посеред ночі.
Кругообіг зірочок у ЦОДі
У тридев'ятому царстві, тридесятій державі накрився в нас якось на . Саме за три години до проходження сертифікації в Uptime Institute. Довго казку казати, що таке чиллера та частотники, якщо не знаєте. Тож просто повірте: вони мають працювати, як куранти, інакше сертифікація перетвориться на гарбуз, а замовник — на злу мачуху. І, найприкріше, матиме рацію, адже за візит комісії шалені гроші беруть, і якщо щось піде не так, ніхто їх назад не поверне.
Примчав сервісник вендора, розвів руками і сказав, що пацієнт швидше мертвий, а чекати на нову плату не менше місяця. Комісія вже на порозі, виходів небагато. Перший — відкрутити частотник із «здорового» чиллера і поставити на «хворий», а потім міняти місцями доки випробування не закінчаться. Це не читерство, якщо що: за регламентом тестування однаково один із трьох чилерів резервуючий, тому сценарій цілком робочий. Другий вихід — спробувати знайти новий частотник за півтори години, що залишилися. Зателефонували до нашого холодильника в Москві. Холодник набрав знайомому всередині російського представника вендора. Той, у свою чергу, натиснув на представництво виробника в Голландії і через півгодини нам вже прикручували нову плату. Сертифікація пройшла на ура.
Недоробки
Чи довго, чи коротко, але на будівництві завжди настає момент, коли йдуть усі субчики і залишаються вони: недоробки. Це про незавершені роботи, а не про тих, хто їх залишив, якщо що. Хто останній – той і розгрібає.
Робили ми якось ЦОД у підвалі: стійки у два ряди, вирівняні по одному з країв, щоб двері відчинялися. Через це між одним рядом та стіною утворився зазор, і замовник через цей зазор відмовлявся акт приймання підписувати. Техмен з менеджером проекту з ранку раніше ганяли в «Леруа» за пінопластом, фарбою, кріпленнями та сумлінно зашпаровували зазор, щоб був у тон зі стійками. Здали.
А одного разу після відходу суміжників з опалення виявилася в проекті нестиковка: радіаторів має бути 7, а їх 6. Сходили, порахували — все вірно, вони справді не дотягли в коридор один радіатор. Пити «Боржомі» пізно, все вже змонтовано та опресовано. Замовник посипає голову попелом, тому що акти вже підписані. Знову врятував «Леруа» — купили там електрообігрівач, дотягли до коридору групу кабелів і в неділю вранці змонтували самі, замовник щасливий.
Ще нам одного разу залишили чарівне ніщо замість протипожежної перегородки. У ЦОД повітропровід припливної вентиляції з другого поверху йде до підвалу, через кімнату, яка за протипожежною класифікацією відноситься до іншої категорії, ніж над і під нею. На практиці це означає, що в повітроводі має бути вогнезатримуючий клапан, а навколо нього — протипожежна перегородка. Навколо нашого сяючого повітроводу з вогнезатримуючим клапаном була дірка, вгадайте, хто і як її зашпаровував? «Леруа Мерлен» не спонсорував цю посаду, а шкода.
Дейл Карнегі нервово курить
Давним-давно, коли трава була зеленіша, а долар був по 30 із чимось, робили ми ЦОД для одного банку в історичному центрі Москви. Вкластися треба було в дуже стислий термін. Але вулички там вузькі, отвори біля будівлі теж підняти кілька тонн обладнання на потрібний поверх сходами — практично неможливо. Сказали замовнику, що треба вантажити краном прямо на дах, замовник відповів на кшталт «ти ковбой — ти й стрибай». Ну, то є хороша ідея, а тепер погодьте приїзд 120-тонного крана з інстанціями типу ДІБДР. І бажано ще вчора. Успіхів у починаннях, не встигнете — штраф.
Ситуація патова, час підтискає, і ми вирішили ризикнути, зрештою, штрафи ДІБДР порівняно зі штрафами за недотримання термінів просто квіточки. Суботнього ранку пригнали 16-метровий кран, сподіваючись, що встигнемо зробити все швидко. Через кілька годин приїхав дільничний і несміливо запитав дозвіл. У нас його, звичайно, немає. І невідомо, як би все закінчилося, якби при нас не виявився продажник із неабиякими дипломатичними здібностями.
Він відвів дільничного набік, 5 хвилин йому щось пояснював, полісмен за цей час кілька разів змінився в особі, але в результаті сів у свій уазик і крикнув, що, якщо щось трапиться, він сам приїде і нам допоможе. Що там були за аргументи, продажник досі не колеться.
Підніміть мені, люди!
За горами, за полями, але в межах Третього транспортного, стояла ... ні, не хатинка, а цілком серйозне урядове будівництво. Складна нічна зміна, відвантажуємо обладнання. Остання вантажівка з 15-тонною залізницею в кузові виїжджає на єдине на території перехрестя, щось із гучним звуком лопається, і махина сідає дном у багнюку. 5 ранку, будівництво потроху оживає, водій бетономішалки позаду нашої вантажівки, згадуючи занепалих жінок, недвозначно цікавиться: чи не зволимо ми забратися з дороги? У нього, мовляв, бетон холоне. А ми б і раді, бо о 7-й ранку приїде один із численних заступників одного з міністрів і, якщо побачить це неподобство, прилетить усім: від інженерів до топів.
Техмен біжить до місцевого кранівника, слізно просить підняти з кузова залізницю, щоб ми змогли під неї іншу вантажівку підсунути. А той у жодну, навіть за гроші. Ситуацію виправив наш інженер — домовився через керівника кранівника. Залізяку ми таки довезли куди треба, але вже трохи сиві.
А потім стали сиві, на тому ж об'єкті. Стався епікфейл у самому буквальному значенні.
Є така штука: телескопічний навантажувач. Його використовують, коли на будівництві розвернутися ніде, а вантаж потрібно підняти нагору і поставити акуратно. Нам за його допомогою потрібно було через яму розвантажити 1,5-тонний модуль у вікно. Нічого не віщувало: за специфікацією машина мала витримувати 2 тонни з гаком. Але коли до вікна залишалося рівно півметра, «вилочки» біля навантажувача обламалися, і залізниця навернулася з висоти. Робити нема чого — дзвонимо виробнику, щоб приїхав, провів відновлювальні роботи. Їхні сервісники приїхали і... відмовилися заходити на будівництво. Бо йти туди треба було стежкою, а на стежці стоїть екскаватор і копає. Ми звичні: почекав 10 секунд, поки стріла повернута в протилежний від стежки бік, і побіг. А хлопців це шокувало. Довелося піднести цю особливість як захоплюючий атракціон, такий собі «Форт Боярд», і модуль вони нам таки полагодили.
Негайна карма
Незабаром казка дається взнаки, і нескоро справа робиться, особливо коли йдеться про підписання актів приймання-передачі виконаних робіт. Збудували ми якось чудовий ЦОД для однієї компанії. Але вирішив цар-батюшка-замовник влаштувати нам останнє випробування:
— У вас у специфікації написано 100 гайок на лоток, а я нарахував 97. Виправляйте специфікації та кошториси чи я нічого підписувати не буду.
І вирушали ми щоразу за тридев'ять земель, і рахували з царем-батюшком хором то кріплення для повітроводів, то гайки, то болти. Щоразу виявлялося, що не 97, а 99 і т. д. І не було нам спокою. У результаті накатали стільки внутрішніх витрат, що наше керівництво не витримало. Сказали: нехай роблять, що хочуть, більше туди нікому не їздити. Так і лишилися без підписів.
…А через рік замовник приходить сам і чемно-ввічливо питає, де йому розписатися? Виявилося, прийшла лічильна палата, а в нього невраховане обладнання на суму з сімома нулями.
Вінгардіум левіоса!
Жив та був один добрий замовник, і вирішив він собі купити стару будівлю під ЦОД. Тільки недовго його радість тривала: недобре почало відбуватися в акумуляторній. Покликав він тоді нас на допомогу, на диво подивитися та проконсультувати. Приїжджаємо в гості, заходимо в акумуляторну, а там стіни над підлогою левітують з трьох боків. Ще б пак: 4 тонни АКБ просто поставили на підлогу — він і почав під землю йти. Це з акумуляторами часто проблема: важливо правильно розрахувати навантаження на конструкції і передбачити розвантажувальні рами, щоб перекриття як картковий будиночок не склалися.
Але вишнею на торті архітектурного кошмару в цій будівлі була повна відсутність фундаменту. Стіни тупо стояли на піщаній стяжці, під якою — не найприязніший ґрунт. Стали думати, як рятувати пацієнта, в результаті запропонували складну систему силікатизації: це коли ґрунт буриться в декількох місцях і туди нагнітається розчин, що зміцнює. На колишні висоти підлога це не повернуло, але хоч провалюватися перестав.
Битва двох йокодзун
У деякому царстві, в деякій офісній державі ми робили диспетчеризацію: для дата-центру на одному з поверхів, для управління кліматом — для всього. Десятки шаф автоматики, кілометри слаботочного кабелю!
Особливістю того офісу був власний SPA-комплекс із сауною. Коли ми розробляли проект, передбачалося, що користуватися парилкою будуть нечасто. Але інженер припускає, а замовник має в своєму розпорядженні: керівний склад так втягнувся в ЗОЖ, що сауну про всяк випадок перестали вимикати взагалі - занадто довго прогрівається.
Підсумок: автоматика детектує підвищення температури від сауни - включає сильніше кондиціонер, щоб компенсувати. Допомагає так собі. Кондиціонер продовжує надриватися — атмосфера загострюється, бо автоматика не підозрює, що хтось може стільки паритися. Кондей впадає в параною, вирішує: «Справа не в них, справа в мені. Усі зусилля марні. Здається, я зламаний», — про що повідомляє на пульт диспетчера. Диспетчер зітхає та тисне кнопку «завдання знято». І так кожен божий день.
Легким рухом руки
Багато ще у засіках у нас історій, та не всі вони тут помістяться. Ось три останні оповіді: про криві руки.
Оповідь перший про те, як ми в одному будинку крім серверної робили опору повітря в ліфтові холи і шахти. Зробили, пішли з об'єкта, почекали, доки інший підрядник закінчить оздоблювальні роботи, повернулися на випробування системи. Запускаємо підпір - фальшстеля різко надується, плити з гуркотом вилітають на підлогу і все за секунду дизайнується в стиль «лофт». Виявилося, хлопці, які монтували стелю, забули покласти плити з перфорацією для повітря. Вони взагалі не здогадалися про їхнє існування, просто брали з відкритої пачки — і все, на упаковку з перфорованими не звернули уваги, в проект не дивилися.
Епос другий теж про стелю. В одному ЦОДі був досить вузький коридор, а повітрообмін у приміщенні зі стелажами АКБ мав бути неслабким, тому вздовж стелі йшли комунікації. Добрі молодці, що робили фальшстелю, не стали морочитися і ... вкрутили кріплення підвісів прямо в наші нещасні повітропроводи. Будь-який повітропровід і так трошки вібрує під час роботи вентустановок, а коли в ньому купа дірок і нерівностей, звуки Апокаліпсису вам забезпечені. Відважили ми славним витяям-монтажникам тоді таких цілющих люлів, що рани на повітроводах чудово затяглися. За їхній рахунок, зрозуміло.
Третя оповідь сталася, коли ми робили автоматику для системи технологічного кондиціювання. Ми вручили підряднику замовника температурний датчик і без задньої думки попросили поставити його на калорифер у приточення. У припливних установках завжди є нагрівач для вуличного повітря: або водяний або електричний. Ця чудова людина виконала все беззаперечно. Тобто взяв і вкрутив шуруп прямо в трубку водяного калорифера, що з усіма звідси (у прямому розумінні) випливають. Добре, що на об'єкті були кондиціонери із МАПП газом — текти швидко спаяли.
Посилання:
- Писати якщо що сюди: [захищено електронною поштою]
Джерело: habr.com