S kolegama smo se zapitali: zašto bismo prije omiljenog horor blagdana umjesto uspjeha i zanimljivih projekata ne prisjetili raznih horor priča s kojima se ljudi susreću u gradnji data centara. Dakle, ugasite svjetlo, pustite uznemirujuću glazbu, sada dolaze priče od kojih će vas i dalje ponekad probuditi hladan znoj.
Duh u uredu
U jednoj zgradi smo projektirali server kabinet i raznu automatizaciju za klimatske sustave, uključujući i sjenila s motorima. Na krovu se nalazi meteorološka stanica koja određuje s koje strane sija sunce i zatvara sjenila ako je previsoko svjetlo. Projekt je završen i zaboravljen, a nakon određenog vremena zovu i pitaju:
— Ne biste li mogli sjeila ponovno automatizirati? Želimo sve zatvarati sami.
— Zašto?!
— Naše čistačice se boje. I mi se također – imamo osjećaj da je unutra duh.
Eto kako izgleda noćna mora automate specijalista: prvo klijent želi automatizaciju i energetsku efikasnost, vi mu to radosno realizirate, a zatim ispadne da menadžer voli sve raditi sam. I u prostoriji gdje je potpuno automatizirana klimatska kontrola, na kraju se sve obavlja ručno.
U raznim kancelarijama šefova često izrađujemo touch panel s kojim se može upravljati scenarijima osvjetljenja, klima uređajem, ventilacijom, sjenilima. Jedan posebno konzervativni šef je rekao: ne želim algoritme, želim dva dugmeta: "uključi sve" i "isključi sve". Programer je došao, plakao dok je uklanjao standardno sučelje upravljanja, nacrtao umjesto toga dva dugmeta i otišao kući plakati.
A gdje su nam dizeli?
Tamne, tamne noći, u mračnoj sobi tehničara Olega zazvonio je mobitel.
— Ovdje imamo previsoku temperaturu rashladne tekućine u dizelskoj instalaciji. Sada ću poslati printscreen.
Bio je to dežurni operater data centra kojeg smo pred mjesec dana savjesno predali. Nije ga zbunilo što je vani tri sata u noći, niti to što je sustav prikazivao istu "temperaturu" u dizelu i u prostoriji. Jer to nije bila temperatura, već kod greške "nema veze s senzorom". Oleg je iskreno rekao dežurnom operateru gdje bi mu bilo najbolje otići noću s takvim pitanjima. Doslovno:
— Idi do dizela, pogledaj, najvjerojatnije se samo baterija u senzorima ispraznila. Baterijski modul u dizelima napaja ovu upravljačku ploču, ima prekidač — ako ga je netko od vas pomakao, treba ga vratiti nazad.
U stvari, dispečer je upravo ta osoba koja treba poznavati objekt kao iskusan rezač svoje tri prsta, ali ovdje je postavljeno nevjerojatno pitanje:
— A gdje su dizeli?
— Popni se na drugi kat, pitaj electrician, oni će ti pokazati.
Sljedećih 20 minuta Oleg je daljinski bio navigator, pokušavajući spojiti dispečera i električare, koji baš i nisu željeli organizirati ekskurzije nekome usred noći.
Ciklus problema u Data Centru
U nama poznatom kraljevstvu, u tridesetom kraljevstvu, dogodilo se da nam je na . Točno tri sata prije polaganja certifikacije u Uptime Institute. Neću duljiti priču o tome što su hladnjaci i frekvencijski regulatori, ako ne znate. Dakle, jednostavno vjerujte: trebaju raditi kao satovi, inače će certifikacija postati bundeva, a naručitelj — zla maćeha. I, što je najteže, bit će u pravu, jer se za posjet komisije traže ogromni novci, i ako nešto krene naopako, nitko ih neće vratiti.
Servisni tehničar iz tvrtke je stigao, podigao ruke i rekao da je pacijent bliže smrti, a čekati novu ploču traje najmanje mjesec dana. Komisija je već na pragu, opcija nema mnogo. Prva — skinuti frekvencijski regulator s "zdravog" hladnjaka i staviti na "bolesni", a zatim ih zamijeniti dok ispitivanja ne završe. To nije prevara, ako što: prema pravilniku testiranja jedan od tri hladnjaka je uvijek rezervni, pa je scenarij posve izvediv. Druga opcija — pokušati pronaći novi frekvencijski regulator u preostalih sat i pol. Nazvali smo našeg hladioničara u Moskvi. Hladioničar je nazvao poznanik u ruskom predstavništvu. Ovaj je, zauzvrat, pritisnuo predstavništvo proizvođača u Nizozemskoj i… za pola sata nam je već montirana nova ploča. Certifikacija je prošla savršeno.
Nedovršeni radovi
Bilo kratko ili dugo, ali na gradilištu uvijek dođe trenutak kada svi podizvođači odu i ostane samo ovo: nedovršeni radovi. To se odnosi na neizvršene poslove, a ne na one koji su ih ostavili, samo da se zna. Tko je zadnji — taj i čisti.
Jednom smo napravili podatkovni centar u podrumu: regali u dva reda, poravnati na jednom kraju tako da se vrata mogu otvoriti. Zbog toga je između jednog reda i zida nastala praznina, a kupac je odbio potpisati primopredajni zapis zbog te praznine. Tehničar s projektnim menadžerom rano ujutro su jurili u 'Leroy Merlin' po stiropor, boju, pričvrsne elemente i pažljivo su zatvorili prazninu kako bi se uklopila u ton regala. Predali smo.
A jednom, nakon odlaska suseda za grijanje, otkrivena je nesukladnost u projektu: trebala su biti 7 radijatora, a bilo ih je 6. Otišli smo, prebrojali — sve je točno, stvarno nisu dovukli jedan radijator u hodnik. Prekasno je za pijenje 'Borjomi', sve je već montirano i testirano. Kupac si posipa glavu pepelom jer su dokumenti već potpisani. Ponovo nas je spasio 'Leroy Merlin' — kupili smo tamo električni grijač, dovukli grupu kablova u hodnik i u nedjelju ujutro sami montirali, kupac sretan.
Jednom su nam ostavili čarobnu prazninu umjesto protupožarne pregrade. U podatkovnom centru cijev za dotok zraka s drugog kata ide u podrum, kroz prostoriju koja po protupožarnoj klasifikaciji pripada drugoj kategoriji od onih iznad i ispod nje. U praksi to znači da u cijevi mora biti protupožarni ventil, a oko njega — protupožarna pregrada. Oko naše sjajne cijevi s protupožarnim ventilom bila je rupa, pogodite tko i kako ju je zatvorio? 'Leroy Merlin' nije sponzorirao ovu objavu, a šteta.
Dale Carnegie nervozno puši.
Davno, kada je trava bila zelenija, a dolar je bio oko 30 i nešto, radili smo podatkovni centar za jednu banku u povijesnom središtu Moskve. Trebalo je sve završiti u vrlo kratkim rokovima. Ali ulice su uske, otvori zgrade također, podići nekoliko tona opreme na odgovarajući kat stepenicama — praktički nemoguće. Rekli smo kupcu da treba utovariti kranom ravno na krov, kupac je odgovorio u stilu 'ti si kauboj — skoči'. Da, dobra ideja, a sad dogovorite dolazak 120-tonske dizalice s institucijama poput GIBDD-a. I poželjno je da je to dogovoreno jučer. Sretno s poduhvatima, ako zakasnite — kazna.
Situacija je bezizlazna, vrijeme je preskočilo, i odlučili smo riskirati, uostalom, kazne GIBDD-a u usporedbi s kaznama za nepoštivanje rokova — to su samo cvjetovi. U subotu ujutro dovezli smo 16-metarski kran, nadajući se da ćemo sve brzo obaviti. Nakon nekoliko sati, došao je policajac i nesigurno zatražio dozvolu. Naravno, nismo je imali. I ne zna se kako bi sve završilo da s nama nije bio prodajni agent s izvanrednim diplomatskim sposobnostima.
Odveo je policajca u stranu, pet minuta mu nešto objašnjavao, policajac je u to vrijeme nekoliko puta promijenio izraz lica, ali na kraju je sjeo u svoj UAZ i povikao da, ako se nešto dogodi, sam će doći i pomoći nam. Koji su to bili argumenti, prodajni agent još uvijek ne otkriva.
Podignite me, ljudi!
Iza brda, iza polja, ali unutar Trećeg prometnog, stajala je … ne, ne koliba, već sasvim ozbiljna vladina gradilišta. Teška noćna smjena, istovaramo opremu. Posljednji kamion s 15-tonskim željezom u tovarnom prostoru izlazi na jedini raskrižje unutar teritorija, nešto se s glasnim zvukom rasprsne, i div se sruši u blato. U 5 ujutro, gradilište se pomalo budi, vozač betonske miješalice iza našeg kamiona, spominjući pale žene, jasno pita: hoćemo li se maknuti s ceste? Ima betona koji se steže. A mi bismo i rado, jer u 7 ujutro stiže jedan od brojnih zamjenika jednog od ministara i, ako vidi ovu zbrku, svi ćemo dobiti: od inženjera do viših rukovoditelja.
Tehničar trči lokalnom kranovcu, moli ga da podigne željezo iz tovarnog prostora kako bismo mogli gurnuti drugi kamion ispod. A on ni po koju cijenu, čak ni za novac. Situaciju je spasio naš inženjer — dogovorio se preko vođe tog kranovca. Željezo smo ipak doveli tamo gdje treba, ali već malo sijedih.
A onda smo postali prilično sjedi, na istom objektu. Dogodio se epski neuspjeh u najdoslovnijem smislu.
Postoji takva stvar: teleskopski viljuškar. Koristi se kada nema prostora na gradilištu, a teret treba dignuti visoko i pažljivo postaviti. Nam je s njim trebalo izbaviti 1,5-tonski modul kroz prozor. Ništa nije nagoveštavalo: prema specifikaciji, mašina je trebala podnositi više od 2 tone. Ali kada je do prozora ostalo točno pola metra, 'vilice' viljuškara su se slomile, a metal je pao s visine. Nismo imali izbora – zovemo proizvođača da dođe i izvrši popravke. Njihovi serviseri su došli i... odbili su ući na gradilište. Jer je potrebno proći stazom, a na stazi stoji bager i kopa. Nama je to navika: pričekali smo 10 sekundi dok se ruka okrenula u suprotnom pravcu od staze i potrčali. A dečki su bili šokirani. Morali smo ovu osobitost predstaviti kao uzbudljivu atrakciju, neku vrstu 'Fort Boyard', i tako su nam modul popravili.
Neodložna karma
Uskoro se priča prepričava, ali posao se ne odvija lako, posebno kada je reč o potpisivanju akata o prijemu uradjenih radova. Nekako smo izgradili odličan podatkovni centar za jednu kompaniju. Ali je car-kralj-naručitelj odlučio da nam postavi poslednju probu:
— U vašoj specifikaciji piše 100 matica po evropskom podnožju, a ja sam prebrojao 97. Ispravite specifikacije i troškovnike ili neću ništa potpisati.
I odlazili smo svaki put daleko, i sa carom-kraljem u horu brojali ili pričvršćivače za ventilacijske cevi, ili matice, ili vijake. Svaki put se ispostavilo da ih nije 97, nego 99 itd. I nismo imali mira. Na kraju smo nakupili toliko unutrašnjih troškova da naše rukovodstvo nije moglo izdržati. Rekli su: neka rade što žele - više nikome ne padne na pamet da ide tamo. Tako smo ostali bez potpisa.
…A nakon godine dana naručitelj dolazi sam i ljubazno pita gde bi mogao da potpiše? Ispostavilo se, došla je revizorska komisija, a kod njega nema obračunanog opreme u vrednosti sa sedam nula.
Wingardium Leviosa!
Bio jednom jedan dobar klijent koji je odlučio kupiti staru zgradu za podatkovni centar. Ali njegova radost nije dugo trajala: počeli su se javljati problemi u baterijskoj sobi. Tada nas je pozvao u pomoć da pogledamo i konzultiramo. Dolazimo, ulazimo u baterijsku sobu, a tamo… zidovi iznad poda levitiraju s tri strane. Naravno, 4 tone baterija jednostavno su stavili na pod — on je počeo tonuti u zemlju. Ovo je čest problem s baterijama: važno je pravilno izračunati opterećenje na konstrukcijama i predvidjeti razdvojne okvire kako bi podovi poput kućice od karata ne srušili.
No, trešnja na torti arhitektonskog noćnog mora u ovoj zgradi bila je potpuni nedostatak temelja. Zidovi su jednostavno stajali na pješčanom sloju, ispod kojeg se nalazilo neprijateljsko tlo. Počeli smo razmišljati kako spasiti pacijenta, na kraju smo predložili složeni sustav silikata: to je kada se tlo buši na nekoliko mjesta i tada se pumpa učvršćujuća smjesa. Stari visini poda to nije vratilo, ali barem se prestalo tonuti.
Bitka dva yokozuna
U jednom kraljevstvu, u jednom poslovnom carstvu, radili smo automatizaciju: za podatkovni centar na jednom od katova, za upravljanje klimom — za cijelu zgradu. Desetci automatskih ormara, kilometri niskonaponskih kabela!
Posebnost tog ureda bio je vlastiti SPA kompleks sa saunom. Kada smo razvijali projekt, pretpostavljalo se da će se sauna koristiti rijetko. Ali inženjer pretpostavlja, a klijent odlučuje: uprava se toliko uključila u zdrav način života da su saunu jednostavno prestali isključivati — predugo se grije.
Rezultat: automatika detektira porast temperature sa saune — uključuje jači klima uređaj kako bi kompenzirao. Pomaže tako-tako. Klima uređaj nastavlja raditi s naporom — atmosfera se zagrijava, jer automatika ne sumnja da netko može toliko zadržati. Klimatizacija pada u paranoju, odlučuje: "Nije do njih, do mene je. Sve napore su uzalud. Čini se da sam pokvaren", o čemu obavještava kontrolnu sobu. Kontroler uzdiše i pritisne dugme "zadatak uklonjen". I tako svaki dan.
Jednim laganim pokretom ruke
Još mnogo priča imamo u našim skladištima, ali ne stanu sve ovdje. Evo tri posljednje priče: o krivim rukama.
Prva priča govori o tome kako smo u jednoj zgradi, osim servera, osigurali dotok zraka u liftove i šahte. Učinili smo to, napustili lokaciju, čekali da drugi izvođač završi završne radove, a zatim se vratili na ispitivanje sistema. Pokrećemo dotok — spušteni plafon se iznenada naduvava, ploče padnu s mukom na pod i sve za tren izgleda u stilu „loft“. Ispostavilo se da su momci koji su montirali plafon zaboravili staviti perforirane ploče za zrak. Uopće nisu posumnjali u njihovo postojanje, jednostavno su uzeli iz otvorene kutije — i sve, na ambalažu s perforiranim pločama nisu obratili pažnju, nisu gledali u projekt.
Druga epopeja također se tiče plafona. U jednom data centru bio je prilično uski hodnik, a razmjena zraka u prostoru sa policama akumulatora trebala je biti značajna, pa su uz cijeli plafon prolazile komunikacije. Djelatnici koji su radili spušteni plafon nisu se previše trudili i... pričvrstili su ovjesne nosače direktno u naše nesretne zračne kanale. Svaki zračni kanal malo vibrira kada ventilacijske jedinice rade, a kada je u njemu gomila rupa i neravnih površina, zvukovi Apokalipse su vam zagarantirani. Tada smo slavnim montiračima dali takve „živahne“ udarce da su rane na kanalima čudesno zacjelile. Naravno, na njihov račun.
Treća priča dogodila se kada smo radili automatizaciju za sustav tehnološke klimatizacije. Predali smo izvođaču temperature senzor i bez razmišljanja zamolili ga da ga postavi na kalorifer u dovodu. U sustavima dovoda zraka uvijek postoji grijač za vanjski zrak: ili vodeni ili električni. Ovaj divni čovjek je sve izvršio bespogovorno. To jest, uzeli su i zakovali vijak direktno u cijev vodenog kalorifera, sa svim posljedicama (u pravom smislu) koje iz toga proizlaze. Dobro je da su na lokaciji bili klima radnici s MAP plinom — curenje su brzo zavarili.
Linkovi:
- Ako trebate, pišite ovdje: build@croc.ru
Izvor: habr.com
