Jag och mina kollegor tÀnkte: varför inte minnas skrÀckhistorier som mÀnniskor möter inom datacenterbyggande istÀllet för framgÄngar och intressanta projekt, innan vÄr favorit skrÀckhögtid? SÄ stÀng av ljuset, sÀtt pÄ spÀnnande musik, hÀr kommer historier som fortfarande fÄr oss att vakna i kallsvett.
Kontorets spöke
I en kontorsbyggnad byggde vi en serverrum och all automatik för klimatsystem, inklusive - rullgardiner med motorer. PÄ taket finns en vÀderstation som mÀter varifrÄn solen lyser och stÀnger rullgardinerna om det Àr för starkt. Vi överlÀmnade projektet och glömde det, men efter ett tag ringde de och frÄgade:
â Skulle ni kunna avautomatisera gardinerna? Vi vill stĂ€nga dem sjĂ€lva.
â Varför?!
â VĂ„ra stĂ€derskor blir rĂ€dda. Och vi ocksĂ„ - det kĂ€nns som om det finns ett spöke dĂ€r.
SÄ hÀr ser en automationsspecialists mardröm ut: först vill kunden ha automation och energieffektivitet, och du gör allt detta glatt, men sedan visar det sig att chefen vill styra sjÀlv. Och i ett rum dÀr klimatkontrollen Àr helt automatiserad, körs allt i manuellt lÀge.
I olika chefrum gör vi ofta en touchpanel som man kan anvÀnda för att styra belysningsscenarier, luftkonditionering, ventilation och rullgardiner. En sÀrskilt konservativ chef sa: jag vill inte ha algoritmer, jag vill ha tvÄ knappar: "slÄ pÄ allt" och "stÀng av allt". En programmerare kom och grÀt nÀr han tog bort det vanliga kontrollgrÀnssnittet, ritade istÀllet tvÄ knappar och Äkte hem och grÀt.
Och var har vi vÄra dieslar?
En mörk, mörk natt, i den mörka, mörka rummet av teknikern Oleg ringde mobiltelefonen.
â Vi har för hög temperatur pĂ„ kylvĂ€tskan i vĂ„r dieselanlĂ€ggning. Jag skickar skĂ€rmdumpen nu.
Det var operatören frÄn datacentret som vi förra mÄnaden hade överlÀmnat med gott samvete. Han brydde sig inte om att klockan var tre pÄ natten eller att systemet visade samma "temperatur" i generatorn och i rummet. För det var egentligen inte en temperatur utan en felkod "ingen kontakt med sensorn". Oleg sa Àrligt till operatören vart han skulle gÄ mitt i natten med sÄdana förfrÄgningar. Bokstavligen:
â GĂ„ till dieselmaskinerna, titta, förmodligen har bara batteriet i sensorn dött. Batterimodulen i dieselmaskinerna driver denna kontrollpanel, det finns en strömbrytare â om nĂ„gon har rört vid den, mĂ„ste den vridas tillbaka.
Generellt sett Àr en dispatcher just den personen som ska kÀnna objektet som en erfaren frÀsmaskinist sina tre fingrar, men det kom ett överraskande frÄgor:
â Och dieselmaskinerna â var Ă€r de?
â GĂ„ upp till andra vĂ„ningen, frĂ„ga elektrikerna, de kommer att visa dig.
De följande 20 minuterna arbetade Oleg pÄ distans som navigator, och försökte fÄ ihop dispatcher och elektrikerna, som inte riktigt ville ge nÄgon en rundtur mitt i natten.
Cirkulationen av stjÀrnpojkar i datacentret
I ett kungarike lÄngt, lÄngt borta, i ett rike lÄngt borta kraschade vÄr till . Precis tre timmar innan certifieringen hos Uptime Institute. Det Àr lÄngt att förklara vad en kylare och frekvensomriktare Àr om du inte vet. SÄ tro bara pÄ mig: de mÄste fungera som klockor, annars förvandlas certifieringen till en pumpa, och kunden till en elak styvmor. Och, det mest frustrerande, kommer kunden att ha rÀtt, för besöket frÄn kommissionen kostar en förmögenhet, och om nÄgot gÄr fel, kommer ingen att fÄ tillbaka dem.
Teknikern frÄn leverantören kom springande, ryckte pÄ axlarna och sa att patienten förmodligen Àr död, och att det skulle ta minst en mÄnad att vÀnta pÄ en ny kort. Kommissionen Àr redan i dörren, och vi har inte mÄnga alternativ. Den första Àr att skruva loss frekvensomriktaren frÄn den "friska" kylaren och sÀtta den pÄ den "sjuka", och sedan byta dem tillbaka tills försökningen Àr över. Det Àr inte fusk, förresten: enligt testreglerna Àr en av de tre kylarna alltid backup, sÄ scenariot fungerar. Det andra alternativet Àr att försöka hitta en ny frekvensomriktare pÄ den kvarstÄende timmen och en halv. Vi ringde vÄr kyltekniker i Moskva. Kylteknikern kontaktade en bekant inom den ryska representanterna för leverantören. Han, i sin tur, pressade pÄ tillverkars representation i Holland och... efter en halvtimme installerade de redan den nya kortet för oss. Certifieringen gick strÄlande.
OfullstÀndig
LĂ„ngt eller kort, men pĂ„ bygget kommer det alltid en tid nĂ€r alla underleverantörer gĂ„r hem och bara det blir kvar: ofullstĂ€ndiga arbeten. Det handlar om oavslutade jobb, inte om de som lĂ€mnade dem, om ni undrar. Den som Ă€r sist â den som plockar upp.
Vi gjorde en gÄng ett datacenter i kÀllaren: stÀllningar i tvÄ rader, jÀmnt placerade lÀngs en kant sÄ att dörren skulle kunna öppnas. Detta skapade ett mellanrum mellan en av raderna och vÀggen, och kunden vÀgrade att underteckna mottagningsprotokollet pÄ grund av detta mellanrum. Teknisk personal och projektledaren fick tidigt pÄ morgonen Äka till "Leroy" för att hÀmta frigolit, fÀrg, fÀsten och de lagade noggrant mellanrummet sÄ att det matchade stÀllningarna. Vi överlÀmnade projektet.
Och en gĂ„ng efter att rörmokarna hade gĂ„tt, upptĂ€ckte vi en diskrepans i projektet: det skulle vara 7 radiatorer, men de var bara 6. Vi gick och rĂ€knade â allt stĂ€mde, de hade egentligen glömt en radiator i korridoren. Att dricka "Borjomi" var för sent, allt var redan installerat och trycktestat. Kunden kliade sig i huvudet eftersom protokollen redan var undertecknade. "Leroy" rĂ€ddade Ă„terigen dagen â vi köpte dĂ€r en elektrisk vĂ€rmare, drog fram en kabelgrupp till korridoren och installerade den sjĂ€lva tidigt pĂ„ söndagsmorgonen. Kunden var glad.
En gĂ„ng lĂ€mnade de oss ett magiskt ingenting istĂ€llet för en brandvĂ€gg. I datacentret gĂ„r tilluftkanalen frĂ„n andra vĂ„ningen ner till kĂ€llaren genom ett rum som enligt brandklassificeringen tillhör en annan kategori Ă€n de som ligger ovanför och nedanför. I praktiken betyder det att det mĂ„ste finnas en brandspjĂ€ll i kanalen, och omkring den â en brandvĂ€gg. Runt vĂ„r glĂ€nsande tilluftskanal med brandspjĂ€llet fanns ett hĂ„l, gissa vem och hur som lagade det? "Leroy Merlin" sponsrade inte detta inlĂ€gg, synd.
Dale Carnegie röker nervöst.
För lĂ€nge sedan, nĂ€r grĂ€set var grönare och dollarn lĂ„g pĂ„ 30-nĂ„gonting, byggde vi ett datacenter för en bank i den historiska delen av Moskva. Vi behövde slutföra arbetet inom extremt snĂ€va tidsramar. Men gatorna dĂ€r Ă€r smala, öppningarna i byggnaden ocksĂ„, och att lyfta flera ton utrustning uppför trapporna till rĂ€tt vĂ„ning Ă€r praktiskt taget omöjligt. Vi sa till kunden att vi mĂ„ste lasta med kran direkt pĂ„ taket, kunden svarade med nĂ„got i stil med "du Ă€r cowboy â du fĂ„r hoppa". SĂ„, bra idĂ©, men nu mĂ„ste du godkĂ€nna ankomsten av en 120-tons kran med myndigheterna som GIBDD. Och helst igĂ„r. Lycka till med projektet, hinner ni inte â böter.
Situationen Ă€r fastlĂ„st, tiden Ă€r knapp, och vi bestĂ€mde oss för att ta en risk, trots allt Ă€r böterna frĂ„n trafikpolisen jĂ€mfört med böter för att inte hĂ„lla tidsfrister â bara blommor. PĂ„ lördagsmorgonen körde vi dit en 16-meters kran, i hopp om att fĂ„ allt gjort snabbt. Efter ett par timmar kom den lokala polisen och frĂ„gade försiktigt om tillstĂ„nd. Vi hade sĂ„ klart inget. Och hur allt skulle ha slutat Ă€r oklart om det inte hade funnits en sĂ€ljare med extraordinĂ€ra diplomatiska fĂ€rdigheter hos oss.
Han tog den lokala polisen Ät sidan, förklarade nÄgot för honom i fem minuter, och under den tiden förÀndrades polisens ansiktsuttryck flera gÄnger, men till slut satte han sig i sin uaz och skrek att om nÄgot skulle hÀnda, sÄ skulle han sjÀlv komma och hjÀlpa oss. Vilka argument som anvÀndes Àr sÀljaren fortfarande hemlig om.
Lyft mig, mÀnniskor!
Bakom bergen, bakom fÀlten, men inom Tredje transportomrÄdet, stod det ... nej, inte ett litet hus, utan en helt seriös statlig byggarbetsplats. En svÄr nattpass, vi lastar utrustning. Den sista lastbilen med 15 ton jÀrn i flaket kör ut pÄ den enda korsningen pÄ omrÄdet, nÄgot smÀller högt, och monstret sjunker ner i leran. Klockan Àr fem pÄ morgonen, bygget börjar lÄngsamt vakna till liv, chauffören till betongmixern bakom vÄr lastbil, minns de fallna kvinnorna och frÄgar osvikligt om vi inte skulle kunna flytta pÄ oss? Hans betong kallnar, tydligen. Och vi skulle gÀrna vilja, eftersom en av de mÄnga bestÀllarna frÄn en av ministrarna kommer vid sju, och om han ser detta elÀnde, sÄ blir det en storm för alla: frÄn ingenjörer till chefer.
Teknikern springer till den lokala kranföraren, ber bönfallande att lyfta upp jĂ€rnet frĂ„n flaket sĂ„ att vi kan fĂ„ in en annan lastbil under. Men han vĂ€grar helt, Ă€ven för pengar. Situationen löste vĂ„r ingenjör â han kom överens genom chefen för den kranföraren. Vi fick Ă€ndĂ„ jĂ€rnet dit vi skulle, men vi blev redan lite grĂ„hĂ„riga.
Och sedan blev vi Àn mer grÄhÄriga, pÄ samma objekt. Det intrÀffade en episk misslyckande i ordets bokstavliga bemÀrkelse.
Det finns en sak som kallas teleskoplastare. Den anvÀnds nÀr det inte finns plats att vÀnda sig pÄ en byggarbetsplats, men en last mÄste lyftas upp och placeras försiktigt. Med hjÀlp av den behövde vi tömma en 1,5-tonns modul genom ett fönster. Inget förutspÄdde det: enligt specifikationen skulle maskinen klara av över 2 ton. Men nÀr vi var knappt en halvmeter frÄn fönstret bröts "gaflarna" pÄ lastaren och jÀrnet föll ner frÄn höjd. Det fanns inget annat att göra - vi ringde till tillverkaren för att de skulle komma och utföra reparationsarbeten. Deras servicetekniker kom och⊠vÀgrade gÄ in pÄ byggarbetsplatsen. För att komma dit var man tvungen att gÄ lÀngs en stig, och pÄ stigen stod en grÀvmaskin och grÀvde. Vi var vana vid sÄdana situationer: vi vÀntade 10 sekunder tills bommen var vÀnd bort frÄn stigen och sprang. Men killarna blev chockade. Vi fick mÄste presentera denna situation som en spÀnnande attraktion, en slags "Fort Boyard", och de lyckades verkligen reparera modulen Ät oss.
Omfattande karma
Snart kommer sagan att berÀttas, men det tar tid att göra affÀrer, sÀrskilt nÀr det kommer till att skriva under protokoll för mottagande av slutfört arbete. Vi byggde en fantastisk datacenter för ett företag en gÄng. Men kungen - bestÀllaren bestÀmde att han skulle stÀlla oss inför den sista prövningen:
â Ni har angivit 100 muttrar för rĂ€nnan i specifikationen, men jag har rĂ€knat till 97. Korrigera specifikationen och kalkylen, eller sĂ„ kommer jag inte att skriva under nĂ„got.
Och vi Äkte varje gÄng tre gÄnger lÀngre bort, och rÀknade tillsammans med kungen muttrar för ventilationsrör, bultar, etc. Varje gÄng visade det sig att det inte var 97 utan 99 och sÄ vidare. Och vi hade ingen ro. Till slut hade vi samlat pÄ oss sÄ mycket interna kostnader att vÄr ledning inte kunde hÄlla ut lÀngre. De sa: lÄt dem göra vad de vill - ingen fÄr Äka dit igen. SÄ vi stod dÀr utan underskrifter.
âŠEn Ă„r senare kommer bestĂ€llaren sjĂ€lv och frĂ„gar artigt var han skulle skriva under? Det visade sig att revisionsverket hade kommit, och han hade oreglerad utrustning vĂ€rd med sju nollor.
Wingardium Leviosa!
Det var en gĂ„ng en bra bestĂ€llare som bestĂ€mde sig för att köpa en gammal byggnad för en datacenter. Men hans glĂ€dje varade inte lĂ€nge: nĂ„got gick fel i batterirummet. DĂ„ kallade han oss för hjĂ€lp, för att titta och ge rĂ„d. Vi kom pĂ„ besök, gick in i batterirummet, och dĂ€r⊠vĂ€ggarna svĂ€vade ovan golvet frĂ„n tre sidor. Inte sĂ„ konstigt: 4 ton batterier hade bara stĂ€llts pĂ„ golvet â och det började sjunka ner. Det hĂ€r Ă€r ett vanligt problem med batterier: det Ă€r viktigt att korrekt berĂ€kna lasten pĂ„ konstruktionerna och förutse avlastningsramar sĂ„ att golven inte kollapsar som ett hus av kort.
Men körsbÀret pÄ toppen av byggnadens arkitektoniska mardröm var den totala avsaknaden av grund. VÀggarna stod bara pÄ en sandbÀdd, under vilken det fanns en mindre vÀnlig jord. Vi började tÀnka pÄ hur vi skulle rÀdda patienten, och i slutÀndan föreslog vi ett komplext silikatiseringssystem: det Àr nÀr jorden borras pÄ flera stÀllen och dÀr pumpas en stÀrkande lösning. Det ÄterstÀllde inte golvet till tidigare höjder, men Ätminstone slutade det sjunka.
Slaget mellan tvÄ yokozuna
I ett visst kungarike, i ett visst kontorsland, genomförde vi en dispatcheing: för datacentret pĂ„ en av vĂ„ningarna, för klimatkontroll â för hela byggnaden. Dussintals automationsskĂ„p, kilometer av lĂ„gfrekvenkablar!
En sĂ€rskiljande egenskap för det kontoret var sin egen SPA-komplex med bastu. NĂ€r vi utvecklade projektet antogs det att bastun skulle anvĂ€ndas sĂ€llan. Men ingenjörerna antar, medan bestĂ€llaren disponerar: ledningen blev sĂ„ förĂ€lskad i en hĂ€lsosam livsstil att de helt enkelt slutade stĂ€nga av bastun â den vĂ€rms upp för lĂ€nge.
Resultatet: automationssystemet upptĂ€cker en temperaturökning frĂ„n bastun â det aktiverar luftkonditioneringen hĂ„rdare för att kompensera. Det hjĂ€lper inte mycket. Luftkonditioneringen fortsĂ€tter kĂ€mpa â atmosfĂ€ren blir hetare eftersom automationen inte misstĂ€nker att nĂ„gon kan bada sĂ„ lĂ€nge. Kondenseringen blir paranoid, bestĂ€mmer sig för: âDet Ă€r inte dem, det Ă€r mig. Alla anstrĂ€ngningar Ă€r förgĂ€ves. Det verkar som om jag Ă€r trasigâ, vilket den rapporterar till övervakningspanelen. Operatören suckar och trycker pĂ„ knappen âuppgift avbrutenâ. Och sĂ„ hĂ€r varje dag.
Med ett enkelt handgrepp
Det finns mÄnga fler historier i vÄr skÄp, men inte alla fÄr plats hÀr. HÀr Àr tre senaste berÀttelser: om klumpiga hÀnder.
Den första berÀttelsen handlar om hur vi i en byggnad, förutom serverrummet, installerade lufttillförsel i hisshallar och schakt. Vi gjorde jobbet, lÀmnade platsen, vÀntade pÄ att en annan entreprenör skulle slutföra mÄlningsarbetena, och ÄtervÀnde för att testa systemet. NÀr vi startade lufttillförseln blÄste det snabbt upp i falskt tak, plattorna flög med ett brak ner pÄ golvet och allt designades pÄ en sekund i stilen 'loft'. Det visade sig att killarna som monterade taket hade glömt att lÀgga plattorna med perforering för ventilerad luft. De hade överhuvudtaget inte tÀnkt pÄ deras existens, de tog bara plattor frÄn en öppen förpackning - och det var allt, de lade ingen vikt vid förpackningen med perforerade plattor, de tittade inte pÄ ritningen.
Den andra berÀttelsen handlar ocksÄ om taket. I ett datacenter fanns det en ganska smal korridor, och luftcirkulationen i rummet med batteri-stÀllningar skulle vara kraftig, sÄ lÀngs hela taket gick det ledningar. De tysta grabbarna som gjorde det falska taket brydde sig inte om detaljerna och... skruvade fÀsten för upphÀngningar rakt in i vÄra stackars ventilationskanaler. Varje ventilationskanal vibrerar lite vid drift av ventilationssystemen, och nÀr den har en massa hÄl och ojÀmnheter, sÄ hör ni ljudet av Apokalypsen. Vi gav de duktiga montörerna sÄ mycket stryk att skadorna pÄ ventilationskanalerna mirakulöst lÀkte sig sjÀlva. PÄ deras bekostnad, naturligtvis.
Den tredje berÀttelsen intrÀffade nÀr vi arbetade med automationssystemet för teknisk luftkonditionering. Vi gav bestÀllaren en temperaturgivare och bad utan att tÀnka efter att installera den pÄ vÀrmaren i tilluften. I tilluftsinstallationer finns det alltid en vÀrmare för utomhusluft: antingen en vattenbaserad eller elektrisk. Denna fantastiska person utförde alla instruktioner utan att ifrÄgasÀtta. Det vill sÀga, han tog och skruvade en skruv rakt in i röret pÄ vattenvÀrmaren, med alla följder (bokstavligt talat) som det fick. Tur att det fanns kyltekniker med gas pÄ plats - lÀckan fixades snabbt.
LĂ€nkar:
- Skriv hit om nÄgot: build@croc.ru
KĂ€lla: habr.com
