Io e i miei colleghi ci siamo detti: perché non ricordare tutti i vari horror che le persone affrontano nella costruzione dei data center, invece di parlare di successi e progetti interessanti prima della nostra amata festività horror? Quindi, spegnete la luce, accendete la musica inquietante, ora verranno raccontate storie che ci fanno ancora svegliare di tanto in tanto sudati freddi.
Il fantasma dell'ufficio
In un edificio per uffici stavamo creando un server e tutta la parte automatica per i sistemi di climatizzazione, inclusi i tendaggi con attuatori. Sul tetto c'è una stazione meteorologica che determina da quale parte splende il sole e chiude le tendine se è troppo luminoso. Abbiamo completato il progetto e ce ne siamo dimenticati, dopo un po' ci chiamano, chiedono:
— Non potreste riattivare le tende? Vogliamo chiuderle noi stessi.
— Perché?!
— Le nostre addette alle pulizie si spaventano. E anche noi — sembra ci sia un fantasma lì.
Questo è esattamente il tipo di incubo che vive un esperto di automazione: prima il cliente vuole automazione ed efficienza energetica, tu glielo realizzi con entusiasmo, e poi si scopre che il dirigente ama gestire tutto da solo. E nella stanza dove la gestione del clima è completamente automatizzata, alla fine tutto funziona in modalità manuale.
Negli uffici dei vari dirigenti spesso realizziamo un pannello touchscreen con cui gestire gli scenari di illuminazione, il condizionatore, la ventilazione e le tende. Un dirigente particolarmente conservativo ha detto: non voglio algoritmi, voglio due pulsanti: "accendi tutto" e "spegni tutto". È venuto un programmatore, ha pianto mentre eliminava l'interfaccia di controllo standard, ha disegnato al suo posto due pulsanti e se n'è andato a casa a piangere.
E dove sono i nostri diesel?
In una notte buia e profonda, nella stanza oscura del tecnico Oleg, ha squillato il cellulare.
— Abbiamo un problema nella centrale diesel, la temperatura del fluido refrigerante è troppo alta. Ora ti mando uno screenshot.
Era il dispatcher del data center che abbiamo consegnato un mese fa con una coscienza pulita. Non è stato turbato né dall'ora tarda, né dal fatto che il sistema mostrava la stessa "temperatura" nel diesel e nella sala. Perché in realtà non era affatto temperatura, ma un codice di errore "nessuna connessione con il sensore". Oleg ha prontamente detto al dispatcher dove dovrebbe andare di notte con tali richieste. In effetti:
— Vai ai diesel, guarda, probabilmente è solo la batteria del sensore che si è scaricata. Il modulo della batteria nei diesel alimenta questo pannello di controllo, c'è un interruttore: se qualcuno dei vostri lo ha toccato, bisogna ruotarlo di nuovo.
In effetti, il dispatcher è proprio quella persona che dovrebbe conoscere l'oggetto come un fresatore esperto conosce le proprie tre dita, ma qui è arrivata una domanda sorprendente:
— E i diesel, dove sono?
— Salite al secondo piano, chiedete agli elettricisti, loro vi porteranno.
Negli ultimi 20 minuti, Oleg ha lavorato da remoto come navigatore, cercando di collegare il dispatcher e gli elettricisti, che non volevano affatto fare tour a nessuno a mezzanotte.
Il circolo delle risse nel centro dati
Nel regno di tre e nello stato di trenta, ci siamo trovati a dover affrontare un problema con il in . Proprio tre ore prima del passaggio della certificazione presso l'Uptime Institute. Non ha senso raccontare in dettaglio cosa siano i chiller e gli inverter, se non lo sapete. Quindi credetemi: devono funzionare come orologi, altrimenti la certificazione si trasformerà in una zucca e il cliente in una matrigna cattiva. E, cosa più frustrante, avrà ragione, dato che per la visita della commissione si pagano somme esorbitanti, e se qualcosa va storto, nessuno li rimborserà.
Il tecnico del fornitore è arrivato, ha alzato le mani e ha detto che il paziente è piuttosto morto, e che bisognava aspettare un mese per la nuova scheda. La commissione è già sulla soglia, le uscite sono poche. La prima è smontare l'inverter da un chiller 'sano' e metterlo su quello 'malato', e poi scambiarli finché i test non siano terminati. Non è un trucco, per usare un termine: secondo le normative di test, uno dei tre chiller deve essere di riserva, quindi lo scenario è perfettamente fattibile. La seconda uscita è provare a trovare un nuovo inverter nei restanti novanta minuti. Abbiamo chiamato il nostro esperto di refrigerazione a Mosca. L'esperto ha contattato un conoscente all'interno del rappresentante russo del fornitore. Questi, a sua volta, ha sollecitato il rappresentante del produttore in Olanda e... dopo mezz'ora ci stavano già installando una nuova scheda. La certificazione è andata alla grande.
Lavori incompleti
Che sia lungo o corto, in cantiere arriva sempre il momento in cui tutti i subappaltatori se ne vanno e rimangono solo loro: i lavori incompleti. Si tratta di lavori non finiti, non di chi li ha lasciati, per chiarezza. L'ultimo a partire è quello che si occupa di sistemarli.
Una volta abbiamo realizzato un Data Center in un seminterrato: rack disposti in due file, allineati lungo uno dei bordi, per consentire l'apertura della porta. A causa di questo, tra una fila e il muro si è creato uno spazio, e il cliente si rifiutava di firmare il verbale di accettazione a causa di questo gap. Il tecnico e il project manager sono andati di buon mattino da "Leroy" per comprare polistirolo, vernice, fissaggi e diligentemente hanno riempito il gap, affinché fosse in tinta con i rack. Consegnato.
Una volta, dopo il ritiro degli impiantisti del riscaldamento, è emersa una discrepanza nel progetto: i radiatori dovevano essere 7, e ce ne erano 6. Siamo andati a contarli — tutto giusto, effettivamente hanno dimenticato di installare un radiatore nel corridoio. Era troppo tardi per bere "Borjomi", tutto era già montato e pressurizzato. Il cliente si strappava i capelli, perché i verbali erano già firmati. Ancora una volta, "Leroy" ci ha salvato — abbiamo comprato lì un riscaldatore elettrico, abbiamo tirato nel corridoio un gruppo di cavi e la domenica mattina lo abbiamo montato noi stessi, il cliente era felice.
Un'altra volta ci hanno lasciato un meraviglioso nulla al posto di una parete contro incendio. Nel Data Center, il condotto dell'aria di ventilazione prelevato dal secondo piano scende nel seminterrato, attraverso una stanza che, secondo la classificazione antincendio, appartiene a un'altra categoria rispetto a quelle sopra e sotto di essa. In pratica, ciò significa che nel condotto dovrebbe esserci una valvola resistente al fuoco, e attorno a essa — una parete contro incendio. Intorno al nostro splendente condotto d'aria con valvola resistente al fuoco c'era un buco, indovinate chi l'ha riempito e come? "Leroy Merlin" non ha sponsorizzato questo post, peccato.
Dale Carnegie fuma nervosamente
Tanto tempo fa, quando l'erba era più verde e il dollaro valeva 30 e qualcosa, stavamo realizzando un Data Center per una banca nel centro storico di Mosca. Dovevamo rispettare scadenze molto serrate. Ma lì le stradine sono strette, le aperture dell'edificio lo sono altrettanto, sollevare diverse tonnellate di attrezzature al piano giusto tramite le scale è praticamente impossibile. Abbiamo detto al cliente che bisognava caricare con una gru direttamente sul tetto, il cliente ha risposto in tono "sei un cowboy — salta tu". Quindi, una buona idea, e ora coordina l'arrivo di una gru da 120 tonnellate con enti come la GIBDD. E preferibilmente ieri. Buona fortuna con i tuoi progetti, se non ci riesci — multa.
La situazione è bloccata, il tempo stringe e abbiamo deciso di rischiare; dopotutto, le multe della GIBDD rispetto a quelle per ritardi sono solo fiori. Sabato mattina abbiamo portato un camion con una gru di 16 metri, sperando di riuscire a fare tutto in fretta. Dopo un paio d'ore, è arrivato un agente di polizia e ha timidamente chiesto il permesso. Naturalmente, noi non ce l'avevamo. E non si sa come sarebbe andata a finire se non ci fosse stato un venditore con straordinarie doti diplomatiche.
Lui ha portato l'agente di polizia in disparte, spiegandogli qualcosa per 5 minuti; durante quel tempo, l'agente è cambiato espressione più volte, ma alla fine è salito sul suo UAZ e ha gridato che, se succede qualcosa, verrà lui stesso ad aiutarci. Quali argomenti siano stati usati, il venditore non lo rivela ancora.
Alzatemi, buoni uomini!
Oltre le colline e i campi, ma all'interno della Terza zona di trasporto, si trovava... no, non una capanna, ma un cantiere governativo piuttosto serio. Un turno notturno complicato, stiamo scaricando l'attrezzatura. L'ultimo camion con 15 tonnellate di metallo nel cassone esce dall'unico incrocio del territorio, qualcosa si rompe con un rumore assordante e la macchina si adagia nel fango. Sono le 5 del mattino, il cantiere comincia a prendere vita, il conducente del camion per il calcestruzzo dietro il nostro camion, ricordando le donne cadute, si interessa esplicitamente: non abbiamo intenzione di liberarci dalla strada? Poiché il suo calcestruzzo sta indurendo. E noi saremmo anche felici di farlo, perché alle 7 del mattino arriverà uno dei numerosi vice di uno dei ministri e, se vedrà questo disastro, ne avrà per tutti: dagli ingegneri ai dirigenti.
Il tecnico corre dal gruista locale, chiede disperatamente di alzare il pezzo di metallo dal cassone, in modo che possiamo infilare un altro camion sotto. Ma lui, in nessun modo, nemmeno per soldi. La situazione è stata risolta dal nostro ingegnere: ha raggiunto un accordo tramite il responsabile di quel gruista. Alla fine, comunque, abbiamo portato il pezzo di metallo dove serviva, ma eravamo già un po' grigi.
E poi siamo diventati ancora più grigi, nello stesso cantiere. È successo un epic fail nel senso più letterale.
C'è una cosa: il carrello elevatore telescopico. Viene utilizzato quando non c'è spazio per manovrare in cantiere e occorre alzare un carico in alto e posizionarlo con attenzione. Con il suo aiuto dovevamo scaricare un modulo da 1,5 tonnellate attraverso un buco in una finestra. Niente faceva presagire nulla: secondo le specifiche, la macchina doveva reggere oltre 2 tonnellate. Ma quando mancavano esattamente mezzo metro alla finestra, le 'forche' del carrello elevatore si sono rotte e il pezzo di ferro è caduto dall'alto. Non ci rimaneva altro da fare: abbiamo chiamato il produttore affinché venisse a eseguire le riparazioni. I loro tecnici sono arrivati e… si sono rifiutati di entrare nel cantiere. Perché per arrivarci bisognava passare lungo un sentiero, dove stava un escavatore che scavava. Noi, abituati a queste situazioni, abbiamo aspettato 10 secondi, mentre il braccio era girato dall'altra parte del sentiero, e abbiamo corso. A loro questo ha provocato shock. Abbiamo dovuto presentare questa caratteristica come un'attrazione avvincente, un tipo di 'Fort Boyard', e alla fine il modulo ce l'hanno riparato.
Karma non istantanea
Presto si racconta una favola, ma ci vuole tempo per concludere le cose, specialmente quando si tratta di firmare i verbali di accettazione dei lavori svolti. Un giorno abbiamo costruito un eccellente Data Center per una certa azienda. Ma il re-principe-committente ha deciso di sottoporci all'ultimo test:
— Nelle vostre specifiche sono scritti 100 dadi per il canale, ma io ne ho contati 97. Correggete le specifiche e i preventivi, oppure non firmerò nulla.
E partivamo ogni volta per terre lontane, contando a coro con il re-principe i pezzi di fissaggio per i condotti, i dadi o i bulloni. Ogni volta si rivelava che non eran 97, ma 99, e così via. E non avevamo pace. Alla fine accumulammo così tanti costi interni che la nostra direzione non ha retto. Hanno detto: lasciali fare quello che vogliono — nessuno andrà più lì. Così siamo rimasti senza firme.
…E dopo un anno il committente è venuto personalmente e ha chiesto con molta cortesia dove dovesse firmare? Si è scoperto che era arrivato il tribunale dei conti e che aveva attrezzature non registrate per un valore con sette zeri.
Wingardium Leviosa!
C'era una volta un buon committente che decise di acquistare un vecchio edificio per un centro dati. Ma la sua gioia durò poco: iniziarono a verificarsi problemi nella sala batterie. Ci chiamò quindi in aiuto per dare un'occhiata e fornire consulenza. Arriviamo sul posto, entriamo nella sala delle batterie e lì... le pareti levitavano dal pavimento su tre lati. E come potrebbe essere diverso: avevano semplicemente messo 4 tonnellate di batterie sul pavimento, e lui cominciava a sprofondare nel terreno. Questo è un problema comune con le batterie: è importante calcolare correttamente il carico sulle strutture e prevedere telai di scarico per evitare che i solai crollino come un castello di carte.
Ma la ciliegina sulla torta dell'incubo architettonico in questo edificio era l'assenza totale di fondamento. Le pareti sostenevano pesantemente su un massetto di sabbia, sotto il quale c'era un terreno tutt'altro che amichevole. Abbiamo iniziato a pensare a come salvare il paziente, e alla fine abbiamo proposto un complesso sistema di silicatizzazione: è quando il terreno viene perforato in diversi punti e viene immesso un miscela di rinforzo. Questo non ha ripristinato le precedenti altezze del pavimento, ma almeno ha smesso di sprofondare.
La battaglia dei due yokozuna
In un certo regno, in un certo stato d'ufficio, stavamo facendo la gestione del traffico: per il centro dati su uno dei piani, per il controllo del clima - per tutto. Decine di armadi di automazione, chilometri di cavi a bassa tensione!
Una delle caratteristiche di quell'ufficio era un proprio complesso SPA con sauna. Quando abbiamo sviluppato il progetto, si supponeva che la sauna fosse utilizzata raramente. Ma l'ingegnere ipotizza, e il committente dispone: la dirigenza si è così appassionata al benessere che hanno smesso di spegnere la sauna, giusto per precauzione — ci mette troppo a riscaldarsi.
Il risultato: l'automazione rileva un aumento della temperatura dalla sauna — accende il condizionatore più potente per compensare. Aiuta così così. Il condizionatore continua a stressarsi — l'atmosfera si surriscalda, perché l'automazione non sospetta che qualcuno possa stare in sauna tanto a lungo. Il condizionatore entra in paranoia, pensando: "Non è colpa loro, è colpa mia. Tutti gli sforzi sono vani. Sembra che io sia rotto", e lo comunica al pannello di controllo. L'operatore sospira e preme il pulsante "compito annullato". E così ogni giorno.
Con un semplice gesto della mano
Abbiamo ancora molte storie nei nostri scannetti, ma non tutte possono essere raccontate qui. Ecco i tre ultimi racconti: riguardo a mani maldestre.
La prima storia riguarda come in un edificio abbiamo creato un sistema di immissione d'aria nei vestiboli e nelle shaft degli ascensori oltre alla sala server. Abbiamo completato il lavoro, lasciato il cantiere, aspettato che un altro appaltatore terminasse i lavori di finitura e poi siamo tornati per testare il sistema. Accendiamo l'immissione: il soffitto finto si gonfia bruscamente, le lastre volano a terra con un fragore, e tutto si trasforma in uno stile "loft" in un secondo. Si è scoperto che i ragazzi che hanno montato il soffitto avevano dimenticato di inserire le lastre con perforazioni per l'aria. Non si erano nemmeno resi conto della loro esistenza, prendevano semplicemente quelle da un pacco aperto e basta, non hanno prestato attenzione al pacco con le perforate, non hanno guardato il progetto.
La seconda epica parla sempre del soffitto. In un data center c'era un corridoio piuttosto stretto, e il ricambio d'aria nella stanza con i rack delle batterie doveva essere significativo, quindi lungo tutto il soffitto correvano delle tubazioni. I bravi ragazzi, che facevano il soffitto falso, non si sono complicati e… hanno avvitato i fissaggi delle sospensioni direttamente nei nostri malaugurati condotti d'aria. Ogni condotto vibra un po' già durante il funzionamento delle unità ventilatrici, e quando ha una miriade di buchi e irregolarità, aspettati suoni dell'Apocalisse. Allora ci siamo fatti sentire dai bei cavalieri-montatori con tali schiaffi rinvigorenti che le ferite sui condotti si sono miracolose chiuse. A loro spese, ovviamente.
La terza storia è avvenuta quando stavamo facendo l'automazione per il sistema di climatizzazione tecnologica. Abbiamo consegnato all'appaltatore un sensore di temperatura e senza pensarci due volte gli abbiamo chiesto di installarlo sul calorifero nell'unità di immissione. Negli impianti di immissione c'è sempre un riscaldatore per l'aria esterna: o a acqua, o elettrico. Questo meraviglioso individuo ha eseguito tutto senza eccezioni. In pratica, ha preso e avvitato una vite direttamente nella tubazione del calorifero ad acqua, con tutte le conseguenze che ne derivano (in senso letterale). Fortunatamente, sul cantiere c'erano i tecnici del condizionamento con gas MAPP — la perdita è stata rapidamente riparata.
Link:
- Scrivimi qui per qualsiasi cosa: build@croc.ru
Fonte: habr.com
