Mis colegas y yo pensamos: ¿por qué no recordar en vez de los éxitos y proyectos interesantes, las pesadillas que enfrentan las personas en la construcción de centros de datos, justo antes de nuestro querido festival de terror? Así que apaga la luz, pon música inquietante, ahora vienen historias de las que a veces aún despertamos en frío sudor.
El fantasma de la oficina
En un edificio de oficinas, hicimos un servidor y toda la automatización para los sistemas climáticos, incluyendo cortinas con motores. En el tejado hay una estación meteorológica que determina de qué dirección brilla el sol y cierra las cortinas si está demasiado brillante. Se entregó el proyecto y lo olvidamos, después de un tiempo nos llaman y preguntan:
— ¿Podrían desautomatizar las cortinas nuevamente? Queremos cerrarlas nosotros mismos.
— ¿Por qué?!
— Nuestras limpiadoras se asustan. Y nosotros también, da la sensación de que hay un fantasma allí.
Así es como se ve la pesadilla aterradora de un especialista en automatización: primero el cliente quiere automatización y eficiencia energética, tú le haces todo eso con gusto y luego resulta que el director prefiere hacerlo todo él mismo. Y en la sala donde el control climático está completamente automatizado, al final, todo funciona en modo manual.
A menudo hacemos un panel táctil en las oficinas de los altos ejecutivos desde el cual pueden controlar los escenarios de iluminación, el aire acondicionado, la ventilación y las cortinas. Un ejecutivo especialmente conservador dijo: no quiero algoritmos, quiero dos botones: "encender todo" y "apagar todo". Un programador vino, lloró al quitar la interfaz de control estándar, dibujó dos botones en su lugar y se fue llorando a casa.
¿Y dónde están nuestros generadores diésel?
En una noche oscura y tenebrosa, en la oscura habitación del técnico Oleg, sonó su móvil.
— En nuestra instalación de generadores diésel, la temperatura del líquido refrigerante es demasiado alta. Ahora te mandaré un pantallazo.
Era el despachador del centro de datos, al que habíamos entregado con buena fe hace un mes. No le preocupó que fuera a las tres de la mañana ni que el sistema mostrara la misma "temperatura" en el generador diésel y en la sala. Porque en realidad no era temperatura, era un código de error "sin conexión con el sensor". Oleg le dijo honestamente al despachador adónde debería ir en plena noche con tales consultas. Literalmente:
— Ve a ver a los diéseles, probablemente la batería del sensor se haya agotado. El módulo de batería en los diéseles alimenta este panel de control, hay un interruptor: si alguien de ustedes lo tocó, debe volverse a girar.
En realidad, el despachador es justo la persona que debería conocer el objeto como un fresador experimentado conoce sus tres dedos, pero aquí salió una pregunta sorprendente:
— ¿Y los diéseles, dónde están?
— Sube al segundo piso, pregunta a los electricistas, ellos te llevarán.
Durante los siguientes 20 minutos, Oleg trabajó de manera remota como navegante, intentando conectar al despachador con los electricistas, que no estaban muy dispuestos a organizar tours a nadie en medio de la noche.
El ciclo de problemas en el centro de datos
En el reino de la fantasía, en el estado número 30, de repente se nos descompuso en . Justo tres horas antes de la certificación en el Uptime Institute. No tengo tiempo para explicar qué son los chillers y variadores, si no lo sabes. Así que simplemente créeme: deben funcionar como un reloj, de lo contrario la certificación se convertirá en una calabaza, y el cliente en una malvada madrastra. Y lo más frustrante es que tendrá razón, ya que cobran una fortuna por la visita de la comisión, y si algo sale mal, nadie les devolverá.
El técnico del proveedor llegó, levantó las manos y dijo que el paciente estaba más muerto que vivo, y que esperar una nueva placa tomaría al menos un mes. La comisión ya estaba a la puerta, y había pocas opciones. La primera: quitar el variador de un chiller 'sano' y colocarlo en el 'enfermo', y luego intercambiarlos hasta que concluyan las pruebas. No es hacer trampa, por si acaso: de acuerdo con el reglamento de pruebas, uno de los tres chillers tiene que ser de reserva, así que el escenario es completamente viable. La segunda opción: intentar encontrar un nuevo variador en la hora y media que quedaba. Llamamos a nuestro técnico de refrigeración en Moscú. El técnico contactó a un conocido dentro de la representación en Rusia del proveedor. A su vez, él presionó a la representación del fabricante en los Países Bajos y... en media hora ya estaban instalando la nueva placa. La certificación fue un éxito.
Las cosas pendientes
Tampoco se sabe cuánto tiempo pasa, pero siempre llega el momento en la construcción en que se van todos los subcontratistas y quedan las cosas pendientes. Se trata de trabajos no terminados, no de las personas que los dejaron, por si acaso. El último en llegar es quien se queda a recoger.
Una vez hicimos un centro de datos en el sótano: racks en dos filas, alineados por un lado para que la puerta pudiera abrirse. Por eso, entre una fila y la pared se creó un hueco, y el cliente se negaba a firmar el acta de recepción debido a ese espacio. El técnico y el gerente de proyecto se fueron temprano por la mañana a «Leroy» a comprar espuma, pintura, anclajes y taparon diligentemente el hueco para que coincidiera con los racks. Todo entregado.
Una vez, después de que los subcontratistas de calefacción se fueron, se detectó una discrepancia en el proyecto: deberían haber 7 radiadores, pero solo había 6. Fuimos a contar — estaba todo correcto, realmente no habían instalado un radiador en el pasillo. Ahora es tarde para tomar «Borjomi», ya todo estaba montado y presurizado. El cliente se echa ceniza en la cabeza porque ya se habían firmado los actos. Una vez más, «Leroy» salvó el día — compramos un calentador eléctrico, pasamos un grupo de cables al pasillo y el domingo por la mañana lo instalamos nosotros mismos, el cliente está contento.
Una vez nos dejaron un mágico nada en lugar de un tabique contra incendios. En el data center, el conducto de ventilación de suministro del segundo piso va al sótano, a través de una habitación que, según la clasificación contra incendios, pertenece a otra categoría que las que están arriba y abajo de ella. En la práctica, esto significa que el conducto debe tener una compuerta cortafuegos, y alrededor debe haber un tabique resistente al fuego. Alrededor de nuestro brilloso conducto con compuerta cortafuegos había un agujero, adivina quién y cómo lo cerró. «Leroy Merlin» no patrocinó esta publicación, qué lástima.
Dale Carnegie está fumando nerviosamente.
Hace mucho tiempo, cuando la hierba era más verde y el dólar estaba a 30 y algo, hicimos un centro de datos para un banco en el centro histórico de Moscú. Teníamos que completar el proyecto en un plazo muy ajustado. Pero las calles allí son estrechas, las entradas del edificio también, levantar varias toneladas de equipo al piso necesario por las escaleras es prácticamente imposible. Le dijimos al cliente que había que cargarlo con grúa directamente en el techo, y el cliente respondió en el espíritu de «eres un vaquero, salta tú». Es una buena idea, pero ahora coordina la llegada de una grúa de 120 toneladas con las autoridades como la GIBDD. Y preferiblemente, ya ayer. Buena suerte con eso, no llegarán a tiempo — multa.
La situación es crítica, el tiempo apremia y decidimos arriesgarnos, al fin y al cabo, las multas de la GIBDD en comparación con las multas por incumplimiento de plazos son simplemente un paseo. En la mañana del sábado, trajimos una grúa de 16 metros, esperando que pudiéramos hacer todo rápido. Pasadas un par de horas, llegó el oficial y, tímidamente, pidió permiso. Por supuesto, no lo teníamos. Y no se sabe cómo habría terminado todo si no hubiera estado con nosotros un vendedor con habilidades diplomáticas extraordinarias.
Él apartó al oficial a un lado, le explicó algo durante 5 minutos, el policía cambió de expresión varias veces, pero al final se subió a su UAZ y gritó que, si algo pasaba, él vendría y nos ayudaría. Qué argumentos usó, el vendedor aún no lo revela.
¡Ayúdenme, por favor!
Más allá de las montañas y los campos, pero dentro del Tercer Anillo de Transporte, había… no, no una cabaña, sino una construcción gubernamental bastante seria. Una complicada noche de trabajo, estamos descargando equipo. El último camión con una carga de 15 toneladas sale hacia la única intersección del territorio, algo explota con un sonido fuerte y la máquina se hunde en el barro. A las 5 de la mañana, la construcción comienza a cobrar vida, el conductor de un camión de hormigón detrás de nuestro camión, recordando a las mujeres caídas, pregunta de manera poco sutil: ¿acaso no planeamos movernos? Porque su hormigón se está enfriando. Y a nosotros nos gustaría, porque a las 7 de la mañana llegará uno de los numerosos encargados de uno de los ministros y, si ve este desastre, explotará sobre todos: desde los ingenieros hasta los altos directivos.
El técnico corre hacia el grúista local, le suplica que levante el metal de la caja para que podamos meter otro camión debajo. Pero este se niega rotundamente, ni siquiera por dinero. Nuestro ingeniero resolvió la situación; se arregló a través del jefe de ese grúista. Finalmente, llegamos a destino con el metal, pero ya un poco canosos.
Y luego nos volvimos aún más canosos, en el mismo sitio. Sucedió un epic fail en el sentido más literal.
Hay una cosa: la carretilla elevadora telescópica. Se utiliza cuando no hay espacio en la obra para maniobrar y se necesita levantar una carga hacia arriba y colocarla cuidadosamente. Con su ayuda, tuvimos que descargar un módulo de 1.5 toneladas a través de una ventana. No había señales de problemas: según las especificaciones, la máquina debería soportar más de 2 toneladas. Pero cuando faltaba exactamente medio metro para la ventana, las "horquillas" de la carretilla se rompieron, y el metal se vino abajo desde esa altura. No había otra opción: llamamos al fabricante para que viniera a realizar las reparaciones. Sus técnicos llegaron y... se negaron a entrar en la obra. Porque había que caminar por un sendero, y en el sendero había una excavadora trabajando. Nosotros, ya acostumbrados: esperamos 10 segundos, mientras el brazo estaba girado hacia el lado opuesto del sendero, y corrimos. Eso dejó sorprendidos a los chicos. Tuvimos que presentar esta peculiaridad como una atracción interesante, un tipo de “Fort Boyard”, y finalmente nos repararon el módulo.
Karma no instantáneo
Pronto, la historia se cuenta, pero el trabajo no se hace tan rápido, especialmente cuando se trata de firmar los certificados de recepción y entrega de los trabajos realizados. Una vez construimos un excelente centro de datos para una empresa. Pero el rey, el cliente, decidió someternos a la última prueba:
— En sus especificaciones hay 100 tuercas en la bandeja, pero he contado 97. Corrijan las especificaciones y los presupuestos, o no firmaré nada.
Y cada vez viajábamos a tierras lejanas, y contábamos junto con el rey las piezas de sujeción para los conductos de aire, las tuercas, los tornillos. Cada vez resultaba que eran 99, y así sucesivamente. Y no teníamos paz. Finalmente, acumulamos tantos gastos internos que nuestra jefatura no pudo soportarlo. Dijeron: que hagan lo que quieran — nadie más irá allí. Y así nos quedamos sin firmas.
…Y un año después, el cliente viene por sí mismo y pregunta amablemente dónde podría firmar. Resultó que la oficina de auditoría había llegado, y tenía equipo no registrado por un monto con siete ceros.
¡Wingardium Leviosa!
Érase una vez un buen cliente que decidió comprar un viejo edificio para un centro de datos. Pero su alegría no duró mucho: algo extraño comenzó a suceder en la sala de baterías. Entonces nos llamó para que le ayudáramos, para ver lo maravilloso y consultarle. Llegamos a su casa, entramos en la sala de baterías y ahí estaba... las paredes levitando del suelo por tres lados. ¿Y por qué no? Simplemente pusieron 4 toneladas de baterías en el suelo y comenzaron a hundirse. Este es un problema común con las baterías: es importante calcular correctamente la carga sobre las estructuras y prever, marcos de descarga para que los pisos no se derrumben como una casa de cartas.
Pero la guinda del pastel de esta pesadilla arquitectónica en el edificio fue la completa ausencia de cimientos. Las paredes simplemente estaban sobre una capa de arena, debajo de la cual había un suelo poco amigable. Empezamos a pensar en cómo salvar al paciente, y al final propusimos un complejo sistema de silicificación: se perfora el suelo en varios lugares y se inyecta una solución estabilizadora. No devolvió el suelo a las alturas originales, pero al menos dejó de hundirse.
La batalla de los dos yokozuna
En cierto reino, en cierto estado de oficina, estábamos haciendo la automatización: para el centro de datos en uno de los pisos, para gestionar el clima - para todo. ¡Decenas de armarios de automatización, kilómetros de cableado de baja tensión!
Una característica de esa oficina era su propio complejo de spa con sauna. Cuando desarrollamos el proyecto, se suponía que no se utilizaría la sala de vapor con frecuencia. Pero el ingeniero asume, y el cliente dispone: la alta dirección se enganchó tanto en el estilo de vida saludable que dejaron la sauna encendida todo el tiempo, porque tarda demasiado en calentar.
Resultado: la automatización detecta el aumento de temperatura de la sauna - enciende el aire acondicionado a una mayor potencia para compensarlo. Ayuda más o menos. El aire acondicionado sigue esforzándose - la atmósfera se calienta, porque la automatización no sospecha que alguien puede estar en el vapor tanto tiempo. El aire acondicionado entra en paranoia y decide: “No es culpa de ellos, soy yo. Todos mis esfuerzos son en vano. Parece que estoy roto”, lo que informa a la consola de control. El operador suspira y presiona el botón “tarea eliminada”. Y así, cada día.
Con un ligero movimiento de la mano
Aún tenemos muchas historias en nuestros archivos, pero no todas caben aquí. Aquí están tres cuentos finales: sobre manos torcidas.
La primera historia trata sobre cómo, en un edificio, además de la sala de servidores, hicimos un reforzamiento del flujo de aire en los vestíbulos del ascensor y en los huecos. Lo hicimos, nos fuimos del sitio, esperamos a que otro contratista terminara los trabajos de acabado, y regresamos para probar el sistema. Activamos el refuerzo de aire — el falso techo se infló de repente, los paneles cayeron al suelo con un estruendo y todo se transformó en un estilo 'loft' en un segundo. Resultó que los chicos que instalaron el techo olvidaron colocar los paneles con perforaciones para el aire. En realidad, ni se dieron cuenta de su existencia, simplemente tomaron de un paquete abierto — y ya, no prestaron atención al embalaje con perforados, no miraron el proyecto.
La segunda epopeya también trata sobre el techo. En un centro de datos había un pasillo bastante estrecho, y la renovación de aire en la habitación con estantes de baterías debía ser bastante intensa, por lo que las comunicaciones iban a lo largo de todo el techo. Los valientes que hicieron el falso techo no se complicaron y... atornillaron los sujetadores de las suspensiones directamente en nuestros desafortunados conductos de aire. Cualquier conducto ya vibra un poco cuando los extractores están funcionando, y cuando tiene un montón de agujeros y irregularidades, los sonidos del Apocalipsis están asegurados. Les devolvimos a los honorables montadores tales correctivos que las heridas en los conductos milagrosamente se curaron. A expensas de ellos, por supuesto.
La tercera historia ocurrió cuando hacíamos la automatización para el sistema de aire acondicionado tecnológico. Le entregamos al contratista del cliente un sensor de temperatura y, sin pensarlo dos veces, le pedimos que lo instalara en el calefactor de introducción. En las instalaciones de introducción siempre hay un calentador para el aire exterior: ya sea de agua o eléctrico. Este maravilloso individuo cumplió todo sin objeciones. Es decir, tomó y atornilló un tornillo directamente en el tubo del calefactor de agua, con todas las consecuencias que esto conlleva (en el sentido más literal). Por suerte, había técnicos de aire acondicionado en el sitio con gas MAPP — rápidamente soldaron la fuga.
Enlaces:
- Si algo, escriba aquí: build@croc.ru
Fuente: habr.com
