{"id":35887,"date":"2019-10-31T22:07:25","date_gmt":"2019-10-31T19:07:25","guid":{"rendered":"https:\/\/prohoster.info\/blog\/budni-data-tsentra-neochevidnye-melochi-za-7-let-ekspluatatsii-i-prodolzhenie-pro-krysu\/"},"modified":"2019-10-31T22:07:25","modified_gmt":"2019-10-31T19:07:25","slug":"budni-data-tsentra-neochevidnye-melochi-za-7-let-ekspluatatsii-i-prodolzhenie-pro-krysu","status":"publish","type":"post","link":"https:\/\/prohoster.info\/es\/blog\/administrirovanie\/budni-data-tsentra-neochevidnye-melochi-za-7-let-ekspluatatsii-i-prodolzhenie-pro-krysu","title":{"rendered":"La vida en un centro de datos: detalles poco evidentes tras 7 a\u00f1os de operaci\u00f3n. Y un nuevo episodio sobre la rata","gt_translate_keys":[{"key":"rendered","format":"text"}]},"content":{"rendered":"

\"La
\n
\nD\u00e9jenme decirles: la rata en el servidor que trajimos hace un par de a\u00f1os, a la que le dimos t\u00e9 despu\u00e9s de recibir una descarga el\u00e9ctrica, probablemente ha escapado. Porque de alguna manera vimos a su amiga durante una revisi\u00f3n. Y decidimos inmediatamente instalar repelentes ultras\u00f3nicos. <\/p>\n

Ahora, alrededor del centro de datos hay una tierra maldita: las aves no se posan en el edificio y, probablemente, todos los topos y lombrices han escapado. Nos preocupaba que el sonido pudiera<\/a><\/noindex> causar un fallo en el HDD, pero verificamos, las frecuencias no son las adecuadas.<\/p>\n

La siguiente historia es mucho m\u00e1s divertida. Una vez recibimos un equipo por un par de millones de rublos en una caja con sensores de inclinaci\u00f3n, vibraci\u00f3n y humedad. Todo intacto. Abrimos la embalaje con cuidado, pero el metal estaba doblado. M\u00edstica. <\/p>\n

El chasis estaba completamente arqueado. Muy bonito. <\/a><\/noindex><\/p>\n

Detective<\/h3>\n

\nNo habr\u00edamos prestado atenci\u00f3n a esto, porque el chasis met\u00e1lico doblado era casi un dise\u00f1o est\u00e9tico. Muy bonito, sin astillas. Y si no hubiera habido otros equipos iguales cerca, ni siquiera hubi\u00e9ramos pensado en que algo no estaba bien al abrirlo. Pero hab\u00eda otros iguales, solo que con una forma geom\u00e9trica m\u00e1s correcta. <\/p>\n

Por suerte, el desempaquetado de tales equipos se graba en video (recomiendo a todos que adquieran este h\u00e1bito), por lo que pudimos demostrar al fabricante que lleg\u00f3 as\u00ed. Un embalaje completo y un chasis cuidadosamente doblado no son el resultado de un golpe de los cargadores. Lo m\u00e1s probable es que se da\u00f1\u00f3 antes de salir hacia Rusia. <\/p>\n

El proveedor dice: \u201cEh, chicos, \u00bfqu\u00e9 tal si lo cambiamos inmediatamente bajo garant\u00eda?\u201d. Y aqu\u00ed nos esperaba una trampa \u00e9pica. <\/p>\n

El asunto es que la aduana permite la importaci\u00f3n de dicho equipo seg\u00fan los documentos sin derecho a reexportaci\u00f3n. Es decir, se puede traer, pero no se puede revender a nadie fuera de Rusia. Cuando enviamos de regreso un bloque de alimentaci\u00f3n quemado, por ejemplo, todo est\u00e1 claro. Es un repuesto, un bloque de alimentaci\u00f3n. <\/p>\n

Y aqu\u00ed necesit\u00e1bamos enviar de regreso todo:
\n \u2014 Chicos, miren, estamos enviando el equipo de vuelta al fabricante.
\n \u2014 \u00bfEl equipo completo?
\n \u2014 S\u00ed.
\n \u2014 \u00bfModelo tal?
\n \u2014 S\u00ed.
\n \u2014 \u00bfPuede funcionar?
\n \u2014 No lo sabemos, no lo encendimos.
\n \u2014 Entonces, es un equipo completo.
\n \u2014 Pero no funciona.
\n \u2014 Bueno, miren, es un equipo completo de este modelo. Sin derecho a reexportaci\u00f3n. No lo dejaremos pasar.<\/p>\n

En resumen, hubo muchas fintas antes de que nos di\u00e9ramos cuenta de que no lo est\u00e1bamos exportando, sino devolvi\u00e9ndolo. Al final, logramos hacerlo todo. <\/p>\n

Tambi\u00e9n hab\u00eda cubresapatos.<\/h3>\n

\nHace muchos a\u00f1os, al principio, tuvimos la primera m\u00e1quina autom\u00e1tica, el sue\u00f1o de un administrador. Simplemente cargas los cubrezapatos en ella, y ella los desempaqueta autom\u00e1ticamente, los abre y los coloca en la posici\u00f3n donde solo necesitas pisar. \u00a1Pum! Y listo. <\/p>\n

Aproximadamente seis meses despu\u00e9s, hab\u00eda masticado cerca de cien paquetes de cubrezapatos y se atasc\u00f3. Result\u00f3 que ten\u00eda tantas piezas m\u00f3viles que hab\u00eda que repararla cada mes con nuestra carga (tenemos muchos ingenieros-clientes que caminan por el sitio, ya que somos un centro de datos comercial), o simplemente comprar una nueva. <\/p>\n

El segundo problema fue que en una de las limpiezas regulares encontramos una \"toallita azul\", que estaba colgando de la rejilla de uno de sus soportes de prueba. Un forense en forma de ingeniero del equipo X identific\u00f3 el fragmento del cubrezapato. Result\u00f3 que en la cl\u00ednica, con los cubrezapatos, es c\u00f3modo: caminas media hora y ya est\u00e1. Pero algunos ingenieros pueden trabajar todo el d\u00eda con el hardware. Arrastrando los pies. Mucho. Y los cubrezapatos se desgastan en peque\u00f1os fragmentos que vuelan por la sala de m\u00e1quinas. <\/p>\n

Casi de inmediato compramos una nueva m\u00e1quina para cubrezapatos. Optamos por una termom\u00e1tica: es una m\u00e1quina en la que se carga una pel\u00edcula, y esta pel\u00edcula se encoge t\u00e9rmicamente sobre el zapato. Bonito, eficiente, y resistente. Se desparrama menos. Estuvo con nosotros un buen tiempo, pero hab\u00eda que cambiar la pel\u00edcula termoencogible aproximadamente cada 1-2 horas, porque la suela tend\u00eda a despegarse. <\/p>\n

Al principio pensamos que no ten\u00edamos suerte, que la gente de alguna manera resolv\u00eda este problema. Pero no. Preguntamos a colegas de Occidente: la misma historia. Al final, empezamos a pensar en c\u00f3mo hacerlo bien. Volver de la sala de m\u00e1quinas por nuevos cubrezapatos es, seamos sinceros, una idea bastante mala. Encontramos limpiadores industriales para obras y f\u00e1bricas. Es algo as\u00ed como caminos que los trabajadores siguen al entrar al taller. Los caminos, llenos de rodillos, limpian todo y est\u00e1n dise\u00f1ados de tal manera que, quieras o no, atrapan y limpian. Cuestan entre quinientos mil y un mill\u00f3n de rublos. Investigamos y encontramos uno similar por 200 mil, pero hay que meter el pie manualmente. En tama\u00f1os, se parece a una m\u00e1quina de limpiar zapatos. Te acercas, metes el pie, lo mastica y te lo devuelve limpio. La colocamos en la entrada del centro de datos. <\/p>\n

Funciona bien, salvo por dos matices. Primero, se hizo evidente bastante r\u00e1pido que esto est\u00e1 bien para nosotros, los ingenieros. Pero en la pr\u00e1ctica, en el centro de datos, vienen a ver personas muy diversas, entre las que se encuentran ejecutivos de grandes empresas. Con zapatos de piel de drag\u00f3n. Y ellos incluso tienen un cepillo para aplicar crema a los zapatos que cuesta m\u00e1s que mis zapatillas de entrenamiento; all\u00ed eligen el pelaje especialmente. Ellos se negaban a meter los pies en nuestro maravilloso dispositivo. El segundo problema surgi\u00f3 en invierno: cuando los zapatos est\u00e1n realmente muy embarrados, no puede sacar todo del profundo perfil. Luego caminas por el pasillo, dejando huellas de ectoplasma. <\/p>\n

Decidimos hacerlo de forma sencilla. Colocamos una dispensadora de cubrezapatos al lado. De todos modos, tenemos que duplicar todo por norma. <\/p>\n

Surgi\u00f3 un nuevo problema. Observando el comportamiento de los ingenieros-clientes, vimos la siguiente escena: primero met\u00edan el pie en la m\u00e1quina de limpieza, y luego se pon\u00edan los cubrezapatos de la dispensadora. Ahora colgamos un letrero que dice que se elija uno u otro, y es mejor limpiarse, pero si los principios de vida proh\u00edben limpiar los zapatos, entonces p\u00f3nganse los cubrezapatos. Se supon\u00eda que era un ticket que durar\u00eda un par de d\u00edas, pero se alarg\u00f3 mucho, y se cerr\u00f3. Aqu\u00ed est\u00e1 el dispositivo:<\/p>\n

\"La
\n <\/p>\n

Dos veces \"ku\"<\/h3>\n

\nSeg\u00fan los requisitos de PCI DSS, es necesario poder distinguir visualmente los roles de las personas en el centro de datos. Sin mirar la credencial y leer algo, sino visualmente, como los militares se distinguen por los epauletos, solo que a\u00fan m\u00e1s brillante. Decidimos no complicarlo y utilizamos el viejo y querido m\u00e9todo chatlano: diferenciaci\u00f3n de color en los pantalones. Concretamente, empezamos a hacer cintas de credenciales de diferentes colores. El verde, como el que m\u00e1s les gusta, fue de inmediato tomado por nuestros administradores. <\/p>\n

Suena simple, pero esto caus\u00f3 tres efectos inesperados:<\/p>\n

    \n
  1. Se necesitaban retractores para la retractaci\u00f3n autom\u00e1tica de estas credenciales al usarlas (son esos dispositivos que regulan la longitud de la cinta por s\u00ed mismos). Escribimos un pliego de condiciones que contemplaba todos los deseos de todos los departamentos. Fue un error estrat\u00e9gico. Color, formato, material, retractor no pl\u00e1stico, hilo de metal para aplicar el logo, que estuviera cosido en la cinta. Los dispositivos resultaron tan caros que luego tuvimos que recortar requisitos y cambiar el formato. <\/li>\n
  2. Cuando la diferenciaci\u00f3n de cintas comenz\u00f3 a funcionar, se volvi\u00f3 muy conveniente. Los contratistas tienen un tipo de cintas, los administradores externos tienen otras, y nuestros administradores tienen otras distintas. Es f\u00e1cil ver qui\u00e9n tiene qu\u00e9 rol. En electricidad \u2014 solo grises, en aire acondicionado \u2014 azules. Y aqu\u00ed se necesitaban cintas para los conductores (es un rol separado, pueden entrar a la zona de descarga, pero no pueden salir de ella excepto hacia afuera). Al principio, no necesitaban permisos. Primero les d\u00e1bamos cintas sin permisos. Luego, los de seguridad decidieron que eso era extra\u00f1o y degradante para la dignidad de los conductores. Tienen su propia l\u00f3gica militar, por lo que ahora los conductores vienen a recoger su permiso ya con cinta, pero ese permiso no les permite entrar a ning\u00fan lado. Desde el punto de vista de seguridad, esto sirve como un marcador que indica que esa persona fue chequeada por seguridad. <\/li>\n
  3. Uno de nuestros ingenieros propuso en lugar de cintas, hacer su\u00e9teres de uniforme de color verde. Y envi\u00f3 una propuesta de racionalizaci\u00f3n. Hicimos un compromiso: dejamos los permisos con cinta y adem\u00e1s realmente confeccionamos su\u00e9teres de uniforme verdes. Ahora tenemos uniforme para los administradores. Los de seguridad apoyaron la broma y la incluyeron en los reglamentos. Ahora es obligatorio (pantalones, camisa, su\u00e9ter, pero el su\u00e9ter se puede quitar). <\/li>\n<\/ol>\n

    \nAdem\u00e1s, nuestros clientes a menudo se quejaban de las rutas incorrectas en los mapas hacia la entrada de nuestro centro de datos 'Compresor'. Escrib\u00edas la direcci\u00f3n y el camino se mostraba incorrecto. Al final, los visitantes tomaban el camino equivocado porque hab\u00eda una v\u00eda de tren, y detr\u00e1s de ella hab\u00eda un embotellamiento, y no hay forma de dar la vuelta. Al principio quer\u00edamos poner se\u00f1ales sobre la carretera. Hay un servicio en la ciudad \u2014 colocar se\u00f1ales amarillas adicionales debajo de las se\u00f1ales comunes, las cuales se consideran publicidad. Y el precio de estas es como el de la publicidad: en la carretera Entusiastas, un letrero cuesta un mill\u00f3n de rublos al a\u00f1o. Al mismo tiempo, escribimos a Yandex y, sorprendentemente, respondieron. Y dejaron de hacer desmanes. Incluso se pueden se\u00f1alar los diodos de las puertas: entrada por unas, salida por otras. <\/p>\n

    Google, si nos est\u00e1s leyendo, ten en cuenta que todav\u00eda tienes un problema, y no sabemos a qui\u00e9n dec\u00edrselo para que nos escuchen. <\/p>\n

    En las cartas de invitaci\u00f3n insertamos enlaces no solo a la direcci\u00f3n, sino a la direcci\u00f3n con la ruta trazada desde la geolocalizaci\u00f3n del usuario. Como resultado, ahora cometen menos errores. <\/p>\n

    Proyectores gobo y otros detalles<\/h3>\n

    \n\u00bfSab\u00edas qu\u00e9 son los proyectores gobo? Nosotros tampoco lo sab\u00edamos. Un d\u00eda pensamos en c\u00f3mo marcar las filas de los bastidores. Los propios bastidores, por supuesto, est\u00e1n marcados con etiquetas r\u00e1pidas especiales, pero son visibles desde una distancia de 1-2 metros. La sala tiene 500 m\u00b2, as\u00ed que es f\u00e1cil perderse all\u00ed. Por eso, decidimos abordar la tarea de marcar las filas. Comenz\u00f3 una lluvia de ideas. \u00bfC\u00f3mo marcar, con qu\u00e9 y d\u00f3nde? En el suelo, en la pared, se\u00f1ales en el techo, etc. Y ah\u00ed fue cuando un colega vio que en \"IKEA\" antes hab\u00eda pegatinas desgastables en el suelo, y luego aparecieron flechas luminosas. As\u00ed que decidimos revertirlo de manera simple: ir a \"IKEA\" y revisar uno de los proyectores. No pudimos sacarlo: mientras llev\u00e1bamos sillas, un vendedor nos pregunt\u00f3 qu\u00e9 est\u00e1bamos haciendo. De inmediato ayud\u00f3, diciendo que eso era un gobo. Resulta que no es el proyector en s\u00ed, sino una placa o lente para una imagen en color. Ese filtro de luz es el gobo. Un proyector cuesta desde 40,000 rublos (tiene una l\u00e1mpara potente para uso diurno), y nosotros tenemos 14 filas en cada uno de los cuatro salones de m\u00e1quinas. As\u00ed que pusimos etiquetas. <\/p>\n

    Adem\u00e1s, nuestros esquemas en las paredes se desvanecen con los a\u00f1os. Los hemos cambiado a laminados, con \"bolsillos\" especiales integrados para el revizorro. En nuestro caso, el revizorro es el ingeniero jefe, cuya responsabilidad es verificar la relevancia de todos los esquemas colocados en el centro de datos. Todos los esquemas deben revisarse y firmarse anualmente por este revizorro. La existencia de un peque\u00f1o cuaderno en el bolsillo del esquema hace que este procedimiento sea m\u00e1s sencillo y no requiera sustituir el propio esquema cada tres a\u00f1os. \u00a1Beneficio!<\/p>\n

    Realizamos una limpieza rotativa del falso suelo por fuera. Tenemos limpiezas regulares, as\u00ed como metodolog\u00edas y horarios para estas. Pero las pesadas ruedas de los bastidores dejan marcas. Hicimos la limpieza. Ahora estamos nerviosos: no parece que se haya hecho con un gran cuidado, pero s\u00ed aparecieron brillos desde ciertos \u00e1ngulos para algunas personas, bueno, para aquellos que tienen sus marcadores seg\u00fan su gusto. Ahora estamos pensando y buscando alg\u00fan tipo de producto qu\u00edmico que blanquee el suelo y le d\u00e9 brillo. Para que incluso los elegidos no tengan preguntas.<\/p>\n

    \u00bfHas visto los mostradores de consola? Son como mesas de buffet m\u00f3viles, solo que en lugar de bebidas hay un terminal para conectarse al mostrador. Bueno, estas consolas tienen ruedas que se desprenden y se quedan atascadas, como los carritos de supermercado. Nos ha molestado mucho. Al final, la \u00fanica forma de revivirlas fue comprar una rueda nueva. Pero conseguir ruedas espec\u00edficas para nuestros modelos no fue posible; preguntamos a todos los proveedores. As\u00ed que decidimos dise\u00f1ar nuestro propio mostrador, enfoc\u00e1ndonos en la facilidad de movimiento por el \u00e1rea de m\u00e1quinas y la capacidad de reparaci\u00f3n. El resultado fue muy bueno. <\/p>\n

    Hubo una historia con calcetines sint\u00e9ticos. Existe un dispositivo llamado pulseras antist\u00e1ticas. Es cuando te acercas al mostrador, conectas la pulsera a tierra en el mostrador, y se conecta con el sistema de igualaci\u00f3n de potenciales. As\u00ed que, aunque el mostrador est\u00e1 aterrizado, puede resultar que el ingeniero no lo est\u00e9. Colegas de trabajos anteriores contaron que en un par de ocasiones vieron chispas en las c\u00e1maras de vigilancia, y nosotros decidimos, por precauci\u00f3n, obligar a todos a usarla conforme al reglamento. <\/p>\n

    Incidentes cr\u00edticos<\/h3>\n

    \nDesde el punto de vista serio, hubo una situaci\u00f3n en la que todos los chillers se apagaron de golpe. Los chillers no est\u00e1n protegidos por un SAI, porque creemos en la f\u00edsica, y como reserva de temperatura tenemos una piscina con agua enfriada. Si algo se apaga, no se necesitan bater\u00edas para alimentar los chillers que enfr\u00edan el agua, sino simplemente el agua fr\u00eda ya lista. Es conveniente y simple, pero hay un matiz. En los chillers hay una automatizaci\u00f3n de protecci\u00f3n que los apaga si hay par\u00e1metros peligrosos en la red el\u00e9ctrica. Si la entrada se apaga, encendemos el grupo electr\u00f3geno y los chillers se alimentan de ellos. Todo estar\u00eda bien, si no vivi\u00e9ramos en Rusia. Hemos tenido muchas ca\u00eddas en la red, pero todo estuvo bien. Sin embargo, una vez hubo un pico brusco primero hacia abajo, luego hacia arriba de repente, y luego de nuevo hacia abajo, en unos pocos segundos los par\u00e1metros de entrada cambiaron aproximadamente 4 veces. Los chillers se apagaron, naturalmente. Primero intentamos encenderlos de forma remota, pero se protegieron muy bien, en modo de emergencia. Tuvimos que ir a pie al techo y encenderlos manualmente. Lo importante es que, seg\u00fan el est\u00e1ndar Tier III, tal situaci\u00f3n es una raz\u00f3n leg\u00edtima para detener un centro de datos. No tuvimos detenciones porque la gente en el lugar es competente y tiene formaci\u00f3n con simulacros. Por esto, nuestros usuarios nos evaluaban regularmente para asegurarse de que cumplimos con TIII Operational. Si acaso, hemos pasado la recertificaci\u00f3n de usuarios para TIII Gold - Sostenibilidad Operacional. En el mercado comercial ruso de centros de datos, no hay nada mejor, excepto que solo uno tiene el mismo logro. Centro de datos<\/a><\/noindex>. Cabe destacar que recertificarse es m\u00e1s dif\u00edcil que obtener un certificado desde cero, ya que revisan el per\u00edodo anterior como si no fuera as\u00ed, y se requieren muchas m\u00e1s pruebas.<\/p>\n

    Hubo un incidente interesante con las c\u00e1maras. Decidimos recalcular las zonas ciegas por si acaso, dibujamos las intersecciones, construimos las diagonales de los \u00e1ngulos de visi\u00f3n en el plano, y de repente encontramos una zona muerta de aproximadamente 30 cent\u00edmetros por 15 metros justo en el centro de una de las salas. Estrecha y larga. No hay una igual en la sala adyacente. Result\u00f3 que la c\u00e1mara giratoria se hab\u00eda movido lentamente con el tiempo, de modo que ahora mostraba aproximadamente un grado y medio m\u00e1s a la izquierda de lo que deb\u00eda en la posici\u00f3n extrema. <\/p>\n

    Otro gran caso ocurri\u00f3 en la publicaci\u00f3n sobre el reemplazo de un SAI<\/a><\/noindex>.<\/p>\n

    Enlaces<\/h3>\n

    <\/p>\n