Digo deseguida: esa rata do servidor traído, á que lle demos té hai un par de anos despois dunha descarga eléctrica, probablemente escapou. Porque unha vez vimos á súa amiga nunha rolda. E inmediatamente decidimos instalar repelentes de ultrasóns.
Agora hai unha terra maldita ao redor do centro de datos: ningún paxaro aterrará no edificio, e probablemente todas as toupas e vermes escaparon. Estaban preocupados por iso causar un fallo no disco duro, pero comprobado, as frecuencias non son as mesmas.
A seguinte historia é moito máis divertida. Unha vez recibimos unha peza de hardware por un par de millóns de rublos nunha caixa con sensores de inclinación, vibración e humidade. Todo é enteiro. Retire coidadosamente o envase, e a peza de ferro foi dobrada. Místico.
O corpo está recto nun arco. Tan fermoso.
Detectivo
Non lle daríamos importancia, porque o corpo metálico curvo era case unha imaxe de deseño. Tan fermoso, sen chips. E se non fose por outras pezas similares de hardware nas proximidades, nin sequera pensaríamos en desempaquetar que algo andaba mal. Pero preto había os mesmos, só cunha forma xeométrica máis regular.
Afortunadamente, o desempaquetado deste hardware está filmado (recomendo que todo o mundo adquira este hábito), polo que puidemos demostrarlle ao fabricante que chegou así. Un paquete intacto e un corpo ben dobrado non son un golpe dos motores. O máis probable é que ela resultou ferida mesmo antes de partir para Rusia.
O vendedor di: "Uh, rapaces, cambiámolo de inmediato por garantía". E entón agardábanos unha emboscada épica.
O caso é que a aduana permítenos importar este tipo de equipos con documentos sen dereito a exportar. É dicir, podes traelo, pero non podes revenderllo a alguén fóra de Rusia. Cando devolvemos unha fonte de enerxía queimada, por exemplo, todo está claro. Esta é unha peza de recambio, unha fonte de alimentación.
E entón tiven que devolver todo:
- Rapaces, mirade, estamos enviando a peza de hardware de volta ao fabricante.
- Equipo completo?
- Si.
—¿Modelo tal e tal?
- Si.
- Pode traballar?
- Non o sabemos, non o acendemos.
- Polo tanto, este é todo un equipo.
- Ben, non funciona.
- Pois mira, todo o equipamento é deste modelo. Sen dereitos de reexportación. Non te deixaremos entrar.
En xeral, houbo moito agachado antes de que nos decatamos de que non o estabamos exportando, senón que o devolvíamos. Ao final, conseguimos facer de todo.
Tamén había fundas para zapatos
Primeiro, hai moitos anos, tivemos o primeiro automático, o soño dun administrador. Cargas alí dentro un paquete de fundas de zapatos, descompáñaas por si mesmo, ábreas e ponas nunha posición na que só tes que pisalas. Chp-chpk e xa está.
Despois duns seis meses, mastigou uns cen paquetes de fundas de zapatos e atragouse. Resultou que hai tantas pezas móbiles que necesitamos reparalas unha vez ao mes na nosa carga (temos moitos enxeñeiros de clientes que andan polas instalacións, porque somos un centro de datos comercial), ou ben necesitamos mercar un novo.
O segundo problema é que máis tarde, durante unha das limpezas habituais, atopamos dalgún xeito un "trapo azul" colgado da reixa dun dos bastidores das nosas probas. O perito forense, representado por un enxeñeiro do X-Team, identificou un fragmento do corpo da tapa do calzado. Resultou que era conveniente levar cubertas de zapatos na clínica: andei media hora e iso é todo. E algúns enxeñeiros poden traballar con hardware todo o día. Barallando os pés. Barallando moito. E as tapas dos zapatos desgastanse nestes pequenos anacos que voan pola sala de turbinas.
Case inmediatamente compramos unha nova funda de zapatos. Levamos unha funda de bota térmica: esta é unha máquina na que se carga a película e encolle coidadosamente esta película na parte superior do zapato. Fermoso, eficaz, duradeiro. Menos dispersión. Tivémolo durante bastante tempo, pero tivemos que cambiar a película retráctil aproximadamente unha vez cada 1-2 horas, porque a sola tendía a caer por si mesma.
Ao principio pensamos que non tiñamos sorte, pero a xente dalgunha maneira soluciona este problema. Pero non. Preguntamos aos nosos colegas occidentais: a mesma historia. Como resultado, comezaron a pensar en como facelo correctamente. Voltar da sala de turbinas para novas fundas de zapatos é, francamente, unha idea tan tan. Atopamos produtos de limpeza industriais para obras de construción e industrias. Son algo así como camiños polos que a quenda entra no taller. Os camiños cun montón de rodillos limpan todo, e están feitos de tal xeito que queira ou non, colle e limpa. Custaron entre medio millón e un millón de rublos. Cavamos e atopamos o mesmo por 200 mil, pero hai que meter o pé. É semellante en tamaño a unha máquina pulidora de zapatos. Ti chegas, metes o pé alí dentro, ela mastigueo e devólveo limpo. Colocárono na entrada do centro de datos.
Funciona moi ben agás dous problemas. O primeiro é que axiña quedou claro que isto é normal para nós, os enxeñeiros. Pero na práctica, unha variedade de persoas acoden ao centro de datos para buscar, incluídos os altos executivos de grandes empresas. Con zapatos feitos de coiro dun cu de dragón. E mesmo para aplicar crema nos zapatos, o seu cepillo custa máis que as miñas zapatillas deportivas de adestramento, seleccionan especialmente as cerdas. Foron eles os que se negaron a poñer os pés no noso dispositivo milagre. O segundo problema xurdiu no inverno: cando os zapatos están realmente desordenados, non poden sacar todo da banda de rodadura profunda. Despois andas polo salón deixando vestixios de ectoplasma.
Decidimos simplemente. Colocamos unha funda de zapatos enrolada ao seu carón. De todos os xeitos, necesitamos duplicar todo segundo o estándar.
Xurdiu un novo problema. Observando o comportamento dos enxeñeiros dos clientes, vimos a seguinte imaxe: primeiro meteron os pés na máquina para a súa limpeza, e despois engancharon as fundas de zapatos a partir dunha funda de zapatos enrolada. Agora puxeron un sinal de que é un ou outro, e é mellor limparse, pero se os principios da vida prohiben limpar os zapatos, entón use fundas de zapatos. Parece que o billete, que foi para un par de días, pero que durou moito, estaba pechado. Aquí está o dispositivo:
"ku" dúas veces
Segundo os requisitos do PCI DSS, debes poder distinguir visualmente os roles das persoas situadas no centro de datos. Sen mirar de preto o paso e ler algo alí, pero directamente visualmente, como os militares se distinguen polos seus ombreiros, só aínda máis brillantes. Decidimos non mostrarnos e usamos o bo e vello método Chatlan: a diferenciación de cores dos pantalóns. En concreto, comezaron a facer cintas de paso de diferentes cores. Os nosos administradores tomaron inmediatamente a Green como o seu favorito.
Parece sinxelo, pero causou tres efectos inesperados:
- Necesitábanse retractores para retraer automaticamente estes pases cando se usaban (son cousas que regulan a lonxitude da cinta). Escribimos unha especificación técnica que tivo en conta todos os desexos de todos os departamentos. Este foi un erro estratéxico. Cor, formato, material, o retractor non é de plástico, a liña de pescar está feita de metal para aplicar o logotipo para que quede cosido na cinta. As pezas resultaron tan caras que logo tivemos que recortar os requisitos e cambiar o formato.
- Unha vez que a diferenciación dos pantalóns comezou a funcionar, fíxose moi conveniente. Os contratistas teñen algunhas cintas, os administradores externos outras e os nosos administradores outras. Podes ver quen ten que papel. Para electricidade - só grises, para aire acondicionado - azul. E despois necesitábamos cintas para os condutores (este é un papel separado, poden entrar na zona de descarga, pero non poden saír dela excepto fóra). Os condutores non necesitan un pase. Ao principio dámoslles cintas sen pases. Entón os gardas de seguridade decidiron que isto era completamente estraño e degradante para a dignidade humana dos condutores. Teñen a súa propia lóxica militar, polo que agora os condutores chegan a recibir un pase inmediatamente cunha cinta, pero este pase non lles permite ir a ningún lado. Desde o punto de vista da seguridade, resulta ser un marcador de que a seguridade comprobou a esta persoa.
- Un dos nosos enxeñeiros suxeriu facer xerseis de uniforme verde en lugar de cinta. E enviou unha proposta de racionalización. Fixérono a metade: deixaron os pases coa cinta, ademais de que coseron realmente os xerseis do uniforme verde. Agora temos un uniforme de administrador. Os gardas de seguridade apoiaron a broma e incluírona no regulamento. Agora é obrigatorio (pantalóns, camisa, xersei, pero o xersei pódese quitar).
Os nosos clientes tamén se queixaban de rutas irregulares nos mapas antes de entrar no noso centro de datos Compressor. Introduces o enderezo, pero a estrada aparece incorrectamente. Os visitantes acabaron rodando en dirección equivocada, porque alí había un ferrocarril, e detrás había un atasco, e alí non había forma de dar a volta. Nun primeiro momento queriamos poñer sinais enriba da estrada. A cidade ten tal servizo: coloque sinais adicionais amarelos baixo os sinais habituais, considéranse publicidade. E o prezo para eles é como a publicidade: na estrada Entuziastov, un sinal custa un millón de rublos ao ano. Ao mesmo tempo, escribimos a Yandex e ata responderon de súpeto. E deixaron de actuar. Podes incluso especificar os díodos de porta: entrada por uns, saída por outros.
Google, se nos estás lendo, sabe: aínda tes un problema e non sabemos a quen contar para que poidamos escoitarnos.
As cartas de invitación incluían ligazóns non só a un enderezo, senón a un enderezo cunha ruta baseada na xeolocalización do usuario. Como resultado, houbo menos fallos.
Proxectores Gobo e outros pequenos artigos
Sabes o que son os proxectores de gobo? Nós tampouco o sabiamos. Dalgunha maneira estabamos pensando en como marcar as filas de bastidores. Os propios bastidores, por suposto, están marcados con marcas especiais de liberación rápida, pero pódense ver a unha distancia de 1-2 metros. O salón en si ten 500 metros cadrados, polo que hai moito espazo para perderse alí. Por iso, por fin comezamos a marcar as filas. Comezou unha chuvia de ideas. Como marcar, con que e onde? No chan, na parede, letreiros no teito, etc. E entón o noso compañeiro viu que en Ikea adoitaba haber adhesivos que se desgastaban no chan, e entón apareceron frechas lixeiras. Pois decidimos revertilo dun xeito sinxelo: ir a Ikea e apagar un dos proxectores para mirar. Non o conseguimos: mentres levabamos as cadeiras, o vendedor preguntou que estabamos a facer. E enseguida axudou, dicindo que era un gobo. Resulta que este non é o proxector en si, senón unha placa ou unha lente para unha imaxe en cor. Este filtro é un gobo. Un proxector custa a partir de 40 mil rublos (hai unha lámpada potente para o uso durante o día) e temos 14 filas en cada unha das catro salas de máquinas. Por iso lle puxemos adhesivos.
Tamén temos diagramas nas paredes que se esvaecen co paso dos anos. Cambiámolas por laminadas, con petos especiais “cosidos” para auditores. No noso caso, o inspector é o enxeñeiro xefe, cuxas responsabilidades inclúen comprobar a relevancia de todos os esquemas situados no centro de datos. Polo tanto, todos os esquemas deben ser verificados anualmente e asinados por tal auditor. E a presenza dunha pequena revista especial no peto do diagrama facilita este procedemento e non require substituír o diagrama cada tres anos. Beneficio!
Fixemos unha limpeza rotativa do chan elevado no exterior. Temos limpezas regulares, temos métodos e horarios de limpeza. Pero as rodas dos pesados bastidores deixan marcas. Fixemos a limpeza. Agora estamos nerviosos: non parece moito máis ordenado, pero apareceron puntos destacados desde certos ángulos para certas persoas, ben, que teñen os seus propios rotuladores para os seus gustos. Agora estamos a pensar niso e buscamos algún tipo de produto químico que branquee o chan e engada brillo. Para que nin os seleccionados teñan preguntas.
Viches os racks da consola? Son como mesas de buffet itinerantes, pero en lugar de bebidas hai un terminal para conectarse ao rack. Entón, nestes bastidores en voladizo, as rodas caen e atascanse, coma os carros dun supermercado. Estamos incriblemente fartos. Como resultado, a única forma posible de revivir é mercar unha roda nova. Pero xa non era posible conseguir rodas específicamente para os nosos modelos; entrevistamos a todos os contratistas. Como resultado, deseñamos o bastidor nós mesmos, centrándonos na facilidade de movemento pola sala de máquinas e na facilidade de mantemento. Saíu moi ben.
Había unha historia con medias sintéticas. Hai tal cousa: pulseiras antiestáticas. Isto é cando vai ao bastidor, conecta a pulseira ao chan do bastidor e comunícase co sistema de ecualización potencial. Polo tanto, o bastidor está conectado a terra, pero pode resultar que o enxeñeiro non estea conectado a terra. Compañeiros de anteriores postos de traballo contáronnos como viron chispas na videovixilancia un par de veces, e decidimos, por pecado, obrigar a todos a usala directamente segundo a normativa.
Incidentes Críticos
Nunha nota máis grave, houbo unha situación na que todos os refrixeradores foron cortados á vez. Os nosos refrixeradores non están protexidos por un UPS, porque cremos na física, e temos unha piscina de auga fría como reserva de temperatura. Se algo se apaga, non necesitas baterías para alimentar os refrigeradores que arrefrían a auga, senón simplemente a propia auga fría, xa lista. Cómodo e sinxelo, pero hai un matiz. Os refrixeradores están equipados con equipos de seguridade automáticos, que os apagan en caso de parámetros perigosos da rede eléctrica. Se a entrada está desactivada, acendemos o grupo electróxeno diésel e, a continuación, os refrixeradores son alimentados con eles. Todo estaría ben se non vivimos en Rusia. Tivemos cortes de rede moitas veces, pero todo estaba ben. Pero un día houbo un salto brusco, primeiro cara abaixo, despois bruscamente cara arriba e despois de novo cara abaixo - en poucos segundos os parámetros de entrada cambiaron unhas 4 veces. Os refrixeradores apagáronse, claro. Primeiro tentamos acendelos de forma remota, pero protexéronse de forma moi fiable, como unha emerxencia. A quenda tiña que andar cos pés no tellado e acendelos manualmente. O que é importante, segundo o estándar TierIII, tal situación é un motivo lexítimo para pechar o centro de datos. Non tivemos parada, porque a xente está no chan coa cabeza, e hai simulacro con exercicios. Para iso, a IU simplemente fodiunos regularmente, para estar seguro de TIII Operational. En todo caso, pasamos a recertificación da IU a TIII Gold - Sostibilidade operativa. No mercado comercial ruso de centros de datos non hai nada máis xenial, agás o noso, só un ten o mesmo logro . Observo que a recertificación é máis difícil que conseguir un certificado dende cero, xa que comproban o período anterior coma se non fose vostede mesmo, e son necesarias moitas máis probas.
Houbo un incidente interesante coas cámaras. Decidimos recalcular os puntos cegos por se acaso, debuxamos interseccións, trazamos diagonais de ángulos de visión no plano e, de súpeto, atopamos un punto cego duns 30 centímetros por 15 metros xusto no centro dun dos salóns. Estreito e longo. Non hai tal cousa na sala do lado. Resultou que a cámara xiratoria se moveu lentamente ao longo dos anos, polo que comezou a mostrar un grao e medio á esquerda do que debería na posición extrema.
Houbo outro gran incidente na publicación .
referencias
- и
- O meu correo: [protexido por correo electrónico]
Fonte: www.habr.com