{"id":35887,"date":"2019-10-31T22:07:25","date_gmt":"2019-10-31T19:07:25","guid":{"rendered":"https:\/\/prohoster.info\/blog\/budni-data-tsentra-neochevidnye-melochi-za-7-let-ekspluatatsii-i-prodolzhenie-pro-krysu\/"},"modified":"2019-10-31T22:07:25","modified_gmt":"2019-10-31T19:07:25","slug":"budni-data-tsentra-neochevidnye-melochi-za-7-let-ekspluatatsii-i-prodolzhenie-pro-krysu","status":"publish","type":"post","link":"https:\/\/prohoster.info\/pt\/blog\/administrirovanie\/budni-data-tsentra-neochevidnye-melochi-za-7-let-ekspluatatsii-i-prodolzhenie-pro-krysu","title":{"rendered":"O dia a dia do data center: pequenas coisas n\u00e3o t\u00e3o \u00f3bvias ap\u00f3s 7 anos de opera\u00e7\u00e3o. E a continua\u00e7\u00e3o sobre o rato","gt_translate_keys":[{"key":"rendered","format":"text"}]},"content":{"rendered":"

\"O
\n
\nDeixe-me dizer logo: aquele rato no servidor que trouxemos, que ajudamos a se recuperar com ch\u00e1 ap\u00f3s levar um choque, provavelmente escapuliu. Porque certa vez vimos uma amiga dela durante a rotina de inspe\u00e7\u00e3o. E decidimos imediatamente instalar repelentes ultrass\u00f4nicos. <\/p>\n

Agora, a terra em volta do data center est\u00e1 amaldi\u00e7oada: p\u00e1ssaros n\u00e3o pousam no pr\u00e9dio, e, provavelmente, todos os toupeiras e vermes fugiram. Ficamos preocupados que o som poderia<\/a><\/noindex> causar falhas no HDD, mas verificamos, as frequ\u00eancias n\u00e3o s\u00e3o as adequadas.<\/p>\n

A pr\u00f3xima hist\u00f3ria \u00e9 muito mais divertida. Certa vez, recebemos um equipamento que custou alguns milh\u00f5es de rublos em uma caixa com sensores de inclina\u00e7\u00e3o, vibra\u00e7\u00e3o e umidade. Tudo intacto. Retiramos a embalagem com cuidado, mas o dispositivo estava dobrado. Mist\u00e9rio. <\/p>\n

O chassi est\u00e1 completamente curvado. Simplesmente bonito. <\/a><\/noindex><\/p>\n

Detetive<\/h3>\n

\nN\u00e3o ter\u00edamos dado muita aten\u00e7\u00e3o a isso, pois o chassi de metal curvado era quase uma obra de design. Bonito assim, sem lascas. E se n\u00e3o houvesse outros equipamentos semelhantes ao lado, nem pensar\u00edamos durante a abertura que algo estava errado. Mas havia similares, apenas com uma geometria mais correta. <\/p>\n

Por sorte, a abertura desse tipo de equipamento \u00e9 gravada em v\u00eddeo (recomendo a todos adotarem esse h\u00e1bito), ent\u00e3o conseguimos provar ao fabricante que ele chegou assim. Embalagem intacta e chassi cuidadosamente dobrado \u2014 isso n\u00e3o \u00e9 um impacto de operadores de carga. Provavelmente, ele foi danificado antes de sair para a R\u00fassia. <\/p>\n

O fornecedor diz: \"Ei, pessoal, vamos troc\u00e1-lo para voc\u00eas na garantia\". E ent\u00e3o nos deparamos com uma armadilha \u00e9pica. <\/p>\n

O fato \u00e9 que a alf\u00e2ndega permite a importa\u00e7\u00e3o desse tipo de equipamento com a documenta\u00e7\u00e3o sem direito \u00e0 exporta\u00e7\u00e3o. Ou seja, voc\u00ea pode trazer, mas n\u00e3o pode revender para fora da R\u00fassia. Quando enviamos de volta uma fonte de alimenta\u00e7\u00e3o queimada, por exemplo, tudo \u00e9 claro. Trata-se de um componente, uma fonte de alimenta\u00e7\u00e3o. <\/p>\n

Mas aqui era preciso enviar tudo de volta:
\n \u2014 Pessoal, vejam, estamos devolvendo o equipamento ao fabricante.
\n \u2014 O equipamento inteiro?
\n \u2014 Sim.
\n \u2014 O modelo \u00e9 esse?
\n \u2014 Sim.
\n \u2014 Pode funcionar?
\n \u2014 N\u00e3o sabemos, n\u00e3o ligamos.
\n \u2014 Significa que \u00e9 um equipamento completo.
\n \u2014 Mas ele n\u00e3o est\u00e1 funcionando.
\n \u2014 Mas vejam, \u00e9 um equipamento completo desse modelo. Sem direito \u00e0 reexporta\u00e7\u00e3o. N\u00e3o vamos deixar passar.<\/p>\n

Em suma, houve muitos esfor\u00e7os antes de descobrirmos que n\u00e3o est\u00e1vamos exportando, mas devolvendo. No final, conseguimos resolver tudo. <\/p>\n

Tamb\u00e9m havia capachos<\/h3>\n

\nH\u00e1 muitos anos tivemos nossa primeira m\u00e1quina autom\u00e1tica, o sonho de um administrador. Voc\u00ea carrega pacotes de capas de sapato, e ela as desembrulha sozinha, abre e as coloca na posi\u00e7\u00e3o onde \u00e9 necess\u00e1rio apenas pisar. Toc toc e pronto. <\/p>\n

Aproximadamente seis meses depois, ela mastigou cerca de cem pacotes de capas de sapato e engasgou. Descobrimos que havia tantas pe\u00e7as m\u00f3veis que precis\u00e1vamos consert\u00e1-la a cada m\u00eas com nossa carga (temos muitos engenheiros-clientes circulando, pois somos um data center comercial), ou ent\u00e3o era necess\u00e1rio comprar uma nova. <\/p>\n

O segundo problema \u00e9 que, em uma das limpezas regulares, encontramos uma \"pequena toalha azul\" pendurada em uma das grade de nossos testes. O legista, atuando como engenheiro da equipe X, identificou um fragmento de uma capa de sapato. Descobrimos que, na cl\u00ednica, as capas de sapato s\u00e3o pr\u00e1ticas: voc\u00ea usa por meia hora e acabou. Mas alguns engenheiros passam o dia inteiro trabalhando com o hardware. Arrastando os p\u00e9s. Muito arrastando. E as capas se desgastam em pequenos retalhos que voam pela sala de m\u00e1quinas. <\/p>\n

Quase imediatamente compramos uma nova m\u00e1quina para capas de sapato. Optamos pela termom\u00e1quina: \u00e9 uma m\u00e1quina onde se carrega um filme, e ela encolhe cuidadosamente esse filme sobre o sapato. Bonito, eficiente, dur\u00e1vel. Menos chance de se espalhar. Ficou conosco por um bom tempo, mas era necess\u00e1rio trocar o filme de encolhimento a cada 1-2 horas, porque a sola tinha o h\u00e1bito de se desprender sozinha. <\/p>\n

No come\u00e7o pensamos que estava sendo s\u00f3 nossa m\u00e1 sorte, enquanto os outros pareciam resolver essa quest\u00e3o. Mas n\u00e3o era bem assim. Perguntamos a colegas ocidentais \u2014 a mesma hist\u00f3ria. No final, come\u00e7amos a pensar em como resolver isso de forma adequada. A ideia de voltar \u00e0 sala de m\u00e1quinas para novas capas de sapato n\u00e3o era l\u00e1 muito boa. Encontramos limpadores industriais para canteiros de obras e f\u00e1bricas. S\u00e3o como passagens pelas quais os funcion\u00e1rios entram na planta. Passagens com v\u00e1rias rodas que limpam tudo, e feitas de tal forma que, gostando ou n\u00e3o, pegam e limpam. Custam entre quinhentos mil e um milh\u00e3o de rublos. Pesquisamos e encontramos uma semelhante por 200 mil, mas voc\u00ea precisa colocar o p\u00e9 manualmente. Em tamanho, \u00e9 semelhante a uma m\u00e1quina de limpar sapatos. Voc\u00ea chega, coloca o p\u00e9, e ela mastiga e devolve limpo. Colocamos na entrada do data center. <\/p>\n

Funciona muito bem, exceto por dois detalhes. O primeiro \u2014 ficou claro rapidamente que para n\u00f3s, engenheiros, est\u00e1 tudo certo. Mas na pr\u00e1tica, no data center, as pessoas que v\u00eam visitar s\u00e3o das mais diversas, entre elas executivos de grandes empresas. Com sapatos de couro feitos de pele de drag\u00e3o. E para eles, at\u00e9 a escova para aplicar o creme nos sapatos custa mais do que meus t\u00eanis de treinamento, eles escolhem o tecido especialmente. E eles se recusaram a colocar os p\u00e9s em nosso dispositivo maravilhoso. O segundo problema surgiu no inverno: quando o cal\u00e7ado est\u00e1 muito sujo, pode n\u00e3o conseguir limpar tudo com um protetor muito profundo. Depois voc\u00ea anda pelo sal\u00e3o, deixando rastros de ectoplasma. <\/p>\n

Decidimos de forma simples. Colocamos ao lado um dispensador de capas de sapato. Afinal, precisamos ter tudo em duplicado por padr\u00e3o. <\/p>\n

Um novo problema surgiu. Observando o comportamento dos engenheiros-cliente, vimos a seguinte situa\u00e7\u00e3o: eles primeiro colocavam o p\u00e9 na m\u00e1quina de limpeza e depois pegavam as capas no dispensador. Agora colocamos um aviso que diz que \u00e9 para usar um ou outro, e \u00e9 melhor se limpar, mas se os princ\u00edpios de vida deles pro\u00edbem limpar os sapatos, ent\u00e3o devem usar as capas. Parece que um ticket que deveria durar apenas alguns dias se estendeu por muito tempo e foi finalizado. Aqui est\u00e1 o dispositivo:<\/p>\n

\"O
\n <\/p>\n

Duas vezes 'ku'<\/h3>\n

\nDe acordo com os requisitos do PCI DSS, \u00e9 necess\u00e1rio ter a capacidade de distinguir visualmente os pap\u00e9is das pessoas presentes no data center. Sem precisar examinar o crach\u00e1 e ler algo nele, mas diretamente, como os militares se reconhecem por suas ins\u00edgnias, s\u00f3 que ainda mais not\u00e1vel. Decidimos n\u00e3o complicar e usamos o velho e bom m\u00e9todo chatlano \u2014 diferencia\u00e7\u00e3o de cores das cal\u00e7as. Especificamente \u2014 come\u00e7amos a fazer cintos de crach\u00e1s de cores diferentes. O verde foi imediatamente adotado por nossos administradores como seu favorito. <\/p>\n

Parece simples, mas isso causou tr\u00eas efeitos inesperados:<\/p>\n

    \n
  1. Precis\u00e1vamos de retratores para o recolhimento autom\u00e1tico desses crach\u00e1s ao serem usados (s\u00e3o dispositivos que ajustam a extens\u00e3o da fita sozinhos). Escrevemos um conjunto de requisitos que considerava todos os desejos de todos os departamentos. Isso foi um erro estrat\u00e9gico. Cor, formato, material, retrator n\u00e3o pl\u00e1stico, linha de metal, para que o logotipo pudesse ser aplicado, que ele fosse embutido na fita. Os itens acabaram t\u00e3o caros que depois tivemos que cortar requisitos e mudar o formato. <\/li>\n
  2. Quando a diferencia\u00e7\u00e3o das fitas foi implementada, tudo ficou muito mais conveniente. Os contratados t\u00eam uma fita, os administradores externos t\u00eam outra e os nossos administradores t\u00eam uma terceira. \u00c9 f\u00e1cil identificar qual o papel de cada um. Na parte el\u00e9trica, s\u00e3o apenas fitas cinzas, no ar-condicionado, fitas azuis. E ent\u00e3o surgiram fitas para os motoristas (este \u00e9 um papel separado, pois eles podem entrar na \u00e1rea de descarregamento, mas n\u00e3o podem sair, exceto para fora). Os motoristas n\u00e3o precisam de crach\u00e1. No in\u00edcio, d\u00e1vamos a eles fitas sem crach\u00e1s. Depois, os seguran\u00e7as acharam que isso era estranho e desrespeitava a dignidade dos motoristas. Eles t\u00eam sua pr\u00f3pria l\u00f3gica militar, ent\u00e3o agora os motoristas v\u00eam pegar o crach\u00e1 j\u00e1 com a fita, mas esse crach\u00e1 n\u00e3o os libera para nada. Do ponto de vista da seguran\u00e7a, isso serve como um marcador de que a seguran\u00e7a verificou essa pessoa. <\/li>\n
  3. Um de nossos engenheiros sugeriu, em vez da fita, criar su\u00e9teres uniformes de cor verde. E enviou uma proposta de racionaliza\u00e7\u00e3o. Foi feito pela metade: mantivemos os crach\u00e1s com fita, al\u00e9m de realmente costurarmos os su\u00e9teres uniformes verdes. Agora temos um uniforme para os administradores. Os seguran\u00e7as apoiaram a piada e a incluiram nos regulamentos. Agora \u00e9 obrigat\u00f3rio (cal\u00e7as, camisa, su\u00e9ter, mas o su\u00e9ter pode ser retirado). <\/li>\n<\/ol>\n

    \nAl\u00e9m disso, nossos clientes frequentemente reclamavam dos caminhos incorretos nos mapas at\u00e9 a entrada de nosso data center 'Compressor'. Voc\u00ea digita o endere\u00e7o, mas o caminho n\u00e3o \u00e9 mostrado corretamente. Os visitantes acabavam se desviando, porque havia uma ferrovia e um engarrafamento logo depois, e n\u00e3o havia como dar a volta. A princ\u00edpio, quer\u00edamos colocar placas acima das estradas. A cidade oferece esse servi\u00e7o \u2014 colocar placas amarelas adicionais sob as placas regulares, que s\u00e3o consideradas publicidade. E o pre\u00e7o \u00e9 como o da publicidade: na estrada Entuziastov, uma placa custa um milh\u00e3o de rublos por ano. Paralelamente, escrevemos para o Yandex, e eles at\u00e9 responderam de forma r\u00e1pida. E pararam de causar desordem. Agora \u00e9 poss\u00edvel indicar os diodos dos port\u00f5es: entrada por um, sa\u00edda por outro. <\/p>\n

    Google, se voc\u00ea est\u00e1 nos ouvindo, saiba que ainda tem um problema, e n\u00e3o sabemos a quem dizer isso para sermos ouvidos. <\/p>\n

    Nos convites por e-mail, inserimos links n\u00e3o apenas para o endere\u00e7o, mas para o endere\u00e7o com a rota tra\u00e7ada a partir da geolocaliza\u00e7\u00e3o do usu\u00e1rio. Como resultado, os erros de chegada diminu\u00edram. <\/p>\n

    Projetores gobo e outras pequenas coisas<\/h3>\n

    \nVoc\u00ea sabe o que s\u00e3o projetores gobo? N\u00f3s tamb\u00e9m n\u00e3o sab\u00edamos. Um dia pensamos em como marcar as filas de suportes. Os suportes, naturalmente, j\u00e1 estavam marcados com etiquetas destac\u00e1veis, mas s\u00f3 podiam ser vistos de uma dist\u00e2ncia de 1 a 2 metros. A sala tem 500 m\u00b2, ent\u00e3o \u00e9 f\u00e1cil se perder l\u00e1 dentro. Assim, decidimos marcar as filas. Come\u00e7ou um brainstorming. Como marcar, com o qu\u00ea, e onde? No piso, na parede, placas suspensas no teto, etc. E ent\u00e3o um colega notou que na \"IKEA\" havia adesivos desgast\u00e1veis no ch\u00e3o, e depois apareceram setas luminosas. Decidimos simplificar: ir \u00e0 \"IKEA\" e ver um dos projetores. N\u00e3o conseguimos pegar um; enquanto carreg\u00e1vamos cadeiras, um vendedor nos perguntou o que est\u00e1vamos fazendo. Ele imediatamente ajudou, dizendo que se tratava de um gobo. Surpreendentemente, n\u00e3o \u00e9 o pr\u00f3prio projetor, mas sim uma placa ou lente para imagem colorida. Esse filtro de luz \u00e9 o gobo. Um projetor custa a partir de 40 mil rublos (com uma l\u00e2mpada potente para uso diurno), e temos 14 filas em cada uma das quatro salas de m\u00e1quinas. Ent\u00e3o, colamos os adesivos. <\/p>\n

    Al\u00e9m disso, temos esquemas nas paredes que desbotam com o tempo. Troquei-os por laminados, com \"bolsos\" especiais embutidos para o revizor. Revizor, no nosso caso, \u00e9 o engenheiro-chefe respons\u00e1vel por verificar a atualidade de todos os esquemas expostos no data center. Todos os esquemas devem ser verificados e assinados anualmente por esse revizor. A presen\u00e7a de um pequeno caderno no bolso do esquema torna esse procedimento mais simples e evita a troca do pr\u00f3prio esquema a cada tr\u00eas anos. Lucro!<\/p>\n

    Fizemos a limpeza rotativa do piso falso por fora. Temos limpezas regulares, metodologias e hor\u00e1rios estabelecidos. Mas as marcas dos suportes pesados ficam no ch\u00e3o. Fizemos a limpeza. Agora estamos preocupados: n\u00e3o parece muito mais limpo, mas aparecem brilhos sob certos \u00e2ngulos para algumas pessoas, as que trazem seus pr\u00f3prios marcadores de acordo com sua prefer\u00eancia. Agora estamos pensando em encontrar algum produto qu\u00edmico que clareie o piso e d\u00ea brilho. Para que nem mesmo os exigentes tenham perguntas.<\/p>\n

    Voc\u00ea viu os suportes para consoles? S\u00e3o como mesas de buffet m\u00f3veis, mas em vez de bebidas, h\u00e1 um terminal para conex\u00e3o no suporte. O problema \u00e9 que as rodinhas desses suportes se soltam e emperram, como os carrinhos de supermercado. Isso nos irritou bastante. A \u00fanica solu\u00e7\u00e3o poss\u00edvel foi comprar uma nova roda. E n\u00e3o conseguimos encontrar rodas que se encaixassem exatamente nos nossos modelos; perguntamos a todos os fornecedores. No final, projetamos nossos pr\u00f3prios suportes, priorizando a facilidade de movimenta\u00e7\u00e3o no sal\u00e3o e a capacidade de reparo. Ficou muito bom. <\/p>\n

    Houve uma hist\u00f3ria com meias sint\u00e9ticas. Existe uma ferramenta chamada pulseiras antiest\u00e1ticas. Voc\u00ea se aproxima do suporte, conecta a pulseira ao aterramento no suporte, e ela se conecta ao sistema de equaliza\u00e7\u00e3o de potenciais. O suporte est\u00e1 aterrado, mas pode ser que o engenheiro n\u00e3o esteja. Colegas de empregos anteriores contaram que viram fa\u00edscas algumas vezes nas c\u00e2meras de vigil\u00e2ncia, e decidimos por aqui, para evitar problemas, obrigar todos a usarem sempre conforme o regulamento. <\/p>\n

    Incidentes cr\u00edticos<\/h3>\n

    \nFoi uma situa\u00e7\u00e3o s\u00e9ria quando todos os chillers desligaram de uma vez. Os chillers n\u00e3o s\u00e3o protegidos por UPS, porque confiamos na f\u00edsica, e como reserva para a temperatura temos uma piscina com \u00e1gua resfriada. Se algo desliga, precisamos n\u00e3o de baterias para alimentar os chillers que resfriam a \u00e1gua, mas simplesmente da pr\u00f3pria \u00e1gua fria, j\u00e1 pronta. \u00c9 pr\u00e1tico e simples, mas tem um detalhe. H\u00e1 uma automa\u00e7\u00e3o de prote\u00e7\u00e3o nos chillers que os desliga em caso de par\u00e2metros el\u00e9tricos perigosos. Se a entrada desliga, ativamos o grupo gerador e os chillers s\u00e3o alimentados por ele. Estaria tudo bem, se n\u00e3o viv\u00eassemos na R\u00fassia. J\u00e1 tivemos v\u00e1rias quedas na rede, mas tudo estava bem. Por\u00e9m, uma vez houve uma oscila\u00e7\u00e3o brusca, primeiro para baixo, depois para cima, e novamente para baixo \u2013 em poucos segundos, os par\u00e2metros da entrada mudaram cerca de 4 vezes. Os chillers, naturalmente, desligaram. Tentamos lig\u00e1-los remotamente, mas eles se protegeram de maneira muito robusta, em modo de emerg\u00eancia. Tivemos que subir ao telhado e lig\u00e1-los manualmente. O importante \u00e9 que, segundo o padr\u00e3o Tier III, tal situa\u00e7\u00e3o \u00e9 uma raz\u00e3o leg\u00edtima para a parada de um data center. N\u00e3o tivemos paradas, pois as pessoas no local t\u00eam bom senso e h\u00e1 treinamento constante. Por isso, nosso UI nos questionava regularmente para garantir a Opera\u00e7\u00e3o TIII. Se necess\u00e1rio, passamos pela re-certifica\u00e7\u00e3o do UI para TIII Gold \u2013 Sustentabilidade Operacional. No mercado comercial russo de data centers, n\u00e3o h\u00e1 nada melhor do que o nosso; apenas um outro tem a mesma conquista. Data Center<\/a><\/noindex>. \u00c9 importante ressaltar que a re-certifica\u00e7\u00e3o \u00e9 mais dif\u00edcil do que obter um certificado do zero, pois eles tamb\u00e9m verificam o per\u00edodo anterior com rigor, e s\u00e3o necess\u00e1rias muitas mais provas.<\/p>\n

    Houve um incidente interessante com as c\u00e2meras. Decidimos verificar as zonas cegas por precau\u00e7\u00e3o, desenhamos as interse\u00e7\u00f5es, constru\u00edmos as diagonais dos \u00e2ngulos de vis\u00e3o no plano, e de repente encontramos uma zona morta de aproximadamente 30 cent\u00edmetros por 15 metros bem no centro de uma das salas. Estreita e longa. N\u00e3o h\u00e1 nada semelhante na sala ao lado. Descobrimos que a c\u00e2mera rotativa se deslocou lentamente ao longo dos anos, de modo que passou a mostrar cerca de um grau e meio \u00e0 esquerda do que deveria no extremo da posi\u00e7\u00e3o. <\/p>\n

    Houve tamb\u00e9m um grande incidente relacionado ao substitui\u00e7\u00e3o de DDI UPS<\/a><\/noindex>.<\/p>\n

    Links<\/h3>\n

    <\/p>\n