{"id":35887,"date":"2019-10-31T22:07:25","date_gmt":"2019-10-31T19:07:25","guid":{"rendered":"https:\/\/prohoster.info\/blog\/budni-data-tsentra-neochevidnye-melochi-za-7-let-ekspluatatsii-i-prodolzhenie-pro-krysu\/"},"modified":"2019-10-31T22:07:25","modified_gmt":"2019-10-31T19:07:25","slug":"budni-data-tsentra-neochevidnye-melochi-za-7-let-ekspluatatsii-i-prodolzhenie-pro-krysu","status":"publish","type":"post","link":"https:\/\/prohoster.info\/it\/blog\/administrirovanie\/budni-data-tsentra-neochevidnye-melochi-za-7-let-ekspluatatsii-i-prodolzhenie-pro-krysu","title":{"rendered":"Vita quotidiana in un data center: dettagli inaspettati dopo 7 anni di operazioni. E continuazione sulla ratta.","gt_translate_keys":[{"key":"rendered","format":"text"}]},"content":{"rendered":"

\"Vita
\n
\nDico subito: quel topo nel server che ci hanno portato, che abbiamo fatto bere t\u00e8 dopo che \u00e8 stato colpito da una scarica elettrica un paio d'anni fa, probabilmente \u00e8 scappato. Perch\u00e9 abbiamo visto un giorno durante un controllo la sua amica. E abbiamo subito deciso di installare dei dissuasori ad ultrasuoni. <\/p>\n

Ora intorno al data center la terra \u00e8 maledetta: sugli edifici non si posano gli uccelli e, probabilmente, sono scappati tutti i talponi e i vermi. Eravamo preoccupati che il suono potesse<\/a><\/noindex> causare guasti agli HDD, ma abbiamo controllato, le frequenze non erano quelle.<\/p>\n

La storia successiva \u00e8 molto pi\u00f9 divertente. Un giorno abbiamo ricevuto un pezzo di hardware da diversi milioni di rubli in una scatola con sensori di inclinazione, vibrazione e umidit\u00e0. Tutto integro. Abbiamo aperto la confezione con cura, ma il pezzo di metallo era piegato. Mistero. <\/p>\n

Il case era proprio a forma di arco. Molto bello. <\/a><\/noindex><\/p>\n

Detective<\/h3>\n

\nNon avremmo prestato attenzione a questo, perch\u00e9 il case metallico piegato sembrava quasi un oggetto di design. Bello, senza scheggiature. E se non ci fossero stati altri pezzi simili intorno, non ci saremmo neppure accorti durante lo scarto che qualcosa non andava. Ma accanto c\u2019erano pezzi simili, solo con una forma geometrica pi\u00f9 corretta. <\/p>\n

Per fortuna, lo scarto di questo tipo di hardware viene registrato in video (consiglio a tutti di prendere questa abitudine), quindi siamo riusciti a dimostrare al produttore che era arrivato in quel modo. Un imballaggio intatto e un case piegato con cura non sono colpa dei facchini. Molto probabilmente, si era danneggiato prima di partire per la Russia. <\/p>\n

Il fornitore dice: \u00abEhi, ragazzi, che ne dite di cambiarlo subito in garanzia?\u00bb. E qui ci aspettava un'epica trappola. <\/p>\n

Il fatto \u00e8 che la dogana ci consente di importare tali attrezzature secondo i documenti senza diritto di riesportazione. Cio\u00e8, possiamo portarlo, ma non possiamo rivenderlo a qualcuno al di fuori della Russia. Quando rispediamo un'unit\u00e0 di alimentazione bruciata, ad esempio, \u00e8 chiaro. \u00c8 un pezzo di ricambio, un\u2019unit\u00e0 di alimentazione. <\/p>\n

Ma qui bisognava rimandare tutto indietro:
\n \u2014 Ragazzi, guardate, stiamo restituendo l'hardware al produttore.
\n \u2014 L'attrezzatura intera?
\n \u2014 S\u00ec.
\n \u2014 Il modello \u00e8 questo?
\n \u2014 S\u00ec.
\n \u2014 Pu\u00f2 funzionare?
\n \u2014 Non lo sappiamo, non l'abbiamo accesa.
\n \u2014 Quindi \u00e8 un'attrezzatura integra.
\n \u2014 Ma non funziona.
\n \u2014 Beh, guardate, \u00e8 un'attrezzatura integra di questo modello. Senza diritto alla riesportazione. Non lo lasciamo passare.<\/p>\n

In generale, ci sono voluti molti tentativi prima di risolvere che non lo esportavamo, ma lo restituivamo. Alla fine siamo riusciti a sistemare tutto. <\/p>\n

C'erano anche copripiedi<\/h3>\n

\nAnni fa avevamo il nostro primo dispositivo automatico, il sogno di un admin. Carichi le sovrascarpe in pacchi, lei le disimballa da sola, le apre e le posiziona pronte per essere indossate. Zip-zip ed \u00e8 fatto. <\/p>\n

Circa sei mesi dopo, ha masticato circa cento pacchi di sovrascarpe e si \u00e8 soffocata. Si \u00e8 scoperto che aveva cos\u00ec tante parti mobili che bisognava ripararla ogni mese a causa del nostro carico (abbiamo molti ingegneri-clienti che girano nel sito, poich\u00e9 siamo un data center commerciale), oppure dovevamo acquistarne una nuova. <\/p>\n

Il secondo problema \u00e8 che in una delle pulizie regolari abbiamo trovato un 'panno blu' che penzolava sulla griglia di uno dei rack del suo test. L'autopsia effettuata da un ingegnere del team X ha identificato un frammento del corpo di una sovrascarpa. Si \u00e8 scoperto che in clinica con le sovrascarpe \u00e8 comodo: ci si cammina per mezz'ora e basta. Ma alcuni ingegneri possono lavorare tutto il giorno con il ferro. Strisciando con i piedi. Strisciando molto. E le sovrascarpe si consumano in quei piccoli straccetti che volano per il sala macchine. <\/p>\n

Quasi subito abbiamo comprato una nuova macchina per sovrascarpe. Abbiamo preso una termomacchina: \u00e8 un dispositivo in cui si carica una pellicola, e lei la restringe termicamente sopra la scarpa. Bella, efficace, resistente. Meno si disperde. \u00c8 rimasta con noi per un po', ma dovevamo cambiare la pellicola termoretraibile ogni 1-2 ore, perch\u00e9 la suola tendeva a staccarsi. <\/p>\n

Inizialmente pensavamo che fosse solo una nostra sfortuna, mentre per gli altri fosse tutto risolto. Ma no. Abbiamo chiesto ai colleghi occidentali e la storia \u00e8 la stessa. Alla fine abbiamo iniziato a pensare a come fare in modo che funzionasse bene. Tornare nella sala macchine a prendere nuove sovrascarpe \u00e8 un'idea, diciamo, poco pratica. Abbiamo trovato pulitori industriali per cantieri e fabbriche. Si tratta di strisce lungo le quali entra il personale. Le strisce con una serie di rulli puliscono tutto e sono fatte in modo tale che, sia che tu lo voglia o meno, catturano e puliscono. Costano circa mezzo milione a un milione di rubli. Abbiamo frugato e trovato una simile per 200 mila, ma il piede deve inserirlo da solo. Per dimensioni \u00e8 simile a una macchina per la pulizia delle scarpe. Ci si avvicina, inserisci il piede, lei lo 'mastica' e lo restituisce pulito. L'abbiamo messa all'ingresso del data center. <\/p>\n

Funziona alla grande, tranne per due dettagli. Primo: \u00e8 diventato evidente abbastanza in fretta che per noi ingegneri va bene. Ma nella pratica, nel data center, ci sono tutte le variet\u00e0 di persone che vengono a vedere, tra cui i top manager di grandi aziende. Con scarpe di pelle di drago. E per loro anche la spazzola per applicare la crema sulle scarpe costa pi\u00f9 delle mie scarpe da allenamento, scelgono anche la trama appositamente. E sono stati proprio loro a rifiutarsi di infilarvi i piedi nel nostro dispositivo miracoloso. Il secondo problema \u00e8 emerso d'inverno: quando le scarpe sono davvero molto fangose, non riesce a pulire tutto dal profondo battistrada. Poi cammini per la sala e lasci dietro di te tracce di ectoplasma. <\/p>\n

Abbiamo deciso di fare semplice. Abbiamo messo vicino un dispenser di sovrascarpe a rotolo. Tanto abbiamo comunque bisogno di duplicare tutto secondo gli standard. <\/p>\n

\u00c8 emerso un nuovo problema. Osservando il comportamento degli ingegneri-clienti, abbiamo notato la seguente scena: prima infilavano il piede nella macchina per la pulizia e poi si mettevano le sovrascarpe dal dispenser a rotolo. Ora abbiamo appeso una targhetta che dice o l'uno o l'altro, ed \u00e8 meglio pulirsi, ma se i principi di vita impediscono di pulire le scarpe, allora mettete le sovrascarpe. Sembrava un ticket che sarebbe dovuto durare un paio di giorni, ma si \u00e8 allungato per molto tempo ed \u00e8 stato chiuso. Ecco il dispositivo:<\/p>\n

\"Vita
\n <\/p>\n

Due volte \"ku\"<\/h3>\n

\nIn base ai requisiti PCI DSS, \u00e8 necessario poter distinguere visivamente i ruoli delle persone all'interno del data center. Non guardando il pass e leggendo qualcosa, ma proprio visivamente, come i militari si riconoscono per le spalline, ma ancora di pi\u00f9. Abbiamo deciso di non fare i fighi e abbiamo utilizzato il vecchio caro metodo chatlano: la differenziazione cromatica dei pantaloni. Specificamente, abbiamo iniziato a fare nastri di accesso di diversi colori. Il verde, che \u00e8 il preferito, \u00e8 stato subito preso dai nostri amministratori. <\/p>\n

Sembra semplice, ma questo ha causato tre effetti imprevisti:<\/p>\n

    \n
  1. Ci servivano dei retractor per l'auto-inserimento di questi passaggi quando indossati (sono quelle cose che regolano automaticamente la lunghezza del nastro). Abbiamo scritto un documento dei requisiti, dove abbiamo considerato tutte le richieste di tutti i dipartimenti. \u00c8 stata una scelta strategica sbagliata. Colore, formato, materiale, il retractor non in plastica, la corda in metallo, per applicare il logo, per essere cucito nel nastro. Le cose sono risultate cos\u00ec costose che poi \u00e8 stato necessario ridurre i requisiti e cambiare il formato. <\/li>\n
  2. Quando la differenziazione dei pantaloni ha iniziato a funzionare, \u00e8 diventato molto comodo. I contractor hanno un tipo di nastro, gli amministratori esterni un altro, e i nostri amministratori un terzo. \u00c8 evidente chi ha quale ruolo. Nella parte elettrica \u2014 solo grigi, nell'aria condizionata \u2014 blu. Qui avevamo bisogno di nastri per i conducenti (\u00e8 un ruolo a parte, possono entrare nell'area di scarico, ma non possono uscirne se non per andare all'esterno). Non hanno bisogno di permessi. Inizialmente fornivamo loro nastri senza permessi. Poi, gli addetti alla sicurezza hanno deciso che fosse strano e degradante per la dignit\u00e0 dei conducenti. Hanno la loro logica militare, quindi ora i conducenti vengono a ritirare il permesso insieme al nastro, ma questo permesso non consente di entrare da nessuna parte. Da un punto di vista della sicurezza, diventa un marcatore che attesta che la sicurezza ha controllato quella persona. <\/li>\n
  3. Uno dei nostri ingegneri ha suggerito di sostituire il nastro con maglioni uniformi di colore verde. Ha inviato una proposta di razionalizzazione. Abbiamo ottenuto un compromesso: i permessi con il nastro sono stati mantenuti e abbiamo effettivamente cucito maglioni verdi. Ora abbiamo l'uniforme per gli amministratori. Gli addetti alla sicurezza hanno accolto la battuta e l'hanno inserita nei regolamenti. Ora \u00e8 obbligatoria (pantaloni, camicia, maglione, ma il maglione pu\u00f2 essere tolto). <\/li>\n<\/ol>\n

    \nInoltre, i nostri clienti si sono spesso lamentati dei percorsi errati nelle mappe per l'ingresso nel nostro data center \"Compressore\". Inserisci l'indirizzo e la strada risulta sbagliata. Alla fine, i visitatori si ritrovavano nei posti sbagliati, a causa della ferrovia e del traffico che ne seguiva, e l\u00ec non c'era modo di girare. Inizialmente volevamo appendere dei segnali sopra la strada. C'\u00e8 un servizio municipale che consente di inserire segnali gialli aggiuntivi sotto i segnali ordinari, considerati pubblicit\u00e0. E il costo \u00e8 quello della pubblicit\u00e0: un'insegna sull'autostrada Enthusiast costa un milione di rubli all'anno. Parallelamente, abbiamo scritto a Yandex, e hanno persino risposto all'improvviso. E hanno smesso con le stranezze. Possono anche specificare i diodi dei cancelli: ingresso da uno, uscita da un altro. <\/p>\n

    Google, se ci leggete, sappiate che avete ancora un problema, e non sappiamo a chi dirlo perch\u00e9 ci sentano. <\/p>\n

    Nelle email invito abbiamo inserito link non solo all'indirizzo, ma all'indirizzo con il percorso calcolato dalla geolocalizzazione dell'utente. Di conseguenza, si sono sbagliati di meno. <\/p>\n

    Proiettori gobo e altre piccole cose<\/h3>\n

    \nSai cosa sono i gobo-proiettori? Anche noi non lo sapevamo. Pensavamo a come etichettare le file di supporti. I supporti stessi, ovviamente, sono contrassegnati con etichette a sgancio rapido, ma si vedono a una distanza di 1-2 metri. La sala \u00e8 di 500 mq, quindi c'\u00e8 la possibilit\u00e0 di perdersi. Cos\u00ec ci siamo messi a pensare a come etichettare le fila. \u00c8 iniziato il brainstorming. Come etichettare, con cosa e dove? Sui pavimenti, sulle pareti, segnaletica sul soffitto ecc. E a quel punto un nostro collega ha notato che da Ikea a un certo punto c'erano adesivi che si usuravano, e poi sono apparse frecce luminose. Cos\u00ec abbiamo deciso di fare un passo semplice: andare da Ikea e controllare uno dei proiettori. Non siamo riusciti a prenderlo: mentre spostavamo delle sedie, il venditore ci ha chiesto cosa stessimo facendo. E subito ha aiutato, dicendo che era un gobo. Si scopre che non \u00e8 il proiettivo stesso, ma una piastra o una lente per immagini colorate. Questo filtro luminoso \u00e8 il gobo. Un proiettore costa a partire da 40.000 rubli (ha una lampada potente per uso diurno), e noi abbiamo 14 file in ciascuna delle quattro sale macchine. Quindi abbiamo appiccicato le etichette. <\/p>\n

    Inoltre, abbiamo mappe sulle pareti che sbiadiscono col passare degli anni. Le abbiamo sostituite con versioni laminate, complete di tasche speciali per il revisore. Il revisore, nel nostro caso, \u00e8 l'ingegnere principale, il cui compito \u00e8 quello di controllare l'aggiornamento di tutte le mappe inserite nel centro dati. Quindi, tutte le mappe devono essere verificate e firmate annualmente da un revisore. La presenza di un piccolo registro speciale nella tasca della mappa rende questa procedura pi\u00f9 semplice e non richiede la sostituzione della mappa stessa ogni tre anni. Profitto!<\/p>\n

    Abbiamo fatto una pulizia rotativa del pavimento falso dall'esterno. Abbiamo pulizie regolari, ci sono metodologie e tempi di svolgimento delle pulizie. Ma le ruote dei pesanti supporti lasciano segni. Abbiamo effettuato la pulizia. Adesso siamo preoccupati: non sembra migliorato molto, ma sono apparsi dei riflessi sotto angolazioni specifiche per alcune persone, quelle che hanno i propri pennarelli di gusto personale. Ora stiamo pensando e cercando qualche prodotto chimico che possa sbiancare il pavimento e conferirgli lucentezza. Per evitare che anche le persone selezionate abbiano domande.<\/p>\n

    Hai visto le postazioni console? Quelli sono tavolini da buffet mobili, solo che al posto delle bevande c'\u00e8 un terminale per collegarsi alla postazione. Ecco, le ruote di queste postazioni console si staccano e si bloccano, proprio come nei carrelli del supermercato. Ci ha infastiditi incredibilmente. In effetti, l'unico modo per riportarle in vita era comprare una ruota nuova. E trovare ruote specifiche per i nostri modelli non \u00e8 stato possibile, abbiamo interrogato tutti i fornitori. Alla fine, abbiamo progettato noi stessi una postazione, ponendo l'accento sulla facilit\u00e0 di movimento nell'area delle macchine e sulla riparabilit\u00e0. \u00c8 venuto davvero bene. <\/p>\n

    C'\u00e8 stata una storia con i calzini sintetici. C'\u00e8 una cosa chiamata braccialetti antistatici. \u00c8 quando ti avvicini alla postazione, colleghi il braccialetto a terra sulla postazione e questo si connette al sistema di messa a terra. Ebbene, la postazione \u00e8 a terra, ma pu\u00f2 accadere che l'ingegnere non lo sia. I colleghi dei miei precedenti posti di lavoro raccontavano di aver visto alcune scintille nelle registrazioni delle telecamere e noi abbiamo deciso di obbligare tutti a utilizzare i braccialetti per regolamento. <\/p>\n

    Incidenti critici<\/h3>\n

    \nDal serio: c'\u00e8 stata una situazione in cui tutti i chiller si sono spenti simultaneamente. I chiller non sono protetti da UPS, poich\u00e9 crediamo nella fisica, e come riserva termica abbiamo una piscina con acqua refrigerata. Se qualcosa viene disattivato, non servono batterie per alimentare i chiller che raffreddano l'acqua, ma semplicemente dell'acqua fredda gi\u00e0 pronta. \u00c8 comodo e semplice, ma c'\u00e8 un dettaglio. I chiller sono dotati di un'automazione di protezione che li disattiva in caso di parametri pericolosi della rete elettrica. Se si disattiva l'input, accendiamo il DSG, e da quel momento i chiller vengono alimentati da loro. Andrebbe tutto bene se non vivessimo in Russia. Abbiamo avuto molte volte cali di rete, ma tutto era a posto. Una volta, per\u00f2, si \u00e8 verificato un improvviso picco: prima in basso, poi rapidamente in alto, e poi di nuovo in basso \u2013 in pochi secondi i parametri di input sono cambiati di circa 4 volte. I chiller si sono spenti, naturalmente. All'inizio abbiamo provato a riaccenderli da remoto, ma si sono protetti molto bene, in modalit\u00e0 di emergenza. \u00c8 stato necessario che qualcuno andasse fisicamente sul tetto per accenderli manualmente. \u00c8 importante notare che, secondo lo standard Tier III, tale situazione \u00e8 una ragione legittima per fermare il data center. Non ci siamo fermati perch\u00e9 le persone sul posto sono competenti e c'\u00e8 addestramento continuo. Per questo motivo, ci siamo stati sottoposti a controlli regolari da parte di UI per essere certi del TIII Operational. Se necessario, abbiamo superato la ricertificazione UI per TIII Gold \u2013 Operational Sustainability. Sul mercato commerciale russo dei data center non c'\u00e8 nulla di meglio; solo uno possiede una simile certificazione. Data Center<\/a><\/noindex>. Va notato che ricertificarsi \u00e8 pi\u00f9 difficile che ottenere un certificato da zero, poich\u00e9 controllano anche il periodo precedente, richiedendo molte pi\u00f9 prove.<\/p>\n

    C'\u00e8 stato un interessante incidente con le telecamere. Abbiamo deciso di controllare le zone cieche per ogni evenienza, abbiamo disegnato le intersezioni, costruito le diagonali degli angoli di visuale sulla pianta, e improvvisamente abbiamo trovato una zona morta di circa 30 centimetri su 15 metri proprio al centro di una delle sale. Stretta e lunga. Non c'\u00e8 nulla del genere nella sala accanto. Abbiamo scoperto che la telecamera mobile si era lentamente spostata nel corso degli anni, mostrando circa un grado e mezzo a sinistra rispetto a quanto dovesse mostrare nella posizione estrema. <\/p>\n

    C'\u00e8 stata anche una grande situazione nel post sulla sostituzione in fase di riparazione del DDIUPS<\/a><\/noindex>.<\/p>\n

    Link<\/h3>\n

    <\/p>\n