Dirò subito: quel topo nel server portato, a cui abbiamo dato il tè un paio di anni fa dopo una scossa elettrica, molto probabilmente è scappato. Perché una volta abbiamo visto la sua amica in giro. E abbiamo subito deciso di installare i repellenti ad ultrasuoni.
Ora intorno al data center c'è una terra maledetta: nessun uccello atterrerà sull'edificio, e probabilmente tutte le talpe e i vermi sono scappati. Ne eravamo preoccupati causa il guasto dell'HDD, ma controllato, le frequenze non sono le stesse.
La prossima storia è molto più divertente. Una volta abbiamo ricevuto un componente hardware per un paio di milioni di rubli in una scatola con sensori di inclinazione, vibrazione e umidità. Tutto è intero. Rimosso con attenzione l'imballaggio e il pezzo di ferro era piegato. Mistico.
Il corpo è dritto descrivendo un arco. Così bello.
Storia poliziesca
Non attribuiremmo alcuna importanza a questo, perché il corpo in metallo curvato era quasi un'immagine di design. Così bello, senza patatine. E se non fosse stato per altri componenti hardware simili nelle vicinanze, non avremmo nemmeno pensato di disimballare che qualcosa non andava. Ma lì vicino c'erano gli stessi, solo con una forma geometrica più regolare.
Fortunatamente il disimballaggio di questo hardware è filmato (consiglio a tutti di prendere questa abitudine), quindi abbiamo potuto dimostrare al produttore che è arrivato così. Un pacco intatto e una carrozzeria ben piegata non sono un colpo da parte dei traslocatori. Molto probabilmente è rimasta ferita anche prima di partire per la Russia.
Il venditore dice: "Uh, ragazzi, cambiamolo subito per voi in garanzia". E poi ci aspettava un'imboscata epica.
Il fatto è che la dogana ci consente di importare tali apparecchiature con documenti senza diritto di esportazione. Cioè, puoi portarlo, ma non puoi rivenderlo a qualcuno fuori dalla Russia. Quando rispediamo indietro un alimentatore guasto, ad esempio, tutto è chiaro. Questo è un pezzo di ricambio, un alimentatore.
E poi ho dovuto rispedire tutto indietro:
- Ragazzi, guardate, stiamo rispedindo il pezzo di hardware al produttore.
- Intera attrezzatura?
- Sì.
— Modello così e così?
- Sì.
- Può funzionare?
— Non lo sappiamo, non l'abbiamo acceso.
- Quindi questo è un intero pezzo di equipaggiamento.
- Beh, non funziona.
- Beh, guarda, tutta l'attrezzatura è di questo modello. Nessun diritto di riesportazione. Non ti faremo entrare.
In generale, ci sono state molte occupazioni abusive prima che capissimo che non lo stavamo esportando, ma restituendolo. Alla fine siamo riusciti a fare tutto.
C'erano anche dei copriscarpe
Innanzitutto, molti anni fa, abbiamo avuto il primo automatico, il sogno di ogni amministratore. Ci carichi un pacco di copriscarpe, lui stesso li disimballa, li apre e li mette in una posizione in cui devi solo calpestarli. Chp-chpk ed è fatta.
Dopo circa sei mesi, masticò un centinaio di pacchi di copriscarpe e soffocò. Si è scoperto che ci sono così tante parti mobili che dobbiamo ripararle una volta al mese a nostro carico (abbiamo molti tecnici clienti che girano per la struttura, perché siamo un data center commerciale), oppure dobbiamo acquistare uno nuovo.
Il secondo problema è che più tardi, durante una delle pulizie periodiche, in qualche modo abbiamo trovato un “piccolo straccio blu” appeso alla griglia di uno dei rack dei nostri test. Il perito forense, rappresentato da un ingegnere dell'X-Team, ha individuato un frammento del corpo del copriscarpe. Si è scoperto che in clinica era conveniente indossare dei copriscarpe: ho camminato per mezz'ora e basta. E alcuni ingegneri possono lavorare con l'hardware tutto il giorno. Piedi strascicati. Mescolando molto. E i copriscarpe si consumano formando questi piccoli brandelli che volano nella sala turbine.
Abbiamo quasi subito acquistato un nuovo copriscarpe. Abbiamo preso una custodia termica per scarponi: si tratta di una macchina in cui viene caricata la pellicola e termoretrae accuratamente questa pellicola sopra la scarpa. Bello, efficace, durevole. Meno dispersione. Ce l'abbiamo da parecchio tempo, ma abbiamo dovuto cambiare la pellicola termoretraibile circa una volta ogni 1-2 ore, perché la suola tendeva a staccarsi da sola.
All'inizio pensavamo di essere sfortunati, ma le persone in qualche modo risolvono questo problema. Ma no. Abbiamo chiesto ai nostri colleghi occidentali: la stessa storia. Di conseguenza, hanno iniziato a pensare a come farlo normalmente. Tornare dalla sala turbine per nuovi copriscarpe è, francamente, un'idea così così. Abbiamo trovato detergenti industriali per cantieri e industrie. Sono qualcosa come i percorsi lungo i quali il turno entra in officina. I percorsi con un mucchio di rulli puliscono tutto e sono fatti in modo tale che, che tu lo voglia o no, catturi e pulisca. Costano da mezzo milione a un milione di rubli. Abbiamo scavato in giro e abbiamo trovato lo stesso per 200mila, ma devi metterci il piede da solo. Ha dimensioni simili a una lucidatrice per scarpe. Ti avvicini, infili il piede lì dentro, lei lo mastica e te lo restituisce pulito. L'hanno posizionato all'ingresso del data center.
Funziona benissimo tranne che per due problemi. Il primo è che è diventato subito chiaro che per noi ingegneri questo è normale. Ma in pratica, diverse persone vengono al data center per dare un'occhiata, compresi i massimi dirigenti di grandi aziende. Con scarpe fatte di pelle del culo di un drago. E anche per applicare la crema sulle scarpe, il loro pennello costa più delle mie scarpe da ginnastica, selezionano appositamente le setole. Sono stati loro a rifiutarsi di mettere piede nel nostro dispositivo miracoloso. Il secondo problema è sorto in inverno: quando le scarpe sono davvero disordinate, non riescono a far uscire tutto dal battistrada profondo. Poi cammini per la sala, lasciando tracce di ectoplasma.
Abbiamo deciso semplicemente. Accanto abbiamo posizionato un copriscarpe arrotolato. Tuttavia, dobbiamo duplicare tutto secondo lo standard.
È sorto un nuovo problema. Osservando il comportamento degli ingegneri dei clienti, abbiamo visto la seguente immagine: prima hanno infilato i piedi nella macchina per la pulizia, quindi hanno agganciato i copriscarpe da un copriscarpe arrotolato. Ora hanno messo un cartello che è l'uno o l'altro, ed è meglio pulirsi, ma se i principi della vita vietano di pulirsi le scarpe, allora indossare dei copriscarpe. Sembra che il biglietto, durato un paio di giorni, ma durato a lungo, sia stato chiuso. Ecco il dispositivo:
"ku" due volte
Secondo i requisiti PCI DSS, è necessario essere in grado di distinguere visivamente i ruoli delle persone che si trovano nel data center. Senza guardare da vicino il passo e leggere qualcosa lì, ma direttamente visivamente, come se i militari si distinguessero per gli spallacci, solo ancora più luminosi. Abbiamo deciso di non metterci in mostra e abbiamo utilizzato il buon vecchio metodo Chatlan: differenziazione dei colori dei pantaloni. Nello specifico, iniziarono a realizzare nastri passanti di diversi colori. I nostri amministratori hanno immediatamente scelto il verde come il loro preferito.
Sembra semplice, ma ha causato tre effetti inaspettati:
- Erano necessari dei riavvolgitori per ritrarre automaticamente questi passaggi quando indossati (queste sono cose che regolano da sole la lunghezza del nastro). Abbiamo scritto una specifica tecnica che ha tenuto conto di tutti i desideri di tutti i dipartimenti. Questo è stato un errore strategico. Colore, formato, materiale, il riavvolgitore non è in plastica, il filo da pesca è in metallo per applicare il logo in modo che sia cucito nel nastro. I pezzi si sono rivelati così costosi che abbiamo dovuto ridurre i requisiti e cambiare formato.
- Una volta che la differenziazione dei pantaloni ha iniziato a funzionare, è diventata molto conveniente. Gli appaltatori hanno alcuni nastri, gli amministratori esterni ne hanno altri e i nostri amministratori ne hanno altri. Puoi vedere chi ha quale ruolo. Per l'impianto elettrico - solo grigio, per l'aria condizionata - blu. E poi servivano i nastri per gli autisti (questo è un ruolo a parte, possono entrare nella zona di scarico, ma non possono uscirne se non all'esterno). I conducenti non hanno bisogno di un pass. All'inizio abbiamo dato loro i nastri senza lasciapassare. Quindi le guardie di sicurezza hanno deciso che ciò era del tutto strano e degradante per la dignità umana degli autisti. Hanno una loro logica militare, quindi ora gli autisti vengono subito per ricevere un lasciapassare con un nastro, ma questo lasciapassare non permette loro di andare da nessuna parte. Dal punto di vista della sicurezza, risulta essere un indicatore del fatto che la sicurezza ha controllato questa persona.
- Uno dei nostri ingegneri ha suggerito di realizzare maglioni verdi per l'uniforme invece dei nastri. E ha inviato una proposta di razionalizzazione. Lo hanno fatto a metà: hanno lasciato i passaggi con il nastrino, in più hanno addirittura cucito i maglioni verdi della divisa. Ora abbiamo un'uniforme da amministratore. Le guardie di sicurezza hanno sostenuto lo scherzo e lo hanno incluso nel regolamento. Adesso è obbligatorio (pantaloni, maglietta, maglione, ma il maglione si può togliere).
I nostri clienti si lamentavano spesso anche dei percorsi tortuosi sulle mappe prima di entrare nel nostro data center Compressor. Inserisci l'indirizzo, ma la strada viene visualizzata in modo errato. I visitatori finivano per rullare nella direzione sbagliata, perché lì c'era una ferrovia, e dietro c'era un ingorgo, e lì non c'era modo di tornare indietro. Inizialmente volevamo mettere dei segnali sopra la strada. La città ha un tale servizio: posiziona i cartelli gialli aggiuntivi sotto i soliti segnali, sono considerati pubblicità. E il prezzo per loro è come la pubblicità: sull'autostrada Entuziastov un cartello costa un milione di rubli all'anno. Allo stesso tempo, abbiamo scritto a Yandex e hanno persino risposto all'improvviso. E hanno smesso di fare i capricci. Puoi anche specificare i diodi di gate: ingresso attraverso alcuni, uscita attraverso altri.
Google, se ci stai leggendo, sappi: hai ancora un problema e non sappiamo a chi dirlo per farci ascoltare.
Le lettere di invito includevano collegamenti non solo a un indirizzo, ma a un indirizzo con un percorso basato sulla geolocalizzazione dell’utente. Di conseguenza, ci sono stati meno errori.
Proiettori Gobo e altri piccoli oggetti
Sai cosa sono i proiettori gobo? Non lo sapevamo neanche noi. In qualche modo stavamo pensando a come contrassegnare le file di scaffali. I rack stessi, ovviamente, sono contrassegnati con speciali contrassegni a sgancio rapido, ma possono essere visti da una distanza di 1-2 metri. La sala stessa è di 500 mq, quindi c'è molto spazio per perdersi lì. Pertanto, abbiamo finalmente iniziato a contrassegnare le righe. È iniziato un brainstorming. Come marcare, con cosa e dove? Sul pavimento, sul muro, segni sul soffitto, ecc. E poi il nostro collega ha visto che all'Ikea c'erano degli adesivi sul pavimento che si consumavano, e poi sono apparse delle frecce luminose. Ebbene, abbiamo deciso di invertire la procedura in modo semplice: andare all'Ikea e accendere uno dei proiettori per guardare. Non siamo riusciti a ottenerlo: mentre trasportavamo le sedie, il venditore ci ha chiesto cosa stessimo facendo. E lui subito ha aiutato, dicendo che era un gobo. Si scopre che questo non è il proiettore stesso, ma una piastra o una lente per un'immagine a colori. Questo filtro è un gobo. Un proiettore costa da 40mila rubli (c'è una potente lampada per l'uso diurno) e abbiamo 14 file in ciascuna delle quattro sale macchine. Ecco perché ci abbiamo messo degli adesivi.
Abbiamo anche diagrammi sui muri che sbiadiscono con il passare degli anni. Li abbiamo cambiati con quelli laminati, con speciali tasche “cucite” per gli uditori. Nel nostro caso, l'ispettore è l'ingegnere capo, le cui responsabilità includono la verifica della pertinenza di tutti gli schemi situati nel data center. Pertanto, tutti gli schemi devono essere controllati annualmente e firmati da tale revisore. E la presenza di un apposito piccolo caricatore nella tasca del diagramma facilita questa procedura e non richiede la sostituzione del diagramma stesso ogni tre anni. Profitto!
Abbiamo effettuato una pulizia rotativa del pavimento sopraelevato esterno. Abbiamo pulizie regolari, abbiamo metodi e tempi di pulizia. Ma le ruote dei pesanti scaffali lasciano segni. Abbiamo fatto le pulizie. Adesso siamo nervosi: non sembra molto più pulito, ma da certe angolazioni sono apparsi dei punti salienti per alcune persone, beh, che hanno i loro pennarelli adatti ai loro gusti. Ora ci stiamo pensando e stiamo cercando una sorta di sostanza chimica che sbianchi il pavimento e aggiunga lucentezza. In modo che anche i selezionati non abbiano domande.
Hai visto i rack della console? Sono come tavoli da buffet viaggianti, ma al posto delle bevande c'è un terminale per il collegamento allo scaffale. Quindi, su questi scaffali a sbalzo, le ruote cadono e si inceppano, come i carrelli di un supermercato. Siamo incredibilmente stufi. Di conseguenza, l’unico modo possibile per rilanciarlo è acquistare una nuova ruota. Ma non era più possibile ottenere ruote specifiche per i nostri modelli; abbiamo intervistato tutti gli appaltatori. Di conseguenza, abbiamo progettato noi stessi la scaffalatura, concentrandoci sulla facilità di movimento nella sala macchine e sulla manutenibilità. Ha funzionato molto bene.
C'era una storia con i calzini sintetici. Esiste una cosa del genere: braccialetti antistatici. Questo è quando vai alla cremagliera, colleghi il braccialetto a terra sulla cremagliera e comunica con il sistema di equalizzazione potenziale. Quindi, il rack è messo a terra, ma potrebbe risultare che l'ingegnere non è messo a terra. I colleghi dei precedenti luoghi di lavoro ci hanno raccontato di aver visto un paio di volte scintille sulla videosorveglianza e abbiamo deciso, per peccato, di obbligare tutti a utilizzarla direttamente secondo le normative.
Incidenti critici
Passando a una nota più grave, si è verificata una situazione in cui tutti i refrigeratori sono stati spenti contemporaneamente. I nostri refrigeratori non sono protetti da un UPS, perché crediamo nella fisica, e disponiamo di una vasca di acqua fredda come riserva di temperatura. Se succede qualcosa, non servono batterie per alimentare i refrigeratori che raffreddano l’acqua, ma semplicemente l’acqua fredda stessa, già pronta. Comodo e semplice, ma c'è una sfumatura. I refrigeratori sono dotati di dispositivi di sicurezza automatici che li spengono in caso di parametri pericolosi della rete elettrica. Se l'ingresso è spento, accendiamo il gruppo elettrogeno diesel e quindi i refrigeratori vengono alimentati da esso. Andrebbe tutto bene se non vivessimo in Russia. Abbiamo avuto interruzioni di rete molte volte, ma tutto andava bene. Ma un giorno si è verificato un brusco salto, prima verso il basso, poi bruscamente verso l'alto, poi di nuovo verso il basso: in pochi secondi i parametri di input sono cambiati circa 4 volte. Naturalmente i refrigeratori furono spenti. Per prima cosa abbiamo provato ad accenderli da remoto, ma si sono protetti in modo molto affidabile, come in caso di emergenza. Il turno doveva camminare con i piedi sul tetto e accenderli manualmente. Ciò che è importante, secondo lo standard TierIII, una situazione del genere è un motivo legittimo per chiudere il data center. Non ci siamo fermati, perché le persone sono a terra con la testa e c’è l’esercitazione con gli esercizi. Per questo, l'interfaccia utente ci ha semplicemente fottuto regolarmente, per essere sicuri di TIII Operational. Semmai, abbiamo superato la ricertificazione dell'interfaccia utente a TIII Gold - Sostenibilità operativa. Nel mercato commerciale russo dei data center non c'è niente di più interessante, tranne il nostro, solo uno ha lo stesso risultato . Noto che la ricertificazione è più difficile che ottenere un certificato da zero, poiché controllano il periodo precedente come se non fossi te stesso e sono necessarie molte più prove.
C'è stato un incidente interessante con le telecamere. Abbiamo deciso di ricalcolare gli angoli ciechi per ogni evenienza, abbiamo disegnato intersezioni, tracciato le diagonali degli angoli di visione sulla pianta e all'improvviso abbiamo trovato un punto cieco di circa 30 centimetri per 15 metri proprio al centro di una delle sale. Stretto e lungo. Non c'è niente del genere nella stanza accanto. Si è scoperto che la telecamera rotante si è spostata lentamente nel corso degli anni, tanto che ha iniziato a mostrare circa un grado e mezzo a sinistra rispetto a quanto avrebbe dovuto nella posizione estrema.
C'è stato un altro grosso incidente nel post .
riferimenti
- и
- La mia mail è: [email protected]
Fonte: habr.com