Ciao, Habr! Sono Taras Chirkov, direttore del data center Linxdatacenter a San Pietroburgo. Oggi nel nostro blog parlerò di quanto sia importante mantenere la pulizia all'interno di un moderno data center, come misurarla correttamente, raggiungere e mantenere il giusto livello.
Il fattore pulizia
Una volta un cliente del data center di San Pietroburgo ci ha contattato riguardo a uno strato di polvere nella parte inferiore del rack attrezzato. Questo è stato il punto di partenza delle indagini, le prime ipotesi suggerivano quanto segue:
- la polvere entra nelle sale server attraverso le suole delle scarpe di dipendenti e clienti del data center,
- viene trasportata attraverso il sistema di ventilazione,
- e entrambe le cose.
Le scarpette blu – in discarica
Tutto è iniziato con le scarpe. All'epoca, il problema della pulizia veniva affrontato in modo tradizionale: un contenitore con le sovrascarpe all'ingresso. L'efficacia di questo approccio non raggiungeva il livello desiderato: era difficile controllare l'uso da parte degli ospiti del Data Center, e il formato stesso era poco pratico. Ci siamo rapidamente orientati verso tecnologie più avanzate come le macchine per le sovrascarpe. Il primo modello di questo dispositivo che abbiamo installato ha fallito: la macchina strappava troppo spesso le sovrascarpe quando si cercava di metterle sulle scarpe, rendendo il suo utilizzo più irritante che utile.
Fare riferimento all'esperienza dei colleghi di Varsavia e Mosca non ha risolto il problema, e alla fine si è optato per la tecnologia di fusione della pellicola termica sulle calzature. Con la pellicola termica è possibile indossare le "scarpette" su qualsiasi tipo di suola, anche su sottili tacchi femminili. Sì, la pellicola a volte scivola, ma molto meno frequentemente rispetto alle tradizionali scarpette blu, e la tecnologia stessa è di gran lunga più comoda e moderna per i visitatori. Un ulteriore vantaggio (per me) è che la pellicola copre facilmente le misure più grandi di calzature, a differenza delle scarpette tradizionali, che si strappano quando si cerca di indossarle su una taglia 45. Per rendere il processo ancora più moderno, sono stati installati cestini con apertura automatizzata del coperchio tramite sensore di movimento.
Il processo si presenta così:
Gli ospiti hanno subito apprezzato l'innovazione.
Polvere al vento
Dopo aver sistemato il canale più ovvio di possibile contaminazione dello spazio, ci siamo occupati di questioni più sottili: l'aria. È molto probabile che una parte significativa della polvere entri nei server attraverso la ventilazione a causa di una filtrazione insufficiente o venga portata dall'esterno. Oppure è tutto dovuto alla scarsa qualità della pulizia? L'inchiesta è continuata.
Abbiamo deciso di misurare il contenuto di particelle nell'aria all'interno del data center e abbiamo invitato un laboratorio specializzato nel monitoraggio della qualità dell'aria in ambienti controllati per svolgere questi lavori.
Gli esperti del laboratorio hanno misurato il numero di punti di controllo (20), redatto un programma di prelievo dei campioni per monitorare la dinamica e creare un quadro il più preciso possibile. Il costo dell'intero processo di misurazione da parte del laboratorio è stato di circa 1 milione di rubli, che ci è sembrato completamente inappropriato, ma ha fornito alcune idee per realizzazioni autonome. È emerso che, sebbene il laboratorio sia utile, effettuare i test in modo dinamico e fare costantemente riferimento ai loro servizi risulta estremamente scomodo.
Dopo aver esaminato le azioni pianificate dal laboratorio, abbiamo deciso di cercare dispositivi più pratici per un lavoro autonomo. Alla fine, siamo riusciti a trovare lo strumento necessario per questo compito: un analizzatore di qualità dell'aria. Ecco come appare:
Il dispositivo mostra il contenuto di particelle di diverse dimensioni (in micrometri).
Rivisitando gli standard
Questo dispositivo analizza il numero di particelle, la temperatura, l'umidità e mostra i risultati nelle unità di misura corrispondenti agli standard ISO per questo parametro. Sullo schermo sono visibili i livelli di contenuto di particelle con diversi diametri nel campione d'aria.
Nel frattempo, avevamo delle colpe da attribuire ai filtri: in quel momento utilizzavamo modelli di filtri G4 all'interno delle sale server. Questo modello fornisce una pulizia grossolana dell'aria, quindi si ammetteva la possibilità di trascurare particelle che portavano a contaminazioni. Abbiamo deciso di acquistare per prova filtri a fine qualità F5, utilizzati nei sistemi di condizionamento e ventilazione come filtri di seconda fase (ulteriore pulizia).
L'inchiesta è stata condotta – ora è possibile procedere con le misurazioni di controllo. Come punto di riferimento, abbiamo deciso di utilizzare i requisiti della norma ISO 14644-1 per il numero di particelle pesate.
Classificazione delle camere bianche in base al numero di particelle pesate.
Sembra semplice: misura e confronta secondo la tabella. Tuttavia, non è tutto così facile: nella pratica, è risultato piuttosto difficile trovare standard di qualità dell'aria per le sale server dei Data Center. Questo non è esplicitamente definito da nessuna organizzazione o istituto di settore. Solo su un forum interno chiamato Uptime Inside Track (accessibile solo a chi ha completato i corsi dell'Uptime Institute) è emersa una discussione su questo tema. Dallo studio di tale discussione, si è giunti alla conclusione di orientarsi verso lo standard ISO 8 – penultimo nella classificazione.
Le prime misurazioni hanno mostrato che ci sottovalutavamo: i risultati dei controlli dell'aria interna hanno soddisfatto i requisiti ISO 5 nei locali interni, superando significativamente gli standard desiderati dai partecipanti di Uptime Inside Track. E con un ampio margine. Abbiamo un centro dati, non un laboratorio biologico, certo, ma affinché la concentrazione di particelle nell'aria sia pari a ISO 8, ci vorrebbe un'installazione di classe almeno pari a quella di un "impianto di cemento". Non è molto chiaro come si possano applicare gli stessi standard a un centro dati. Tuttavia, abbiamo ottenuto il risultato ISO 5 eseguendo le misurazioni con filtri G4 per la filtrazione dell'aria. In altre parole, la polvere non può entrare nei racks attraverso l'aria; i filtri F5 si sono rivelati superflui e non sono stati nemmeno utilizzati.
Un risultato negativo è comunque un risultato: abbiamo continuato a cercare la causa dell'inquinamento in altre direzioni, e il monitoraggio della qualità dell'aria è stato incluso nei controlli trimestrali, combinandolo con le verifiche dei sensori BMS effettuate da dispositivi certificati (requisiti ISO 9000 e audit dei clienti).
Di seguito è riportato un esempio di rapporto, che viene compilato sulla base dei dati ottenuti durante la misurazione. Per una maggiore precisione, le misurazioni vengono effettuate con due dispositivi: Testo 610 e un sensore BMS. Nella intestazione della tabella sono indicati i valori limite per i dispositivi. Qualsiasi deviazione dai parametri indicati viene evidenziata automaticamente con un colore per facilitare l'identificazione delle aree problematiche o dei periodi di tempo.
Da noi è tutto chiaro: la differenza nei valori degli strumenti è minima e la concentrazione di particelle è molto inferiore alla soglia limite.
Entrata secondaria
Poiché nei locali puliti c'erano anche altre entrate oltre all'entrata principale per i clienti, dove abbiamo installato una macchina per le sovrascarpe, è rimasta la necessità di escludere l'ingresso di sporco nel data center attraverso di esse.
Indossare/togliere le sovrascarpe durante le procedure di scarico delle attrezzature è scomodo, quindi abbiamo trovato una macchina per la pulizia delle suole. È comoda, funzionale, ma risente del fattore umano in termini di non obbligatorietà nell'approcciare a questo apparecchio. Fondamentalmente, è la stessa cosa delle sovrascarpe all'entrata principale.
Per affrontare il problema, abbiamo iniziato a cercare soluzioni di pulizia dalle quali non si può prescindere: i tappeti adesivi con strati rimovibili si sono dimostrati i migliori in questo. Durante il processo di registrazione all'ingresso, i visitatori si posizionano su questi tappeti, rimuovendo la polvere in eccesso dalle suole delle loro scarpe.
Le addette alle pulizie rimuovono lo strato superiore di questi tappeti ogni giorno, ce ne sono 60 strati in totale, sufficienti per circa 2 mesi.
Visitando il centro dati Ericsson a Stoccolma, ho notato come affrontano questi problemi: insieme agli strati removibili, in Svezia utilizzano anche tappeti antibatterici riutilizzabili Dycem. L'idea mi è piaciuta per il fatto che possa essere riutilizzata e per la possibilità di coprire una maggiore superficie.
Il tappeto antibatterico magico. Peccato che non sia un aereo, potrebbe esserlo – considerando il prezzo!
È stato difficile trovare rappresentanti dell'azienda in Russia e valutare il costo della soluzione per il nostro data center. Alla fine, abbiamo ottenuto una cifra quasi 100 volte più alta rispetto alla soluzione con tappeti multistrato - circa lo stesso 1 milione di rubli del progetto con misurazioni della qualità dell'aria. Inoltre, è emersa la necessità di utilizzare prodotti speciali per la pulizia, naturalmente disponibili solo da questo produttore. Anche questa soluzione è stata scartata e ci siamo orientati verso l'opzione multistrato.
Lavoro manuale
Vorrei sottolineare che tutte le misure indicate non escludevano l'uso del lavoro delle addette alle pulizie. Nella preparazione per la certificazione del data center Linxdatacenter secondo lo standard Uptime Institute Management & Operations, era necessario regolamentare chiaramente le azioni del personale di pulizia all'interno del data center. Sono state redatte istruzioni dettagliate che prescrivevano dove, cosa e come dovevano operare.
Ecco alcuni estratti dalle istruzioni:
Come si può notare, viene registrato tutto, letteralmente ogni aspetto del lavoro in uno specifico locale, i detergenti utilizzabili, i materiali, ecc. Non viene trascurato alcun dettaglio, nemmeno il più piccolo. L'istruzione viene firmata da ogni membro del personale di servizio. Negli ambienti server e negli spazi elettrici, la pulizia avviene solo in presenza di personale autorizzato del data center, ad esempio dell'ingegnere di guardia.
Ma non è tutto qui
Inoltre, nel elenco delle misure che garantiscono la pulizia nel data center ci sono: ispezioni visive degli ambienti, comprese le ispezioni settimanali delle rack per identificare eventuali ritagli di cavi o resti degli imballaggi di apparecchiature e componenti. Per ciascun episodio viene aperto un incidente e il cliente riceve una notifica della necessità di rimuovere le violazioni nel più breve tempo possibile.
Inoltre, per il disimballaggio e la configurazione delle apparecchiature abbiamo creato una stanza separata, che fa parte della politica di pulizia dell'azienda.
Un'altra misura che abbiamo tratto dalla pratica di Ericsson è il mantenimento di una costante pressione dell'aria nelle sale server: all'interno degli ambienti, la pressione è più alta rispetto all'esterno, per evitare l'ingresso di aria - discuteremo di questa soluzione in un articolo dedicato.
Infine, abbiamo introdotto robot assistenti per le stanze che non sono accessibili al personale delle pulizie.
La griglia superiore non solo conferisce +10 alla protezione del robot, ma consente anche di evitare che si incastri sotto i canaletti verticali dei racks.
Una scoperta inaspettata come conclusione
La pulizia nel data center è fondamentale per il funzionamento dell'hardware server e di rete, che aspira aria. Superare i limiti consentiti di polverosità porterà all'accumulo di polvere sui componenti e a un aumento complessivo della temperatura fino a 1 grado Celsius. La polvere riduce l'efficacia del raffreddamento, il che può tradursi in costi indiretti significativi su base annua e influenzare la resilienza complessiva dell'infrastruttura.
Si può dire che si tratta di un'ipotesi teorica, ma gli esperti dell'Uptime Institute, che hanno certificato il data center Linxdatacenter secondo lo standard di qualità nella gestione operativa (Management & Operations), attribuiscono la massima importanza alla pulizia. È stato quindi particolarmente gratificante ricevere valutazioni così positive in questo ambito: i requisiti della certificazione superano significativamente quelli del nostro data center a San Pietroburgo. L'esperto dell'istituto ci ha definiti «il data center più pulito che abbia mai visto»; inoltre, il nostro data center viene utilizzato da Uptime come esempio per affrontare la questione della pulizia delle sale server. Inoltre, superiamo agevolmente qualsiasi audit dei clienti su questo parametro, soddisfacendo e superando i requisiti più rigorosi dei clienti più esigenti.
Torniamo all'inizio della storia. Da dove provengono le contaminazioni menzionate nella denuncia all'inizio dell'articolo? La parte del rack del cliente che ha dato origine all'intero progetto "pulizia nel data center" era contaminata sin dal momento dell'importazione e dell'installazione del rack nel data center. Il cliente non ha pulito il rack prima dell'ingresso nella sala server; durante il controllo dei rack vicini, installati nello stesso periodo, è emerso che la situazione con la polvere era identica. Questa situazione ha portato all'aggiunta di un punto di controllo della pulizia nella checklist di installazione del cliente. Non si deve mai dimenticare la possibilità di situazioni simili: essere avvisati è essere armati. Questo è tutto sulla "pulizia e sulla disciplina" nel nostro data center; nel prossimo articolo parlerò dei sensori di pressione, nel frattempo, fate domande nei commenti.
Fonte: habr.com
