
Bonjour, Habr ! Je suis Taras Chirkov, directeur du centre de données Linxdatacenter à Saint-Pétersbourg. Aujourd'hui, dans notre blog, je vais parler du rôle essentiel que joue le maintien de la propreté dans le fonctionnement normal d'un centre de données moderne, de la manière de mesurer, d'atteindre et de maintenir cette propreté à un niveau adéquat.
Déclencheur de propreté
Un jour, un client de notre centre de données à Saint-Pétersbourg nous a contactés au sujet d'une couche de poussière en bas du rack d'équipement. Cela a marqué le début de l'enquête, dont les premières hypothèses étaient les suivantes :
- la poussière entre dans les salles des serveurs par les semelles des chaussures des employés et des clients du centre de données,
- elle est également transportée par le système de ventilation,
- et les deux.
Les surchaussures bleues — à la poubelle de l'histoire
Nous avons commencé par les chaussures. À l'époque, le problème de propreté était résolu de manière traditionnelle : un conteneur de surchaussures à l'entrée. L'efficacité de ce système n'atteignait pas le niveau souhaité : il était difficile de contrôler leur utilisation par les invités du centre de données, et ce format était inconfortable. Nous avons rapidement abandonné cette approche au profit de technologies plus avancées sous forme de machine à surchaussures. Le premier modèle installé chez nous a échoué : la machine déchirait trop souvent les surchaussures en essayant de les enfiler, et son utilisation était plus irritante qu'utile.
Faire appel à l'expérience de collègues à Varsovie et à Moscou n'a pas résolu le problème, et finalement, nous avons opté pour la technologie de thermosoudage des surchaussures sur les chaussures. Grâce à cette technique, il est possible de mettre des « surchaussures » sur des chaussures de n'importe quel type de semelle — y compris des talons fins. Oui, le film peut parfois glisser, mais beaucoup moins souvent que les surchaussures bleues classiques, et la technologie elle-même est des fois plus pratique pour les visiteurs et plus moderne. Un autre avantage important (pour moi) — le film couvre facilement les plus grandes tailles de chaussures, contrairement aux surchaussures traditionnelles qui se déchirent en essayant de les enfiler sur une taille 45. Pour rendre le processus encore plus moderne, nous avons installé des poubelles avec couvercles à ouverture automatisée par capteur de mouvement.
Le processus se déroule comme suit :

Les invités ont immédiatement apprécié l'innovation.
Poussière dans le vent
En ordonnant le canal de contamination le plus évident, nous avons commencé à nous pencher sur des questions plus délicates : l'air. Il est tout à fait probable qu'une part significative de la poussière pénètre dans les salles de serveurs par la ventilation en raison d'une filtration insuffisante, ou qu'elle soit transportée depuis l'extérieur. Ou est-ce que cela provient d'un nettoyage de mauvaise qualité ? L'enquête a continué.
Nous avons décidé de mesurer la concentration de particules dans l'air à l'intérieur du data center et avons invité un laboratoire spécialisé dans le contrôle de la qualité de l'air dans les salles propres pour effectuer ces travaux.
Les employés du laboratoire ont mesuré le nombre de points de contrôle (20), établi un calendrier de prélèvements pour suivre la dynamique et créer une image la plus précise possible. Le coût du processus complet de mesures par le laboratoire s'élevait à environ 1 million de roubles, ce qui nous a semblé totalement déraisonnable, mais a donné plusieurs idées pour une mise en œuvre autonome. Par la même occasion, il est devenu évident que le laboratoire est utile, mais que les analyses doivent être réalisées de manière dynamique et recourir constamment à leurs services est extrêmement peu pratique.
En regardant les actions prévues par le laboratoire, nous avons décidé d'explorer des dispositifs plus utilitaires pour un travail autonome. Finalement, nous avons réussi à trouver l'outil nécessaire pour cette tâche : un analyseur de qualité de l'air. En voici un :

L'appareil montre la concentration de particules de différents diamètres (en micromètres).
En révisant les normes
Cet appareil analyse le nombre de particules, la température, l'humidité et présente les résultats en unités de mesure conformes aux normes ISO pour ce paramètre. L'écran affiche les niveaux de concentration de particules de différents diamètres dans l'échantillon d'air.
Parallèlement, nous avions des doutes sur les filtres : à ce moment-là, nous utilisions des modèles de filtres G4 dans les salles de serveurs. Ce modèle assure un nettoyage grossier de l'air, c'est pourquoi nous supposions qu'il était possible de laisser passer des particules responsables de la contamination. Nous avons décidé d'acheter à titre d'essai des filtres à filtration fine F5, utilisés dans les systèmes de climatisation et de ventilation comme filtres de seconde étape de purification.
L'enquête a été réalisée - nous pouvons procéder aux mesures de contrôle. Comme référence, nous avons décidé d'utiliser les exigences de la norme ISO 14644-1 concernant le nombre de particules en suspension.

Classification des salles propres selon le nombre de particules en suspension.
On pourrait penser qu'il suffit de mesurer et de comparer avec un tableau. Mais ce n’est pas si simple : dans la pratique, il s'est avéré assez difficile de trouver des standards de propreté de l'air pour les salles serveur des centres de données. Cela n'est explicitement stipulé nulle part, ni par aucune organisation ni par un institut professionnel. Et ce n'est que sur le forum interne Uptime Inside Track (accessible aux personnes ayant suivi des formations par les programmes de l'Uptime Institute) qu'une discussion spécifique a eu lieu sur ce sujet. À l'issue de son étude, nous nous sommes orientés vers la norme ISO 8 - l'avant-dernière de la classification.
Les premières mesures ont montré que nous nous sous-estimions - les résultats des contrôles de l'air intérieur étaient conformes aux exigences ISO 5 dans les espaces intérieurs, ce qui dépassait largement les normes souhaitées par les participants de l'Uptime Inside Track. De plus, cela avec une grande marge. Nous avons un centre de données, pas un laboratoire biologique, bien sûr, mais pour que la concentration de particules dans l'air soit égale à ISO 8 - cela devrait être un objet de classe au moins « usine de ciment ». Et comment appliquer la même norme à un centre de données - ce n'est pas très clair. En outre, nous avons obtenu un résultat de ISO 5 en effectuant des mesures avec des filtres à air de type G4. Cela signifie que la poussière ne peut pas entrer dans les racks à travers l'air ; les filtres F5 se sont avérés superflus et n'ont même pas été utilisés.
Un résultat négatif est aussi un résultat : nous avons poursuivi nos recherches sur la cause de la contamination dans d'autres directions et avons intégré le contrôle de la qualité de l'air dans nos vérifications trimestrielles, en les combinant avec les vérifications des capteurs BMS effectuées par des appareils certifiés (exigences ISO 9000 et audits des clients).
Ci-dessous, un exemple de rapport qui est rempli sur la base des données obtenues lors de la mesure. Pour plus de précision, les mesures sont effectuées avec deux appareils : le Testo 610 et le capteur BMS. En haut du tableau, les valeurs limites pour les appareils sont indiquées. L'écart par rapport aux paramètres spécifiés est automatiquement mis en évidence par une couleur pour faciliter l'identification des zones problématiques ou des périodes temporaires.

Tout est clair chez nous : la différence des indicateurs est minimale et la concentration de particules est bien en dessous de la limite autorisée.
Par l'entrée secondaire
Comme il y avait d'autres entrées dans les salles propres en plus de l'entrée principale pour les clients, où nous avons installé une machine à surchaussures, il était nécessaire d'exclure l'entrée de saleté dans le centre de données par ces entrées.
Mettre/enlever des surchaussures pendant les procédures de déchargement du matériel est peu pratique, c'est pourquoi nous avons trouvé un appareil pour nettoyer les semelles. C'est pratique, fonctionnel, mais le facteur humain se manifeste par le manque d'obligation d'approcher cet appareil. En fait, c'est la même chose qu'avec les surchaussures à l'entrée principale.

Pour résoudre ce problème, nous avons cherché des options de nettoyage dont on ne peut pas se passer : les tapis adhésifs à couches détachables y parvenaient le mieux. Lors de l'autorisation à l'entrée, le visiteur doit absolument se tenir sur ce tapis, éliminant la poussière excessive de la semelle de ses chaussures.

Les agents d'entretien détachent la couche supérieure de ce tapis chaque jour, il en contient 60 couches – cela suffit pour environ 2 mois.
En visitant le centre de données Ericsson à Stockholm, j'ai remarqué, entre autres, comment ces problèmes sont résolus là-bas : en plus des couches détachables, la Suède utilise des tapis antibactériens réutilisables Dycem. L'idée m'a plu en raison du principe de réutilisation et de la possibilité de couvrir une plus grande surface.

Le tapis antibactérien magique. Dommage, ce n'est pas un avion, mais ça pourrait l'être – à ce prix-là !
Nous avons eu du mal à trouver des représentants de l'entreprise en Russie et avons évalué le coût de la solution pour notre data center. Au final, nous avons obtenu un chiffre presque 100 fois plus élevé que la solution avec les tapis multicouches – environ 1 million de roubles, soit le même montant que dans le projet de mesures de propreté de l'air. De plus, il s'est avéré nécessaire d'utiliser des produits spéciaux pour le nettoyage, disponibles uniquement chez ce fabricant. Cette solution a également été abandonnée, nous avons opté pour l'option multicouche.
Travail manuel
Il convient de souligner que toutes les mesures indiquées n'ont pas annulé l'utilisation des services de nettoyage. Dans le cadre de la préparation de la certification du Data Center Linxdatacenter selon la norme Uptime Institute Management & Operations, il était nécessaire de réglementer clairement les actions du personnel de nettoyage sur le site du Data Center. Des instructions détaillées ont été rédigées, précisant où, quoi et comment ils doivent procéder.
Voici quelques extraits des instructions :


Comme on peut le voir, chaque aspect du travail dans des locaux spécifiques est détaillé, y compris les produits de nettoyage et les matériaux autorisés. Aucune petite détail n'est négligé. Les instructions doivent être signées par chaque membre du personnel de nettoyage. Dans les salles de serveurs, les salles électriques, etc., le nettoyage n'est effectué qu'en présence de personnel autorisé du Data Center, par exemple, un ingénieur de garde.
Mais ce n'est pas tout
De plus, parmi les mesures garantissant la propreté du Data Center : des rondes avec inspection visuelle des locaux, y compris des inspections hebdomadaires des racks pour détecter les morceaux de fils laissés à l'intérieur, les emballages de matériel et de composants. Pour chaque incident, un rapport est rédigé, et le client est informé de la nécessité de remédier aux violations dans les plus brefs délais.
De plus, nous avons créé une salle séparée pour le déballage et la configuration de l'équipement – cela fait également partie de la politique de nettoyage de l'entreprise.
Une autre mesure que nous avons tirée de l'expérience d'Ericsson est de maintenir une légère surpression d'air dans les salles de serveurs : la pression à l'intérieur est supérieure à celle de l'extérieur pour éviter les courants d'air entrant – nous détaillerons cette solution dans un article séparé.
Enfin, nous avons acquis des robots assistants pour les locaux qui ne sont pas accessibles au personnel de nettoyage.

La grille supérieure non seulement augmente la protection du robot, mais l'empêche également de se coincer sous les chemins de câbles verticaux des racks.
Une découverte inattendue comme conclusion
La propreté dans le centre de données est essentielle pour le fonctionnement des équipements serveurs et réseaux, qui aspirent de l'air à travers eux. Un excès de poussière peut entraîner une accumulation sur les composants et une augmentation de la température jusqu'à 1 degré Celsius. La poussière réduit l'efficacité du refroidissement, ce qui peut engendrer des coûts indirects notables sur une année, et également affecter la résilience de l'installation dans son ensemble.
On pourrait dire que c'est une hypothèse théorique, mais les experts de l'Uptime Institute, qui ont certifié le centre de données Linxdatacenter selon la norme de qualité de gestion opérationnelle (Management & Operations), accordent une attention particulière à la propreté. Il a donc été particulièrement agréable de recevoir des évaluations élogieuses à cet égard : les exigences de certification de notre centre de données à Saint-Pétersbourg sont largement supérieures. L'expert de l'institut nous a qualifiés de « centre de données le plus propre qu'il ait jamais vu ». De plus, notre centre de données est utilisé par Uptime comme exemple de solution pour le problème de la propreté des salles serveurs. Nous passons également sans effort tout audit client sur ce paramètre – les exigences les plus strictes des clients les plus exigeants sont dépassées.
Revenons au début de l'histoire. D'où proviennent donc les contaminations selon la plainte mentionnée au début de l'article? La partie du rack du client, qui a entraîné le lancement de tout le projet « propreté dans le centre de données », a été polluée depuis son introduction et son installation dans le centre de données. Le client n'a pas nettoyé le rack avant son introduction dans la salle serveur — lors de l'examen des racks voisins installés en même temps, il s'est avéré qu'ils étaient également dans la même situation poussiéreuse. Cette situation a servi de motif pour ajouter un point de contrôle de propreté dans la liste de vérification d'installation du client. On ne doit jamais oublier la probabilité de telles choses = préparé, c'est armé. C'est tout sur la « propreté et la dictature » dans notre centre de données, dans le prochain article je parlerai des capteurs de pression, et pour l’instant, posez vos questions dans les commentaires.
Source : habr.com
