Hallo, Habr! Ich bin Taras Chirkov, Direktor des Rechenzentrums Linxdatacenter in St. Petersburg. Und heute werde ich in unserem Blog darĂŒber sprechen, welche Rolle die Aufrechterhaltung der Raumreinheit im normalen Betrieb eines modernen Rechenzentrums spielt, wie man sie richtig misst, erreicht und auf dem erforderlichen Niveau hĂ€lt.
Reinheit auslösen
Eines Tages kontaktierte uns ein Rechenzentrumskunde in St. Petersburg wegen einer Staubschicht auf der Unterseite eines Racks mit GerÀten. Dies wurde zum Ausgangspunkt der Untersuchung, deren erste Hypothesen Folgendes nahelegten:
- Staub dringt ĂŒber die Schuhsohlen von Rechenzentrumsmitarbeitern und Kunden in die ServerrĂ€ume ein,
- ĂŒber die LĂŒftungsanlage eingebracht,
- beide.
Blaue SchuhĂŒberzĂŒge â landen im MĂŒlleimer der Geschichte
Wir haben mit Schuhen angefangen. Das Problem der Sauberkeit wurde damals auf traditionelle Weise gelöst: ein Container mit SchuhĂŒberziehern am Eingang. Die Wirksamkeit des Ansatzes erreichte nicht das gewĂŒnschte Niveau: Es war schwierig, ihre Nutzung durch GĂ€ste des Rechenzentrums zu kontrollieren, und das Format selbst war unpraktisch. Sie wurden schnell zugunsten einer fortschrittlicheren Technologie in Form einer SchuhĂŒberzugsmaschine aufgegeben. Das erste Modell eines solchen GerĂ€ts, das wir installiert haben, war ein Fehlschlag: Die Maschine riss zu oft SchuhĂŒberzĂŒge beim Versuch, sie ĂŒber die Schuhe zu ziehen, ihre Verwendung war eher Ă€rgerlich als das Leben einfacher zu machen.
Der RĂŒckgriff auf die Erfahrungen der Kollegen in Warschau und Moskau löste das Problem nicht, und am Ende fiel die Wahl auf die Technologie des Aufklebens von Thermofolie auf Schuhe. Mithilfe von Thermofolie können Sie Schuhe mit jeder Sohle â sogar einem dĂŒnnen Damenabsatz â mit âĂberschuhenâ ĂŒberziehen. Ja, die Folie verrutscht auch manchmal, aber deutlich seltener als die klassischen blauen Ăberschuhe, und die Technik selbst ist fĂŒr den Besucher deutlich komfortabler und moderner. Ein weiterer (fĂŒr mich) wichtiger Pluspunkt ist, dass die Folie problemlos die gröĂten SchuhgröĂen abdeckt, im Gegensatz zu herkömmlichen SchuhĂŒberzĂŒgen, die beim Anziehen bei GröĂe 45 reiĂen. Um den Prozess moderner zu gestalten, installierten sie BehĂ€lter mit automatischer Ăffnung des Deckels mithilfe eines Bewegungssensors.
Der Prozess sieht so aus:
Die GĂ€ste waren von der Innovation sofort begeistert.
Staub im Wind
Nachdem wir den offensichtlichsten Kanal möglicher Weltraumverschmutzung in Ordnung gebracht hatten, wandten wir uns subtileren Dingen zu â der Luft. Es ist wahrscheinlich, dass ein erheblicher Teil des Staubs aufgrund unzureichender Filterung ĂŒber die BelĂŒftung in die ServerrĂ€ume gelangt oder von der StraĂe eingeschleppt wird. Oder liegt es an der schlechten QualitĂ€t der Reinigung? Die Ermittlungen gingen weiter.
Wir beschlossen, Messungen des Partikelgehalts in der Luft im Rechenzentrum durchzufĂŒhren und beauftragten mit der DurchfĂŒhrung dieser Arbeiten ein Labor, das auf die Ăberwachung der LuftqualitĂ€t in speziellen ReinrĂ€umen spezialisiert ist.
Das Laborpersonal maĂ die Anzahl der Kontrollpunkte (20) und erstellte einen Probenahmeplan, um die Dynamik zu verfolgen und ein möglichst genaues Bild zu erstellen. Die Kosten fĂŒr den gesamten Labormessprozess betrugen etwa 1 Million Rubel, was uns völlig unpraktisch erschien, uns aber eine Reihe von Ideen fĂŒr die unabhĂ€ngige Umsetzung lieferte. Dabei stellte sich heraus, dass das Labor gut ist, die Analysen jedoch dynamisch durchgefĂŒhrt werden mĂŒssen und die stĂ€ndige Inanspruchnahme seiner Dienste Ă€uĂerst umstĂ€ndlich ist.
Nachdem wir uns die geplanten AktivitĂ€ten des Labors angesehen hatten, entschieden wir uns, nach nĂŒtzlicheren GerĂ€ten fĂŒr unabhĂ€ngiges Arbeiten zu suchen. Dadurch ist es uns gelungen, das fĂŒr diese Aufgabe erforderliche Werkzeug zu finden â einen LuftqualitĂ€tsanalysator. So was:
Das GerÀt zeigt den Gehalt an Partikeln unterschiedlichen Durchmessers (in Mikrometern) an.
Standards neu definieren
Dieses GerĂ€t analysiert die Anzahl der Partikel, die Temperatur und die Luftfeuchtigkeit und zeigt die Ergebnisse in MaĂeinheiten gemÀà ISO-Standards fĂŒr diesen Parameter an. Das Display zeigt den Gehalt an Partikeln mit unterschiedlichen Durchmessern in der Luftprobe an.
Gleichzeitig machten sie einen Fehler bei den Filtern: Sie verwendeten damals G4-Filtermodelle in ServerrĂ€umen. Dieses Modell sorgt fĂŒr eine grobe Luftreinigung, daher wurde davon ausgegangen, dass fehlende Partikel zu einer Verschmutzung fĂŒhren können. Wir haben uns fĂŒr die Anschaffung von F5-Feinfiltern zum Testen entschieden, die in Klima- und LĂŒftungsanlagen als Filter der zweiten Stufe (Nachbehandlung) eingesetzt werden.
Die Untersuchung ist abgeschlossen â Sie können mit den Kontrollmessungen beginnen. Wir haben uns entschieden, uns an den Anforderungen der Norm ISO 14644-1 fĂŒr die Anzahl der Schwebeteilchen zu orientieren.
Klassifizierung von ReinrÀumen nach der Anzahl der Schwebeteilchen.
Es scheint - messen und vergleichen Sie anhand der Tabelle. Doch nicht alles ist so einfach: In der Praxis erwies es sich als recht schwierig, Luftreinheitsstandards fĂŒr ServerrĂ€ume von Rechenzentren zu finden. Dies wird nirgendwo, von keiner Organisation oder Brancheninstitution ausdrĂŒcklich angegeben. Und nur im internen Uptime Inside Track-Forum (Zugriff darauf steht Personen zur VerfĂŒgung, die eine Ausbildung in den Uptime Institute-Programmen abgeschlossen haben) gab es eine gesonderte Diskussion zu diesem Thema. Aufgrund der Ergebnisse seiner Studie waren wir geneigt, uns auf die ISO 8-Norm zu konzentrieren â die vorletzte in der Klassifizierung.
Schon die ersten Messungen zeigten, dass wir uns selbst unterschĂ€tzt hatten â die Ergebnisse von Innenlufttests zeigten die Einhaltung der ISO 5-Anforderungen in InnenrĂ€umen, was die von den Uptime Inside Track-Teilnehmern gewĂŒnschten Standards deutlich ĂŒbertraf. Gleichzeitig mit groĂem Spielraum. Wir haben ein Rechenzentrum und natĂŒrlich kein biologisches Labor, aber damit die Partikelkonzentration in der Luft ISO 8 entspricht, muss es sich mindestens um ein Objekt der Klasse âZementwerkâ handeln. Und wie derselbe Standard auf ein Rechenzentrum angewendet werden kann, ist nicht ganz klar. Gleichzeitig haben wir das Ergebnis bei ISO 5 durch Messungen bei der Luftfilterung mit G4-Filtern erhalten. Das heiĂt, Staub kann nicht ĂŒber die Luft in die Racks gelangen; die F5-Filter erwiesen sich als ĂŒberflĂŒssig und wurden nicht einmal verwendet.
Ein negatives Ergebnis ist auch ein Ergebnis: Wir haben die Suche nach der Ursache der Verschmutzung in andere Richtungen fortgesetzt und die Ăberwachung der LuftqualitĂ€t in vierteljĂ€hrliche Inspektionen einbezogen, kombiniert mit Inspektionen von BMS-Sensoren durch verifizierte GerĂ€te (ISO 9000-Anforderungen und Kundenaudits).
Nachfolgend finden Sie ein Beispiel fĂŒr einen Bericht, der auf der Grundlage der wĂ€hrend der Messung gewonnenen Daten erstellt wird. FĂŒr eine höhere Genauigkeit werden die Messungen mit zwei GerĂ€ten durchgefĂŒhrt â Testo 610 und einem BMS-Sensor. In der Kopfzeile der Tabelle sind die Grenzwerte fĂŒr GerĂ€te aufgefĂŒhrt. Abweichungen in den vorgegebenen Parametern werden automatisch farblich hervorgehoben, um die Identifizierung von Problembereichen oder ZeitrĂ€umen zu erleichtern.
Bei uns ist alles klar: Der Unterschied in den Indikatoren der GerÀte ist minimal und die Partikelkonzentration liegt deutlich unter dem Höchstwert.
Durch den Hintereingang
Da es neben dem Hauptkundeneingang, an dem wir die SchuhĂŒberzugsmaschine installierten, noch weitere EingĂ€nge zu den ReinrĂ€umen gab, musste dennoch verhindert werden, dass Schmutz durch diese in das Rechenzentrum gelangte.
Das An- und Ausziehen von SchuhĂŒberzĂŒgen beim Entladen der AusrĂŒstung ist umstĂ€ndlich. Deshalb haben wir eine automatische Maschine zum Reinigen von Sohlen gefunden. Praktisch, funktional, aber der menschliche Faktor beeinflusst es in Form einer optionalen Herangehensweise an dieses GerĂ€t. Im Wesentlichen das Gleiche wie bei den SchuhĂŒberzĂŒgen am Haupteingang.
Um das Problem zu lösen, begann man, nach Reinigungsmöglichkeiten zu suchen, die sich nicht vermeiden lieĂen: Klebrige Teppiche mit abnehmbaren Schichten schafften dies am besten. Bei der Autorisierung an den EingangstĂŒren muss sich der Besucher auf eine solche Matte stellen und ĂŒberschĂŒssigen Staub von den Schuhsohlen entfernen.
TĂ€glich reiĂen ReinigungskrĂ€fte die oberste Schicht eines solchen Teppichs ab, insgesamt sind es 60 Schichten â genug fĂŒr etwa 2 Monate.
Nachdem ich unter anderem das Ericsson-Rechenzentrum in Stockholm besucht habe, habe ich gesehen, wie diese Probleme dort gelöst werden: Neben AbreiĂschichten werden in Schweden wiederverwendbare antibakterielle Dycem-Teppiche verwendet. Die Idee gefiel mir aufgrund des Prinzips der Wiederverwendbarkeit und der Möglichkeit, einen groĂen Abdeckungsbereich bereitzustellen.
Magischer antibakterieller Teppich. Schade, kein Flugzeug, aber es hĂ€tte eins sein können â zu dem und dem Preis!
Es war fĂŒr uns schwierig, Vertreter des Unternehmens in Russland zu finden und die Kosten der Lösung fĂŒr unser Rechenzentrum abzuschĂ€tzen. Als Ergebnis erhielten wir einen Wert, der fast 100-mal teurer war als die Lösung mit mehrschichtigen Teppichen â ungefĂ€hr die gleichen 1 Million Rubel wie im Projekt mit Luftreinheitsmessungen. DarĂŒber hinaus wurde deutlich, dass es notwendig war, spezielle Reinigungsmittel zu verwenden, die es natĂŒrlich nur bei diesem Hersteller gibt. Auch die Lösung verschwand von selbst, wir entschieden uns fĂŒr eine mehrschichtige Variante.
Handarbeit
Ich möchte besonders darauf aufmerksam machen, dass all diese MaĂnahmen nicht dazu gefĂŒhrt haben, dass der Einsatz von ReinigungskrĂ€ften entfĂ€llt. In Vorbereitung auf die Zertifizierung des Linxdatacenter-Rechenzentrums nach dem Uptime Institute Management & Operations-Standard war es notwendig, die Handlungen der Mitarbeiter des Reinigungsdienstes auf dem Gebiet des Rechenzentrums klar zu regeln. Es wurden detaillierte Anweisungen erstellt, die vorschrieben, wo, was und wie zu tun war.
Ein paar AuszĂŒge aus der Anleitung:
Wie Sie sehen, ist alles vorgeschrieben, buchstĂ€blich jeder Aspekt der Arbeit in einem bestimmten Raum, Reinigungsmittel, Materialien usw. sind fĂŒr die Verwendung akzeptabel. Kein einziges Detail bleibt unbeachtet, auch nicht das kleinste. Anweisung â von jedem Servicemitarbeiter unterzeichnet. In ServerrĂ€umen, ElektrorĂ€umen usw. Sie werden nur in Anwesenheit autorisierter Mitarbeiter des Rechenzentrums, beispielsweise des diensthabenden Ingenieurs, entfernt.
Aber das ist nicht alles
Ebenfalls in der Liste der MaĂnahmen zur GewĂ€hrleistung der Sauberkeit im Rechenzentrum enthalten: Begehungen mit visueller Inspektion der RĂ€umlichkeiten, einschlieĂlich wöchentlicher Inspektionen der Racks, um darin verbliebene Drahtreste sowie Verpackungsreste von GerĂ€ten und Komponenten zu erkennen. FĂŒr jede dieser Episoden wird ein Vorfall eröffnet und der Kunde erhĂ€lt eine Benachrichtigung ĂŒber die Notwendigkeit, VerstöĂe so schnell wie möglich zu beseitigen.
AuĂerdem haben wir einen separaten Raum zum Auspacken und Aufstellen der AusrĂŒstung geschaffen â auch dies ist Teil der Reinigungspolitik des Unternehmens.
Eine weitere MaĂnahme, die wir aus der Praxis von Ericsson gelernt haben, ist die Aufrechterhaltung eines konstanten Luftdrucks in ServerrĂ€umen: Der Druck innerhalb der RĂ€ume ist höher als drauĂen, so dass kein Luftzug entsteht â auf diese Lösung gehen wir in einem separaten Artikel nĂ€her ein.
SchlieĂlich haben wir uns Roboterassistenten fĂŒr RĂ€umlichkeiten besorgt, die von der Liste der fĂŒr den Besuch des Reinigungspersonals zur VerfĂŒgung stehenden RĂ€ume ausgeschlossen sind.
Das Gitter oben erhöht nicht nur den Schutz des Roboters um +10, sondern verhindert auch, dass er unter den vertikalen KabelkanÀlen der Racks hÀngen bleibt.
Ein unerwarteter Fund als Fazit
Sauberkeit im Rechenzentrum ist wichtig fĂŒr den Betrieb von Server- und NetzwerkgerĂ€ten, die Luft durch das Rechenzentrum ziehen. Bei Ăberschreitung der zulĂ€ssigen Staubkonzentration kommt es zu Staubansammlungen auf Bauteilen und einer Gesamttemperaturerhöhung von bis zu 1 Grad Celsius. Staub verringert die KĂŒhleffizienz, was zu erheblichen indirekten Kosten pro Jahr fĂŒhren und sich auch auf die Fehlertoleranz der gesamten Anlage auswirken kann.
Dies mag eine spekulative Annahme sein, aber die Experten des Uptime Institute, die das Linxdatacenter-Rechenzentrum nach dem Management & Operations-QualitĂ€tsstandard zertifiziert haben, legen gröĂten Wert auf Sauberkeit. Und umso erfreulicher war es, in diesem Bereich die schmeichelhaftesten Bewertungen zu erhalten: Unser Rechenzentrum in St. Petersburg ĂŒbertrifft die Zertifizierungsanforderungen deutlich. Ein Institutsexperte bezeichnete uns als âdas sauberste Rechenzentrum, das er je gesehen hatâ. DarĂŒber hinaus dient unser Rechenzentrum Uptime als Beispiel fĂŒr die Lösung des Problems sauberer ServerrĂ€ume. AuĂerdem bestehen wir jedes Kundenaudit hinsichtlich dieses Parameters problemlos â die anspruchsvollsten Anforderungen der launischsten Kunden werden ĂŒber alle MaĂen erfĂŒllt.
Kehren wir zum Anfang der Geschichte zurĂŒck. Woher kam die Kontamination laut der Beschwerde am Anfang des Artikels? Der Teil des Racks des Kunden, der der Grund fĂŒr den Start des gesamten Projekts âClean in the Data Centerâ war, war vom Moment des Imports und der Installation des Racks im Rechenzentrum an kontaminiert. Der Kunde hatte das Rack nicht gereinigt, als es in den Serverraum gebracht wurde â bei der ĂberprĂŒfung benachbarter gleichzeitig installierter Racks stellte sich heraus, dass die Situation mit Staub dort genauso war. Diese Situation fĂŒhrte dazu, dass der Rack-Installations-Checkliste des Kunden ein Reinigungskontrollpunkt hinzugefĂŒgt wurde. Wir sollten auch nie die Wahrscheinlichkeit solcher Dinge vergessen = Vorgewarnt ist gewappnet. Hier dreht sich alles um âSauberkeit und Diktaturâ in unserem Rechenzentrum; im nĂ€chsten Artikel werde ich ĂŒber Drucksensoren sprechen, aber stellen Sie vorerst Fragen in den Kommentaren.
Source: habr.com
