Hej, Habr! Jeg er Taras Chirkov, leder af datacentret Linxdatacenter i Sankt Petersborg. I dag vil jeg på vores blog fortælle om den rolle, som opretholdelse af renlighed i lokalet spiller for den normale drift af et moderne datacenter, hvordan man korrekt måler, opnår og opretholder det ønskede niveau.
Renlighedens trigger
En gang kontaktede en kunde fra datacentret i Sankt Petersborg os angående et lag af støv i bunden af rackene med udstyr. Dette blev udgangspunktet for vores efterforskning, hvor de første hypoteser antydede følgende:
- støv kommer ind i serverrum via skoene på medarbejdere og kunder i datacentret,
- kommer ind gennem ventilationssystemet,
- og begge dele.
De blå engangsgalosher er en saga blot
Vi begyndte med skoene. På det tidspunkt blev renlighedsproblemet håndteret på traditionel måde: et container med engangsgalosher ved indgangen. Effektiviteten af denne tilgang nåede ikke det ønskede niveau: det var svært at kontrollere deres brug blandt datacentrets gæster, og formatet var uhensigtsmæssigt. Vi opgav hurtigt til fordel for mere avancerede teknologier i form af en galoshmaskine. Den første model, vi installerede, fejlede: maskinen rev alt for ofte galosherne i stykker, når man forsøgte at tage dem på, og brugen af den var mere irriterende end hjælpsom.
Henvendelse til erfaringerne fra kolleger i Warszawa og Moskva løste ikke opgaven, og til sidst blev valget gjort til fordel for teknologien til påføring af termofilm på skoene. Med hjælp fra termofilm kan man tage "galosher" på sko med enhver sål - selv helt tynde højhælede sko. Ja, filmen kan også slide af, men langt sjældnere end de klassiske blå galosher, og selve teknologien er meget mere bekvem for besøgende og mere moderne. Endnu en vigtig (for mig) fordel – filmen dækker let de største skostørrelser, i modsætning til traditionelle galosher, der ofte revner, når man forsøger at tage dem på i størrelse 45. For at gøre processen mere moderne installerede vi affaldsbeholdere med automatisk åbning af låget via bevægelsessensor.
Processen ser sådan ud:
Gæsterne satte straks pris på nyheden.
Støv i vinden
Ved at fastlægge den mest åbenlyse kilde til mulig forurening af rummet, tog vi fat på de mere subtile aspekter – luften. Det er helt muligt, at en betydelig del af støvet trænger ind i serverrum gennem ventilationen på grund af utilstrækkelig filtrering, eller det kan blive bragt ind udefra. Eller er det hele et spørgsmål om dårlig rengøring? Undersøgelsen fortsatte.
Vi besluttede at tage målinger af partikelindholdet i luften inde i datacentret og inviterede et laboratorium, der specialiserer sig i kvalitetskontrol af luft i specialdesignede renrum, til at udføre disse opgaver.
Laboratoriets medarbejdere målte antallet af kontrolpunkter (20), lavede en tidsplan for prøveudtagning for at spore dynamikken og skabe det mest præcise billede. Omkostningerne ved hele målingsprocessen fra laboratoriet beløber sig til omkring 1 million rubler, hvilket virkede helt urimeligt for os, men gav en række ideer til selvstændig udførelse. Det blev samtidig klart, at et laboratorium er godt, men analyser skal foretages i dynamik, og det er ekstremt ubelejligt konstant at skulle bruge deres tjenester.
Efter at have set på laboratoriets planlagte aktiviteter, besluttede vi at undersøge mere praktiske enheder til selvstændig brug. I sidste ende fandt vi det nødvendige værktøj til denne opgave – en luftkvalitetsanalysator. Sådan en:
Enheden viser indholdet af partikler af forskellig diameter (i mikrometer).
Ved at genoverveje standarderne
Denne enhed analyserer antallet af partikler, temperatur, fugtighed og viser resultaterne i måleenheder i overensstemmelse med ISO-standarderne for denne parameter. På skærmen vises niveauerne af partikler med forskellige diametre i luftprøven.
Samtidig mistænkte vi filtrene: på det tidspunkt brugte vi G4-modeller af filtre i serverrum. Denne model sikrer grov luftfiltrering, så vi antog muligheden for, at partikler, der førte til forurening, blev passeret. Vi besluttede at købe F5-filtre til prøvning, som anvendes i ventilations- og klimaanlægssystemer som sekundære filtrene (farefiltrering).
Undersøgelsen er udført – vi kan begynde de kontrolmålinger. Som reference besluttede vi at bruge kravene fra standarden ISO 14644-1 for antallet af svævende partikler.
Klassificering af rene rum efter antallet af svævende partikler.
Det ser simpelt ud – bare mål og sammenlign med tabellen. Men det er ikke så nemt: I praksis viste det sig at være ret vanskeligt at finde standarder for luftkvalitet i serverrum i datacentre. Dette er ikke klart beskrevet nogen steder, af nogen organisation eller brancheinstitution. Og kun på det interne forum Uptime Inside Track (som kun er tilgængeligt for personer, der har gennemgået træning i Uptime Institute's programmer) fandt vi en særskilt diskussion om dette emne. Efter at have gennemgået den diskussion, hældte vi mod at orientere os efter standarden ISO 8 – næstsidste i klassificeringen.
De første målinger viste, at vi undervurderede os selv – resultaterne af kontrolmålingerne af den indvendige luft viste overholdelse af kravene fra ISO 5 i de indvendige rum, hvilket betydeligt oversteg de ønskede normer fra deltagerne i Uptime Inside Track. Og det med god margin. Vi har et datacenter og ikke et biologisk laboratorium, selvfølgelig, men for at partikelkoncentrationen i luften skulle svare til ISO 8, skulle det være en minimum klasse «cementfabrik». Og hvordan man kan anvende den samme standard på et datacenter, er ikke helt klart. Samtidig fik vi resultatet på ISO 5 ved at foretage målinger med G4-filtre. Det vil sige, at støvet ikke kan komme ind i stativerne gennem luften, F5-filtrene viste sig at være overflødige, og de blev endda ikke anvendt.
Et negativt resultat er også et resultat: vi fortsatte med at lede efter årsagen til forureningen i andre retninger, og vi inkluderede luftkvalitetskontrollen i vores kvartalsvise kontroller, i kombination med inspektion af BMS-sensorer med kalibrerede enheder (krav fra ISO 9000 og kundernes audits).
Nedenfor er et eksempel på en rapport, der udfyldes baseret på de data, der opnås under målingen. For større nøjagtighed udføres målinger med to instrumenter – Testo 610 og BMS-sensoren. I overskriften af tabellen angives de grænseværdier for instrumenterne. Afvigelsen fra de angivne parametre fremhæves automatisk med farve for at lette identificering af problemområder eller tidsperioder.
Vi har det klart: forskellen i instrumenternes målinger er minimal, og koncentrationen af partikler er langt under grænsen.
Gennem bagindgangen
Da der var andre indgange til de rene områder udover hovedindgangen for kunderne, hvor vi havde installeret en oversko-maskine, var der stadig behov for at forhindre snavs i at komme ind i datacenteret gennem dem.
At tage på og af overskoene under procedurerne til aflastning af udstyr er besværligt, så vi fandt en automat til rensning af såler. Det er praktisk, funktionelt, men menneskelig faktor viser sig i form af mangel på pligt til at bruge denne maskine. I virkeligheden er det samme som med overskoene ved hovedindgangen.
For at løse opgaven begyndte vi at lede efter rensemuligheder, der ikke kunne undgås: de bedste resultater fik vi med klæbrige måtter med aftagelige lag. Under autoriseringen ved indgangsdørene træder besøgende altid på sådan en måtte, hvorved de fjerner det overskydende støv fra sålerne af deres sko.
Værelserne fjerner det øverste lag af sådan en måtte hver dag; den har i alt 60 lag - hvilket er nok i cirka 2 måneder.
Da jeg besøgte datacenteret Ericsson i Stockholm, lagde jeg blandt andet mærke til, hvordan de løste disse problemer der: ud over de aftagelige lag bruger de i Sverige genanvendelige antibakterielle måtter fra Dycem. Ideen var tiltalende på grund af princippet om genanvendelse og muligheden for at dække et større areal.
Den magiske antibakterielle måtte. Det er en skam, at det ikke er et fly, for til den pris!
Vi fandt med besvær repræsentanter for virksomheden i Rusland og evaluerede omkostningerne til løsningen for vores datacenter. I sidste ende fik vi et tal, der var næsten 100 gange dyrere end løsningen med de flere lag måtter - omtrent det samme 1 million rubler, som i projektet med målinger af luftens renhed. Derudover blev det klart, at der var behov for specielle midler til rengøring, som naturligvis kun er tilgængelige fra denne producent. Løsningen blev også afvist, og vi stoppede ved den lagdelte variant.
Manuel arbejde
Det skal især bemærkes, at alle de nævnte foranstaltninger ikke annullerede brugen af rengøringspersonale. I forbindelse med forberedelserne til certificeringen af Linxdatacenter’s datacenter i henhold til Uptime Institute Management & Operations-standarderne var det nødvendigt at regulere rengøringspersonalets handlinger på datacenterets område klart. Der blev udarbejdet detaljerede instruktioner, der angiver, hvor, hvad og hvordan de skal gøre.
Et par uddrag fra instruktionen:
Som det fremgår, er hver eneste detalje af arbejdet i det specifikke rum nedskrevet, herunder hvilke rengøringsmidler og materialer der må bruges osv. Ingen detaljer, selv de mindste, efterlades uden opmærksomhed. Instrukserne skal bekræftes med underskrift fra hvert medlem af rengøringspersonalet. I serverrum, el-rum osv. må de kun udføre rengøring i nærvær af bemyndigede ansatte fra datacentret, såsom den pågældende ingeniør.
Men det er ikke alt.
I listen over foranstaltninger, der garanterer renlighed i datacentret, findes: runderinger med visuel inspektion af lokalerne, herunder ugentlige inspektioner af stativer for at opdage efterladte ledninger, rester af emballage fra udstyr og komponenter. For hver sådan episode oprettes en hændelse, og kunden modtager en meddelelse om nødvendigheden af at afhjælpe overtrædelserne hurtigst muligt.
Desuden har vi oprettet et separat rum til udpakning og konfiguration af udstyr – dette er også en del af virksomhedens rengøringspolitik.
Endnu en foranstaltning, som vi har hentet fra Ericsson’s praksis, er at opretholde et konstant positivt lufttryk i serverrummene: inde i lokalerne er trykket højere end udenfor for at undgå indtræk – vi vil uddybe denne løsning i et separat materiale.
Endelig har vi anskaffet os robotter, der assisterer i lokaler, som ikke er tilgængelige for rengøringspersonalet.
Gitteret ovenfor giver ikke kun en +10 på robotbeskyttelse, men sikrer også, at den ikke sætter sig fast under de vertikale kabelbakker på stativerne.
En uventet opdagelse som konklusion.
Renhold i datacenteret er vigtigt for drift af server- og netværksudstyr, som trækker luft igennem sig. Overskridelse af de tilladte støvniveauer fører til ophobning af støv på komponenterne og en samlet temperaturstigning på op til 1 grad Celsius. Støv reducerer effektiviteten af kølingen, hvilket kan resultere i mærkbare indirekte omkostninger over et år og påvirke systemets pålidelighed som helhed.
Man kan sige, at det er et hypotetisk antagelse, men eksperterne fra Uptime Institute, som har certificeret Linxdatacenteret efter standarden for drift og kvalitet (Management & Operations), lægger stor vægt på renhold. Det var derfor en fornøjelse at modtage de bedste vurderinger på dette område: vores datacenter i Sankt Petersborg overgår langt kravene til certificering. Instituttets ekspert kaldte os for "det reneste datacenter, han har set", og vores datacenter bruges af Uptime som et eksempel på, hvordan man håndterer renhold i serverrum. Derudover klarer vi nemt enhver kundeaudit på dette parameter – de mest krævende kunders strenge krav overholdes med et overskud.
Lad os vende tilbage til begyndelsen af historien. Hvor kom forureningen fra i den klage, der blev nævnt i begyndelsen af artiklen? Den del af kundens rack, som blev årsagen til at igangsætte hele projektet "renhold i datacenteret", var forurenet siden import og installation af rakket i datacenteret. Kunden havde ikke rengjort rakket før det blev bragt ind i serverrummet – ved gennemgang af nærliggende racks, der blev installeret på samme tid, viste det sig, at der var samme støvsituation der. Denne situation førte til tilføjelsen af et kontrolpunkt for rengøring til kundens installationscheckliste. Man må aldrig glemme sandsynligheden for sådanne ting = forberedt er bevæbnet. Det er alt om "renhold og kontrol" i vores datacenter, i den næste artikel vil jeg fortælle om tryksensorer, men indtil da er I velkomne til at stille spørgsmål i kommentarerne.
Kilde: habr.com
