Šį įrašą skiriu tiems žmonėms, kurie melavo pažymėjimuose, dėl kurių mes savo salėse vos neįrengėme kibirkščių.
Istorijai jau daugiau nei ketveri metai, bet aš ją skelbiu dabar, nes pasibaigė NDA galiojimas. Tada supratome, kad duomenų centras (kurį nuomojame) beveik visiškai apkrautas, o jo energinis efektyvumas nelabai pagerėjo. Anksčiau buvo keliama hipotezė, kad kuo daugiau užpildysime, tuo geriau, nes inžinierius yra paskirstytas visiems. Bet paaiškėjo, kad šiuo atžvilgiu save apgaudinėjame ir nors krūvis buvo geras, bet kažkur buvo nuostolių. Dirbome daugelyje sričių, tačiau mūsų drąsi komanda daugiausia dėmesio skyrė vėsinimui.
Tikrasis duomenų centro gyvenimas šiek tiek skiriasi nuo to, kas yra projekte. Nuolatiniai operacijų tarnybos koregavimai, siekiant padidinti efektyvumą ir optimizuoti nustatymus naujoms užduotims atlikti. Paimkite mitinį B ramstį. Praktikoje taip nebūna, apkrovos pasiskirstymas yra netolygus, kai kur tankus, kažkur tuščias. Taigi, norėdami pagerinti energijos vartojimo efektyvumą, turėjome iš naujo sukonfigūruoti kai kuriuos dalykus.
Mūsų duomenų centro kompresorius reikalingas įvairiems klientams. Todėl tarp įprastų dviejų ar keturių kilovatų stovų gali būti 23 kilovatų ar daugiau. Atitinkamai, oro kondicionieriai buvo nustatyti juos vėsinti, o oras tiesiog veržėsi pro mažiau galingus stovus.
Antroji hipotezė buvo ta, kad šiltas ir šaltas koridoriai nesimaišo. Po matavimų galiu pasakyti, kad tai iliuzija, o tikroji aerodinamika nuo modelio skiriasi kone visomis prasmėmis.
Apklausa
Pirmiausia pradėjome žiūrėti į oro srautus salėse. Kodėl jie ten nuėjo? Nes jie suprato, kad duomenų centras yra skirtas nuo penkių iki šešių kW vienam stovui, bet žinojo, kad iš tikrųjų jie yra nuo 0 iki 25 kW. Viso to sureguliuoti plytelėmis beveik neįmanoma: jau pirmieji matavimai parodė, kad jos perduoda beveik vienodai. Bet 25 kW plytelių iš viso nėra, jos turi būti ne tik tuščios, bet ir su skysčio vakuumu.
Nusipirkome anemometrą ir pradėjome matuoti srautus tarp stelažų ir virš stovų. Apskritai, jūs turite dirbti su juo pagal GOST ir daugybę standartų, kuriuos sunku įgyvendinti neišjungus turbinos salės. Mus domino ne tikslumas, o esminis vaizdas. Tai yra, jie matavosi maždaug.
Remiantis matavimais, iš 100 procentų oro, išeinančio iš plytelių, 60 procentų patenka į stelažus, likusi dalis praskrenda. Taip yra dėl to, kad yra sunkūs 15–25 kW stelažai, išilgai kurių pastatytas aušinimas.
Kondicionierių išjungti negalime, nes ant šiltų stelažų viršutinių serverių srityje bus labai šilta. Šiuo metu suprantame, kad reikia kažką izoliuoti nuo kažko kito, kad oras nešokinėtų iš eilės į eilę ir kad bloke vis tiek vyktų šilumos mainai.
Kartu klausiame savęs, ar tai finansiškai įmanoma.
Nustebome sužinoję, kad sunaudojame viso duomenų centro energijos, tačiau tiesiog negalime suskaičiuoti ventiliatoriaus ritinių vienetų konkrečiam kambariui. Tai yra, analitiškai galime, bet iš tikrųjų negalime. O sutaupyti negalime įvertinti. Užduotis tampa vis įdomesnė. Jei sutaupysime 10% oro kondicionavimo galios, kiek pinigų galime atidėti izoliacijai? Kaip skaičiuoti?
Kreipėmės pas automatikos specialistus, kurie baigė kurti stebėjimo sistemą. Ačiū vaikinams: jie turėjo visus jutiklius, tik reikėjo pridėti kodą. Jie pradėjo atskirai montuoti aušintuvus, UPS ir apšvietimą. Su nauja programėle tapo įmanoma pamatyti, kaip keičiasi situacija tarp sistemos elementų.
Eksperimentai su užuolaidomis
Tuo pačiu metu pradedame eksperimentus su užuolaidomis (tvoromis). Nusprendžiame juos montuoti ant kabelių lovelių kaiščių (vis tiek daugiau nieko nereikia), nes jie turėtų būti lengvi. Greitai apsisprendėme dėl stogelių ar šukų.
Svarbu tai, kad anksčiau dirbome su daugybe pardavėjų. Kiekvienas turi sprendimus savo įmonių duomenų centrams, tačiau iš esmės nėra paruoštų sprendimų komerciniam duomenų centrui. Mūsų klientai ateina ir išeina visą laiką. Esame vienas iš nedaugelio „sunkiųjų“ duomenų centrų be stelažo pločio apribojimų, galinčių talpinti iki 25 kW galios malūnėlių serverius. Jokio infrastruktūros planavimo iš anksto. Tai yra, jei paimsime modulines narvelių sistemas iš pardavėjų, du mėnesius visada bus skylių. Tai yra, turbinų salė iš principo niekada nebus energiškai efektyvi.
Mes nusprendėme tai padaryti patys, nes turime savo inžinierius.
Pirmiausia jie paėmė juostas iš pramoninių šaldytuvų. Tai lankstus polietileno snukis, į kurį galite pataikyti. Tikriausiai juos matėte kur nors prie įėjimo į didžiausių maisto prekių parduotuvių mėsos skyrių. Jie pradėjo ieškoti netoksiškų ir nedegių medžiagų. Radome ir nusipirkome dviem eilėmis. Padėjome ragelį ir pradėjome žiūrėti, kas atsitiko.
Supratome, kad tai nebus labai gerai. Bet apskritai tai pasirodė labai labai neblogai. Jie pradeda plazdėti upeliuose kaip makaronai. Radome magnetinių juostų, pavyzdžiui, šaldytuvo magnetų. Juos klijavome ant šių juostelių, klijavome viena prie kitos ir siena gavosi ganėtinai monolitinė.
Pradėjome aiškintis, kas laukia žiūrovų.
Eikime pas statybininkus ir parodykime savo projektą. Jie žiūri ir sako: tavo užuolaidos labai sunkios. 700 kilogramų visoje turbinų salėje. Eik po velnių, sako, geri žmonės. Tiksliau – SKS komandai. Tegul suskaičiuoja, kiek makaronų turi padėkliuose, nes 120 kg vienam kvadratiniam metrui yra maksimaliai.
SKS sako: pamenate, pas mus atėjo vienas didelis klientas? Viename kambaryje yra dešimtys tūkstančių uostų. Išilgai turbinos patalpos kraštų dar gerai, bet arčiau skersinės patalpos pritvirtinti nebus įmanoma: padėklai nukris.
Statybininkai prašė ir pažymos medžiagai. Atkreipiu dėmesį, kad prieš tai dirbome pagal tiekėjo garbės žodį, nes tai buvo tik bandomasis važiavimas. Susisiekėme su šiuo tiekėju ir pasakėme: Gerai, mes pasiruošę pereiti prie beta versijos, pateikite mums visus dokumentus. Jie siunčia tai, kas nėra labai nusistovėjusio modelio.
Sakome: klausyk, kur tu gavai šitą popierėlį? Jie: mūsų Kinijos gamintojas atsiuntė mums tai atsakydamas į užklausas. Laikraščio teigimu, šis daiktas visai nedega.
Šiuo metu supratome, kad laikas sustoti ir patikrinti faktus. Einame pas merginas iš duomenų centro priešgaisrinės saugos skyriaus, pasako laboratoriją, kuri tiria degumą. Gan žemiški pinigai ir terminai (nors viską keikdavome, kol susidėliojome reikiamą lapelių skaičių). Ten mokslininkai sako: atnešk medžiagą, darysime tyrimus.
Apibendrinant buvo parašyta, kad iš kilogramo medžiagos lieka apie 50 gramų pelenų. Likusi dalis dega ryškiai, teka žemyn ir labai gerai palaiko degimą baloje.
Suprantame – gerai, kad nepirkome. Pradėjome ieškoti kitos medžiagos.
Radome polikarbonato. Jis pasirodė kietesnis. Permatomas lakštas yra dviejų mm, durys pagamintos iš keturių mm. Iš esmės tai yra organinis stiklas. Kartu su gamintoju pradedame pokalbį su priešgaisrine sauga: išduokite mums sertifikatą. Jie siunčia. Pasirašė tas pats institutas. Mes ten skambiname ir sakome: na, vaikinai, ar jūs tai patikrinote?
Jie sako: taip, jie patikrino. Iš pradžių sudegino namuose, paskui tik atvežė tyrimams. Ten iš kilogramo medžiagos lieka maždaug 930 gramų pelenų (jei kūrenate degikliu). Jis tirpsta ir varva, bet bala nesudegs.
Nedelsdami patikriname savo magnetus (jie yra ant polimerinio pamušalo). Keista, kad jie blogai dega.
Asamblėja
Nuo to pradedame rinkti. Polikarbonatas yra puikus, nes yra lengvesnis už polietileną ir daug lengviau lankstosi. Tiesa, jie atveža 2,5 x 3 metrų lakštus, o tiekėjui nerūpi, ką su jais daryti. Bet mums reikia 2,8, 20–25 centimetrų pločio. Durys buvo išsiųstos į biurus, kurie pagal poreikį supjaustė paklodes. O lameles pjaustome patys. Pats pjovimo procesas kainuoja dvigubai daugiau nei lapas.
Štai kas nutiko:
Rezultatas yra tai, kad narvelių sistema atsiperka greičiau nei per metus. Taip nuolat sutaupydavome 200–250 kW nuo fan coil galios. Mes nežinome, kiek dar yra ant aušintuvų, kiek tiksliai. Serveriai čiulpia pastoviu greičiu, pučia ventiliatoriaus ritės. O aušintuvai įjungiami ir išjungiami šukomis: sunku iš jo išgauti duomenis. Turbinos salė negali būti sustabdyta bandymams.
Džiaugiamės, kad kažkada egzistavo taisyklė 5x5 stelažus montuoti į modulius, kad jų vidutinės sąnaudos būtų šeši kW maksimumas. Tai yra, šiluma nėra sutelkta saloje, o paskirstoma visoje turbinos patalpoje. Bet pasitaiko situacija, kai vienas šalia kito stovi 10 vienetų 15 kilovatų galios stelažų, bet priešais jų yra krūva. Jam šalta. Subalansuotas.
Ten, kur nėra prekystalio, reikia tvoros iki grindų.
O kai kurie mūsų klientai yra izoliuoti grotelėmis. Su jais buvo ir keletas ypatumų.
Pjauna į lameles, nes stulpų plotis nefiksuotas, o tvirtinimo šukos dažnis nustatomas: trys ar keturi cm arba į dešinę, arba į kairę visada bus. Jei turite 600 bloką stovo vietai, tada yra 85 procentų tikimybė, kad jis netilps. O trumpos ir ilgos lamelės sugyvena ir sulimpa. Kartais lamelę su G raide nupjauname pagal stelažų kontūrus.
Jutikliai
Prieš mažinant fan coil blokų galią, reikėjo nustatyti labai tikslų temperatūros stebėjimą skirtinguose salės taškuose, kad nebūtų netikėtumų. Taip atsirado belaidžiai jutikliai. Laidinis - kiekvienoje eilėje reikia pakabinti savo daiktą, kad kryžmiškai sujungtumėte šiuos jutiklius, o kartais ir ilginamuosius laidus. Tai virsta girlianda. Labai blogai. O kai šie laidai patenka į klientų narvus, apsaugininkai iš karto susijaudina ir prašo su pažyma paaiškinti, kas išimama išilgai šių laidų. Apsaugos darbuotojų nervus reikia saugoti. Dėl tam tikrų priežasčių jie neliečia belaidžių jutiklių.
Ir vis daugiau stendų ateina ir išeina. Jutiklį lengviau pritvirtinti ant magneto, nes kiekvieną kartą jį reikia pakabinti aukščiau arba žemiau. Jei serveriai yra apatiniame stelažo trečdalyje, juos reikia kabinti žemyn, o ne pagal standartą pusantro metro atstumu nuo grindų ant stovo durų šaltame koridoriuje. Nenaudinga ten matuoti; reikia matuoti, kas yra geležyje.
Vienas jutiklis trims stovams - dažniau jo nereikia kabinti. Temperatūra nesiskiria. Bijojome, kad oras nebus įtrauktas per pačius statramsčius, bet taip neatsitiko. Tačiau mes vis tiek tiekiame šiek tiek daugiau šalto oro nei apskaičiuotos vertės. Langus padarėme 3, 7 ir 12 lentjuostėse, o virš stovo padarėme skylę. Eidami aplinkui įdedame anemometrą: matome, kad srautas eina ten, kur reikia.
Tada jie pakabino ryškias stygas: sena snaiperių praktika. Atrodo keistai, bet leidžia greičiau aptikti galimą problemą.
juokinga
Kol visa tai darėme tylėdami, atvyko pardavėjas, gaminantis duomenų centrų inžinerinę įrangą. Jis sako: ateikime ir papasakokime apie energijos vartojimo efektyvumą. Jie atvyksta ir pradeda kalbėti apie neoptimalią salę ir oro srautus. Supratingai linktelime. Kadangi mes turime trejus metus, kaip nustatyta.
Ant kiekvieno stovo jie pakabina tris jutiklius. Stebėjimo nuotraukos yra nuostabios ir gražios. Daugiau nei pusę šio sprendimo kainos sudaro programinė įranga. Zabbix įspėjimo lygiu, bet patentuotas ir labai brangus. Bėda ta, kad jie turi jutiklius, programinę įrangą, o paskui ieško rangovo vietoje: neturi savų tiekėjų, skirtų karpymui.
Pasirodo, jų rankos kainuoja nuo penkių iki septynių kartų brangiau nei mes.
Nuorodos
- .
- .
- .
- .
- .
- Mano paštas: [apsaugotas el. paštu]
Šaltinis: www.habr.com