Ову објаву посвећујем оним људима који су лагали на сертификатима, због којих смо умало уградили варнилице у наше сале.
Прича је стара више од четири године, али је сада објављујем јер је НДА истекао. Тада смо схватили да је дата центар (који изнајмљујемо) скоро потпуно попуњен, а његова енергетска ефикасност није много побољшана. Раније је била хипотеза да што више напунимо, то боље, јер је инжењер распоређен на све. Али испоставило се да смо се у том погледу варали, и иако је оптерећење било добро, негде је било губитака. Радили смо у многим областима, али наш храбри тим се фокусирао на хлађење.
Стварни живот дата центра је мало другачији од онога што је у пројекту. Стална прилагођавања оперативне услуге ради повећања ефикасности и оптимизације подешавања за нове задатке. Узмите митски Б-стуб. У пракси се то не дешава, расподела оптерећења је неуједначена, негде густа, негде празна. Тако да смо морали да реконфигуришемо неке ствари за бољу енергетску ефикасност.
Наш дата центар Компресор је потребан за различите кориснике. Дакле, тамо, међу уобичајеним регалима од два до четири киловата, може бити и 23 киловата или више. У складу с тим, клима уређаји су били подешени да их расхладе, а ваздух је једноставно пројурио кроз мање моћне полице.
Друга хипотеза је била да се топли и хладни ходници не мешају. После мерења могу да кажем да је ово илузија, а права аеродинамика се разликује од модела у скоро сваком погледу.
Анкета
Прво смо почели да посматрамо токове ваздуха у халама. Зашто су отишли тамо? Зато што су схватили да је дата центар пројектован за пет до шест кВ по реку, али су знали да су у ствари од 0 до 25 кВ. Скоро је немогуће све ово регулисати плочицама: већ прва мерења су показала да преносе готово подједнако. Али уопште не постоје плочице од 25 кВ, оне морају бити не само празне, већ са течним вакуумом.
Купили смо анемометар и почели да меримо протоке између регала и изнад регала. Генерално, са њим морате радити у складу са ГОСТ-ом и гомилом стандарда које је тешко имплементирати без гашења турбинске хале. Није нас занимала тачност, већ основна слика. Односно, измерили су приближно.
Према мерењима, од 100 одсто ваздуха који излази из плочица, 60 одсто уђе у регале, остатак пролети. То је због чињенице да постоје тешки регали од 15–25 кВ дуж којих је изграђено хлађење.
Не можемо да искључимо клима-уређаје, јер ће на топлим регалима у пределу горњих сервера бити веома топло. У овом тренутку схватамо да треба нешто да изолујемо од нечег другог како ваздух не би скакао из реда у ред и како би се и даље одвијала размена топлоте у блоку.
Истовремено се питамо да ли је то финансијски изводљиво.
Изненађени смо када откријемо да имамо потрошњу енергије дата центра у целини, али једноставно не можемо да рачунамо вентилатор конвекторе за одређену просторију. Односно, аналитички можемо, али у ствари не можемо. А уштеде нисмо у могућности да проценимо. Задатак постаје све занимљивији. Ако уштедимо 10% снаге клима уређаја, колико новца можемо да одложимо за изолацију? Како рачунати?
Отишли смо код стручњака за аутоматизацију, који су завршавали систем за надзор. Хвала момцима: имали су све сензоре, само су морали да додају код. Почели су одвојено да уграђују расхладне уређаје, УПС и осветљење. Са новим гаџетом постало је могуће видети како се мења ситуација међу елементима система.
Експерименти са завесама
Истовремено почињемо експерименте са завесама (оградама). Одлучујемо да их монтирамо на игле носача каблова (ионако ништа друго није потребно), пошто би требало да буду лагани. Брзо смо се одлучили за надстрешнице или чешљеве.
Квака је у томе што смо раније радили са гомилом добављача. Свако има решења за сопствене центре података компаније, али у суштини не постоје готова решења за комерцијални дата центар. Наши клијенти стално долазе и одлазе. Ми смо један од ретких „тешких“ центара података без ограничења у ширини рек-а са могућношћу да угостимо ове млин сервере до 25 кВ. Нема унапред планирања инфраструктуре. Односно, ако узмемо модуларне системе кавеза од добављача, увек ће бити рупа за два месеца. Односно, турбинска хала у принципу никада неће бити енергетски ефикасна.
Одлучили смо да то урадимо сами, пошто имамо своје инжењере.
Прво што су узели биле су траке из индустријских фрижидера. Ово су флексибилни полиетиленски снопови које можете ударити. Вероватно сте их видели негде на улазу у одељење меса у највећим продавницама. Почели су да траже нетоксичне и незапаљиве материјале. Нашли смо га и купили за два реда. Откачили смо слушалицу и почели да видимо шта се догодило.
Схватили смо да то неће бити добро. Али све у свему, испало је веома, веома не баш добро. Почињу да лепршају у потоцима као тестенина. Пронашли смо магнетне траке попут магнета за фрижидер. Залепили смо их на ове траке, залепили једни на друге, а зид се показао прилично монолитан.
Почели смо да смишљамо шта би чекало публику.
Идемо до градитеља и покажемо вам наш пројекат. Гледају и кажу: завесе су ти веома тешке. 700 килограма по целој турбинској хали. Идите дођавола, кажу, добри људи. Тачније, екипи СКС. Нека преброје колико јуфки имају у тацнама, јер 120 кг по квадрату је максимум.
СКС каже: сећате се, дошла нам је једна велика муштерија? Има десетине хиљада лука у једној просторији. На ивицама турбинске собе и даље је у реду, али неће бити могуће причврстити га ближе попречној просторији: тацне ће отпасти.
Грађевинари су тражили и сертификат за материјал. Напомињем да смо пре овога радили на часној речи добављача, јер је ово била само пробна вожња. Контактирали смо овог добављача и рекли: ОК, спремни смо за бета верзију, дајте нам сву папирологију. Они шаљу нешто што није баш устаљеног обрасца.
Ми кажемо: слушај, одакле ти ово парче папира? Они: наш кинески произвођач нам је ово послао као одговор на захтеве. Према писању листа, ова ствар уопште не гори.
У овом тренутку смо схватили да је време да станемо и проверимо чињенице. Идемо код девојака из одељења противпожарне безбедности дата центра, кажу нам лабораторија која испитује запаљивост. Сасвим земаљски новац и рокови (мада смо све псовали док смо састављали потребан број папирића). Тамошњи научници кажу: донеси материјал, урадићемо тестове.
У закључку је написано да од килограма супстанце остаје приближно 50 грама пепела. Остатак гори јако, тече и одржава сагоревање веома добро у локви.
Разумемо - добро је што га нисмо купили. Почели смо да тражимо други материјал.
Нашли смо поликарбонат. Испоставило се да је тврђи. Провидни лим је два мм, врата су направљена од четири мм. У суштини то је плексиглас. Заједно са произвођачем, почињемо разговор о заштити од пожара: дајте нам сертификат. Они су послали. Потписао исти институт. Зовемо тамо и кажемо: добро, људи, јесте ли проверили ово?
Кажу: да, проверили су. Прво су је спалили код куће, па су је донели само на тестове. Ту од килограма материјала остане отприлике 930 грама пепела (ако га спалите гориоником). Топи се и капље, али локва неће да гори.
Одмах проверавамо наше магнете (они су на полимерној подлози). Изненађујуће, слабо горе.
Скупштина
Од овога почињемо да сакупљамо. Поликарбонат је одличан јер је лакши од полиетилена и много се теже савија. Истина, доносе листове од 2,5 до 3 метра, а добављача није брига шта ће с тим. Али треба нам 2,8 ширине 20-25 центиметара. Врата су послата у канцеларије које су по потреби секле чаршаве. И сами смо секли ламеле. Сам процес сечења кошта двоструко више од лима.
Ево шта се догодило:
Резултат је да се систем кавеза исплати за мање од годину дана. Тако смо стално уштедели 200–250 кВ на снази вентилатор конвектора. Не знамо колико је још на расхладним уређајима, колико тачно. Сервери сисају константном брзином, вентилатори дувају. А расхладне уређаје укључује и искључује чешаљ: тешко је извући податке из њега. Турбинска хала се не може зауставити ради испитивања.
Драго нам је да је својевремено постојало правило да се рекови 5к5 уграђују у модуле тако да је њихова просечна потрошња била максимално шест кВ. То јест, топло се не концентрише на острву, већ се дистрибуира по целој турбинској просторији. Али постоји ситуација у којој постоји 10 комада регала од 15 киловата један поред другог, али постоји хрпа њих насупрот. Хладно му је. Баланцед.
Где нема тезге, потребна вам је ограда до пода.
А неки наши купци су изоловани решеткама. Код њих је било и неколико посебности.
Секу се на ламеле, јер ширина стубова није фиксна, а фреквенција чешља за причвршћивање је одређена: увек ће бити три или четири цм десно или лево. Ако имате блок од 600 за простор у регалу, постоји шанса од 85 процената да неће стати. И кратке и дугачке ламеле коегзистирају и држе се заједно. Понекад сечемо ламелу са словом Г дуж контура регала.
Сензори
Пре смањења снаге вентилоконвектора, било је потребно поставити веома прецизан надзор температуре у различитим тачкама хале, како не би дошло до изненађења. Тако су настали бежични сензори. Ожичени - на сваки ред морате да окачите своју ствар да бисте укрштали ове сензоре, а понекад и продужне каблове на њему. Ово се претвара у вијенац. Веома лоше. А када ове жице уђу у кавезе муштерија, заштитари се одмах узбуде и траже да им се потврдом објасне шта се скида дуж ових жица. Нерви обезбеђења морају бити заштићени. Из неког разлога не додирују бежичне сензоре.
И више штандова долази и одлази. Лакше је поново монтирати сензор на магнет јер се сваки пут мора окачити више или ниже. Ако се сервери налазе у доњој трећини регала, треба их окачити надоле, а не на стандардном метар и по од пода на вратима регала у хладном ходнику. Ту је бескорисно мерити оно што је у пеглу.
Један сензор за три полице - чешће не морате да га качите. Температура се не разликује. Плашили смо се да ће ваздух бити увучен кроз саме подупираче, али то се није догодило. Али ипак обезбеђујемо мало више хладног ваздуха од израчунатих вредности. Направили смо прозоре у летвицама 3, 7 и 12, и направили рупу изнад постоља. Када идемо около, стављамо анемометар у њега: видимо да ток иде тамо где треба.
Затим су окачили светле конце: стара пракса за снајперисте. Изгледа чудно, али вам омогућава да брже откријете могући проблем.
смешно
Док смо све ово радили у тишини, стигао је продавац који производи инжењерску опрему за дата центре. Каже: хајде да дођемо да вам причамо о енергетској ефикасности. Стижу и почињу да причају о неоптималној сали и протоку ваздуха. Климамо главом са разумевањем. Зато што имамо три године као што је утврђено.
Окаче по три сензора на сваки сталак. Слике праћења су запањујуће и прелепе. Више од половине цене овог решења је софтвер. На нивоу упозорења Заббик-а, али заштићено и веома скупо. Проблем је што имају сензоре, софтвер, а онда траже извођача на лицу места: немају своје продавце за цадгинг.
Испоставило се да њихове руке коштају пет до седам пута више од онога што смо ми урадили.
референце
- .
- .
- .
- .
- .
- моја пошта: [емаил заштићен]
Извор: ввв.хабр.цом