Нярэдка кампаніі сутыкаюцца з неабходнасцю ўсталяваць новае, больш магутнае абсталяванне ва ўжо існуючых памяшканнях. Часам вырашыць гэтую задачу бывае няпроста, але існуе шэраг стандартных падыходаў, якія дапамагаюць выканаць яе. Пра іх мы сёння раскажам на прыкладзе ЦАД Mediatek.
Кампанія MediaTek, сусветна вядомы вытворца мікраэлектронікі, вырашыла пабудаваць новы цэнтр апрацоўкі дадзеных у сваёй штаб-кватэры. Як звычайна, праект трэба было рэалізаваць у найкарацейшыя тэрміны, а таксама забяспечыць сумяшчальнасць новага рашэння з усім існуючым абсталяваннем. Акрамя гэтага, сродкі электрасілкавання і астуджэнні трэба было першапачаткова адаптаваць да ўмоў будынка, у якім павінен быў пачаць працу новы ЦАД.
Ад CIO кампаніі паступіў запыт на тэхналогіі аўтаматызацыі і маніторынгу ЦАД, а таксама замоўцам віталася ўкараненне энергаэфектыўных рашэнняў у вобласці астуджэння і энергазабеспячэнні. Гэта значыць, на гэтыя тэхналогіі быў выдзелены дадатковы бюджэт, што і дазволіла стварыць сапраўды высокапрадукцыйны ЦАД у зададзеных умовах.
Вялікая нагрузка
Перш чым прыступаць да праекту, вынікала добра вывучыць асаблівасці размяшчаемага абсталявання – а яно было сапраўды магутным. У новым ЦАД планавалася ўсталяваць 80 стоек, прычым некаторыя мелі на ўвазе размяшчэнне нагрузкі ў 25 квт.
Было праведзена мадэляванне размяшчэння нагрузкі і аналіз магчымых схем астуджэння, пасля чаго прынята вырашана падзяліць ЦАД на функцыянальныя зоны. Зона высокай нагрузкі, дзе размяшчаецца самае магутнае абсталяванне, была аддзеленая, а для астуджэння і электрасілкавання ў ёй вырашана ўсталяваць найболей магутныя і тэхналагічныя сістэмы, уключаючы нутрарадныя кандыцыянеры RowCool.
Зона з сярэдняй шчыльнасцю размяшчэння, куды патрапілі ў асноўным сеткавае камутацыйнае абсталяванне, сістэмы захоўвання і дапаможныя серверы, таксама размяшчалася асобна. Улічваючы меншае вылучэнне энергіі стойкамі, тут атрымалася стварыць даўжэйшы «гарачы калідор», а значыць — зэканоміць карысны пляц.
Мы правялі сімуляцыю руху паветра і ацанілі дапушчальныя параметры тэмпературы для абедзвюх зон, разлічылі магутнасць абсталявання і дапушчальныя памеры калідораў, а таксама параметры размяшчэння абсталявання ў стойках.
Сімуляцыя руху паветра дапамагла знайсці аптымальныя кропкі для размяшчэння ўнутрырадных кандыцыянераў RowCool, каб сумеснае выкарыстанне актыўнага астуджэння і сістэмы падзелу гарачых і лядоўняў калідораў давала максімальны эфект.
Былі спраектаваны і ўстаноўлены модульныя сістэмы падзелу нагрузкі для абедзвюх зон. У выніку зона з высокай нагрузкай атрымала карацейшыя калідоры і большая колькасць кандыцыянераў RowCool, чым зона сярэдняй нагрузкі.
Радныя кандыцыянеры былі падлучаныя да чылераў пры дапамозе вадзянога астуджэння. Каб забяспечыць бяспеку такой сістэмы, у ЦАД былі ўстаноўлены дзясяткі сэнсараў, а таксама вызначаны зоны выяўлення магчымых працёкаў вадкасці. У выпадку з'яўлення хоць адной кроплі вады сістэма адразу ж выдае апавяшчэнне і дапамагае выправіць сітуацыю.
Больш за тое, кандыцыянеры RowCool, размешчаныя ў зоне высокай нагрузкі, злучаныя ў групы, а паміж імі наладжана аўтаномнае ўзаемадзеянне. Гэта зроблена для таго, каб у выпадку выхаду аднаго кандыцыянера са строю іншыя маглі ўзмацніць сваю працу і забяспечыць дастатковае астуджэнне з улікам працы "халоднага калідора", пакуль кандыцыянер будуць правіць або замяняць. Для гэтага радныя кандыцыянеры таксама ўсталяваны па схеме N+1.
КБС і размеркаванне электрасілкавання
Абапіраючыся на правераную практыку, мы размясцілі рэзервовыя акумулятары, а таксама сістэмы КБС у асобнай зоне, каб струмені паветра не змешваліся і сістэмы астуджэння не гублялі магутнасць на тых нагрузках, якім асоба і не патрабуецца дадатковы холад.
Улічваючы, што сумарная магутнасць усяго ЦАД перавышае 1500 квт, інфраструктуру харчавання і зону КБС трэба было праектаваць з асаблівай дбайнасцю. Модульныя КБС былі ўсталяваныя з улікам рэзервавання па схеме N+1, а для кожнай стойкі было падведзена колцавае сілкаванне – гэта значыць прынамсі два кабеля з сілкаваннем. У сістэме маніторынгу пры гэтым адначасова адсочвалася энергаспажыванне, напруга і ток, каб маментальна заўважыць любую няштатную змену.
У зоне з высокай нагрузкай кабінеты размеркавання харчавання (PDU) былі ўсталяваныя з задняга боку ад стоек Delta, а зверху былі размешчаны дадатковыя модулі размеркавання на 60А.
У зоне з сярэдняй нагрузкай удалося абысціся кабінетамі размеркавання, устаноўленымі над стойкамі. Такі падыход дазволіў зэканоміць сродкі без шкоды для якасці.
Упраўленне і DCIM
У новым ЦАД былі рэалізаваны сістэмы кіравання працай абсталявання. Так, праз сістэму DCIM InfraSuite можна адсачыць усё абсталяванне і месца яго размяшчэння ў ЦАД, а таксама ўсе параметры электрасілкавання для кожнай асобна ўзятай стойкі.
У кожнай стойцы таксама быў усталяваны датчык з індыкатарам EnviroProbe, дадзеныя з якіх збіраюцца на канцэнтратарах EnviroStation па кожным шэрагу і перадаюцца на цэнтральны сервер кіравання. Дзякуючы гэтаму дыспетчары ЦАД могуць увесь час кантраляваць параметры тэмпературы паветра і вільготнасці ў кожнай стойцы.
Акрамя кантролю электрасілкавання сістэма InfraSuite таксама дазваляе планаваць запаўненне ЦАД, таму што ў сістэму ўнесены даныя аб колькасці і магутнасці ўстаноўленага абсталявання. Інжынеры могуць запланаваць усталёўку новых сервераў ці камутацыйных сістэм, адначасова пераразмяркоўваючы электрасілкаванне праз інтэлектуальныя кабінеты PDU.
Заключэнне
Практыка пабудовы ЦАД для MediaTek была цікавая тым, што нам прыйшлося размясціць шмат высокапрадукцыйнай нагрузкі на досыць невялікім пляцы. І замест таго каб размяркоўваць яе па ўсім памяшканні, больш эфектыўна аказалася вылучыць высокамагутныя серверы ў асобную зону і ўладкаваць там больш магутнае і тэхналагічнае астуджэнне.
Сістэма комплекснага кантролю і кіравання дазваляе ўвесь час сачыць за энергаспажываннем высокамагутных сервераў, а рэзервовыя элементы астуджэння і электрасілкавання дапамагаюць не дапушчаць прастояў, нават у выпадку выйсця з ладу абсталявання. Менавіта такія ЦАД трэба будаваць пад крытычна важныя бізнес-працэсы сучасных кампаній.
Толькі зарэгістраваныя карыстачы могуць удзельнічаць у апытанні. , Калі ласка.
А вы карыстаецеся рэзерваванне ў ЦАД?
-
Так, мы таксама выкарыстоўваем N+1 кандыцыянераў
-
У нас таксама N+1 КБС
-
Мы нават мацней усё зарэзервавалі
-
Не, мы не выкарыстоўваем рэзерваванне
Прагаласавалі 9 карыстальнікаў. Устрымаліся 6 карыстальнікаў.
Крыніца: habr.com