Недзе пасярэдзіне паміж Масквой і Санкт-Пецярбургам ёсць невялікі горад Удомля. Раней ён быў вядомы Калінінскай АЭС. У 2019 годзе побач з'явілася яшчэ адна славутасць - мегаЦАД «Удомля» на 4 тыс. стоек.
Пасля далучэння да каманды Растэлекам-ЦАД спецыялісты DataLine таксама будуць займацца эксплуатацыяй гэтага дата-цэнтра. Напэўна, вы ўжо нешта чулі пра «Удомлю». Сёння мы вырашылі падрабязна расказаць, як там усё зроблена.
Індустрыяльныя краявіды: дата-цэнтр плошчай 32 000 м² і АЭС на заднім плане. Удомля ўзору вясны 2019.
Пад катом сабралі больш за 40 фота інжынерных сістэм дата-цэнтра з падрабязным апісаннем. Тых, хто дойдзе да канца, чакае прыемны сюрпрыз.
Аб лагістыцы
Дата-цэнтр знаходзіцца ў Цвярской вобласці. З Масквы ва Удомлю дарога зойме каля трох гадзін: 1 гадзіну 45 хвілін на Сапсане да станцыі Вышні Волочек, а адтуль па папярэдняй заяўцы вас сустрэне шатл і давязе да дата-цэнтра. З Санкт-Пецярбурга да Вышняга Волочка крыху даўжэй - 2 гадзіны 20 хвілін.
На машыне з Масквы можна дабрацца за 4,5 гадзіны, з Санкт-Пецярбурга - за 5.
Так, дзеля пары юнітаў, мусіць, ехаць сюды не захочацца. А вось калі вам патрэбен новы дом для дзясяткаў стоек, то варта прыгледзецца. Месцы і электрычнасці хопіць, нават калі вам захочацца падвоіць гэтую колькасць у любы момант. У Маскве, дзе, па нашым досведзе, дата-цэнтры браніруюцца яшчэ на этапе будаўніцтва, такі трук не заўсёды пройдзе.
Акрамя таго, размяшчэнне дата-цэнтра паміж Масквой і Піцерам можна выкарыстоўваць для геарэзервавання. Калі асноўныя магутнасці ў Маскве ці ў Піцеры, то сюды нядрэнна ўпішацца рэзервовая пляцоўка.
З усімі стандартнымі аперацыямі на месцы будзе дапамагаць каманда smart hands. Яны прымуць, распакуюць і ўсталююць абсталяванне ў стойках, падключаць яго да сілкавання і сеткі, дадуць выдалены доступ да абсталявання. У выпадку няспраўнасцяў дапамогуць з дыягностыкай і заменяць якія выйшлі з ладу кампаненты.
Першая чарга дата-цэнтра - гэта 4 машынных залы, або модуля, па 205 стоек. На першым паверсе працуюць 2 машынныя залы і энергацэнтр, на другім – яшчэ дзве залы і холадацэнтр. Ідзем глядзець, як тут усё ўладкована.
Фізічная бяспека
Дата-цэнтр займае выдзеленую тэрыторыю, на якую не прайсці без пропуску і дакумента, які сведчыць асобу. Тыя, хто прыязджае на сваім аўтамабілі, таксама атрымліваюць пропуск на транспарт і толькі пасля гэтага могуць патрапіць на тэрыторыю дата-цэнтра. Для тых, у каго з пропускам усё ў парадку, дата-цэнтр адчынены 24х7.
Першы пост кругласутачнай аховы - уваход на тэрыторыю.
Ідзем далей і пападаем на прапускны пункт непасрэдна пры ўваходзе ў дата-цэнтр.
Супрацоўнікі аховы не толькі сустракаюць кліентаў і выдаюць пропускі, але і кругласутачна сочаць за відэасцяной, куды выводзіцца выява ўсіх унутраных памяшканняў дата-цэнтра і прылеглых тэрыторый.
электразабеспячэнне
Свой шлях у дата-цэнтр электрычнасць пачынае ад АЭС. У дата-цэнтр прыходзіць 10 кВ на 6 паніжальных трансфарматараў. Далей – ужо 0,4 кВ двума незалежнымі маршрутамі ідуць у размеркавальную прыладу нізкай напругі (РУНН). Потым праз ДИБП электрасілкаванне паступае на ІТ-і інжынернае абсталяванне. Да стойкі падыходзяць два незалежных уводу, гэта значыць рэзерваванне 2N. Больш падрабязна пра тое, як усё ўладкована ў частцы электразабеспячэння, раскажам у асобным артыкуле.
Шлях электрычнасці ў дата-цэнтры "Удомля"
Сілавыя шыны, па якіх электрычнасць прыходзіць ад РУНН да сілавых панэляў ДИБП
Рады РУНН
Нягледзячы на тое, што пад бокам АЭС, у любым надзейным дата-цэнтры асноўным харчаваннем лічыцца гарантаванае. У нашых дата-цэнтрах, як вы ведаеце, за яго адказваюць ДДУ, але тут выкарыстоўваюцца дынамічныя КБС (ДБП). Яны таксама забяспечваюць і бесперабойнае харчаванне. ДИБП зарэзерваваны па схеме N+1.
ДИБП маркі Euro-Diesel (Kinolt) магутнасцю 2 МВт. Равуць так, што без беруш туды лепш не заходзіць
І вось як гэта працуе. ДИБП - гэта звязак трох асноўных кампанентаў: дызельны рухавік, сінхронная электрамашына і акумулятар кінэтычнай энергіі з ротарам. Усе яны замацаваны на галоўным вале.
Электрамашына можа працаваць у рэжыме электрарухавіка і генератара. Калі ДИБП сілкуецца штатна ад горада, электрамашына - гэта электраматор, які круціць ротар і запасіць кінетычную энергію ў акумулятары.
Шэры блок на першым плане - сінхронная машына ДИБП
Дызельны рухавік ДИБП
Калі гарадское харчаванне знікае, электрамашына пераходзіць у рэжым генератара. Дзякуючы назапашанай кінэтычнай энергіі ротар прымушае круціцца асноўны вал ДИБП, электрамашына працягвае працаваць без гарадскога харчавання і напруга на вынахадзе не знікае. Так забяспечваецца бесперабойнае харчаванне ў дата-цэнтры. Адначасова з гэтым сістэма кіравання ДИБП падае сігнал на запуск дызельнага рухавіка. Тая ж кінэтычная энергія ротара запускае дызель і дапамагае яму выйсці на працоўную частату. Ротар трымае абароты да адной хвіліны, і гэтага хопіць, каб у справу ўступіў дызель. Пасля запуску ўжо дызель круціць асноўны вал, а праз яго і электрамашыну (вось пераключэння ДИБП з аднаго рэжыму ў іншы).
У выніку сілкаванне ў стойках не знікае ні на секунду.
Бак кожнага дызель-генератара разлічаны на 3 гадзіны. У дата-цэнтры ёсць і сваё палівасховішча на 80 тон, якое дазволіць трымаць усю нагрузку дата-цэнтра на працягу 24 гадзін. На выпадак вельмі гіпатэтычных блэкаўтаў (АЭС пад бокам гэтага не дапусціць) ёсць дамовы з некалькімі падрадчыкамі, якія аператыўна падвязуць дызельнае паліва на пляцоўку па званку. Увогуле, усё як мае быць.
Кожны тыдзень ДИБП саматэстуюцца і заводзяць дызель. Раз на месяц праходзяць тэсты з кароткачасовым адключэннем гарадской сеткі.
Панэль кіравання ДБП
Памяшканне ЩГП і ЩБП
Магістралі і развязкі сілавых кабеляў
Машынныя залы
Кожны модуль размяшчаецца ў гермазоне, у спецыяльным корабе. Гэтыя дадатковыя сцены і дах абараняюць машынную залу ад пылу, вады і агню. Пры прыёмцы дата-цэнтра гермазону традыцыйна праліваюць вадой, каб праверыць на герметычнасць.
Дах будынка і свой дах машыннай залы з дрэнажнымі трубамі
Вада, якая трапляе на дах гермазоны, сыходзіць па жолабах у дрэнажны трубаправод
Кожная зала гатова прыняць па 205 стоек сярэдняй магутнасцю 5 квт.
Расстаноўка абсталявання ў зале арганізавана па схеме халодных і гарачых калідораў.
Па столі праходзіць разводка сістэм ранняга пажаравыяўлення Bolid і газавага пажаратушэння.
Датчыкі задымлення размешчаны і пад фальшполам. Досыць спрацаваць двум любым датчыкам, і завые сірэна пажарнай трывогі, але пра гэта пагаворым крыху пазней.
Тут жа, уздоўж шэрагаў кандыцыянераў, размешчаны істужачныя датчыкі працёкаў.
Кожны калідор паміж стойкамі "прастрэльваецца" камерамі відэаназірання.
Пры жаданні, стойкі можна размясціць за адмысловай агароджай (cage) і ўсталяваць на яго дадатковыя камеры, СКУД і датчыкі руху, аб'ёму і іншае.
Холадазабеспячэнне
У дата-цэнтры «Удомля» выкарыстоўваецца чылерная схема на этыленгліколе. У машынных залах працуюць кандыцыянеры, на даху - чылеры, а на другім паверсе знаходзіцца холадацэнтр з трубаправодамі, сістэмай аўтаматыкі і кіравання, помпамі, якія акумулююць бакамі і інш.
У кожнай зале 12 кандыцыянераў, палова з іх - з параўвільгатняльніка. Схема рэзервавання N+1.
У халодным калідоры падтрымліваецца тэмпература ў межах 21-25 ° C і вільготнасць 40-60%.
Прэцызійныя кандыцыянеры Stulz Cyber Cool
Вакол кожнай машыннай залы два кольца: халодная магістраль, якая падае астуджаны этиленгликоль у кандыцыянер, і гарачая , якая адводзіць нагрэты гліколь ад кандыцыянераў да чылераў. Калі адкрыем фальшпад у калідоры, то ўбачым апускі ў машынныя залы ад сістэмы холадазабеспячэння.
Маршрут этыленгліколю выглядае наступным чынам: з кандыцыянера нагрэты этыленгліколь трапляе спачатку ў зваротную магістраль вакол машыннай залы, а потым у агульнае кольца. Затым этыленгліколь ідзе на помпу і далей на чылер, дзе і астуджаецца да 10 °C. Пасля чылера этиленгликоль зноў вяртаецца да кандыцыянера праз якая падае магістраль агульнага кольца, якія акумулююць бакі і кольца вакол модуля.
Схема холадазабеспячэння дата-цэнтра
Вось так выглядае холадацэнтр, праз які праходзіць 100 м3 этыленгліколю.
Шэрыя ёмістасці - гэта пашыральныя бакі. Праз іх праходзіць нагрэты этыленгліколь на шляху да чылера. Улетку этыленгліколь пашыраецца і патрабуе дадатковай прасторы.
Гэтыя вялікія ёмістасці - акумулюючыя бакі, па 5 м3 кожны. Яны забяспечваюць бесперабойнае астуджэнне дата-цэнтра на выпадак адмовы чылераў.
Астуджаны этыленгліколь з бакаў падаецца ў сістэму, і гэта дазваляе захаваць тэмпературу паветра на выхадзе з кандыцыянера на ўзроўні 19 ° C на працягу 5 хвілін. Нават калі за акном +40 °C.
Помпы сістэмы холадазабеспячэння
Сеткаватыя кішэнныя фільтры і бакі-сепаратары для ачысткі этыленгліколю ад механічных часціц і паветра.
Тонкая чырвоная лінія на падлозе пад трубамі - гэта істужачныя датчыкі працёкаў. Яны ідуць па ўсім перыметры холадацэнтра.
Калі нейкая з труб дасць цечу, то этыленгліколь сыдзе па сістэме дрэнажу і трапіць у спецыяльны бак у памяшканні водападрыхтоўкі. Тут жа стаяць два бакі з «запасным» этыленгліколем для падсілкоўвання сістэмы холадазабеспячэння на выпадак буйных працёкаў.
І пра чылеры. На даху працуе 5 чылераў па схеме рэзервавання N+1. Кожныя суткі аўтаматыка вызначае, у залежнасці ад напрацоўкі, які чылер вывесці ў рэзерв.
Чылеры маркі Stulz CyberCool 2 магутнасцю 1096 кВт
Чылеры падтрымліваюць тры рэжыму:
- кампрэсарны - ад 12 ° C;
- змяшаны - пры 0-12 ° C;
- фрыкулінг - ад 0 і ніжэй. Гэты рэжым мае на ўвазе астуджэнне этыленгліколю за кошт працы вентылятараў, а не кампрэсара.
пажарная бяспека
У дата-цэнтры дзве станцыі газавага пажаратушэння. У кожным дзве батарэі з 11 балонаў: першая асноўная, другая - рэзерв.
Супрацьпажарная сістэма дата-цэнтра завязана з серверам Калінінскай АЭС, і, калі спатрэбіцца, на месца за хвіліны прыедзе ўласная пажарная служба станцыі.
На фота - сістэма пажарнай сігналізацыі і кнопка аварыйнага выхаду ў машыннай зале. Апошняя патрэбна, калі падчас пажарнай трывогі дзверы па нейкім чынніку не разблакаваліся: яна раздзірае сілкаванне электразамка.
целікам
У дата-цэнтр незалежнымі маршрутамі прыходзяць дзве магістралі Растэлекам. Кожная з DWDM сістэм мае ёмістасць 8 тэрабіт.
У дата-цэнтры два тэлекам-уводу, якія размяшчаюцца на адлегласці больш за 25 метраў адзін ад аднаго.
Таксама на пляцоўцы прысутнічаюць аператары Раскам, Telia Carrier Russia, Кансіст, у найбліжэйшай будучыні з'явіцца DataLine.
Ад Удомлі можна пабудаваць канал у Маскву, Санкт-Пецярбург ці любую кропку Расіі і свету.
Маніторынг
У цэнтры маніторынгу кругласутачна нясуць сваю пасаду дзяжурныя інжынеры.
Сюды паступае ўся інфармацыя па інжынерных сістэмах: кліматычныя ўмовы ў зале, стан уводаў, ДИБП і г.д.
Кожныя дзве гадзіны дзяжурныя здзяйсняюць абыход усіх інфраструктурных памяшканняў, каб агледзець стан інжынернага і ІТ-абсталявання.
Дапаможная інфраструктура
Для дастаўкі абсталявання ў дата-цэнтр прадугледжана зона разгрузкі.
Зона разгрузкі знутры.
Калі ваша зала на другім паверсе, то вось гэты гідраўлічны грузапад'ёмнік даставіць туды любое абсталяванне.
Шафкі для захоўвання кліенцкіх інструментаў, і не толькі.
Трохі пра побыт
Для сталага персанала можна арандаваць абсталяваныя працоўныя месцы ў офіснай частцы. Калі ж будзеце наязджаць час ад часу, то можна спыніцца ў часовым гатэлі з усімі выгодамі прама на тэрыторыі дата-цэнтра.
У офіснай частцы таксама працуе сталовая і кухня.
А яшчэ тут вакол ачмуральная прырода з лясамі, азёрамі, рэкамі, рыбалкай і іншым вольным часам на свежым паветры. Прыязджайце ў госці.
Як і абяцалі, прыемны бонус для тых, хто дайшоў да канца. Першыя паўгода арэнда ўстойліва-месцы ва «Удомлі» з падведзенай магутнасцю 5 квт будзе бясплатнай. Плаціце толькі за фактычна спажытую электраэнергію. Заяўку адпраўляйце на .
Крыніца: habr.com