Първите дни на лятото са отличен момент за образователно пътуване до Санкт Петербург.
Ще посетим Миран, linxdatacenter, RETN и Метротек.
5 сутринта, Московски вокзал, KFC, набережната Мойка, Тарелка, гълъби по покривите, Исакий, Марсово поле, Каптюр яндексодрайвовият, и ето го — Миран.
Миран
В Миран вече няколко години живее нашата лаборатория с Ева, сървър на поточно предаване, виртуален маршрутизатор MikroTik, хостинг linkmeup с IPv6 достъпност и сега хостинг за подкасти.
При входа в Миран първо ни посрещна внушителен ДГУ.
Повечето Дизелови Генераторни Установки са на колела по две причини:
- Мобилност — на няколкостотин метра има още няколко модула на Миран. Те имат свои генератори — но кой знае — може да се наложи да се преместят.
- Мобилност — не трябва да се регистрират, като стационарни електрически станции и следователно, не е необходима проектна документация.
ДГУ на Миран стартира зимата и лятото за секунди. През това време целият ЦОД се захранва от акумулаторни батерии.
И желязният HP в стойката на Миран и екскурзията стана възможна благодарение на Фьодор Русаков.
Цялата екскурзия премина в уютна домашна атмосфера. Кафе с бисквитки, разговори за телекомуникации, историята на компанията, преместването на двеста сървъра от Москва до Санкт Петербург под покрива на нощта. Без бързане се разходихме из две сгради на ЦОДа. И двете — BrownField — преобразувани от заводски помещения. В първата, собственост на Миран, откъдето започнахме и където на втория етаж се зареждахме след четиричасовото разходка из Петербург, някога е разполагал завод за дизелови установки, наистина гигантски дизелови установки. Всъщност вторият етаж не е съществувал — имало е огромни врати за преминаване. Всичко е разобрано, вторият етаж е направен, активно охлаждане, резервирано електрозахранване, газова система за пожароизвестяване.
Класическият горещ коридор, откъдето въздухът се подава в климатичните системи и под фалшивия под в затворен студен коридор.
Също така под фалшивия под са скрити захранващи кабели.
Миран не е създаден като площадка за един основен клиент, а по-скоро постепенно развиваше предложението на пазара, където има търсене.
Няколко години назад тук имаше голяма банка с всички необходими решетки и системи за контрол на достъпа, но тя вече е отпътувала.
Търсенето продължава да расте, а Миран също, появи се втора сграда — вече под наем — също BrownField — на двеста метра от първата. Пътят минава покрай набережната на Голямата Невка до дома на Нобел.
Новата сграда е построена по модулен принцип с възможност за преместване на целия модул в случай на проблеми с наемодателя. Първите две кутии са купени от производителя, а третата е сглобена с оглед на предишните грешки.
Модулната архитектура има недостатъци — те са сравнително тесни — горещият коридор е 60 см — двама души не могат да се разминават. А най-важното — разходите за преместване, как установихме при първия изчисление, са сравними със строителството на нова сграда.
Но изглеждат, както отвън, така и отвътре, свежо и модерно.
NOC-ът на момчетата е на православен Linux, стабилен Debian.
Компанията, между другото, получи своето име от платката Система Meridian Integrated Recorded Announcement (MIRAN) в телефонния комутатор Меридиан. И след това и ЦОД-то беше наречено така.
ЦОД-то решиха да построят в трудната 2008-ма година.
Оттогава момчетата предоставят дедик и колокол. В специални помещения е инсталирано оборудването на операторите.
И това наклада определени ограничения и особености на работата. Например, в стелажите е поставено максимално разнообразно оборудване, както по отношение на машините, така и по отношение на мрежовото оборудване. В Миран само Аристу и Мелланокс не видях. Всичкото оборудване изисква различна температура в студения коридор, затова трябва да се поддържа на много ниско ниво — около 20°С, така че за ниски PUE не може да се говори — при Мирана той е 1,5.
Още един нюанс — със змейските сватби в стелажите. Веднага щом пуснете в помещението външни компании с техните свързвания, пишете "красотата изчезна". Никой няма изключения.
За съжаление, въвеждането на драконовски мерки тук може да се окаже вредно.
Последни снимки.
А след това мърч от нашата маса на вашата и от вашата на нашата. Заредихме се цялата тълпа в такси — и в линкс.
linxdatacenter
Това са сериозни момчета, на временните им пропуска дори пише "Security Matters". Това ще мине като лейтмотив на цялата екскурзия.
След сладниквия Миран в linxdatacenter разбирате, че сте в луксозния ДЦ. В своя почивен ден четири човека се събраха да кажат за себе си на други пет човека, които едва ли ще станат техни клиенти 🙂
Мария Свистунова ни посрещна, с проведена към голямата маса за преговори. Няколко празни разговора над гватемалско кафе и напред.
Туровете тук са организирани на поток. Максим и Олег знаят работата си: разказват вити и с увлечение. Където е необходимо, правят акцент, а където не — избягват. Чувството за хумор е в пълен ред, затова два и повече часа преминаха незабелязано.
Гордостта на ЦОД е uptime от 100% от старта през 2011 година.
Увереността е толкова висока, че за десетични части дори не е предвидено място на таблото.
Linx е пример за ЦОД в GreenField формат. Сградата е построена специално за разполагане на ДЦ. Затова височината на таваните, здравината на междуетажните плочи, електрическите входове, тяхното резервиране и СКС — всичко това беше заложено в проекта и взето предвид още на етапа на строителството.
По подразбиране подът издържа стойка от 800 кг, но масата може да се увеличи след допълнително укрепване. Чуват се слухове за ораклови стойки на стойност Falcon9, които изискват специално отношение.
Самият ДЦ е захранен от газово-поршневата установка, а градското електрическо захранване е само резервно. Според Максима — това било много правилно решение, защото по време на известния петербургски blackout офисът и съседният бизнес център пострадаха, а ЦОД продължи работа.
Дизеловият генератор тук вече не е прицеп на колела, а напълно стационарно помещение със комини, извиващи се високо над пейзажа.
Времето за стартиране е не повече от две минути, а на батериите целият ЦОД може да работи около час. Дизелът може да работи 3 дни без презареждане.
Тук властва ред и обмисленост.
Ето, например, ключницата, където клиентите на ЦОД могат сами по отпечатък от пръст да вземат ключовете от своите стойки.
А това е помещението, където клиентите могат да извършват нужните им инженерни работи, за което на стената висит инструментите.
Това вече са полички за местна експлоатация с всичко необходимо в ежедневната работа:
Той винаги е зареден и готов за работа.
Шапката на начинаещия хипхопър на горната снимка спаси главата на много хора. Тя е здрава както истинска каска — точно thing за лазене под полутораметровия фалшив под, където тук-там изскача скъпо желязо.
Всъщност, служителите от експлоатацията:
Този на пръв поглед незабележим уред е дифманометър.
Той е предназначен да решава проста задача - да поддържа разликата в наляганията между коридора и машинното помещение. Например, за да може налягането вътре да бъде малко по-високо и при отваряне на вратата прахът да не навлиза вътре, а напротив - да се отклонява от вратата.
Системата за противопожарна защита също е газова - в случай на бедствие газът извества кислорода и потиска горенето.
В Линкс идват само сериозни и много сериозни момчета, които имат причини за параноя с размерите на Арарат.
Решетките и отделната от центровото СКУД - това е само началото.
Когато на решаване на проблеми или на нови комутации идват два човека - един с материален ключ, друг с електронен - вече е по-интересно. А когато от клиента идва одитор с очила, спуска се под фалшивия под, разширява две решетки и казва, че тук може да мине главата на дете, разбираш, че човек е виждал някои интересни неща в живота си.
Имаше забавни ситуации, когато при проектиране на клетката се взеха предвид всичко, което е възможно, всички системи за безопасност, всички размери, които позволяват внасяне на стелажа и поставянето на оборудването в него, но по някакъв начин не помислиха за размерите на инженерите, които ще работят с него. А те не могат нито отпред, нито отстрани да се поберат между клетката и стелажа.
Ако бях ФСБ, бих поставил моето желязо в линкс 🙂
След екскурзията седяхме още доста дълго, разговаряйки сърдечно под пица.
От това царство на сигурност и ред се отправихме към RETN.
RETN
С тези момчета сме запознати отдавна и отблизо. Затова не е изненадващо, че най-накрая се събрахме на техния покрив, за да печем шашлици и да разказваме байки.
Също така сме били при тях, макар че изглежда не сме разказвали. Миналата година плановете за завладяване на покривите в Санкт Петербург се провалиха заради Фифа.
RETN всъщност е най-големият магистралният оператор с оптики по цялата планета. На тяхната мрежа всеки паяк би завидял.
А ЦД на обводния - това е един домашен проект за душата, който намери своята ниша на растящия пазар. Тук отиват тези, които имат нужда от дебела свързаност с света и изход към други местни оператори.
Така, например, в RETN е разположен CDN на Netflix.
С учудване установих, че всяка тяхна нода е индивидуално подписана ръчно с някаква фраза.
И ето такие празнични кутии се срещат в различни градове на POP-овете на RETN (и явно не само там), доставяйки до вас възможно най-бързо "Черен оглед" и "Остри ръбове".
Тук има и CDN на Google и много оператори, както на местно, така и на федерално ниво.
РЕД-на разполага с два миниатюрни (в сравнение с Мирновския) дизелови генератора и камион с канистри, за да отидат на зареждане. Звучи почти като семейния бизнес.
Вечерните преговори на покрива ни доведоха до това, че RETN ще ни предоставят виртуална машина за резервна платформа за хостинг на подкасти и изображения.
Световни мъже, супер лампов ЦОД, удивителна по размерите си мрежа.
За някои този ден завърши с турнира по Duke Nukem, за други с дългоочакван сън в хотела.
На следващия ден не бяхме с много планове: Метротек и подкаст на живо — .
Метротек
Точно преди месец в гости на телекомуникационния подкаст Михаил Соколов и Денис Габидулин от НТК Метротек / Plumspace, и разгледахме какво е Smart SFP. А сега успяхме да ги видим на живо.
Денис, който водеше екскурзията в офисът на Метротек в Санкт Петербург (който не се е променил от последния ни поход при тях), буквално от прага ни даде един от образците.
Първоначално се учудих колко е грубо направен — като че ли е издялан с трион и шлифован с напильник от ключ на 32.
Оказа се, че корпусът на прототипа е отпечатан на 3D принтер от метален прах, което и личи по шершавата повърхност. Другите — тези, които са готови за серийно производство — са в отлично състояние.
Но наистина, когато погледнеш на тях, се удивляваш как успяват в почти стандартен корпус да скрият толкова много умствена стойност.
Препоръчвам да послушате . Стана наистина интересно по мой вкус.
Дизайнът на офиса е максимално обикновен. Сравнително малки правоъгълни стаи, разпрострени към прозореца, достатъчно тъмни, което беше малко стресиращо. Но атмосферата, въпреки почивния ден, бе работна.
Оформлението през последните две години не се е променило. Някои плакати и дъски бяха приятна изненада.
Посетихме няколко стаи: R&D, системни инженери, FPGA специалисти, разгледахме различни видове SFP, програматори, видяхме първия модел, в който Smart беше изнесен от SFP на проводник — един от първите експерименти — по-скоро Proof of Concept, че то изобщо работи.
Казват, че на някои клиенти дори им е удобно, че от техниката излиза такъв 'опашка'.
Първата цел преди две години беше да се събере обикновен оптичен SFP, който поне да предава сигнал.
След това отделно събираха Smart част с чужда SFP (точно на кабел), за да се уверят, че могат да комбинират чиповете.
Метротек е свършил огромна работа. Помислете само, че за 2 години събраха напълно работещ оптичен модул, който умее инкапсулация, телеметрия, сървър за точно време, конвертор на интерфейси.
И при това да оптимизират до съвършенство (въпреки че това все още предстои да бъде проверено с времето) основната функционалност по предаване на сигнала. Не трябва да има загуби, не трябва да има дори редки дропове по вина на SFP. Освен това не трябва да се нагрява, въпреки пачката ASIC, FPGA и CPU вътре.
Браво!
Пълноценна изчислителна система:
- CPU: NXP i.MX6 ARM до 900 МХц
- FPGA: Lattice ECP5 до 85K LUTs
- RAM: DDR3 до 1 ГБ
Денис отбеляза, че в компанията се практикува и насърчава обменът на знания и опит. И тук си помислих: «А нали не може да бъде иначе? 0_о». — Да, често при тях идват хора, които на предишната си работа са варили в собствен сока, не са комуникирали, вършили са двойна и тройна работа и изобщо са избягвали опити за комуникация.
И тук си спомних, че всъщност не по-късно от две години работех в една международна широка забранена компания, в която конференциите бяха забранени, а обменът на знания отсъстваше като клас. И именно аз бях един от евангелистите на седмичните срещи за обмен на опит, които, изглежда, спасяваха самотни инженери в отдалечени региони.
В общи линии в Метротек се провеждат регулярни вътрешни тренинги и лекции, затова те са и страхотни.
След това ни отведоха в удивителен цех за монтаж. Колко пъти съм бил там, все пак детският ми възторг не угасва.
В Метротек точно в офиса има оборудване за печат на платки.
Шаблон за нанасяне на статични елементи, принтер за SMD компоненти (иначе не мога да го нарека), малък фурна за запичане на платки и до нея работни станции за ръчен монтаж.
С учудване научих, че микрочиповете с многобройни крака също се запояват ръчно. Денис казва, че техните момчета с изумителна прецизност и бързина запояват най-малките детайли и понякога няма смисъл да се включва шайтан-машината — човекът прави това по-бързо.
Ние помежду си нарекохме производствената линия Метротек ЕлТекс-верилайт, по повод сравнително наскорошна екскурзия при тях.
Освен това в офиса има 3D принтер и струг за вътрешни нужди, на който обаче вече са гравирани медали за миналата година. .
Оттам се отправихме към невероятната Krang Pizza, където с пълен екип linkmeup погълнахме мутантска пица-бургер, в размери и смисъл, и се отправихме към офиса на IQ option, където записахме първия епизод. .
На следващия ден отново се отбихме в Лазерния център по указание на Мамонта, където ни се случи технократен екстаз и малко възпламенение на алчността, но за това ще бъде отделна история.
В заключение бих искал да кажа, че всички екскурзии и срещи се оказаха доста различни, както по мащаб на действие, така и по насоченост.
Миран, който приветливо прие нашия хостинг, бързо растящ, но все още приятен и прост.
Линкс — определено впечатляващ ЦОД, с акцент върху сигурността и опитни маркетолози.
RETN — млади весели момчета „от гаражите“, които изграждат гигантска мрежа и все още имат малък ЦОД и не са против да развият малък огън на покрива.
Метротек — сравнително малък екип от руски разработчици на желязо и софтуер, който произвежда почти „с тези ръце“ куп измервателно оборудване, конкурентоспособно на пазара, а сега навлиза на нов за него пазар с амбициозни задачи.
И Лазерният Център, който излиза извън интересите на linkmeup, но е обект на нашите лични интереси. Остави много приятно впечатление и гравировка на микрофон на диктофона.
Източник: habr.com
