Първите дни на лятото са отлични за вдъхновяваща екскурзия в Питер.
Ще посетим Миран, linxdatacenter, RETN и Метротек.

5 сутринта, Московски вокзал, KFC, набережна Мойки, Тарелка, гълъби от покривите, Исакий, Марсово поле, Каптюр яндексодрайвовият и ето го — Миран.

Миран

В Миран вече няколко години живее нашата лаборатория с Ева, сървър за излъчване, виртуален микротиковски RouterOS, хостинг linkmeup с IPv6 достъпност и вече и хостинг за подкасти.

При входа в Миран ни посрещна внушителен ДГУ.

Повечето дизел-генераторни установки са на колела по две причини:

• Мобилност — на стотина метра има още няколко модула на Миран. Те разполагат със свои генератори — но кой знае — може да се наложи да ги местим.
• Мобилност — не е необходимо да ги регистрират, като стационарни електрически станции, следователно, не се изисква проектна документация.

ДГУ на Миран стартира през зимата и лятото за секунди. По време на това време цялото ЦОД е захранвано от акумулаторни батерии.

И железният HP в рафта на Миран, и екскурзията станаха възможни благодарение на Фьодор Русаков.

Цялата екскурзия премина в уютна домашна атмосфера. Кафе с бисквитки, разговори за телекомуникации, за корените на компанията, за преместването на двеста сървъра от Москва в Питер под прикритие на нощта. Без бързане, се разходихме из двете сгради на ЦОД. И двете — BrownField — преустроени от заводски помещения. В първата, принадлежаща на Миран, от която започнахме и където се заредихме на втория етаж след четиричасовата разходка из Питер, в свое време се е намирал завод за дизелови генератори, наистина гигантски дизелови генератори. Всъщност вторият етаж не е съществувал — имало е огромни врати, през които хората влизат и излизат. Всичко е било разглобено, вторият етаж е направен, активна охладителна система, резервирано електрическо захранване, газова система за гасене на пожари.

Класическият горещ коридор, от който въздухът постъпва в климатизаторите и под фалшивия под в затворения студен коридор.

Също така под фалшивия под са скрити захранващите кабели.

Миран не е създаден като площадка за един основен клиент, а по-скоро последователно е развивал предложението на пазара, където има търсене.

В свое време тук е имало голяма банка с всички необходими решетки и системи за контрол на достъпа, но тя вече се е преместила.

Търсенето продължи да нараства, Миран също, появи се втора сграда — вече под наем — също BrownField — на двеста метра от първата. Пътят минава покрай набережната на Голямата Невка мимо къщата на Нобел.

Новата сграда е построена по модулен принцип с възможност за преместване на целия модул в случай на проблеми с наемодателя. Първите две кутии бяха закупени от производителя, третата — вече сглобена с оглед на предишни грешки.

Модулната архитектура показа своите недостатъци — те са сравнително тесни — горещият коридор — 60 см — не позволява на двама души да се разминат. А най-важното — разходите за преместване, както се оказа при първоначалното изчисление, са сравними с изграждането на нова сграда.

Но те изглеждат свежо и модерно както отвън, така и отвътре.

NOC-ът на момчетата е на православен Linux, стабилен Debian.

Компанията е получила своето име от платката Система Meridian Integrated Recorded Announcement (MIRAN) в телефонния комутатор Меридиан. И зад този проект поставиха името на ЦОД.

ЦОД решиха да строят в трудната 2008-а година.

Оттогава момчетата предоставят дедицирани сървъри и колокейшън. В специализирани помещения е инсталирано оборудване на операторите.

И това налага определени ограничения и особености в работата. Например, в стелажите стои максимално разнообразно оборудване, както в машините, така и в мрежовите решения. В Миран не видях само Ариста и Мелланокс. Всичкото оборудване изисква различни условия на температура в студения коридор, затова трябва да се поддържа на много ниско ниво — около 20°С, така че за ниски PUE не можем да говорим — за Миран той е 1,5.
Още един нюанс — с кабелите в стелажите. Веднага щом пуснете външни лица с техните свързвания в помещението, „красотата изчезва“. Няма изключения.

За съжаление, въвеждането на драконовски мерки може да бъде вредно.

Последни снимки.

А след това мърч от нашата маса на вашата и от вашата на нашата. Натоварихме се всички в такси — и в линкс.

linxdatacenter

Това са сериозни момчета, на временния им пропуск дори пише „Security Matters“. Това ще бъде темата на цялата екскурзия.

След сладкия Миран в linxdatacenter разбирате, че сте дошли в луксозен дата център. В своя почивен ден четирима души се събраха, за да разкажат за себе си на петима други, които едва ли ще станат техни клиенти 🙂

С нас посрещна Мария Свистунова и ни прекаси за голямата конференц маса. Няколко празни разговора с гватемалско кафе, и напред.

Екскурзиите тук са в пълно текучество. Максим и Олег знаят какво правят: говорят по утвърдена програма, ясно и с увлечение. Където е нужно, поставят акцент, а където не – заобикалят. С чувство за хумор също всичко е наред, така че два с повече часа минаха незабелязано.

Гордостта на ЦОДа е 100% аптайм от старта през 2011 година.

Увереността е толкова висока, че дори за десетични дроби не е предвидено място на таблото.

Linx е пример за ДЦ в GreenField формат. Сградата е проектирана специално за разполагане на ДЦ. Затова височината на таваните, здравината на подовите конструкции, електрозахранването и неговото резервиране, както и СКС – всичко това бе заложено в проекта и отчетено още на етапа на строителството.

По подразбиране подът издържа стойка от 800 кг, но товарът може да бъде увеличен след допълнително укрепване. Казват, че оракловите стойки на стойност Falcon9 изискват специално отношение.

Самият ДЦ е захранен от газово-поршнева установка, а градското електричество е само резерв. Според Максим – това е било много правилно решение, защото по време на известния блэкаут в Петербург офисът и съседният БЦ пострадаха, докато ЦОД продължи да работи.

Дизеловият генератор тук вече не е прикачен от колела, а напълно стационарно помещение с комини, издигащи се високо над пейзажа.

Времето за стартиране е не повече от две минути, а на батериите целият ЦОД може да работи около един час. Дизелът може да работи три дни без презареждане.

Тук всичко се управлява с ред и разумност.

Ето, например, ключницата, където клиентите на ЦОДа могат сами, чрез отпечатък от пръст, да вземат ключовете от своите стойки.

А това е помещението, където клиентите могат да провеждат всякакви необходими инженерни работи, за което на стената е окачен шанцеви инструмент.

Това вече са рафтове за местна експлоатация с всичко жизненоважно за ежедневната работа:

Тя винаги е заредена и готова за работа.

Шапката на начинаещия хипхопър на снимката по-горе спаси главата не на един човек. Тя е твърда като натурална каска – точно за лазене под полутораметровия фалшив под, където от време на време стърчи някой остър метален предмет.

Собствено, служителите от експлоатацията:

Този на пръв поглед обикновен уред — дифманометър.

Целта му е да решава проста задача — да поддържа разликата в налягането между коридора и машинното помещение. Например, за да се осигури малко по-високо налягане вътре, така че при отваряне на вратата прахът да не навлиза, а наоборот, да се отдалечава от вратата.

Системата за пожарогасене също е газова — в случай на бедствие, газът измествал кислорода и потиска горенето.

В Linx влизат само сериозни и изключително сериозни хора, които имат причини за параноя, равна на Арарат.

Решетките и отделният контрол на достъпа от датацентровата система — това е само началото.

Ето когато за решаването на проблема или за нови комутации пристигат двама души — един с материален ключ, другият с електронен — това вече става интересно. А когато от клиента идва одитор с очила, слиза под фалшивия под, раздвижва две решетки и казва, че тук ще премине главата на дете, разбирате, че човекът е виждал интересни неща в живота си.

Имаше забавни ситуации, когато при проектирането на клетката бяха взети предвид всички възможни системи за сигурност, всички размери, които позволяват вкарването на рафта и поставянето на оборудване, но някак си не помислиха за физическите размери на инженерите, които ще работят с него. А те нито в профил, нито срещу фасадата не могат да се съберат между клетката и рафта.

Ако бях ФСБ, бих поставил собственото си оборудване в linx 🙂

След екскурзията все още седяхме дълго, дружелюбно разговаряхме под пица.
От това царство на безопасността и реда се насочихме към RETN.

RETN

С тези момчета сме запознати отдавна и близко. Затова не е изненада, че накрая се събрахме на тяхната покривна площ, за да изпечем шашлици и да си разкажем истории.

Също така сме били при тях, макар сякаш да не сме разказвали. Миналата година плановете за захващане на покривите в Санкт Петербург се провалиха заради Фифа.

RETN е всъщност най-голямият магистраллен оператор с влакна по цялата планета. На тяхната мрежа всеки паяк би завидял.

А датацентърът на обходния — това е домашен проект за душата, който е намерил своята ниша на растящия пазар. Тук сечем хора, които се нуждаят от солидна свързаност с света и достъп до други местни оператори.

Например, в RETN има CDN на Netflix.

С учудване научих, че всяка тяхна нода е индивидуално подписана на ръка с някаква фраза.
И ето са празничните кутии, които се подготовят в различни градове на POP-овете на RETN (и, очевидно, не само там), за да доставят до вас колкото се може по-бързо „Черно огледало“ и „Остри ръбове“.

Тук има и CDN на Google, а също така и много оператори, както на местно, така и на федерално ниво.

Пред сградата на RETN стоят две малки (в сравнение с мирановските) дизелови генератора и кола с канистри, за да отиде на бензиностанция. Звучи почти като семейно предприятие.

А вечерните преговори на покрива доведоха до това, че RETN ще ни предостави виртуален сървър за резервна площадка под хостинг на подкасти и изображения.
Глобални играчи, супер уютен ЦОД, мрежа с впечатляващи мащаби.

За някой този ден завърши с турнир по Duke Nukem, за друг с дългоочакван сън в хотела.

На следващия ден нямаше много планове: Метротек и подкаст на живо — linkmeup IRL.

Метротек

Буквално преди месец в гостите на телекомуникационния подкаст бяха Миша Соколов и Денис Габидуллин от НТЦ Метротек слеш Plumspace и разглеждахме какво е Smart SFP. А сега имахме възможността да ги видим на живо.

Денис, който ни водеше на обиколка из офиса на Метротек в Санкт Петербург (който, между другото, не се е променил от последната ни визита), ни предостави един от образците още от прага.
Сначала се учудих колко грубо е направен — сякаш е изработен с трион и файл от ключ с размер 32.

Оказа се, че корпусът на експерименталния екземпляр е отпечатан на 3D принтер от метален прах, което се забелязва по грапавата повърхност. Другите — готовите за серия — са напълно наред.

Но наистина, гледайки ги, се учудваш как успяха да скрият толкова много мозъци в почти стандартен корпус.

Препоръчвам да слушате подкаст за Роза, Тоза и сестрата на техния Боза. Получи се интересно на моето мнение.

Офисът е с максимално обикновен дизайн. Сравнително малки правоъгълни кабинети, насочени към прозореца, достатъчно тъмни, което малко натежава. Но атмосферата, въпреки че е през уикенда, беше работна.

Декорацията за две години не се е променила. Някои плакати и дъски привлечаха вниманието.

Посетихме няколко стаи: R&D, системни инженери, FPGA специалисти, разгледахме различни видове SFP, програматори и видяхме първия модел, при който Smart е изнесен извън SFP на кабел — един от първите експерименти — по-скоро Proof of Concept, че то изобщо работи.

Казват, че на някои клиенти им е удобно, когато от оборудването стърчи такъв кабел.
Първата цел преди две години беше да се събере обикновен оптичен SFP, който поне да предава сигнал.

След това отделно събраха Smart част с чужде SFP (както точно на кабел), за да се уверят, че могат да композиране чиповете.

Metrotex е свършил огромна работа. Помислете само, че за 2 години събраха напълно работещ оптичен модул, който може инкапсулация, телеметрия, сървър за точно време, конвертор на интерфейси.

И при това да настроят до идеал (макар че това все още трябва да бъде проверено с времето) основната функционалност за предаване на сигнал. Не трябва да има затихвания, не трябва да има дори редки дропове по вина на SFP. А също така не трябва да се нагрява, въпреки наличието на множество ASIC, FPGA и CPU вътре.
Браво!

Пълноценна изчислителна система:

• CPU: NXP i.MX6 ARM до 900 МГц
• FPGA: Lattice ECP5 до 85K LUTs
• RAM: DDR3 до 1 ГБ

Денис отбеляза, че в компанията се практикува и насърчава обменът на знания и опит. И тук си помислих: "Ама нима иначе става? 0_о". — Да, често идват хора, които на предишното си работно място варили в собственото си сок, не комуникирали, работили двойна и тройна работа и изобщо избягвали опити за комуникация.

И тук си спомних, че не по-късно от две години работех в една международна компания с много блокирани ресурси, където конференциите бяха забранени, а обменът на знания отсъстваше като концепция. И именно аз бях един от евангелистите на седмичните срещи за обмен на опит, които, изглежда, спасиха самотните инженери в отдалечени райони.

В Metrotex редовно се провеждат вътрешни обучения и лекции, затова те наистина са добри.

След това ни заведоха в удивителен цех за монтаж. Колкото и пъти да съм бил там, детското ми вълнение не угасва.

В Metrotex направо в офиса имат оборудване за печат на платки.

Шаблон за нанасяне на спойки, принтер за SMD компоненти (иначе не мог да го нарека), малка пещ за печене на платки и наблизо работни места за ръчен монтаж.

С учудване научих, че микрочиповете с множество крачета също се припоят на ръка. Денис казва, че техните момчета с удивителна прецизност и бързина напояват най-фините детайли и понякога няма смисъл да се пуска машина — човекът върши работата по-бързо.

Между нас нарекохме производствената линия Метротек ЕлТекс-верилайт, вдъхновени от сравнително наскоро проведена екскурзия до тях.

Освен това в офиса има 3D принтер и фрезерна машина за вътрешни нужди, на която вече са гравирани медали за миналата година. Chaos Construction.

Оттам се отправихме в удивителното Krang Pizza, където в пълен състав linkmeup погълнахме мутантска пица-бургер, чудовищна по размери и по същество, и се насочихме към офиса на IQ option, където записахме първия епизод. linkmeup IRL.

На следващия ден отново посетихме Лазерния център по указание на Мамонта, където изпитахме технократски екстаз и малко жажда за знания, но за това ще разкажа отделно.

На финала искам да кажа, че всички екскурзии и срещи се оказаха значително различни, както по мащаба на действията, така и по насоченост.

Миран, който гостоприемно приюти нашия хостинг, бързо расте, но все още е дружелюбно прост.

Линкс — наистина страхотен ЦОД, с внимателна сигурност и опитни маркетолози.
RETN — млади, весели момчета, „от гаража“, които изграждат гигантска мрежа и все още имат малък ЦОД, и не биха отказали да разпалят огън на покрива.

Метротек — сравнително малък екип от руски разработчици на хардуер и софтуер, които правят почти „с тези ръце“ куп конкурентоспособно оборудване, а сега навлизат на нов за тях пазар с амбициозна задача.

И Лазерният Център, който излиза извън обхвата на интересите на linkmeup, но е обект на нашите лични интереси. Остави много приятно впечатление и гравиране на микрофон на диктофона.

Източник: habr.com