Spaceruje po centrach danych i telekomach w Petersburgu

Pierwsze dni lata to doskonały czas na edukacyjną wycieczkę do Petersburga.
Odwiedzimy Miran, linxdatacenter, RETN i Metrotek.

5 rano, stacja Moskovsky, KFC, nasyp Moika, Płyta, gołębie z dachów, Św. Izaak, Pole Marsowe, Yandex Drive Capture i oto jest - Miran.

Miran

Nasze laboratorium z Evą, serwerem rozgłoszeniowym, wirtualnym routerem Mikrotik, hostingiem linkmeup z dostępnością IPv6, a teraz hostingiem podcastów, mieszkamy w Miranie od kilku lat.

Spaceruje po centrach danych i telekomach w Petersburgu

Przy wjeździe do Miranu po raz pierwszy spotkaliśmy się z imponującą wielkością elektrownią diesla.

Spaceruje po centrach danych i telekomach w Petersburgu

Większość agregatów prądotwórczych z silnikiem Diesla jest na kołach z dwóch powodów:

  • Mobilność - w odległości kilkuset metrów znajduje się jeszcze kilka modułów Mirany. Mają własne generatory – ale nigdy nie wiadomo – będziesz musiał je skręcić.
  • Mobilność – nie muszą być rejestrowane jako elektrownie stacjonarne, a co za tym idzie, nie jest wymagana dokumentacja projektowa.

DGU Mirana zimą i latem rozpoczyna się w kilka sekund. W tym czasie całe centrum danych zasilane jest z akumulatorów.

Zarówno żelazne HP w postawie Mirana, jak i wycieczka stały się możliwe dzięki Fedorowi Rusakovowi.

Spaceruje po centrach danych i telekomach w Petersburgu

Cała wycieczka odbyła się w kameralnej, domowej atmosferze. Kawa z ciasteczkami, rozmowa o telekomunikacji, o początkach firmy, o transporcie dwustu serwerów vkshechka z Moskwy do Petersburga pod osłoną ciemności. Spacerowaliśmy spokojnie przez dwa budynki centrum danych. Obie są konwersjami BrownField z terenów fabrycznych. W pierwszym, należącym do Mirana, gdzie zaczynaliśmy i gdzie na drugim piętrze ładowaliśmy się po czterogodzinnym spacerze po Petersburgu, znajdowała się kiedyś fabryka jednostek diesla, iście gigantycznych diesli. Właściwie nie było drugiego piętra – były tam ogromne bramy, którymi można było poruszać się tam i z powrotem. Wszystko zostało rozebrane, zbudowano drugie piętro, aktywne chłodzenie, redundantne zasilanie, gazową instalację gaśniczą.

Klasyczny gorący korytarz, skąd powietrze dostarczane jest do klimatyzatorów i pod podniesioną podłogą do zamkniętego zimnego korytarza.

Pod podniesioną podłogą ukryte są także kable zasilające.

Miran nie narodził się jako platforma dla jednego głównego klienta, ale systematycznie rozwijał swoją ofertę na rynku, na którym jest popyt.

Kiedyś był tu duży bank ze wszystkimi niezbędnymi ochroniarzami i systemami kontroli dostępu, ale już się wyprowadził.

Spaceruje po centrach danych i telekomach w Petersburgu

Popyt wciąż rósł, Miran też, pojawił się drugi budynek - już do wynajęcia - także BrownField - dwieście metrów od pierwszego. Droga biegnie wzdłuż nabrzeża Bolszaja Newka, obok domu Nobla.

Spaceruje po centrach danych i telekomach w Petersburgu

Nowy budynek zbudowany jest na zasadzie modułowej z możliwością transportu całego modułu w przypadku problemów z wynajmującym. Pierwsze dwa pudełka zostały zakupione u producenta, trzecie było już zmontowane z uwzględnieniem starych błędów.

Architektura modułowa okazała się mieć wady – są stosunkowo wąskie – gorący korytarz ma 60 cm – dwie osoby nie mogą się rozdzielić. A co najważniejsze, koszt przeprowadzki, jak się okazało przy pierwszej kalkulacji, jest porównywalny z budową nowego.

Ale wyglądają świeżo i modnie zarówno na zewnątrz, jak i wewnątrz.

NOC dla chłopaków z ortodoksyjnego Linuksa, stabilny Debian.

Spaceruje po centrach danych i telekomach w Petersburgu

Nawiasem mówiąc, nazwa firmy wzięła się od płyty systemowej Meridian Integrated Recorded Announcement (MIRAN) umieszczonej w centrali telefonicznej Meridian. I tak nazwano centrum danych.

Spaceruje po centrach danych i telekomach w Petersburgu

Zdecydowali się na budowę centrum danych w trudnym roku 2008.

Od tego czasu chłopaki dostarczają dedyk i dzwonek. Sprzęt operatora jest instalowany w specjalnych pomieszczeniach.

A to nakłada pewne ograniczenia i funkcje na pracę. Na przykład regały zawierają najbardziej zróżnicowany sprzęt, zarówno pod względem maszyn, jak i pod względem sieci. W Miranie nie widziałem tylko Aristy i Mellanoxa. Każdy sprzęt ma inne wymagania co do temperatury w zimnym korytarzu, dlatego należy ją utrzymywać na bardzo niskim poziomie - około 20°C, czyli o niskim PUE nie ma co mówić - Miran ma go na poziomie 1,5.
Kolejnym niuansem są śluby wężowe na stoiskach. Gdy tylko wpuścisz do pokoju towarzyszy zewnętrznych wraz z ich kontaktami, napisz „piękno zniknęło”. Nikt nie ma wyjątków.

Spaceruje po centrach danych i telekomach w Petersburgu

Niestety, wprowadzenie tutaj drakońskich środków może działać na Twoją niekorzyść.

Spaceruje po centrach danych i telekomach w PetersburguSpaceruje po centrach danych i telekomach w Petersburgu
Spaceruje po centrach danych i telekomach w Petersburgu
Najnowsze zdjęcia.

A potem towar z naszego stołu na Twój i z Twojego na nasz. Cały tłum załadował się do taksówek i łączy.

centrum danych linx

To poważni goście, na których tymczasowej przepustce jest nawet napisane: „Bezpieczeństwo ma znaczenie”. To będzie motyw przewodni całej wycieczki.

Po piernikowym Miranie w linxdatacenter rozumiesz, że przybył luksusowy DC. W wolny dzień 4 osoby zebrały się, szczerze mówiąc, nie w centrum miasta, żeby opowiedzieć o sobie innym pięciu osobom, które raczej nie zostaną ich klientami :)

Maria Svistunova spotkała się z nami i zabrała nas do dużego stołu negocjacyjnego. Mała luźna rozmowa przy gwatemalskiej kawie i ruszamy.

Spaceruje po centrach danych i telekomach w Petersburgu

Wycieczki są tutaj transmitowane. Maxim i Oleg znają się na rzeczy: opowiadają tak, jak wiedzą: jasno i z pasją. Tam, gdzie jest to konieczne, podkreślają, a gdzie nie, omijają. Poczucie humoru też dopisuje, więc ponad dwie godziny minęły niezauważone.

Dumą centrum danych jest 100% dyspozycyjność od chwili jego uruchomienia w 2011 roku.

Pewność siebie jest tak duża, że ​​na tablicy wyników nie ma nawet miejsca na dziesiątki.

Spaceruje po centrach danych i telekomach w Petersburgu

Linx jest przykładem DC w formacie GreenField. Budynek został zbudowany specjalnie na potrzeby DC. Dlatego wysokość stropów, wytrzymałość podłóg, wejścia zasilania, jego redundancja, SCS - zostały uwzględnione w projekcie i wzięte pod uwagę na etapie budowy.

Spaceruje po centrach danych i telekomach w Petersburgu

Tak więc domyślnie podłoga wytrzymuje stojak o wadze 800 kg, ale ciężar można jeszcze zwiększyć po dodatkowym wzmocnieniu. Mówią, że szafy Oracle kosztujące Falcon9 wymagają specjalnego traktowania.

Sam DC zasilany jest z instalacji gazowo-tłokowej, a prąd miejski stanowi jedynie rezerwę. Według Maxima była to bardzo słuszna decyzja, ponieważ podczas słynnej awarii prądu w Petersburgu uszkodzone zostało biuro i pobliskie centrum biznesowe, ale centrum danych nadal działało.

Generator diesla nie jest już przyczepą na kołach, ale całkowicie stacjonarnym pomieszczeniem z kominami wznoszącymi się wysoko nad krajobrazem.

Czas uruchomienia nie przekracza dwóch minut, a całe centrum danych może pracować na bateriach przez około godzinę. Silniki Diesla mogą pracować 3 dni bez tankowania.

We wszystkim panuje tu porządek i przemyślaność.

Jest to na przykład Klyuchintsa, gdzie klienci centrum danych mogą zabrać klucze do swoich szaf za pomocą odcisku palca.

Spaceruje po centrach danych i telekomach w Petersburgu

I to jest pomieszczenie, w którym klienci mogą wykonać dowolne prace inżynieryjne, do których na ścianie wisi narzędzie do okopywania.

Spaceruje po centrach danych i telekomach w Petersburgu

Spaceruje po centrach danych i telekomach w Petersburgu

Są to już półki do użytku lokalnego ze wszystkim, co niezbędne do codziennej pracy:

Spaceruje po centrach danych i telekomach w Petersburgu

Spaceruje po centrach danych i telekomach w Petersburgu

Jest zawsze naładowany i gotowy do pracy.

Czapka z daszkiem początkującego hiphopowca ze zdjęcia powyżej uratowała głowę niejednej osobie. Jest twardy jak naturalny hełm – najlepiej wejść pod półtorametrową podniesioną podłogę, skąd, nie, nie, wystaje jakiś ostry kawałek żelaza.

Właściwie pracownicy z operacji:

Spaceruje po centrach danych i telekomach w Petersburgu

To niezwykłe urządzenie to manometr różnicowy.

Spaceruje po centrach danych i telekomach w Petersburgu

Ma na celu rozwiązanie prostego problemu - utrzymania różnicy ciśnień pomiędzy korytarzem a maszynownią. Np. żeby było trochę wyżej w środku i po otwarciu drzwi kurz nie wlatuje do środka, a raczej odlatuje z drzwi.

Instalacja gaśnicza jest również gazowa – w przypadku awarii gaz wypiera tlen i zatrzymuje spalanie.

Spaceruje po centrach danych i telekomach w Petersburgu

W linkach stoją tylko poważni i bardzo poważni faceci, którzy mają powody do paranoi wielkości Araratu.

Kratki i oddzielny system kontroli dostępu od centrum danych to dopiero początek.

Kiedy dwie osoby przychodzą rozwiązać problem lub nawiązać nowe połączenia – jedna z kluczem materialnym, druga z kluczem elektronicznym – robi się ciekawiej. A kiedy od klienta przychodzi audytor w okularach, schodzi pod podniesioną podłogę, rozsuwa dwa arkusze prętów i mówi, że zmieści się tu główka dziecka, to wiadomo, że dana osoba widziała w swoim życiu kilka ciekawych rzeczy.

Zdarzały się zabawne sytuacje, gdy projektując klatkę, uwzględniono wszystko, co się dało, wszystkie systemy zabezpieczeń, wszystkie wymiary, które pozwalają na zaimportowanie stojaka i umieszczenie w nim sprzętu, ale jakoś nie pomyśleli o wymiarach inżynierów, którzy będą z nim pracować. Ale nie mieszczą się pomiędzy klatką a stojakiem, ani z przodu, ani z profilu.

Gdybym był FSB, zainstalowałbym mój sprzęt w Linxie :)

Po wycieczce siedzieliśmy dość długo, rozmawiając serdecznie przy pizzy.
Z tej sfery bezpieczeństwa i porządku przenieśliśmy się do RETN.

RETN

Znamy tych chłopaków od dawna. Nic więc dziwnego, że w końcu zebraliśmy się na ich dachu, aby grillować i opowiadać historie.

Spaceruje po centrach danych i telekomach w Petersburgu

My też już u nich byliśmy, chociaż chyba Wam o tym nie mówiliśmy. W zeszłym roku plany przejęcia dachów Petersburga nie powiodły się z powodu FIFA.

RETN jest w rzeczywistości największym operatorem szkieletowym posiadającym światłowody na całej planecie. Ich sieć będzie obiektem zazdrości każdego pająka.

A DC na Obvodnym to domowy projekt dla duszy, który znalazł swoją niszę na rozwijającym się rynku. To tu z pomocą przychodzą ci, którzy potrzebują silnej łączności ze światem i dostępu do innych lokalnych operatorów.

Na przykład RETN zawiera CDN Netflixa.

Spaceruje po centrach danych i telekomach w Petersburgu

Spaceruje po centrach danych i telekomach w Petersburgu

Zaskoczyło mnie, że każdy z ich węzłów był indywidualnie podpisany frazą.
A te świąteczne pudełka są rozrzucane po różnych miastach w punktach POP RETN (i oczywiście nie tylko), dostarczając wam „Black Mirror” i „Peaky Blinders” tak szybko, jak to możliwe.

Istnieje również sieć CDN Google i wielu operatorów, zarówno lokalnych, jak i federalnych.

RETN ma dwa malutkie (w porównaniu do Miranova) generatory diesla i samochód z kanistrami, którymi można dojechać na stację benzynową obok budynku. Brzmi prawie jak firma rodzinna.

Cóż, wieczorne negocjacje na dachu doprowadziły nas do tego, że RETN udostępni nam wirtualne pudełko jako kopię zapasową witryny do przechowywania podcastów i zdjęć.
Światowi chłopaki, superlampowe centrum danych, sieć zadziwiająca swoją skalą.

Spaceruje po centrach danych i telekomach w Petersburgu

Dla niektórych ten dzień zakończył się turniejem Duke Nukem, dla innych długo wyczekiwanym noclegiem w hotelu.

Następnego dnia nie mieliśmy zbyt wielu planów: Metrotek i podcast na żywo - linkmeup IRL.

Metrotek

Zaledwie miesiąc temu odwiedziliśmy podcast telekomunikacyjny wszedł Misha Sokolov i Denis Gabidullin z STC Metrotek przecinają Plumspace i rozmawialiśmy o tym, czym jest Smart SFP. A teraz mogliśmy ich dotknąć żywcem.

Denis, który oprowadził po petersburskim biurze Metroteka (które notabene nie zmieniło się od naszej ostatniej wizyty), wręczył jedną z próbek już od progu.
Na początku zdziwiłem się, jak prymitywnie został wykonany – jakby został wyrzeźbiony z klucza 32 mm za pomocą wyrzynarki i pilnika.

Spaceruje po centrach danych i telekomach w Petersburgu

Okazało się, że korpus prototypu został wydrukowany w 3D z proszku metalu, co widać po chropowatej powierzchni. Pozostałe - te, które są już gotowe do serii - są w idealnym stanie.

Spaceruje po centrach danych i telekomach w Petersburgu

Ale ogólnie rzecz biorąc, patrząc na nie, jesteś zdumiony, jak udało im się ukryć tak wiele mózgów w niemal standardowej obudowie.

Spaceruje po centrach danych i telekomach w Petersburgu

Radzę ci posłuchać podcast o Rosie, Tozu i ich siostrze Bozie. Okazało się interesujące jak na mój gust.

Projekt biura jest tak zwyczajny, jak to tylko możliwe. Stosunkowo niewielkie, prostokątne biura, rozciągnięte w stronę okna, są dość ciemne, co było nieco uciążliwe. Ale atmosfera, mimo dnia wolnego, była iście służbowa.

Spaceruje po centrach danych i telekomach w Petersburgu

Projekt nie zmienił się od dwóch lat. Byłem zadowolony z niektórych plakatów i tablic.

Przeszliśmy przez kilka pomieszczeń: R&D, inżynierowie systemowi, specjaliści FPGA, trzymając w rękach różne typy SFP, programiści, zobaczyliśmy pierwszy model, w którym Smart został wyjęty z SFP na przewodzie - jeden z pierwszych eksperymentów - a raczej Dowód koncepcji, że to w ogóle działa.

Mówią, że niektórym klientom wygodnie jest mieć taki ogon wystający z żelazka.
Pierwszym celem dwa lata temu było złożenie zwykłego optycznego modułu SFP, który przynajmniej transmitowałby sygnał.

Następnie osobno zmontowali część Smart z cudzym modułem SFP (tylko na kablu), aby upewnić się, że uda im się złożyć chipy.

Metrotek wykonał świetną robotę. Pomyślcie tylko, że w ciągu 2 lat zmontowali w pełni działający moduł optyczny, który potrafi enkapsulować, telemetrię, serwer dokładnego czasu i konwerter interfejsu.

Jednocześnie dopracowano do perfekcji (choć trzeba to z czasem przetestować) podstawowej funkcjonalności transmisji sygnału. Nie powinno być żadnego tłumienia, nie powinno być nawet rzadkich spadków z winy SFP. I nie powinien się nagrzewać, pomimo pakietu układów ASIC, FPGA i procesorów w środku.
Bravo!

Kompletny system obliczeniowy:

  • Procesor: NXP i.MX6 ARM do 900 MHz
  • FPGA: Lattice ECP5 do 85 tys. LUT
  • RAM: DDR3 do 1 GB

Denis zauważył, że firma praktykuje i zachęca do wymiany wiedzy i doświadczeń. I wtedy pomyślałam: „Czy naprawdę może być inaczej? 0_o.” — Tak, często przychodzą do nich ludzie, którzy w poprzednim miejscu pracy, duszeni we własnych sokach, nie porozumiewali się, wykonywali podwójną i potrójną pracę i w ogóle unikali prób komunikacji.

I wtedy przypomniało mi się, że w ogóle nie więcej niż dwa lata temu pracowałem w międzynarodowej, powszechnie zakazanej firmie, gdzie zakazano konferencji i nie było wymiany wiedzy na zajęciach. Byłem jednym z ewangelistów cotygodniowych spotkań wymiany, które zdawały się ratować samotnych inżynierów w odległych regionach.

Generalnie Metrotek regularnie prowadzi szkolenia wewnętrzne i wykłady, dlatego są świetne.

Następnie zabrano nas do niesamowitych warsztatów instalacyjnych. Nieważne, ile razy ich odwiedzam, wydaje się, że moja dziecięca radość nie gaśnie.

Metrotek posiada sprzęt do drukowania na płytkach drukowanych bezpośrednio w biurze.

Szablon do nakładania pastylek lutowniczych, drukarka do elementów SMD (po prostu inaczej tego nie potrafię nazwać), mały piec do wypiekania płytek drukowanych i pobliskie stanowiska pracy do ręcznego montażu.

Spaceruje po centrach danych i telekomach w Petersburgu

Spaceruje po centrach danych i telekomach w Petersburgu

Spaceruje po centrach danych i telekomach w Petersburgu

Ku mojemu zaskoczeniu dowiedziałem się, że mikrochipy z setkami nóżek również lutuje się ręcznie. Denis mówi, że ich chłopaki lutują najmniejsze części z niesamowitą dokładnością i szybkością, a czasami nie ma sensu uruchamiać maszyny szaitanowej – człowiek zrobi to szybciej.

Spaceruje po centrach danych i telekomach w Petersburgu

Nazwaliśmy linię produkcyjną Metrotek Eltex-Verilight, po stosunkowo niedawnej wycieczce do niej.

Dodatkowo biuro posiada drukarkę 3D i frezarkę na potrzeby wewnętrzne, która jednak służyła już do grawerowania medali przez ostatni rok Budowa Chaosu.

Spaceruje po centrach danych i telekomach w Petersburgu

Stamtąd udaliśmy się do niesamowitej w swojej ideologicznej treści Krang Pizza, gdzie pełna ekipa linkmeup połknęła zmutowanego pod względem wielkości i znaczenia pizzy burgera i przeniosła się do biura opcji IQ, gdzie nagraliśmy pierwszy odcinek linkmeup IRL.

Następnego dnia za radą Mamuta zajrzeliśmy też do Laser Center, gdzie doświadczyliśmy technokratycznej ekstazy i lekkiego zapalenia chciwości, ale to już osobna historia.

Podsumowując, chcę powiedzieć, że wszystkie wycieczki i spotkania okazały się bardzo różne, zarówno pod względem skali działania, jak i tematu.

Miran, który gościnnie gościł nasz hosting, szybko się rozwija, ale nadal jest przyjazny i prosty.

Links to naprawdę fajne centrum danych, z bezpieczeństwem na czele i doświadczonymi marketerami.
RETN to młodzi, weseli chłopaki „z garaży”, którzy budują gigantyczną sieć i wciąż małe centrum danych i nie mają nic przeciwko rozpalaniu ogniska na dachu.

Metrotek to stosunkowo niewielki zespół rosyjskich twórców sprzętu i oprogramowania, który niemal „tymi rękami” tworzy kupę sprzętu pomiarowego, który jest więcej niż konkurencyjny, a teraz wkracza na nowy rynek z ambitnym zadaniem.

Oraz Centrum Laserowe, które wykracza poza interesy linkmeup, ale jest przedmiotem naszych osobistych zainteresowań. Zostawiłem po sobie bardzo przyjemne wrażenie oraz grawer mikrofonu na magnetofonie.

Źródło: www.habr.com

Dodaj komentarz