De första dagarna av sommaren Àr perfekta för en utvecklande resa till Sankt Petersburg.
Vi kommer att besöka Miran, linxdatacenter, RETN och Metrotek.
Klockan 5 pÄ morgonen, Moskovskij jÀrnvÀgsstation, KFC, Naberezhnaya Moyki, Tarelnka, duvor pÄ taken, Isaak, MarsfÀltet, Captur Yandex Drive, och hÀr Àr Miran.
Miran
I Miran har vÄrt laboratorium med Eva bott i flera Är, sÀndarserver, virtuell mikrotikrouter, hostinglinkmeup med IPv6-Ätkomst och nu podcasthosting.
Vid ingÄngen till Miran möttes vi först av en imponerande DGU.
De flesta Dieselgeneratorer stÄr pÄ hjul av tvÄ skÀl:
- Rörlighet â inom ett par hundra meter finns det flera andra moduler av Miran. De har sina egna generatorer â men man vet aldrig â man kan behöva flytta dem.
- Rörlighet â de behöver inte registreras som stationĂ€ra kraftverk och dĂ€rmed behövs ingen projekt Dokumentation.
DGU i Miran startar pÄ nÄgra sekunder bÄde vinter och sommar. Under denna tid fÄr hela datacentret ström frÄn batterier.
Och den robusta HP-servern i Miran-racken och rundturen blev möjliga tack vare Fjodor Rusakov.
Hela rundturen genomfördes i en hemtrevlig atmosfĂ€r. Kaffe med smĂ„kakor, samtal om telekom, företagets ursprung, att transportera tvĂ„hundra servrar i smyg frĂ„n Moskva till Sankt Petersburg under natten. I lugn och ro promenerade vi genom tvĂ„ byggnader av datacentret. BĂ„da Ă€r BrownField â omgjorda frĂ„n fabriksutrymmen. Det första, som tillhör Miran, dĂ€r vi började och dĂ€r vi laddade efter en fyra timmars promenad i Sankt Petersburg, var tidigare platsen för en fabrik för dieselaggregat, verkligen gigantiska dieselaggregat. Egentligen fanns det ingen andra vĂ„ning â det fanns enorma portar för att köra in och ut. Allt blev rivet, andra vĂ„ningen gjordes, aktiv kylning, reservkraftförsörjning, gasbrandbekĂ€mpningssystem.
Klassisk varm korridor, dÀr luft sugs in i luftkonditioneringarna och under det falska golvet till den stÀngda kalla korridoren.
Under det falska golvet Àr ocksÄ strömkablarna gömda.
Miran föddes inte som en plattform för en enda ankar-kund, utan utvecklade snarare sitt erbjudande pÄ en marknad dÀr det finns efterfrÄgan.
Tidigare lÄg hÀr en stor bank med alla nödvÀndiga galler och sÀkerhetssystem, men den har redan flyttat.
EfterfrĂ„gan fortsatte att vĂ€xa, Miran ocksĂ„, ett andra byggnad dök upp â nu för uthyrning â ocksĂ„ BrownField â tvĂ„ hundra meter frĂ„n den första. VĂ€gen gĂ„r lĂ€ngs floden Neva förbi Nobels hus.
Det nya byggnaden Ă€r byggt enligt modulprincipen med möjlighet att flytta hela modulen om det skulle bli problem med hyresvĂ€rden. De tvĂ„ första lĂ„dorna köptes direkt frĂ„n tillverkaren, den tredje â var redan sammanstĂ€lld med hĂ€nsyn till tidigare misstag.
Modularkitekturen har sina nackdelar â de Ă€r relativt smala â den heta korridoren â 60 cm â tvĂ„ personer kan inte passera. Det mest avgörande â kostnaden för att flytta, som visade sig vid första berĂ€kningen, Ă€r jĂ€mförbar med att bygga ett nytt.
Men de ser bÄde utvÀndigt och invÀndigt frÀscha och modernt ut.
NOC:en Àr baserad pÄ en robust Linux, stabil Debian.
Företaget har för övrigt fÄtt sitt namn efter kretskortet System Meridian Integrated Recorded Announcement (MIRAN) i telefonvÀxlarna Meridian. Och i sin tur fick datacentret ocksÄ det namnet.
Datacentret beslutades att byggas under det svÄra 2008-Är.
Sedan dess har grabbarna tillhandahÄllit dedikerade och kloklar. Utrustningen frÄn operatörerna Àr installerad i speciella rum.
Och detta medför vissa begrĂ€nsningar och egenskaper i arbetet. Till exempel Ă€r utrustningen i rackarna maximal blandad, bĂ„de vad gĂ€ller maskiner och nĂ€tverk. I Miran sĂ„g jag knappt Arista och Mellanox. All utrustning har olika krav pĂ„ temperaturen i den kalla korridoren, sĂ„ vi mĂ„ste hĂ„lla den pĂ„ en mycket lĂ„g nivĂ„ â omkring 20°C, det vill sĂ€ga lĂ„ga PUE-vĂ€rden Ă€r inget vi kan diskutera â hos Miran Ă€r den 1,5.
Ytterligare en nyckelpunkt â med ormbryllningar i racken. SĂ„ snart du slĂ€pper in externa personer med deras kopplingar, skriv «skönheten Ă€r borta». Ingen slipper undan.
TyvÀrr kan det visa sig vara skadligt att införa drastiska ÄtgÀrder hÀr.
Senaste bilderna.
Och sedan merchandise frĂ„n vĂ„rt bord till ert och frĂ„n ert till vĂ„rt. Vi lastade in hela gĂ€nget i en taxi â och till linx.
linxdatacenter
Det Àr seriösa killar, pÄ deras tillfÀlliga pass stÄr det till och med «Security Matters». Det kommer att bli en röd trÄd genom hela rundturen.
Efter det söta Miran i linxdatacenter förstĂ„r du att du har kommit till ett lyxigt datacenter. PĂ„ sin lediga dag samlades 4 personer, lĂ„t oss sĂ€ga, inte i stadens centrum, för att berĂ€tta om sig sjĂ€lva för ytterligare fem personer som knappt kommer att bli deras kunder đ
Vi möttes av Maria Sviƥtunova, som ledde oss till det stora förhandlingsbordet. Lite lÀttsamma samtal över guatemalanskt kaffe och sedan vidare.
Utflykter hĂ€r Ă€r i full gĂ„ng. Maxim och Oleg kan sitt jobb: de berĂ€ttar pĂ„ rutin, tydligt och med entusiasm. DĂ€r det behövs gör de poĂ€nger, och dĂ€r det inte gör det â undviker de Ă€mnet. Humor finns det inget fel pĂ„ heller, sĂ„ de tvĂ„ timmarna flög förbi obemĂ€rkt.
Stoltheten i datacentret Àr 100% drifttid sedan starten 2011.
SjÀlvförtroendet Àr sÄ högt att det knappt finns plats för tiondelar pÄ tavlan.
Linx Àr ett exempel pÄ ett datacenter i GreenField-format. Byggnaden Àr speciellt konstruerad för att hysa ett datacenter. DÀrför har takhöjden, bÀrigheten av golven, elförsörjningen och dess reservdelar samt strömförsörjningssystemet beaktats redan i byggprojektet.
SÄ, som standard klarar golvet en rackvikt pÄ 800 kg, men vikten kan ökas ytterligare efter förstÀrkning. Det sÀgs att oraklarackar som kostar lika mycket som Falcon9 krÀver sÀrskild omtanke.
SjÀlva datacentret fÄr sin energi frÄn en gasdriven motor, och den stams elektriska försörjningen Àr endast en reserv. Enligt Maxim var detta ett mycket klokt beslut, eftersom kontoret och det nÀrliggande affÀrscentret drabbades under det kÀnda blackoutet i Sankt Petersburg, medan datacentret fortsatte arbeta.
Dieselgeneratorn hÀr Àr inte lÀngre en slÀpbar anordning, utan ett helt stationÀrt rum med rökgasrör som strÀcker sig högt över landskapet.
Starttiden Àr högst tvÄ minuter, och pÄ batterier kan hela datacentret fungera i ungefÀr en timme. Dieselmotorn kan drivas i tre dagar utan pÄfyllning.
HÀr rÄder det ordning och vÀlgenomtÀnkthet.
HÀr Àr en plats dÀr datacenterkunder kan hÀmta nycklar till sina rack sjÀlva med hjÀlp av sitt fingeravtryck.
Och hÀr Àr ett rum dÀr kunder kan utföra de nödvÀndiga ingenjörsarbete, för vilket det hÀnger verktyg pÄ vÀggen.
Detta Àr hyllor för lokal anvÀndning med allt som Àr absolut nödvÀndigt i det dagliga arbetet:
Det Àr alltid laddat och klart för arbete.
Basebollkepsen pĂ„ bilden ovan har rĂ€ddat huvudet pĂ„ mer Ă€n en person. Den Ă€r lika hĂ„rd som en riktig hjĂ€lm â precis det man behöver nĂ€r man kryper under ett ett och ett halvt meters falsk golv, dĂ€r nĂ„got vasst metallföremĂ„l ibland sticker upp.
Egentligen Àr det personalen frÄn driften:
Den hÀr oansenliga apparaten Àr en differenctryckmÀtare.
Den Àr avsedd att lösa en enkel uppgift - att upprÀtthÄlla tryckskillnaden mellan korridoren och maskinrummet. Till exempel sÄ att trycket inuti Àr nÄgot högre och nÀr dörren öppnas flyger dammet bort istÀllet för att komma in.
BrandslÀckningssystemet Àr ocksÄ gasbaserat - i hÀndelse av brand förtrÀnger gasen syret och stÀnger av förbrÀnningen.
I linx arbetar endast seriösa och mycket seriösa personer som har orsaker till att vara paranoid i storleken av Ararat.
Galler och en separat frÄn datacenterets tilltrÀdeskontrollsystem - det Àr bara början.
NÀr det kommer tvÄ personer för att lösa ett problem eller för nya kopplingar - en med en fysisk nyckel, den andra med en elektronisk - dÄ blir det intressantare. Och nÀr en revisor frÄn kunden kommer med glasögon, gÄr ner under falsk golv, flyttar bort tvÄ galler och sÀger att ett barn kan klÀttra igenom hÀr, förstÄr man att denna person har sett nÄgra intressanta saker i sitt liv.
Det har varit roliga situationer dÀr man i projekteringen av buren har tagit hÀnsyn till allt möjligt, alla sÀkerhetssystem, alla mÄtt som tillÄter att man kan föra in en rack och stÀlla in utrustningen, men de har pÄ nÄgot sÀtt inte tÀnkt pÄ mÄtten pÄ ingenjörerna som ska arbeta med den. De fÄr inte plats varken framifrÄn eller frÄn sidan mellan buren och racken.
Om jag vore FSB skulle jag placera min egen utrustning i linx đ
Efter rundturen satt vi lÀnge och pratade trevligt över pizza.
FrÄn detta kungarike av sÀkerhet och ordning begav vi oss till RETN.
RETN
Vi kÀnner dessa killar vÀl och har gjort lÀnge. SÄ det Àr inte överraskande att vi Àntligen samlades pÄ deras tak för att grilla kebab och berÀtta historier.
Vi har ocksÄ varit hos dem, Àven om det verkar som vi inte har berÀttat om det. Förra Äret misslyckades vÄra planer pÄ att ta över tak i St. Petersburg pÄ grund av FIFA.
RETN Àr förresten den största lÄngdistansoperatören med fiber över hela planeten. Deras nÀtverk skulle fÄ vilken spindel som helst att avundas.
Och datacentret pÄ omfartsvÀgen - det Àr ett sÄnt hemmabygge för sjÀlen som har hittat sin nisch pÄ den vÀxande marknaden. Hit kommer de som behöver mycket anslutning med vÀrlden och tillgÄng till andra lokala operatörer.
Till exempel sÄ stÄr Netflixs CDN i RETN.
Jag blev förvÄnad över att fÄ veta att varje nod dÀr Àr individuellt signerad för hand med nÄgon fras.
Och sÄdana festliga lÄdor slÄs ut i olika stÀder pÄ POP:arna RETN (och uppenbarligen inte bara dem), vilket levererar "Svart spegel" och "Peaky Blinders" till dig sÄ snabbt som möjligt.
HÀr finns Àven Googles CDN och massor av operatörer, bÄde pÄ lokal och federal nivÄ.
Vid RETN:s byggnad stÄr tvÄ smÄ (i jÀmförelse med Miranov) dieselgeneratorer och en bil med kannor för att Äka och tanka. Det lÄter nÀstan som en familjeverksamhet.
Under kvÀllens förhandlingar pÄ taket kom vi fram till att RETN ska ge oss en virtuell maskin för backup-platsen för podcast- och bildhosting.
Globala killar, supermysigt datacenter, ett nÀtverk som imponerar med sin storlek.
För vissa slutade denna dag med en turnering i Duke Nukem, för andra en efterlÀngtad sömn pÄ hotellet.
NĂ€sta dag hade vi inte sĂ„ mĂ„nga planer: Metrotek och podcast live â .
Metrotek
Bokstavligen en mÄnad sedan besökte vi telekom-podcasten Misha Sokolov och Denis Gabidullin frÄn NTC Metrotek slash Plumspace, och vi gick igenom vad Smart SFP Àr. Och nu har vi kunnat sköta om dem i verkligheten.
Denis, som guidade oss genom Peterburgskontoret för Metrotek (som för övrigt inte har förÀndrats sedan vÄrt senaste besök), gav oss direkt i handen ett av exemplaren.
Jag blev först förvĂ„nad över hur grovt det var gjort â som om det var skurit och filat frĂ„n en 32-nyckel.
Det visade sig att höljet pĂ„ det experimentella exemplet var 3D-utskrivet av metallpulver, vilket syns pĂ„ den grova ytan. De andra â de som Ă€r redo för produktion â Ă€r i full ordning.
Men egentligen, nÀr man ser pÄ dem, blir man imponerad av hur de lyckats gömma sÄ mycket teknik i ett nÀstan standardhölje.
Jag rekommenderar att lyssna pÄ . Det blev intressant enligt min smak.
Kontorsdesignen Àr sÄ vanlig som möjligt. Relativt smÄ rektangulÀra rum, strÀckta mot fönstret, ganska mörka, vilket var lite tryckande. Men atmosfÀren, trots att det var helg, var arbetande.
Inredningen har inte förÀndrats pÄ tvÄ Är. Vissa affischer och tavlor var trevliga.
Vi gick igenom nĂ„gra rum: R&D, systemtekniker, FPGA-specialister, höll olika typer av SFP i vĂ„ra hĂ€nder, sĂ„g den första modellen dĂ€r Smart var fristĂ„ende frĂ„n SFP pĂ„ en ledning â en av de första experimenten â snarare ett Proof of Concept för att se om det överhuvudtaget fungerar.
Det sÀgs att vissa kunder faktiskt tycker det Àr praktiskt att ha en sÄdan svans hÀngande frÄn utrustningen.
Det allra första mÄlet för tvÄ Är sedan var att bygga en vanlig optisk SFP som Ätminstone skulle kunna överföra signaler.
Sedan byggdes den Smart delen separat med en annan SFP (precis pÄ en sladd), för att sÀkerstÀlla att de var kapabel att sammanfoga chip.
Metrotek har utfört ett enormt arbete. TÀnk att de pÄ tvÄ Är har byggt en helt fungerande optisk modul som klarar inkapsling, telemetri, exakt tidserver och konverterare av grÀnssnitt.
Och dÀrmed finslipa den grundlÀggande funktionaliteten för signalöverföring till perfektion (Àven om det fortfarande mÄste testas över tid). Det fÄr inte finnas nÄgra dÀmpningar, och det ska inte ens vara nÄgra sÀllsynta droppar pÄ grund av SFP. Och dessutom fÄr det inte bli varmt, trots mÀngden ASICs, FPGA och CPU inuti.
Bravo!
Ett komplett datorsystem:
- CPU: NXP i.MX6 ARM upp till 900 MHz
- FPGA: Lattice ECP5 upp till 85K LUTs
- RAM: DDR3 upp till 1 GB
Denis pĂ„pekade att företaget frĂ€mjar och uppmuntrar kunskapsutbyte och erfarenhetsdelning. Och dĂ„ tĂ€nkte jag: "Finns det inte nĂ„got annat? 0_ĐŸ". â Ja, ofta kommer det folk dit som pĂ„ sina tidigare arbetsplatser var helt isolerade, inte kommunicerade, gjorde dubbelt och trippelt arbete och i allmĂ€nhet undvek att försöka kommunicera.
Och dÄ kom jag ihÄg att jag för ungefÀr tvÄ Är sedan arbetade pÄ ett internationellt, starkt begrÀnsat företag dÀr konferenser var förbjudna, och kunskapsutbyte saknades helt. Och jag var faktiskt en av evangelisterna för de veckovisa mötena för erfarenhetsutbyte, som verkade rÀdda ensamma ingenjörer i avlÀgsna regioner.
Ăverlag hĂ„lls det regelbundet interna utbildningar och förelĂ€sningar pĂ„ Metrotek, vilket Ă€r lovvĂ€rt.
Och sedan blev vi ledda in i en fantastisk monteringsverkstad. Hur mÄnga gÄnger jag Àn har varit dÀr, verkar min barnsliga förundran aldrig avta.
Metrotek har direkt i kontoret utrustning för PCB-tryck.
Stencil för att applicera lödfrö, SMD-komponentprinter (annars kan jag bara kalla det sÄ), en liten ugn för att brÀnna kretskort och arbetsplatser för manuell montering.
Till min förvĂ„ning fick jag veta att mikrokretsar med hundratals ben ocksĂ„ löds för hand. Denis sĂ€ger att deras killar verkligen löder de minsta delarna med otrolig precision och hastighet, och ibland finns det ingen mening med att starta en maskin â en mĂ€nniska kan göra det snabbare.
Vi kallade mellan oss produktionslinjen Metrotek Eltex-verilight, inspirerade av en relativt nylig utflykt dit.
Dessutom finns det en 3D-skrivare och en frÀsmaskin för interna behov pÄ kontoret, dÀr man dock redan har graverat medaljer för förra Ärets. .
DÀrifrÄn Äkte vi till det fantastiska och idérika Krang Pizza, dÀr vi i full uppsÀttning linkmeup slukade en mutantpizza-burger, bÄde i storlek och betydelse, och begav oss till IQ option-kontoret dÀr vi spelade in det första avsnittet. .
NÀsta dag tittade vi ocksÄ in i Laser Center pÄ Mammuts rekommendation, dÀr vi upplevde teknokratisk extas och en liten inflammation av girighet, men det Àr en annan historia.
Avslutningsvis vill jag sÀga att alla utflykter och möten blev ganska olika, bÄde i handlingens omfattning och inriktning.
Miran som gÀstvÀnligt tog emot vÄrt hostande, vÀxer snabbt men Àr fortfarande vÀnligt enkelt.
Links Àr verkligen ett coolt datacenter, med sÀkerhet i fokus och erfarna marknadsförare.
RETN â unga glada killar "frĂ„n garagen", som skapar ett gigantiskt nĂ€tverk och just nu har ett litet datacenter och gĂ€rna vill tĂ€nda en liten eld pĂ„ taket.
Metrotek Àr ett relativt litet team av ryska hÄrdvaru- och mjukvaruutvecklare som nÀstan gör "just med dessa hÀnder" ett gÀng mÀtutrustning som Àr mer Àn konkurrenskraftig, och nu gÄr de in pÄ en ny marknad med en ambitiös uppgift.
Och Laser Center, som gÄr bortom linkmeups intressen, men Àr av personlig intresse för oss. Det gjorde ett mycket trevligt intryck och graveringen av mikrofonen pÄ diktafonen.
KĂ€lla: habr.com
