KĂ€igud Peterburi andmekeskustes ja telekomides

Suve esimesed pÀevad on suurepÀrased vÔimalused arendavateks reisideks Peterburi.
KĂŒlastame Miranit, linxdatacenterit, RETNi ja Metrotekki.

Kell 5 hommikul, Moskva jaam, KFC, Moika promenaad, Taldrik, tuvid katustelt, Isaak, Marsi vĂ€li, Katjur Yandexi autotelline, ja nĂŒĂŒd ta ongi — Miran.

Miran

Miranis on meie labor koos Eva ja edastusserveriga, virtuaalne MikroTiki RouterOS, hosting linkmeup IPv6 ligipÀÀsetavusega ja nĂŒĂŒd ka podcastide hosting.

KĂ€igud Peterburi andmekeskustes ja telekomides

Miraani sissepÀÀsu juures kohtus meid esmalt suur DGU.

KĂ€igud Peterburi andmekeskustes ja telekomides

Enamik diiselgeneraatoreid on paigutatud ratastele kahel pÔhjusel:

  • Mobiilsus — paari sajandi meetri kaugusel on veel mitu Miraani moodulit. Neil on oma generaatorid — aga kes teab — Ă€kki tuleb ringi liikuda.
  • Mobiilsus — neid ei pea registreerima nagu statsionaarseid elektrijaamu, seega ei ole vajalik projektidokumentatsioon.

Miraani DGU kÀivitub talvel ja suvel mÔne sekundi jooksul. Selle aja jooksul toidavad kogu andmekeskust akud.

Ja rauast HP Miraani riiulis ja ekskursioon said vÔimalikuks tÀnu Fjodor Rusakovile.

KĂ€igud Peterburi andmekeskustes ja telekomides

Kogu ekskursioon toimus koduses ja hubases atmosfÀÀris. Kohvi ja kĂŒpsiste kĂ”rvale rÀÀgiti telekommunikatsioonidest, ettevĂ”tte algusest, kahekĂŒmne serveri transportimisest öösel Moskvast Peterburi. Ilma kiiruseta jalutasime mööda kahte andmekeskuse hoonet. MĂ”lemad — BrownField — endistest tehase ruumidest ĂŒmber ehitatud. Esimene hoone, mis kuulus Miranile, oli koht, kus me alustasime ja kus teisel korrusel laadisime pĂ€rast neljatunnist jalutuskĂ€iku Peterburis energiat; seal asus kunagi diiselmasinate tehas, tĂ”eliselt hiiglaslike diiselmasinate jaoks. Teist korrust ei olnud — olid hiiglaslikud vĂ€ravad, et saaks sisse ja vĂ€lja. KĂ”ik on lahti vĂ”etud, teine korrus on rajatud, aktiivne jahutus, reserveeritud toiteallikas, gaassĂŒsteem tulekustutamiseks.

Klassikaline soe koridor, kust Ă”hk suunatakse kliimaseadmetesse ja valepĂ”randa alla suletud kĂŒlma koridori.

Samuti on valepÔranda all peidetud toitekaablid.

Miran ei sĂŒndinud ĂŒhe ankurklendi jaoks, vaid pigem arendas tasapisi oma pakkumist turul, kus on nĂ”udlust.

Ajal siin asus suur pank koos vajalike turvabarjÀÀride ja kontrollsĂŒsteemidega, kuid see on juba lahkunud.

KĂ€igud Peterburi andmekeskustes ja telekomides

NĂ”udlus jĂ€tkas kasvu, samuti ka MiRan, tekkis teine hoone — juba rendiks — samuti BrownField — kaks sada meetrit esimesest. Tee kulgeb mööda Suure Neva promenaadi Nobeli maja juurest.

KĂ€igud Peterburi andmekeskustes ja telekomides

Uus hoone on ehitatud modulaarse printsiibi jĂ€rgi, vĂ”imaldades kogu mooduli ĂŒleviimist, kui rendileandjaga tekivad probleemid. Esimese kahe mooduli ostsime tootjalt, kolmanda - kokku pannes vanade vigade arvesse vĂ”tmiseks.

Modulaarse arhitektuuri miinusteks osutus see, et need on suhteliselt kitsad — kuum koridor — 60 cm — kahel inimesel ei ole vĂ”imalik mööda minna. Ja mis kĂ”ige hullem — kolimise maksumus osutus esimese arvutuse pĂ”hjal vĂ”rreldavaks uue ehitamisega.

Kuid nad nÀevad vÀljast ja seest vÀrsked ja moodsad vÀlja.

NOC töötab Ôigeusu Linuxil, stabiilsel debianil.

KĂ€igud Peterburi andmekeskustes ja telekomides

EttevÔte sai oma nime tegelikult Meridian Integrated Recorded Announcement (MIRAN) plaadi jÀrgi telefonikommutaatoris. Ja seepÀrast nimetati ka andmeruumi nii.

KĂ€igud Peterburi andmekeskustes ja telekomides

Andmeruumi otsustati ehitada keerulisel 2008. aastal.

Sellest ajast saadik on poisid pakkunud dedik ja kellukest. Spetsiaalsetes ruumides on paigaldatud operaatorite seadmed.

See seab tööle teatud piirangud ja eripĂ€rad. NĂ€iteks on rackides seadmed maksimaalselt mitmekesised, nii masinate kui ka vĂ”rgu poolest. Miranas ma rohkem Aristat ja Mellanoxi ei nĂ€inud. Igal seadmel on erinevad temperatuurinĂ”uded kĂŒlmas koridoris, seega tuleb temperatuuri hoida vĂ€ga madalal tasemel — umbes 20°C, seega madalat PUE-d pole mĂ”tet rÀÀkida — Mirana puhul on see 1,5.
Veel ĂŒks nĂŒanss — seoses rĂ€stikusidemeitega rackides. Niipea, kui lubate ruumi vĂ€liseid isikuid nende ĂŒhendustega, kirjutage «ilu kadus». Keegi ei saa erandeid.

KĂ€igud Peterburi andmekeskustes ja telekomides

Kahjuks vÔivad siia drakoonilised meetmed osutuda kahjulikuks.

KĂ€igud Peterburi andmekeskustes ja telekomidesKĂ€igud Peterburi andmekeskustes ja telekomides
KĂ€igud Peterburi andmekeskustes ja telekomides
Viimased fotod.

Ja siis kaup meie laualt teie juurde ja teie oma meie juurde. Laadisime kogu seltskonna taksosse — ja linxisse.

linxdatacenter

Need on tĂ”sised tĂŒĂŒbid, kelle ajutisel pÀÀsul on isegi kirjutatud «Security Matters». See saab olema kogu ekskursiooni alateema.

PĂ€rast linxdatacenter'i kĂŒlastust saad aru, et oled luksuslikus andmekeskuses. Oma vaba pĂ€eva jooksul kogunes neli inimest, et rÀÀkida endist viiest, kes tĂ”enĂ€oliselt ei saa nende klientideks 🙂

Meid kohtusid Maria Svistunova, kes viis meid suurele lÀbirÀÀkimiste lauaks. Natuke kerge juttu guatemalaste kohvi kÔrvale ja edasi minek.

KĂ€igud Peterburi andmekeskustes ja telekomides

Ekskursioonid on siin pidevas voolus. Maksim ja Oleg tunnevad oma ala: rÀÀgivad nagu harjutatud, selgelt ja entusiastlikult. Seal, kus on vaja, tuuakse vĂ€lja rĂ”hk, ja seal, kus ei ole – mööda. Huumoriga pole ka probleeme, seega kaks ja rohkem tundi möödusid mĂ€rkamatult.

Andmekeskuse uhkus on 100% tööaeg alates 2011. aastast.

Kindlus on nii kĂ”rge, et kĂŒmnendike jaoks ei ole isegi ekraanil kohta ette nĂ€htud.

KĂ€igud Peterburi andmekeskustes ja telekomides

Linx on nÀide andmekeskusest GreenField formaadis. Hoone ehitati spetsiaalselt andmekeskuse jaoks. Seega, laged kÔrgus, talade tugevus, elektritoite sisendid, nende reserveerimine, SKS - kÔik oli plaanitud projekti ja arvestatud juba ehituse etapis.

KĂ€igud Peterburi andmekeskustes ja telekomides

Vaikimisi kannab alumiinium 800 kg, kuid kaalu saab pÀrast tÀiendavat tuge veel suurendada. RÀÀgitakse, et Falcon9 hindavad oraklid vajavad erilist lÀhenemist.

Data Center on varustatud gaasipumpade installatsiooniga, samas linnavÔrk on vaid varuvariant. Maximi sÔnul oli see vÀga Ôige otsus, kuna tuntud Peterburi elektrikatkestuse ajal kannatas kontor ja lÀhim Àrikeskus, kuid andmekeskus jÀtkas tööd.

Diiselgeneraatorkompleks ei ole enam lihtsalt ratastel haagis, vaid tÀiesti statsionaarne hoone, mille suitsutorud tÔusevad kÔrgele maastikku.

KĂ€ivitamise aeg on vĂ€hem kui kaks minutit, ning akudel suudab kogu andmekeskus töötada umbes ĂŒhe tunni. Diisel vĂ”ib töötada kolm pĂ€eva ilma kĂŒtusevahetuseta.

Siin valitseb kord ja lÀbimÔeldus.

NÀiteks see on vÔtmeautomaadi koht, kus andmekeskuse kliendid saavad iseseisvalt sÔrmejÀlje pÔhjal oma riiulite vÔtmed vÔtta.

KĂ€igud Peterburi andmekeskustes ja telekomides

Ja see on ruum, kus kliendid saavad teostada vajalikke inseneritöid, mille jaoks seina peal rippub tööriistade komplekt.

KĂ€igud Peterburi andmekeskustes ja telekomides

KĂ€igud Peterburi andmekeskustes ja telekomides

Need on juba riiulid kohalikuks kasutuseks, kus on kÔik igapÀevaeluks vajalik:

KĂ€igud Peterburi andmekeskustes ja telekomides

KĂ€igud Peterburi andmekeskustes ja telekomides

See on alati laetud ja valmis tööks.

Ülalolev algaja hiphoppari mĂŒts on pÀÀstnud rohkem kui ĂŒhe inimese pea. See on kĂ”va nagu looduslik kiiver – ideaalne ronimiseks poolteise meetri kĂ”rguste valepĂ”randate all, kus vahel nĂ€pistab terav metallitĂŒkk.

Tegelikult on need töölised:

KĂ€igud Peterburi andmekeskustes ja telekomides

See tavaline seade on difmanomeeter.

KĂ€igud Peterburi andmekeskustes ja telekomides

Selle ĂŒlesanne on lahendada lihtne probleem – hoida rĂ”huerinevus koridori ja masina ruumi vahel. NĂ€iteks nii, et seal sees olev rĂ”hk oleks pisut kĂ”rgem ja ukse avamisel ei laseks see tolmu sisse, vaid hoopis tĂ”ukaks selle ukse suunas eemale.

Sisseehitatud tulekustutusĂŒsteem on samuti gaasiline – ohu korral tĂ”rjub gaas hapniku vĂ€lja ja kustutab pĂ”letamise.

KĂ€igud Peterburi andmekeskustes ja telekomides

Linxis saavad tegutseda ainult tĂ”sised ja vĂ€ga tĂ”sised tĂŒĂŒbid, kellel on pĂ”hjust paranoia jaoks, mis ulatub Ameerika suuruselt Ararati mĂ€eni.

Restid ja eraldi andmeside keskustest tulenev turvasĂŒsteem – see on alles algus.

See, when two people arrive to solve a problem or for new connections — one with a physical key and the other with an electronic one — it gets interesting. But when an auditor arrives from the client, wearing glasses, descends under the false floor, moves two grids apart, and says that a child’s head can fit through here, you realize this person has seen some intriguing things in their life.

There were amusing situations when designing the rack where everything possible was accounted for: all safety systems, all dimensions to transport the rack and place equipment in it, but somehow we didn’t consider the size of the engineers who would be working with it. And they don't fit between the rack and the cell neither from the front nor from the side.

If I were the FSB, I would place my hardware in linx 🙂

After the tour, we sat for quite a while, chatting heartily over pizza.
From this realm of safety and order, we moved on to RETN.

RETN

We have known these guys for a long time and well. So, it’s no surprise that we finally gathered on their roof to grill shashlik and exchange stories.

KĂ€igud Peterburi andmekeskustes ja telekomides

Nende juures oleme me ka varem kÀinud, kuigi tundub, et pole sellest rÀÀkinud. Eelmisel aastal ebaÔnnestusid plaanid Peterburi katustele tungimiseks Fifa tÔttu.

RETN on tegelikult suurim magistralioperaator kiudjuhtmete alal kogu maailmas. Nende vÔrk paneb uhkeks iga Àmbliku.

Ja DC Obvodny jĂ€tab mulje kodusest projektist, mis on leidnud oma koha kasvaval turul. Siia tulevad need, kes vajavad tugevat ĂŒhendust maailmaga ja juurdepÀÀsu teistele kohalikele operaatoritele.

NĂ€iteks RETN-is asub Netflixi CDN.

KĂ€igud Peterburi andmekeskustes ja telekomides

KĂ€igud Peterburi andmekeskustes ja telekomides

Üllatuseks sain teada, et iga nende node on kĂ€sitsi allkirjastatud mingi fraasiga.
Ja sellised pidulikud kastid liiguvad erinevates linnades RETN-i POP-des (ja ilmselt mitte ainult nende omadest), toimetades teieni nii kiiresti kui vÔimalik 'Must peegel' ja 'Teravad sarved'.

Siin on ka Google'i CDN ja palju operaatorite vÔrke, nii kohalikul kui ka föderaalsel tasandil.

RETN-i hoone lĂ€hedal seisab kaks vĂ€ikesest (vĂ”rreldes Miraniga) diiselgeneraatort ja auto kanistritega, et kĂŒtust tankida. KĂ”lab peaaegu nagu pereĂ€ri.

Kuid Ôhtused lÀbirÀÀkimised katusel tÔid meid sinnamaale, et RETN annab meile virtuaalserveri varukoha jaoks podcastide ja piltide hostimiseks.
Rahvusvaheline meeskond, superlahe andmekeskus, hÀmmastav oma mastaapsuses.

KĂ€igud Peterburi andmekeskustes ja telekomides

MÔne jaoks lÔppes see pÀev duke nukemi turniiriga, teiste jaoks kauaoodatud unega hotellis.

JĂ€rgmisel pĂ€eval polnud meil eriti palju plaane: Metrotek ja podcast otse-eetris — linkmeup IRL.

Metrotek

TĂ€psemalt kuu aega tagasi kĂŒlastas meid telekomi podcast tuli Misha Sokolov ja Denis Gabidullin NTC Metroteki slash Plumspace'ist, ja me uurisime, mis on Smart SFP. Ja nĂŒĂŒd saime neid otse kĂ€es hoida.

Denis, kes viis ekskursiooni lĂ€bi Metroteki Peterburi kontoris (mis muide ei olnud muutunud alates meie viimasest kĂŒlastusest), andis kohe uksel ĂŒhe prooviversiooni kĂ€tte.
Ma olin alguses ĂŒllatunud, kui karkass oli koos viimistle matud — just nagu oleks ta nende 32 mm vĂ”tme abil sae ja viiliga vĂ€lja lĂ”igatud.

KĂ€igud Peterburi andmekeskustes ja telekomides

Selgus, et katte prototĂŒĂŒp oli trĂŒkitud 3D-printeriga metallpulbrist, mida nĂ€itab ka kare pind. Teised — need, mis on seeriaks valmis — on tĂ€iesti korras.

KĂ€igud Peterburi andmekeskustes ja telekomides

Kuid ĂŒldiselt, neid vaadates, jÀÀb mulje, kuidas nad suudavad peaaegu standardse korpuse sisse mahutada nii palju silmi.

KĂ€igud Peterburi andmekeskustes ja telekomides

Soovitan kuulata podcast'i Roosi, Toosi ja nende Ôe Boosi kohta. Minu maitsele on see huvitav.

Kontori disain on ÀÀrmiselt tavaline. Suhteliselt vĂ€ikesed ristkĂŒlikulised toad, akna suunalised, piisavalt pimedad, mis tekitas natuke rĂ”hku. Kuid atmosfÀÀr, hoolimata puhkepĂ€evast, oli töökeskkond.

KĂ€igud Peterburi andmekeskustes ja telekomides

Kahe aasta jooksul pole kujundus muutunud. MÔne plakati ja tahvli nÀgemine oli meeldiv.

Me jalutasime lĂ€bi mitmest ruumist: R&D, sĂŒsteemide arendajad, FPGA spetsialistid, hoidsime kĂ€es erinevaid SFP-sid, programmeerijaid, nĂ€gime esimest mudelit, kus Smart oli viidud SFP-st kaablisse — ĂŒks esimesi katsetusi — pigem Proof of Concept, et see ĂŒldse töötab.

KÀivad jutud, et mÔnele kliendile on mugav, et nende riistvarast ulatub selline 'saba'.
Kahe aasta tagasi oli kÔige esimeseks eesmÀrgiks koguda tavaline optiline SFP, mis suudab vÀhemalt signaali edastada.

Siis kogusime eraldi Smart osa vÔÔra SFP-ga (just kaablis), et veenduda, et nad suudavad kiipe kokku panna.

Metrotek emes on tehtud hiiglaslik töö. MÔelda vaid, et kahe aastaga on kokku pandud tÀielikult töötav optiline moodul, mis suudab teha kapseldamist, telemeetriat, tÀpsusteenuste serverit ja liideseid muundada.

Ja selle juures on hÀÀlestatud ideaalini (kuigi seda peab ajaga veel kontrollima) signaali edastamise pÔhiomadused. Ei tohi esineda summutamist, isegi haruldasi katkestusi SFPs tÔttu. Ja see ei tohi kuumeneda, vaatamata ASICide, FPGA ja CPU hulgale sees.
Bravoo!

TĂ€isvÀÀrtuslik arvutussĂŒsteem:

  • CPU: NXP i.MX6 ARM kuni 900 MHz
  • FPGA: Lattice ECP5 kuni 85K LUTi
  • RAM: DDR3 kuni 1 GB

Denis mĂ€rkis, et ettevĂ”ttes praktiseeritakse ja julgustatakse teadmiste ja kogemuste vahetust. Ja siit mĂ”tlesin: "Kas see tĂ”esti on muidu? 0_ĐŸ". — Jah, sageli tuleb neile inimesi, kes eelnevas töökohas olid kinni oma mullis, ei suhtlenud, tegid topelt- ja kolmandat tööd ning ĂŒldiselt vĂ€ltisid suhtlemiskatseid.

Ja mĂ€letan, et veel kaks aastat tagasi töötasin ĂŒhes rahvusvahelises, karmilt reguleeritud ettevĂ”ttes, kus konverentsid olid keelatud ja teadusvahetus puudus tĂ€iesti. Ja just mina olin ĂŒks iganĂ€dalaste kogunemiste evangeliste, mis aitasid Ă€ra hoida ĂŒksildaste inseneride hĂ€tta sattumist kaugetes piirkondades.

Üldiselt korraldatakse Metrotekis regulaarselt sisetreeninguid ja loenguid, mis on tĂ”esti positiivne.

SeejĂ€rel viidi meid uskumatusse montaaĆŸitöökoja ruumi. Kui mitu korda ma seal olen kĂ€inud, tundub, et mu lapsepĂ”lve imetlus ei kao kunagi.

Metroteki kontoris on otse olemas seadmed trĂŒkkplaatide valmistamiseks.

Kangast ĆĄabloon jootekosmeetika rakendamiseks, SMD-komponentide printer (muidu ei oska ma seda lihtsalt nimetada), vĂ€ike ahi plaatide kĂŒpsetamiseks ja seal kĂ”rval kĂ€sitöökohti kĂ€sitsi monteerimiseks.

KĂ€igud Peterburi andmekeskustes ja telekomides

KĂ€igud Peterburi andmekeskustes ja telekomides

KĂ€igud Peterburi andmekeskustes ja telekomides

Olin ĂŒllatunud, et mikrokiipe, millel on sadu jalae, jootetakse ka kĂ€sitsi. Denis ĂŒtleb, et nende poisid jootavad imekindla tĂ€psuse ja kiiruseni vĂ€iksemaid komponente, ja vahel pole mĂ”tet masinat tööle panna — inimene teeb kiiremini.

KĂ€igud Peterburi andmekeskustes ja telekomides

Me nimetame tootmisliini Metrotek Eltex-ĐČДрОлаĐčт, pĂ€rast suhteliselt hiljutist ekskursiooni nende juurde.

Lisaks on kontoris 3D-printer ja freesimismasin sisekasutuseks, millega on juba graveeritud mÀlestusmedalit eelmisel aastal. Chaos Construction.

KĂ€igud Peterburi andmekeskustes ja telekomides

Sealt suundusime hÀmmastava idee poolest Krang Pizza'sse, kus meie meeskond linkmeup sÔi mutandina kui suuruse ja mÔtte poolest pizza-burgeri ning liiklesime IQ Optioni kontorisse, kus salvestasime esimese osa. linkmeup IRL.

JĂ€rgmisel pĂ€eval kĂŒlaldasime veel Laserikeskuses, nagu Mammuti soovitusel, kus kogesime tehnokraadilist ekstaasi ja natuke ahnust, kuid sellest tuleb eraldi lugu.

LÔpetuseks tahaksime öelda, et kÔik ekskursioonid ja kohtumised olid vÀga erinevad, nii tegevuse ulatuse kui ka suuna poolest.

Miran, kes lahkelt oma hosting'uga meid majutab, kasvab kiiresti, kuid on siiski sÔbralikult lihtne.

Linx on tÔeliselt lahe andmekeskus, mille keskmes on turvalisus ja kogenud turundajad.
RETN - noored ja lĂ”busad kutid „garaaĆŸidest”, kes loovad hiiglaslikku vĂ”rku ning kellel on veel pisike andmekeskus, ja nad ei pahanda ka teha lĂ”kke katusele.

Metrotek - suhteliselt vĂ€ike Venemaa riistvaraarendajate ja tarkvaraarendajate meeskond, kes valmistab peaaegu „just nende kĂ€tega” hulga mÔÔteseadmest konkurentsivĂ”imelist varustust, ning nĂŒĂŒd siseneb nad uuele turule ambitsioonika ĂŒlesandega.

Ja Laserikeskus, mis ulatub kaugemale linkmeupi huvidest, kuid on meie isiklike huvide objekt. JÀtab vÀga meeldiva mulje ja graveering mikrofoni diktofonil.

Allikas: habr.com

Osta usaldusvÀÀrne veebihosting DDoS kaitsega, VPS VDS serverid đŸ”„ Osta usaldusvÀÀrne veebihosting DDoS kaitsega, VPS VDS serverid | ProHoster