Ekskursioonid Peterburi andmekeskustesse ja telekommunikatsiooni ettevÔtetesse

Suve esimesed pÀevad sobivad suurepÀraselt arendavaks reisiks Peterburi.
KĂŒlastame Miranit, linxdatacenteri, RETNi ja Metroteki.

Kell 5 hommikul, Moskva jaam, KFC, Moyka kaldapealne, Taldrik, tuvid katustelt, Isaak, Marsi vĂ€li, Captur Yandex.Drive, ja siin ta on — Miran.

Miran

Miranis elavad juba mitu aastat meie labor koos Eva, ĂŒlekande serveri, virtuaalse Mikrotik RouterOSi, linkmeupi hostinguga IPv6 ligipÀÀsuga ja nĂŒĂŒd ka podcastide hostinguga.

Ekskursioonid Peterburi andmekeskustesse ja telekommunikatsiooni ettevÔtetesse

Miranis kohtas meid alguses suur DGU.

Ekskursioonid Peterburi andmekeskustesse ja telekommunikatsiooni ettevÔtetesse

Enamik diiselgeneraatoreid on ratastel kahel pÔhjusel:

  • Mobiilsus — paarisaja meetri kaugusel on veel mitu Mirani moodulit. Neil on omad generaatorid — aga kes teab — Ă€kki on vaja kolida.
  • Mobiilsus — neid ei pea registreerima nagu statsionaarseid elektrijaamu ja seega ei ole vaja projekteerimisdokumente.

Miran DGU kÀivitub talvel ja suvel mÔne sekundi jooksul. Selle aja jooksul toidavad kogu andmekeskust akud.

Ja metalliline HP Mirani riiulis ja ekskursioon said vÔimalikuks tÀnu Fjodor RÔusakovile.

Ekskursioonid Peterburi andmekeskustesse ja telekommunikatsiooni ettevÔtetesse

Kogu ekskursioon toimus hubases koduses atmosfÀÀris. Kohv kĂŒpsistega, vestlus telekommunikatsioonidest, ettevĂ”tte juurest ja kaheksasaja serveri transpordist Moskvast Peterburi öö varjus. Aeglaselt jalutasime lĂ€bi kahe andmekeskuse hoone. MĂ”lemad — BrownField — muudetud tehase ruumidest. Esimene, mis kuulub Miranile, kust alustasime ja kus teisel korrusel laadisime end nelja tunni jalutuskĂ€igu jĂ€rel Peterburis, asus kunagi diiselgeneraatorite tehases, tĂ”eliselt hiiglaslikes diiselgeneraatorites. Tegelikult teist korrust ei olnud — olid suured vĂ€ravad, et sealt-sinna liikuda. KĂ”ik demonteeriti, teisel korrusel tehtud, aktiveeritud jahutus, varutootmine, gaasipĂ”hine tulekustutussĂŒsteem.

Klassikaline kuum koridor, kust Ă”hk suunatakse konditsioneeridesse ja valepĂ”randa alla suletud kĂŒlmasse koridori.

Samuti on valepÔranda all peidetud toitekaablid.

Miran ei sĂŒndinud ĂŒhe ainsa lipulaeva kliendi jaoks, vaid arendas jĂ€rk-jĂ€rgult turul pakutavat, kus on nĂ”udlus.

Kui aeg oli, asus siin suur pank koos kÔikide vajalike rakkude ja turvalahendustega, kuid see on juba vÀlja kolinud.

Ekskursioonid Peterburi andmekeskustesse ja telekommunikatsiooni ettevÔtetesse

KĂŒsimus jĂ€tkus kasvamisega, ka Miranil, ilmus teine hoone - juba rendiks - samuti BrownField - kahe saja meetri kaugusel esimesest. Tee kulgeb suur Neva kaldal Nobelite majast mööda.

Ekskursioonid Peterburi andmekeskustesse ja telekommunikatsiooni ettevÔtetesse

Uus hoone on ehitatud moodulipÔhiselt, vÔimalusega kogu moodul vajadusel rendileandjaga probleemide korral Àra viia. Esimesed kaks kasti osteti tootjalt, kolmas - juba kokku pandud vanade vigade arvessevÔtmisega.

Moodulaarhitektuuril olid siiski puudused - need on suhteliselt kitsad - kuum koridor - 60 cm - kahte inimest ei saa kokku. Ja mis kÔige tÀhtsam - kolimise hind, nagu selgus esimese kalkulatsiooni kÀigus, on vÔrreldav uue ehitamisega.

Aga nad nÀevad nii vÀljast kui seest vÀrsked ja moes vÀlja.

NOC on poisid Ôigel Linuxil, stabiilses Debianis.

Ekskursioonid Peterburi andmekeskustesse ja telekommunikatsiooni ettevÔtetesse

Oma nime sai ettevÔte muide nimetatud kaardilt Systeem Meridian Integrated Recorded Announcement (MIRAN) telefonivahetis Meridians. Ja selle jÀrgi nimetati ka andmekeskus.

Ekskursioonid Peterburi andmekeskustesse ja telekommunikatsiooni ettevÔtetesse

Andmekeskuse ehitamine otsustati keerulisel 2008. aastal.

Sellest ajast pakuvad poisid dedik ja kell. Erilised ruumid on varustatud operaatorite seadmetega.

See seab teatud piirangud ja eripĂ€rad tööle. NĂ€iteks on kapides maksimaalselt erinevad seadmed, nii masinate kui ka vĂ”rgu osas. Miras nĂ€gin ma ainult Aristat ja Mellanoxit. KĂ”ik seadmed esitlevad erinevaid nĂ”udeid kĂŒlma koridori temperatuuri osas, seega tuleb hoida seda vĂ€ga madalal - umbes 20 °C, seega madalat PUE-d ei saa Miras rÀÀkida - see on 1,5.
Veel ĂŒks nĂŒanss - rĂ€stikuliidud kappides. Kui lased ruumi vĂ€liseid mehi nende ĂŒhendustega, kirjutad «ilu kadus». Ükski pole erand.

Ekskursioonid Peterburi andmekeskustesse ja telekommunikatsiooni ettevÔtetesse

Kahjuks vÔivad siin karmimate meetmete kehtestamine osutuda kahjulikuks.

Ekskursioonid Peterburi andmekeskustesse ja telekommunikatsiooni ettevÔtetesseEkskursioonid Peterburi andmekeskustesse ja telekommunikatsiooni ettevÔtetesse
Ekskursioonid Peterburi andmekeskustesse ja telekommunikatsiooni ettevÔtetesse
Viimased fotod.

Ja siis kauplemine meie laua ja teie omaga ning teie meiega. Me laadisime kogu kambaga taksosse - ja linxisse.

linxdatacenter

Need on tÔsised kutid, kelle ajutisel sissepÀÀsul on isegi kirjas «Ohutus on tÀhtis». See saab olema igasugune ekskursiooni teema.

PĂ€rast piparkoogimoodi Miranit linxdatacenteris mĂ”istad, et oled sattunud luksuslikku andmekeskusesse. Oma vabal pĂ€eval kogunes neli inimest, ĂŒtleme, mitte kesklinna, et rÀÀkida endast teistele viiele, kes tĂ”enĂ€oliselt kunagi nende klientideks ei saa 🙂

Me kohtas Maria Svistunova, kes viis meid suure lÀbirÀÀkimiste laua juurde. Natuke lÔbusaid vestlusi Guatemalast pÀrit kohvi juures ja edasi.

Ekskursioonid Peterburi andmekeskustesse ja telekommunikatsiooni ettevÔtetesse

Ekskursioonid on siin rutiinseks saanud. Maksim ja Oleg teavad oma asja: rÀÀgivad harjumuspĂ€raselt: selgelt ja entusiastlikult. Seal, kus on vaja, teevad nad rĂ”huasetusi, seal, kus ei ole — mööduvad sellest. Huumoriga pole probleeme, seega möödusid kaks ja rohkem tundi mĂ€rkamatult.

Andmekeskuse uhkuseks on 100% tööaeg alates kÀivitamisest 2011. aastal.

Kindel on see, et kĂŒmnendate osade jaoks pole isegi tablool kohta ette nĂ€htud.

Ekskursioonid Peterburi andmekeskustesse ja telekommunikatsiooni ettevÔtetesse

Linx on nÀide GreenField formaatides andmekeskusest. Hoone ehitati spetsiaalselt andmekeskuse paigaldamiseks. Seega, lae kÔrgus, pÔrandate tugevus, elektritoite sisendid ja nende varundamine, struktuurne kaabeldus - kÔik see oli projekti kÀigus ette nÀhtud ja arvestatud juba ehituse algfaasis.

Ekskursioonid Peterburi andmekeskustesse ja telekommunikatsiooni ettevÔtetesse

Seega, vaikimisi kannatab pÔrand 800 kg, kuid massi on vÔimalik veelgi suurendada pÀrast tÀiendavat tugevdamist. RÀÀgitakse, et oraklite riiulid, mille hind on Falcon9, nÔuavad erilist kohtlemist.

Andmekeskus on ĂŒhendatud gaasi-pistikuĂŒsteemiga, samas kui linna elektrivĂ”rk on vaid varu. Maksimi sĂ”nul oli see vĂ€ga Ă”ige otsus, sest tuntud Peterburi elektrikatkestuse ajal kannatas nii kontor kui ka kĂ”rval asuv Ă€rihoone, kuid andmekeskus jĂ€tkas tööd.

Diiselgeneraator ei ole siin enam veesĂ”iduki kĂŒlge kinnitatud, vaid tĂ€iesti statsionaarne ruum suitsutorudega, mis tĂ”usevad kĂ”rgelt maastiku kohal.

KÀivitusaeg on mitte rohkem kui kaks minutit, samas kui akudel suudab andmekeskus töötada umbes tunni. Diiselgeneraator suudab töötada 3 pÀeva ilma tankimata.

Siin valitseb kÔikjal kord ja lÀbimÔeldus.

Siin on nÀiteks klahvilukustus, kus andmekeskuse kliendid saavad ise sÔrmejÀlje abil oma riiulite vÔtmeid vÔtta.

Ekskursioonid Peterburi andmekeskustesse ja telekommunikatsiooni ettevÔtetesse

Ja see on ruum, kus kliendid saavad teostada kÔik vajalikud inseneritööd, milleks on seina peal tööriistakast.

Ekskursioonid Peterburi andmekeskustesse ja telekommunikatsiooni ettevÔtetesse

Ekskursioonid Peterburi andmekeskustesse ja telekommunikatsiooni ettevÔtetesse

Need on juba riiulid kohapealseks kasutamiseks, kus on kÔik eluks vajalik igapÀevases töös:

Ekskursioonid Peterburi andmekeskustesse ja telekommunikatsiooni ettevÔtetesse

Ekskursioonid Peterburi andmekeskustesse ja telekommunikatsiooni ettevÔtetesse

See on alati laaditud ja tööks valmis.

Algava hiphoperi mĂŒts, mis on pildil ĂŒleval, on pÀÀstnud mitte ĂŒhegi inimese pead. See on kĂ”va nagu looduslik kiiver — just see, millega ronida pooleteise meetrise valepĂ”randa alla, kus aeg-ajalt paistab mĂ”ni terav metallese.

Oactually kÔik paralleelsed töötajad:

Ekskursioonid Peterburi andmekeskustesse ja telekommunikatsiooni ettevÔtetesse

See vaieldav alat — difmanomeeter.

Ekskursioonid Peterburi andmekeskustesse ja telekommunikatsiooni ettevÔtetesse

See on loodud lihtsa ĂŒlesande lahendamiseks — hoidma rĂ”huerinevust koridori ja masinasaali vahel. NĂ€iteks selleks, et seal sees oleks pisut kĂ”rgem rĂ”hk ja ukse avamisel tolm ei satuks sisse, vaid vastupidi, eemalduks uksest.

TuletĂ”rjesĂŒsteem on samuti gaasiline — hĂ€daolukorras gaas tĂ”ukab hapniku vĂ€lja ja lĂ”petab pĂ”lemise.

Ekskursioonid Peterburi andmekeskustesse ja telekommunikatsiooni ettevÔtetesse

Linxis kÀivad ainult tÔsised ja vÀga tÔsised vennad, kellel on pÔhjuseid paranoia jaoks, mis on Araratiga vÔrreldav.

Restid ja eraldi andmekeskuse turvasĂŒsteem — see on alles algus.

Kui probleemide lahendamiseks vĂ”i uute ĂŒhenduste tegemiseks tuleb kaks inimest — ĂŒks fĂŒĂŒsilise vĂ”tmega, teine elektronilisega — on see juba huvitavam. Ja kui klient toob auditi, kandis prille, laskub vale pĂ”randa alla, tĂ”ukab kaks resti kĂ”rvale ja ĂŒtleb, et siit mahuks lĂ€bi lapse pea, siis saad aru, et inimene on oma elus mĂ”ningaid huvitavaid asju nĂ€inud.

Oli lĂ”busaid olukordi, kui raku projekteerimisel arvestati kĂ”igega, mis vĂ€hegi vĂ”imalik, kĂ”ikide turvasĂŒsteemidega, kĂ”ikide mÔÔtmetega, mis vĂ”imaldavad riiulit sisse tuua ja sinna seadmeid paigutada, aga kuidagi ei mĂ”eldud inseneride mÔÔtude peale, kes sellega töötavad. Ja nad ei mahtunud ei pealt ega kĂŒljelt raku ja riiuli vahele.

Kui ma oleksin FSB, paneksin oma raua linxisse 🙂

PĂ€rast ekskursiooni istusime veel ĂŒsna pikalt, vesteldes pitsat sĂŒĂŒes.
Sellest turvalisuse ja korra kuningriigist liikusime RETN-i.

RETN

Nende tĂŒĂŒpidega oleme juba ammu ja lĂ€hedalt tuttavad. SeetĂ”ttu ei ole ĂŒllatav, et lĂ”puks kogemusime nende katusele, et grillida kebabe ja lugeda lugusid.

Ekskursioonid Peterburi andmekeskustesse ja telekommunikatsiooni ettevÔtetesse

Oleme seal juba varem kÀinud, kuigi tundub, et ei ole rÀÀkinud. Eelmisel aastal ebaÔnnestusid plaanid Peterburi katuste vallutamiseks FIFA tÔttu.

RETN on tegelikult suurim maakaabli operaator ĂŒle kogu maailma. Nende Ă€mblikuvĂ”rgule vĂ”ib iga Ă€mblik kadestada.

Ja andmekeskus ringteel — see on selline kodune projekt, mis on leidnud oma niĆĄi kasvaval turul. Siia tulevad need, kellele on vajalik paks ĂŒhendus maailmaga ja ligipÀÀs teistele kohalikatele operaatoritele.

NĂ€iteks on RETN-is Netflixi CDN.

Ekskursioonid Peterburi andmekeskustesse ja telekommunikatsiooni ettevÔtetesse

Ekskursioonid Peterburi andmekeskustesse ja telekommunikatsiooni ettevÔtetesse

Minu ĂŒllatuseks sain teada, et iga nende sĂ”lm on individuaalselt kĂ€sitsi kirjutatud mingi fraasiga.
Ja selliseid pidulikke karpe toimetavad erinevates linnades RETN-i POP-id (ja ilmselt mitte ainult tema kaudu), tuues teile nii kiiresti kui vÔimalik "Must peegel" ja "Teravad krae".

Siin on olemas ka Google'i CDN ja hulk operaatoritest, nii kohalikul kui ka föderatiivsel tasandil.

RETN-i hoone kÔrval seisavad kaks tillukest (vÔrreldes Miraniga) diiselgeneraatoreid ja auto kanistritega, et sÔita tankima. KÔlab peaaegu nagu peretöö.

Aga Ôhtused lÀbirÀÀkimised katuse peal viisid meid selleni, et RETN annab meile virtuaalserveri varukoha hostimiseks podkastide ja piltide jaoks.
Maailma poisid, superlampev andmekeskus, hÀmmastav oma mastaapsuses.

Ekskursioonid Peterburi andmekeskustesse ja telekommunikatsiooni ettevÔtetesse

MÔne jaoks lÔppes see pÀev duke nukemi turniiriga, teiste jaoks kauaoodatud unega hotellis.

JĂ€rgmisel pĂ€eval ei olnud meil palju plaane: Metrotek ja podkast otse-eetris — linkmeup IRL.

Metrotek

Lliterally kuu aega tagasi kĂŒlastas meid telekomi podkast tuli Misha Sokolov ja Denis Gabidullin NTĐĄ Metrotek slash Plumspace, ja me arutasime, mis on Smart SFP. Ja nĂŒĂŒd saame neid elus katsuda.

Denis, kes juhtis ekskursiooni Metroteki Peterburi kontoris (mis, muide, ei ole muutunud alates meie viimasest kĂŒlastusest), andis kohe ukse juures ĂŒhe nĂ€idise kĂ€tte.
Ma olin alguses ĂŒllatunud, kui halvasti see on tehtud — nagu oleks see lĂ”igatud jigsaw ja viiliga 32 numbriga vĂ”tmes.

Ekskursioonid Peterburi andmekeskustesse ja telekommunikatsiooni ettevÔtetesse

Selgus, et katseeksemplari korpus oli 3D-printeriga metallpulbrist trĂŒkitud, mis on nĂ€htav karedas pinnas. Teised — need, mis on seeriaks valmis — on tĂ€ies korras.

Ekskursioonid Peterburi andmekeskustesse ja telekommunikatsiooni ettevÔtetesse

Aga ĂŒldiselt, neid vaadates, imetled, kuidas nad suutsid peaaegu standardse korpuse sisse peita nii palju aju.

Ekskursioonid Peterburi andmekeskustesse ja telekommunikatsiooni ettevÔtetesse

Soovitan kuulata podcasti Roosi, Toosi ja nende Ôde Boosi kohta.. Minu maitse jaoks tuli see huvitavalt vÀlja.

Kontori disain on maksimaalselt tavaline. Suhteliselt vĂ€ikesed ristkĂŒlikukujulised kabinetid, akna poole venitatud, piisavalt pimedad, mis survestas natuke. Kuid atmosfÀÀr, hoolimata puhkepĂ€evast, oli tööline.

Ekskursioonid Peterburi andmekeskustesse ja telekommunikatsiooni ettevÔtetesse

Kahe aastaga ei ole kujundus muutunud. MÔned plakateid ja tahvlid rÔÔmustasid.

Me kĂ€isime mitmes toas: R&D, sĂŒsteemitootjate, FPGA-degeneraatorite juures, hoidsime erinevaid SFP-sid kĂ€es, programmeerijaid, nĂ€gime esimest mudelit, kus Smart oli viidud SFP-st juhtme otsa — ĂŒks esimesi katseid — pigem Proof of Concept, et see ĂŒldse töötab.

RÀÀgitakse, et mÔnedele klientidele on isegi mugav, et neil on raudvarast selline saba vÀlja ulatus.
Kaks aastat tagasi oli meie esimene eesmÀrk kokku panna tavaline optiline SFP, mis suudaks vÀhemalt signaali edastada.

Siis kogusime eraldi Smart osa koos kellegi teise SFP-ga (just juhtme otsas), et veenduda, et nad suudavad kiipe kokku monteerida.

Metronek on teinud tohutut tööd. MÔtle vaid, et kahe aastaga on kokku pandud tÀielikult töötav optiline moodul, mis oskab kapseldada, telemeetriat, tÀpset ajaserverit ja liidete konverterit.

Ja samal ajal on viidud pĂ”hifunktsionaalsus signaali edastamiseks ideaali nii, et ei tohiks olla kadusid, isegi mitte haruldasi languseid SFP sĂŒĂŒ tĂ”ttu. Ja see ei tohiks kuumeneda, vaatamata ASIC-ide, FPGA-de ja CPU-de hunnikule sees.
Bravo!

TĂ€isvÀÀrtuslik arvutussĂŒsteem:

  • CPU: NXP i.MX6 ARM kuni 900 MHz
  • FPGA: Lattice ECP5 kuni 85K LUTs
  • RAM: DDR3 kuni 1 GB

Denis mĂ€rkis, et ettevĂ”ttes praktiseeritakse ja julgustatakse teadmiste ja kogemuste vahetamist. Ja siis mĂ”tlesin: "Kas see pole kunagi teisiti? 0_ĐŸ". — Jah, sageli tulevad neist inimestest, kes eelmises töökohas keetsid omaette, ei suhelnud, tegid topelt ja kolmekordset tööd ning ĂŒldiselt vĂ€ltisid kommunikatsiooni proovimist.

Ja siis meenutasin, et kaks aastat tagasi töötasin ma ĂŒhes rahvusvahelises laialdaselt blokeeritud firmas, kus konverentsid olid keelatud ja teadmiste vahetus puudus pĂ”himĂ”tteliselt. Just mina olin ĂŒks nĂ€dalaste kohtumiste evangeliste, et jagada kogemusi, mis nĂ€ib olevat pÀÀstnud ĂŒksildased insenerid eemal asuvatest piirkondadest.

ÜhesĂ”naga, Metronekis toimuvad regulaarselt siseĂ”ppe ja loengud, seetĂ”ttu nad on hĂ€sti.

Ja siis viidi meid imetlusvÀÀrsesse montaaĆŸitöökotta. Kui palju kordi ma seal kĂ€inud olen, tundub, et mu lapsepĂ”lve vaimustus ei kao kunagi.

Metronekis on otse kontoris seadmed trĂŒkkplaatide printimiseks.

Kleeplagi, millegi temperatuuri alajuhiks (teised vÔivad seda teistmoodi nimetada), vÀike soojusekraaniklik printer SMD-komponentide jaoks ning seal kÔrval kÀsitöö kohtade jaoks kÀsitsi paigaldamiseks.

Ekskursioonid Peterburi andmekeskustesse ja telekommunikatsiooni ettevÔtetesse

Ekskursioonid Peterburi andmekeskustesse ja telekommunikatsiooni ettevÔtetesse

Ekskursioonid Peterburi andmekeskustesse ja telekommunikatsiooni ettevÔtetesse

Oma ĂŒllatuseks avastasin, et mikrokiibid, millel on sadu jalgu, jootakse ka kĂ€sitsi. Denis ĂŒtleb, et nende poisid jootavad mikroskoopilisi detaile ĂŒllatava tĂ€psuse ja kiirusena ning mĂ”nikord pole mĂ”tet kĂ€ivitada kuradimasinat — inimene teeb kiiremini.

Ekskursioonid Peterburi andmekeskustesse ja telekommunikatsiooni ettevÔtetesse

Oleme omavahel kutsunud tootmisliini Metrotek Eltex-veloright, pÀrast suhteliselt hiljutist ekskursiooni nende juurde.

Lisaks on kontoris 3D-printer ja freespink sisemiste vajaduste jaoks, millega aga on juba graveeritud medalid eelmise aasta Chaos Construction.

Ekskursioonid Peterburi andmekeskustesse ja telekommunikatsiooni ettevÔtetesse

Sealt suundusime uskumatult geniaalsesse Krang Pizza, kus tÀies koosseisus linkmeup neelasime mutandi suuruses ja mÔttes pitsat-burgerit ning liikusime IQ option kontorisse, kus salvestasime esimese vÀljaande. linkmeup IRL.

JÀrgmisel pÀeval piilumiseks lÀksime laserikeskusesse Mammuti vihje jÀrgi, kus me kogesime tehnokratlikku ekstaasi ja pisut ahnusest inflamatsiooni, kuid sellest saab olema eraldi lugu.

LÔpuks tahaksin öelda, et kÔik ekskursioonid ja kohtumised osutusid vÀga erinevateks nii tegevuse ulatuse kui suunaga.

Miran, kes sooja chestaga meie hostimist lahti hoidis, kasvab kiiresti, kuid on endiselt sÔbralik.

Links on tÔeliselt Àge andmekeskus, kus turvalisus on esikohal ja kogenud turundajad.
RETN — noored lĂ”busad poisid "garaazides", kes ehitavad tohutut vĂ”rku ja praegu veel vĂ€ikest andmekeskust ja ei pelga teha vĂ€ikest tuld katuse peal.

Metrotek on suhteliselt vĂ€ike Venemaa riistvara ja tarkvara arendajate meeskond, kes toodab peaaegu "need kĂ€ed" mÔÔteseadmest anda ĂŒle konkurentsivĂ”imeline varustus ja nĂŒĂŒd siseneb uude turgu ambitsioonika ĂŒlesandega.

Ja Laserikeskus, mis lĂ€heb ĂŒle linkmeup huvide piire, kuid on meie isiklike huvide objekt. JĂ€tnud vĂ€ga meeldiva mulje ja graveering mikrofoni diktofonil.

Allikas: habr.com

Osta usaldusvÀÀrne hostimine veebilehtede jaoks DDoS-i kaitsega, VPS VDS serverid đŸ”„ Osta usaldusvÀÀrne hostimine veebilehtede jaoks DDoS-i kaitsega, VPS VDS serverid | ProHoster