Peterburi olulisim transpordiprobleem on sillad. Öösiti tuleb nende pärast kõrtsist ära joosta, ilma et õlut oleks otsas. No või makske takso eest kaks korda rohkem kui tavaliselt. Hommikul arvesta hoolega kellaaega, et kohe kui sild kinni pannakse, jõuaksid kui väle mangune jaama. Variant “ööbida kuskil kesklinnas, jaama lähedal” ei pea me ideoloogiliselt kahjulikuks.
...Kell 5:30 väljuva "Kalepistriku" mõtlesid välja inimesed, kes vihkavad öökulleid. Ei, muidugi, Moskvas on väga mugav olla hommikul kell üheksa ja Peterburi on valgete ööde ajal uskumatult ilus, aga kell pool viis taksosse istudes tahtsin pea 270 ümber pöörata. kraadi lõokesele, kes selle hommikuse rongi leiutas.
"Kõik head andmekeskused on sarnased," mõtlesin, kui sain teada, et DataLine'i kutid olid meid külla kutsunud.
Nagu selgub, on iga andmekeskus omal moel hea (või halb), eriti siis, kui lööte suure hooga kokku, kogute kokku kõik piirkonna rehad ja õpite oma (ja natuke ka teiste inimeste) kogemustest. ) rikkalik kogemus. Seega otsustasime (koosnedes viiest juhtivast linkmeupist ning nende sõpradest ja kaasatundjatest) kontrollida, kui head (või mitte nii head) on OST-i ja NORD-i andmekeskused.
Olles jõudnud tee peal veidi tööd teha (siin võiks ju ühe mobiilioperaatori kuulutus olla, aga ei - levi oli ikka halb), laadisime end Leningradski jaamas maha. Vähemalt mitte Gazmanovi juhtimisel.
Alustasime oma ringkäiku "lubja" andmekeskustes OST-iga - "sama", mis "põles" mitte nii kaua aega tagasi. Miks jutumärkides – pärast. Vahepeal seisame, suitsetame ja ootame hilinejaid. Pildistamine kõrval asuvast RT kontorist. Selle naabruskonnaga on palju naljakaid lugusid – alates värske asfaldi ladumisest ja äärekivide värvimisest enne kõrgete inimeste saabumist kuni allahindlusteni lähedalasuvates kohvikutes, mida Dataline'i elanikele tehti nende märkide sarnasuse tõttu.
Totalitaarse propaganda hääletoru
Range (juurdepääsu) režiimi andmekeskus
Pass, käitumisreeglid, hakklihamasin sissepääsu juures – peaaegu sama, mida nägime . Kas olete andmekeskustes palju kohvikuid näinud? Nüüd teame paari. Töötajatel ja klientidel on märkidel “kohvi” hoiused, mida regulaarselt täiendatakse. Seega saab mõistlikkuse piires end kohviga lubada täiesti tasuta. Ka meid, kui armsaid külalisi, kostitati einega.
Kohvi kohta ei saa ma midagi halba öelda - see on "ketti" kohviku jaoks täiesti tavaline, kuid asukoht on tahes-tahtmata kütkestav ja interjöör on parimate kaasaegsete traditsioonidega kooskõlas.
Kohaliku kohviku interjöör
Fotodel on NORDi andmekeskused
Ekskursioon algab kontorist. Lisaks seintel olevatele kirjadele ning Runetis tuntud valgele ja laimile värvilahendusele on seal ka igasugu naljakaid seiku. Need on korporatiivteatri etendustest üle jäänud rekvisiidid (kas kujutate ette andmekeskuse võrgu tehnilist direktorit etenduses mängimas? Ja me tunneme teda isiklikult.).
Ja see on tõsi
Fotod etendustest
Andmekeskus (õigemini neli andmekeskust) asuvad üle-eelmisel sajandil ehitatud tööstushoonete kompleksis (tollal Citroeni tehas ja nõukogude ajal Gidroprivodi tehas), nii et ühest küljest on seal karm. tööstuslik välimus, metalltalad, loft-atmosfäär ja erinevatest ajastutest pärit tööstuslikud esemed, mida erinevate tööde käigus ikka leidub. Teisalt tuleb andmekeskuse hermeetilised tsoonid sobitada olemasolevatesse struktuuridesse ning teha aeg-ajalt reaalsusega järeleandmisi. Samas ma ei ütleks, et need kompromissid kvaliteeti mõjutasid – aga ilmselt pidid poisid disaini ajal kõvasti tööd tegema. Samuti möödub kuulujuttude järgi Metro-2 kuskilt lähedusest, kuid see pole kindel.
Lisaks teatrile on seal ka muuseum. Eksponaadid, loomulikult - arheoloogilised leiud
Paar sõna sellest . Jah, hoone (õigemini katus) põles tõesti. Kahjustada said jahutussüsteemide välissõlmed ja külmatorud. Kuskil põles juhtmestik läbi ja konditsioneerid jäid elektrita. Kuskil plahvatasid freoontorud. Kuid vaatamata sellele pidasid hermeetilised tsoonid vastu tonnide kaupa neile valatud vett ja seadmed jäid ellu. Nad taastasid selle "peakorteri" kontrolli all, mida esindas kogu maailma tippjuhtkond - nad riisusid välja kõik Moskva ja lähiümbruse vasktorud (need tõid need isegi öösel BMW X5-ga) ja kõik kained. paigaldajad. Kahjustatud andmehallide kriitilised seadmed (kahjustatud külma puudumisest, mitte tulekahjust!) viidi kiiresti teistesse saalidesse, nii et hommikul kella viieks olid töös mitte ainult kõik nende teenused, vaid ka kliendid.
Kontrollisime isiklikult saali, mis “kõige rohkem kannatas” – peale põlemislõhna ja tõstetud põranda vahetatud plaatide ei meenuta põlengut üldse mitte miski (v.a seadmete nagid, mis viidi “ajutiselt” teise andmehalli, ja jäi sinna).
Olekupaneel
Mööda koridore kõndides näeme puutetundlikku ekraani, millel on midagi väga sarnast andmekeskuse turbiiniruumide skeemile. See on olekupaneel. Neid on koridorides ohtralt ja need võimaldavad kohapealsetel inseneridel kiiresti leida näiteks vajaliku konditsioneeri ja lihtsalt hetkeseisust teada anda.
Seire on üles ehitatud Nagiosele (nüüdseks on juba mitu iseseisvat klastrit) ja hõlmab kõiki andmekeskusi (nii OST kui NORD). Lisaks on rakendused Androidile ja iOS-ile (klientidele ja töötajatele) ning olekuleht otse veebisaidil.
Ekraanil märkan ebatavaliselt kõrget PUE-d - seda ei aktsepteerita kõikjal Venemaal, kuid 1.90 on siiski mõnevõrra kõrge. Vastus sellele on puhtalt majanduslik – aastatel 2012–2013 müüsid andmekeskuste nagid nagu soojad saiad, nii et sentimentaalsuseks ja energiatõhususeks polnud aega. Installime seda, mis turul on, teeme seda nii kiiresti kui võimalik ja ei hooli teie PUE-st üldse, sest miks? Isegi projekteerimisetapis ostetakse 80–90% riiulitest, kuid Vene Föderatsiooni seadusandlus ei taha energiatõhususest midagi teada. Kuigi mõni Amsterdami komisjon oleks selliste arvudega rahul.
Ei midagi isiklikku. Lihtsalt äri.
Teine omadus on andmesaalide märgistamine. Igal saidil on andmesaalidel lisaks "ametlikule" tähtnumbrilisele kodeeringule ka mereväe tähestiku "inimlikud" pseudonüümid (Alfa-Bravo-Charlie-Delta...). Millegipärast armastavad kõik kliendid Viski tuba.
Klienditeeninduses pole pisiasju.
Selliseid "piirdeid" püstitatakse mõnele kliendile. Turbiiniruumides me pildistada ei tohtinud, seega on foto DataLine ©
DataLine'i kliendid on enamasti suured ja lugupeetud ettevõtted, neile ei meeldi väga, kui nende seadmeid pildistatakse. Veelgi enam, kui kliendi nimi (või logo) on otse letile kirjutatud suurte tähtedega. Neile see ei meeldi - see on kõik. Seetõttu filmisime juba kuulsad seinad erinevate kirjadega ja insener. Samuti ei ole võimalik pildistada kogu inseneri ja mitte kõikjal, kuid me proovisime. Kuna meie kliendid on suured ja lugupeetud, on neil ka erisoovid - spetsiaalsed riiulid (või mingi uber-salvestussüsteem mitmelt müüjariiulilt), oma aiad, oma läbipääsusüsteemid, oma videovalve ja kiirreageerimismeeskond. kuulipildujad. Üldiselt on DataLine’i üks väljaütlemata (ja avalikest) reeglitest kliendi eest hoolt kandmine ja talle head tegemine. Alustades vestidest ja varustatud tööjaamadest koos internetiühenduse ja laadijatega, lõpetades erinevate üritustega klientidele. Viimased on väga kasulikud ka selle poolest, et samad inimesed ettevõttest ettevõttesse liikudes toovad need DataLine'i. Lihtsalt sellepärast, et siin on kõik hubane, mugav ja usaldusväärne. DataLine'i äri ei seisne ainult riiulipinna rentimises. See on ka pilv, mis on samaaegselt sertifitseeritud vastavalt 152-FZ ja PCI-DSS (teeme sellest taskuhäälingusaate, jääge teadaannetega kursis) ja pakub ühenduvust (oma kiud saitide vahel ja igalt neist M9, oma optiline ring üle linna ja nii edasi kuni viimase miili korraldamiseni kliendi kontorini).
M - motivatsioon
Rääkides pealdistest, siis ideed ei tule mitte ainult töötajatelt, vaid ka partneritelt ja klientidelt, misjärel saab edukamate poolt hääletada DataLine FB-s. Noh, saate seal oma idee välja pakkuda.
Kohtumine Elbe ääres
Rist (foto DataLine'i loal)
Peatume Meet-Me-Roomis, kus asuvad operaatorid. MMR-is (OST-is on kolm paari, vastavalt peamiste optiliste sisendite arvule, aktiivseks ja passiivseks) ühendatakse ühendused kõigist andmesaalidest. Krossikingas on kõik igav ja korralik. Kuid seal, kus kaamera aktiivne asub, mäletate parimaid aastaid ja kaadreid mõnest BM18-st: juhtmetest valmistatud nuudlid ja erinevad seadmed (DLink, Extreme, Juniper, Mikrotik ... ja nii edasi kuni ASR9k-ni). Siin on operaatoreid üle viiekümne, nii et kõik on värviline. MMR-ist jagatakse optikat ja vaske masinaruumidesse. Igaühele vähemalt kaks marsruuti (võimalikud on ka variandid), nii et te ei pea ühenduse usaldusväärsuse pärast muretsema. MMR-i nimetatakse "Elbeks", mis on üsna peen.
Kas IBM Power on?
Teine leid on IBMi P-seeria, mida pole kordagi sisse lülitatud ja mis on juba mitu aastat ühes koridoris seisnud. Masina (koos lindiraamatukogu ja salvestussüsteemiga) tellis üks klient, kuid "sellest polnud kasu," annetati see andmekeskusele. Sellest ajast peale on see seisnud.
Tõenäoliselt on hea olla jõukad poisid ja selliseid kingitusi teha, eks? (Või võib-olla nad ei kinkinud seda, vaid unustasid. Või kaotasid kaartidel. Aga see on olnud juba pikka aega)
See kena mees seisab NORD-4-s
Läheme energiakeskusesse - iga andmekeskuse jaoks kolm (või isegi neli) diiselgeneraatori komplekti (tuletan meelde, OST-is on neid neli). Diiselmootor saavutab täisvõimsuse 30-40 sekundiga ja toodab 1900 kVA. Kaasas N+1 koondamine, sünkroniseerimine jne. Diiselmootorite pikim istumisaeg OST-is on 12 tundi. NORDis - 2.5 päeva (85-tonnine hoidla pole ju suur raha).
Loomulikult on erinevate kütusefirmadega kokkulepped kütuse tarnimiseks. Diislile üleminek toimub regulaarselt, nii et toodetakse kütust ja kontrollitakse lepinguid. Muide, kolleegide sõnul õnnestub NORDis diiselgeneraatorite testimisel, mis tavaliselt võtab aega üle ühe tunni, kohas, kus diiselmootorite kuuma õhk välja paiskub, isegi talvel rohi roheliseks minna.
Pärast lühikest näksimist tuttavas kohvikus suundume NORDi saidile. Samuti pole tegemist ühe andmekeskusega, vaid nelja iseseisva hoonega samal territooriumil. Igal neist on oma elektrisisendid, oma diiselmootorid ja oma jahutus. NORD-1 ja NORD-2 auditeeris Uptime Institute M&O. Uusim (ja parim DataLine'i andmekeskus) on NORD-4, nii et sinna me läheme.
Vaatamata näiliselt tohutule hulgale andmekeskustele Moskvas on endiselt puudus. Ei, muidugi, üks või kaks riiulit saadetakse teile ilma probleemideta. Nad annavad sulle isegi kakskümmend. Rohkem on küsimus (ja DataLine'il on rohkem kui üks või kaks selliste vajadustega klienti). Täpsemalt NORD-4-s on koht (praeguseks), sest üks suurklient on kolinud oma vastvalminud andmekeskusesse, aga mujal ei pruugi see nii vedada. Nüüd on aga täies hoos NORD-5 projekteerimine, mis lubatakse käiku lasta 2020. aasta alguses.
Aga tuleme tagasi oma ekskursiooni juurde. Kuna sõitsime autoga, siis lasti meid väravasse, kus kuulipildujad võtsid meid sihikule, kontrollisid rakendusega meie auto numbrit ja palusid kõigil reisijatel pääseda (loomulikult koos passidega) välja. Sest B on turvalisus.
NORD-4 on ettevõtte uhkus ja paljude aastate kogemuste kogum andmekeskuste ehitamisel ja käitamisel, sellel on Uptime Institute Tier III sertifikaadid projekteerimisprojekti ja Facility (st ehitatud andmekeskuse) jaoks ning tegevuse jätkusuutlikkus. - lähenesid poisid asjale võimalikult vastutustundlikult. Sees on neli üksteisest sõltumatut hermeetilist tsooni, millest igaühes on ühes hoones kaks saali. Igal neist on oma jõukeskus (diiselgeneraatori komplekt, akuruumid), jahutusahelad ja tulekustutussüsteemid. Üldine - optilised sisendid (neid on kaks hoone kohta) ja MMR.
Terve inseneri modimine
Andmekeskuse sissepääsu juures ootab meid juba tuttav kohvik (no miks mitte?). Me läheme seirekeskusesse. Nüüd on kaks põhilist - OST-is ja NORD-4-s (NORD-1,2,3-l on ka oma töövahetused). Igast keskusest saab vaadata mõlemat saiti, seega on isegi siin tagatud koondamine n+1. Videoseinal on juba tuttavad helerohelises värvilahenduses armatuurlauad (parameetreid on sellel muidugi palju rohkem kui olekunäidikul). Suhtleme veidi jälgimise teemal – ei mingit uhket Prometheust ja Grafani, ainult Nagios, ainult hardcore ja kodune visualiseerimine. Kümne kasutusaasta jooksul (samas isegi rohkem) on juba kirjutatud palju kohandatud tšekke ja skripte, nii et millelegi muule üleminek näeb välja nagu hasart. Umbes kord kuus ilmub mõni teine firma, kes pakub võimalust "kiiresti ja valutult" kõik probleemid lahendada, kuid millegipärast see veel ei õnnestu. Videosein, muide, töötab ka ise kokkupandud lahendusel, mis osutus mitu korda odavamaks kui kommertsanaloogid.
Kohalik juhtimiskeskus
Kui olete andmekeskusi juba aastaid projekteerinud, ehitanud ja opereerinud, ei karda te enam nii palju ise midagi teha, kui midagi valmis osta. DataLine näiteks ei kõhkle väitmast, et lihtsalt mastaapsuse tõttu on nad astunud maksimaalselt vigade arvule ning iga uus andmekeskus on raskete vigade ja üle kümne aasta kestnud kogemuste tulemus. . Loomulikult on igal uuel andmekeskusel oma oskusteave ja NORDis ringi liikudes tabad end aeg-ajalt mõttelt, et inimesed lihtsalt tegid ja tegid hästi. Mitte eputamise, mitte reitingute ja sertifikaatide pärast – tavaline inseneriprotsess, kui iga iteratsiooniga kasvad endast kõrgemale ja muutud järjest paremaks. Välisvaatleja ütleb, et see on igav ja konservatiivne, kuid klient, vastupidi, säilitab sellise stabiilsuse oma rahaga. Ja selleks, et seda hästi teha, pole üldse vaja osta palju, suure raha eest insenerisüsteeme või tarkvara (kuigi mõnikord ei saa ilma selleta hakkama). Sageli otsustavad kogemused, teadmised ja inseneri leidlikkus.
Näiteks NORD-4 hoone on 3,5 korruseline. Kolm esimest on täisväärtuslikud, lagedega 4.5 meetrit, kus asuvad turbiiniruumid. Ja viimane on tehniline, vaid 1.8 meetri kõrgune ja on pühendatud puhtalt jahutussüsteemile. Kuna põrand on tehniline, siis nõuded sellele on palju madalamad, mis lihtsustas projekti ja hoidis raha kokku.
Vaade kolmnurksele andmekeskusele
Maxil on eriline kung fu võime, et ta fotodel ära ei põle
Ringkäigu lõpetame katusel - siit avaneb suurepärane vaade lähedal asuvale soojuselektrijaamale ja elurajoonile ning teistele NORDi hoonetele. Kaks neist on kolmnurksed. Selle peale naersid kolleegid koguni, et “DataLine on debiilikud, millegipärast ehitavad kolmnurkset andmekeskust”, et sinna kolmnurkrecke ja kolmnurkservereid paigaldada. Aga ei midagi – nad ehitasid ja tegutsevad edukalt, kasutades samal ajal tõhusalt olemasolevat territooriumi (mis Moskvas, tuleb öelda, pole tasuta). Teine (minu jaoks) üllatav fakt on see, et enamik ärikliente soovib asuda Moskvas. Minski maantee ääres poolesaja kilomeetri kaugusel asuv plats (isegi kui kõik vajalikud võimsused ja kommunikatsioonid on olemas) ei paku enam kellelegi huvi. Nii et kõik tõmbuvad mittekummi sisse.
Jahutustornid pole enam andmekeskused, vaid soojuselektrijaamad
Sellega on meie järgmine teekond lõppenud.
Pärast oli veel üks pikk ja tulemuslik vestlus ühiste plaanide ja tulevaste podcastide teemal (loodan, et me ei pea kaua ootama), nii et olge lainel, varsti on veelgi huvitavamat.
Noh, kui soovite kõike oma silmaga näha, kutsub DataLine teid ringreisile. Täiesti tasuta, kuid kokkuleppel. Need, kes kutsuvad koodsõna "linkmeup", saavad karmas plussi.
Hoia!
Allikas: www.habr.com