Szentpéterváron a legfontosabb közlekedési probléma a hidak. Éjszakánként miattuk kell menekülni a kocsmából anélkül, hogy megissza a sörét. Nos, vagy kétszer annyit fizet a taxiért, mint máskor. Reggel gondosan számold ki az időt, hogy amint lezárják a hidat, úgy érj el az állomásra, mint egy mozgékony mangúz. Nem tartjuk ideológiailag károsnak az „éjszakát valahol a központban, az állomás közelében tölteni” lehetőséget.
...A 5:30-kor induló Vándorsólymot olyan emberek találták ki, akik utálják a baglyokat. Nem, persze nagyon kényelmes reggel kilenckor Moszkvában lenni, Szentpétervár pedig hihetetlenül szép a fehér éjszakákban, de fél ötkor, amikor beszálltam a taxiba, el akartam fordítani a fejem 270 fokkal a pacsirta, aki feltalálta ezt a reggeli vonatot.
„Minden jó adatközpont egyforma” – gondoltam, amikor megtudtam, hogy a DataLine srácai meghívtak minket.
Mint kiderült, minden adatközpont egy kicsit jó (vagy rossz) a maga módján, különösen akkor, ha nagyot üt, összegyűjti az összes rake-ot a környéken, és levonja a tanulságokat a sajátjaitól (és egy kicsit másoktól). gazdag tapasztalat. Így hát (öt vezető linkmeupból és a hozzájuk csatlakozott barátokból és szimpatizánsokból állva) úgy döntöttünk, hogy megvizsgáljuk, mennyire jók (vagy nem olyan jók) az OST és a NORD adatközpontok.
Miután sikerült egy kis munkát végezni az úton (lehetne itt egy mobilszolgáltató hirdetése, de nem - a lefedettség továbbra is rossz volt), a Leningrádi állomáson kipakoltunk. Legalábbis Gazmanov alatt nem.
A „lime” adatközpontok körútját OST-val kezdtük – „ugyanazzal”, amely nem is olyan régen „égett”. Miért idézőjelben - után. Közben állunk, dohányozunk, várjuk a későket. Fényképek készítése a szomszédos RT irodáról. Sok vicces sztori szól erről a környékről – kezdve a friss aszfalt lerakásától és a járdaszegélyek festésétől a méltóságok érkezése előtt, egészen a közeli kávézók árengedményéig, amelyeket a Dataline lakói kaptak jelvényeik hasonlósága miatt.
A totalitárius propaganda szócsöve
Szigorú (hozzáférési) módú adatközpont
Pass, magatartási szabályok, húsdaráló a bejáratnál – majdnem ugyanaz, amit láttunk . Látott már sok kávézót az adatközpontokban? Most ismerünk egy párat. Az alkalmazottak és ügyfelek jelvényeiken „kávé” betét található, amelyet rendszeresen feltöltenek. Így ésszerű keretek között teljesen ingyenesen kényeztetheti magát kávéval. Minket, mint kedves vendégeket is megvendégeltek egy étkezéssel.
Nem tudok rosszat mondani a kávéról - ez teljesen normális egy „lánc” kávézónál, de a helyszín akaratlanul is magával ragadó, a belső tér pedig a legjobb modern hagyományokhoz igazodik.
Egy helyi kávézó belseje
A fotókon a NORD adatközpontjai láthatók
A túra az irodából indul. A falak feliratain és a Runet-szerte ismert fehér és lime színvilágon kívül mindenféle vicces dolog is megtalálható benne. Ezek a céges színházi előadásokból megmaradt kellékek (el tudod képzelni, hogy egy adatközponti hálózat műszaki igazgatója játszik egy darabban? És személyesen ismerjük.).
És az igazság
Fotók az előadásokról
Az adatközpont (vagy inkább négy adatközpont) a múlt század előtt épült ipari épületegyüttesben található (akkor a Citroen üzem, a szovjet időkben pedig a Gidroprivod üzem), így egyrészt kemény ipari megjelenés, fémgerendák, loft hangulat és különböző korokból származó ipari leletek, amelyek még mindig megtalálhatók a különféle munkák során. Másrészt az adatközpont hermetikus zónáit a meglévő struktúrákba kell illeszteni, és időnként kompromisszumot kell kötni a valósággal. Azt azonban nem mondanám, hogy ezek a kompromisszumok befolyásolták a minőséget – de valószínűleg keményen kellett dolgozniuk a srácoknak a tervezés során. A pletykák szerint a 2-es metró is elhalad valahol a közelben, de ez nem biztos.
A színház mellett múzeum is működik. Kiállítások, természetesen - régészeti leletek
Néhány szó róla . Igen, az épület (vagy inkább a tető) valóban égett. A hűtőrendszerek külső egységei és a hidegcsövek megsérültek. Valahol kiégett a vezeték, és áram nélkül maradtak a klímák. Freoncsövek robbantak fel valahol. De ennek ellenére a hermetikus zónák ellenálltak a rájuk öntött tonna víznek, és a berendezés túlélte. Az egész világ felső vezetése által képviselt „székház” irányítása alatt helyreállították - kigereblyézték Moszkvában és a környéken az összes rézcsövet (éjszaka még egy BMW X5-tel is elhozták) és minden józanul. telepítők. A megrongálódott (hideghiánytól, nem tűztől sérült!) adatcsarnokok kritikus berendezéseit gyorsan más csarnokokba költöztették, így hajnali ötre már nemcsak az összes szolgáltatásuk, hanem az ügyfeleik is működtek.
Személyesen ellenőriztük a „legtöbbet” szenvedő csarnokot – az égés szagát és az emelt padló cseréjét leszámítva semmi sem emlékeztet a tűzre (kivéve az „ideiglenesen” másik adatcsarnokba átvitt berendezési állványokat, és ott maradt).
Állapot panel
A folyosókon sétálva egy érintőképernyőt látunk, amelyen valami nagyon hasonlít az adatközpont turbinás helyiségeinek diagramjához. Ez az állapotpanel. Rengeteg ilyen található a folyosókon, és lehetővé teszik, hogy a helyszíni mérnökök gyorsan megtalálják például a szükséges klímát, és egyszerűen jelentsék az aktuális állapotot.
A monitorozás Nagiosra épül (most már több független klaszter is létezik), és minden adatközpontra kiterjed (az OST-ra és a NORD-ra is). Ezenkívül Androidra és iOS-re is vannak alkalmazások (ügyfelek és alkalmazottak számára), valamint egy állapotoldal közvetlenül a webhelyen.
A kijelzőn szokatlanul magas PUE-t veszek észre - Oroszországban nem mindenhol fogadják el, de az 1.90 még mindig valamivel magas. A válasz erre pusztán gazdasági jellegű – 2012-2013-ban az adatközpontok állványai úgy fogytak, mint a meleg sütemény, így nem volt idő a szentimentalizmusra és az energiahatékonyságra. Azt telepítjük, ami a piacon kapható, a lehető leggyorsabban elvégezzük, és egyáltalán nem törődünk a PUE-vel, mert miért? Még a tervezési szakaszban is megvásárolják az állványok 80-90% -át, de az Orosz Föderáció jogszabályai semmit sem akarnak tudni az energiahatékonyságról. Bár néhány amszterdami bizottság megelégedne ilyen számokkal.
Semmi személyes. Csak üzlet.
Egy másik funkció az adatcsarnokok jelölése. Az egyes telephelyeken az adatcsarnokok a „hivatalos” alfanumerikus kódoláson kívül a haditengerészeti ábécéből származó „emberi” álnevekkel is rendelkeznek (Alpha-Bravo-Charlie-Delta...). Valamilyen oknál fogva minden ügyfél szereti a Whisky szobát.
Nincsenek apró részletek, ha az ügyfélszolgálatról van szó.
Egyes ügyfelek számára ilyen „kerítéseket” állítanak fel. A turbinás helyiségekben nem volt szabad fényképezni, ezért a fotó DataLine ©
A DataLine ügyfelei többnyire nagy és elismert cégek, nem igazán szeretik, ha a berendezéseiket lefényképezik. Sőt, ha az ügyfél neve (vagy logója) közvetlenül a pultra van írva nagy betűkkel. Nem szeretik – ez minden. Ezért lefilmeztük a már híres falakat különféle feliratokkal, és a mérnököt. Nem is lehet a teljes mérnököt lefényképezni és nem mindenhol, de megpróbáltuk. Mivel ügyfeleink nagyok és megbecsültek, konkrét kéréseik is vannak - speciális állványok (vagy valamilyen uber tárolórendszer több gyártói állványból), saját kerítés, saját beléptető rendszer, saját videó megfigyelés és gyors reagálású csapat gépfegyverek. Általánosságban elmondható, hogy a DataLine egyik kimondatlan (és nyilvános) szabálya, hogy gondoskodjunk az ügyfélről és jót tegyünk vele. Kezdve a mellényektől és a felszerelt munkaállomásoktól Internet hozzáféréssel és töltővel, a különféle rendezvényekig az ügyfelek számára. Ez utóbbiak abból a szempontból is nagyon hasznosak, hogy ugyanazok az emberek, akik cégről cégre költöznek, hozzák őket a DataLine-hoz. Egyszerűen azért, mert itt minden hangulatos, kényelmes és megbízható. A DataLine tevékenysége nem csak rack-terület bérbeadásából áll. Ez is egy felhő, egyszerre 152-FZ és PCI-DSS tanúsítvánnyal rendelkezik (podcastot fogunk készíteni róla, figyeljük a bejelentéseket), és kapcsolatot biztosít (saját szálak az oldalak között és mindegyikről a M9, saját optikai gyűrű a városon keresztül, és így tovább az utolsó mérföld megszervezéséig az ügyfél irodájáig).
M - motiváció
Ha már a feliratoknál tartunk, nem csak munkatársaktól, hanem partnerektől, ügyfelektől is érkeznek ötletek, ezek után lehet szavazni a legsikeresebbekre DataLine az FB-ban. Nos, ott javaslatot tehet az ötletére.
Találkozás az Elbán
Cross (a fotó a DataLine jóvoltából)
Megállunk a Meet-Me-Roomban, ahol az üzemeltetők vannak. Az MMR-ben (az OST-ban három pár van, a fő optikai bemenetek számától függően, aktív és passzív) az összes adatcsarnok összeköttetéseit kombinálják. A terepcipőben minden unalmas és ügyes. De ahol az aktív kamera található, emlékszik a legjobb évekre és néhány BM18 felvételére: drótokból készült tészták és különféle felszerelések (DLink, Extreme, Juniper, Mikrotik... és így tovább ASR9k-ig). Itt több mint ötven operátor van, szóval minden színes. Az MMR-ből optikát és rezet osztanak ki a géptermekbe. Mindegyikhez legalább két útvonal (változatok is lehetségesek), így nem kell aggódnia a kapcsolat megbízhatósága miatt. Az MMR-t "Elbának" hívják, ami meglehetősen finom.
IBM Power nem?
Egy másik lelet egy IBM P-sorozat, amely soha nem volt bekapcsolva, és évek óta áll az egyik folyosón. A gépet (szalagkönyvtárral és tárolórendszerrel együtt) az egyik ügyfél megrendelte, de „nem volt hasznos”, ezért az adatközpontnak ajándékozta. Azóta is áll.
Valószínűleg jó gazdag srácoknak lenni és ilyen ajándékokat adni, nem? (Vagy nem ajándékba adták, hanem elfelejtették. Vagy vesztettek a kártyákon. De ez már régen van)
Ez a jóképű srác a NORD-4-ben áll
Az energiaközpontba megyünk - minden adatközponthoz három (vagy akár négy) dízel generátorkészlet (hadd emlékeztessem önöket, az OST-ban négy van belőlük). A dízelmotor 30-40 másodperc alatt éri el a teljes teljesítményt és 1900 kVA-t ad le. N+1 redundancia, szinkronizálás stb. A dízelmotorokon a leghosszabb ülésidő az OST-ban 12 óra. NORD-ban - 2.5 nap (végül is egy 85 tonnás tároló nem sok pénz).
Természetesen vannak megállapodások különböző üzemanyag-cégekkel az üzemanyag szállítására. A gázolajra való átállás rendszeresen megtörténik, így mind az üzemanyag előállítása, mind a szerződések ellenőrzése megtörténik. A kollégák szerint egyébként a NORD-nál a dízelgenerátorok tesztelésekor, ami általában több mint egy órát vesz igénybe, ott, ahol a dízelmotorok forró levegője távozik, még télen is sikerül kizöldülnie a fűnek.
Egy ismerős kávézóban elfogyasztott rövid uzsonna után a NORD oldalára vesszük az irányt. Ez sem egy adatközpont, hanem négy független épület ugyanazon a területen. Mindegyiknek saját elektromos bemenete, saját dízelmotorja és saját hűtése van. A NORD-1-et és a NORD-2-t az Uptime Institute M&O auditálta. A legújabb (és a legjobb DataLine adatközpont) a NORD-4, tehát erre megyünk.
Annak ellenére, hogy Moszkvában hatalmasnak tűnő adatközpontok vannak, még mindig hiány van. Természetesen nem, egy vagy két állványt minden probléma nélkül kiszállítunk. Még húszat is adnak. A több kérdés (és a DataLine-nak egy-két ilyen igényű kliense is van). Konkrétan a NORD-4-ben (egyelőre) van hely, mert egy nagy kliens beköltözött a saját újonnan épült adatközpontjába, de máshol ez nem biztos, hogy olyan szerencsés. A NORD-5 tervezése azonban már javában zajlik, ami az ígéretek szerint 2020 elejére indul.
De térjünk vissza a kirándulásunkhoz. Mivel autóval utaztunk, beengedtek az átjáróba, ahol géppuskások vettek célba minket, az alkalmazással ellenőrizték a kocsiszámunkat, és megkértek minden utast, hogy szálljon ki bérletekért (természetesen útlevéllel). Mert B a biztonság.
A NORD-4 a cég büszkesége és az adatközpontok építése és üzemeltetése terén szerzett sokéves tapasztalatok összeállítása, Uptime Institute Tier III tanúsítvánnyal rendelkezik egy tervezési projekthez és a Facilityhoz (azaz épített adatközponthoz), valamint mint Működési Fenntarthatóság – a srácok felelősségteljesen a lehető legjobb megközelítést alkalmazták az ügyben. Belül négy, egymástól független, hermetikus zóna található, egy-egy épületben két-két terem. Mindegyiknek megvan a maga energiaközpontja (dízel generátor készlet, akkumulátor helyiségek), hűtőkörök és tűzoltó rendszerek. Általános - optikai bemenetek (épületenként kettő van) és MMR.
Egészséges mérnök Modding
Az adatközpont bejáratánál egy számunkra már ismerős kávézó vár (na, miért ne?). Felmegyünk a megfigyelőközpontba. Most két fő van - az OST-ban és a NORD-4-ben (a NORD-1,2,3-nak is megvan a maga szolgálati műszaka). Mindegyik központból meg lehet nézni mindkét oldalt, így itt is biztosított az n+1 redundancia. A videófalon már ismerős műszerfalak, világoszöld színvilágban (természetesen jóval több paraméter található rajta, mint az állapotkijelzőn). Kicsit kommunikálunk a monitorozásról – nincs díszes Prometheus és Grafan, csak Nagios, csak hardcore és házi készítésű vizualizáció. Tíz év (de még több) használat során már számos egyedi ellenőrzést és szkriptet írtak, így valami másra való váltás szerencsejátéknak tűnik. Körülbelül havonta egyszer megjelenik egy másik cég, amely felajánlja, hogy minden problémát „gyorsan és fájdalommentesen” old meg, de valahogy mégsem sikerül. A videofal egyébként saját összeszerelésű megoldáson is működik, ami többszöröse olcsóbbnak bizonyult, mint a kereskedelmi analógok.
Helyi vezérlőközpont
Amikor évek óta tervez, épít és üzemeltet adatközpontokat, már nem fél annyira, hogy saját kezűleg csinál valamit, mintsem készen vásárol. A DataLine például nem habozik kijelenteni, hogy pusztán a méretarány miatt meglépték a hibák maximális számát, és minden új adatközpont nehéz hibák és több mint tíz éve tartó tapasztalat eredménye. . Természetesen minden új adatközpontnak megvan a maga know-how-ja, és a NORD-ban járva időnként azon kapja magát az ember, hogy azt gondolja, hogy az emberek csak csinálták és jól csinálták. Nem a mutogatás, nem a minősítések és tanúsítványok miatt – ez egy normális mérnöki folyamat, amikor minden iterációnál saját magad fölé nősz, és egyre jobb leszel. Egy külső szemlélő azt mondja, hogy ez unalmas és konzervatív, de az ügyfél éppen ellenkezőleg, a saját pénzével tartja fenn ezt a stabilitást. És ahhoz, hogy jól csináljuk, egyáltalán nem szükséges mérnöki rendszereket vagy szoftvereket vásárolni sok, sok pénzért (bár néha enélkül nem megy). A tapasztalat, a tudás és a mérnöki találékonyság gyakran dönt.
Például a NORD-4 épület 3,5 emeletes. Az első három teljes értékű, 4.5 méteres mennyezettel, ahol a turbina helyiségei találhatók. Az utolsó pedig műszaki, mindössze 1.8 méter magas, és pusztán a hűtőrendszert szolgálja. Mivel a padló műszaki jellegű, a rá vonatkozó követelmények sokkal alacsonyabbak, ami leegyszerűsítette a projektet és pénzt takarított meg.
A háromszög alakú adatközpont nézete
Maxnek van egy különleges kung fu képessége, hogy ne égjen le a fényképeken
A túrát a tetőn fejezzük be - innen remek kilátás nyílik a közeli hőerőműre és lakónegyedre, valamint a többi NORD épületre. Közülük kettő háromszög alakú. Ezen még a kollégák is nevettek, hogy „a DataLine debil, valamiért háromszög alakú adatközpontot építenek”, hogy ott háromszög alakú rackeket és háromszögszervereket telepítsenek. De semmi - építettek és sikeresen működnek, ugyanakkor hatékonyan használják a meglévő területet (ami Moszkvában, meg kell mondani, nem ingyenes). Egy másik (számomra) meglepő tény, hogy a kereskedelmi ügyfelek többsége Moszkvában szeretne elhelyezkedni. A minszki autópálya mentén félszáz kilométerre lévő helyszín (még ha minden szükséges kapacitás és kommunikáció megvan is) már senkit sem érdekel. Szóval mindenki egy nem gumiba bújik.
A hűtőtornyok már nem adatközpontok, hanem hőerőművek
Ezzel a következő utunk véget ért.
Utána még egy hosszú és eredményes beszélgetés következett a közös tervekről és a jövőbeli podcastokról (remélem nem kell sokáig várni), úgyhogy maradjatok velünk, hamarosan lesznek még érdekességek.
Nos, ha mindent a saját szemével szeretne látni, a DataLine túrára hív. Teljesen ingyenes, de előre egyeztetett időpontban. Azok, akik a „linkmeup” kódszót hívják, pluszt kapnak a karmában.
Maradjon velünk!
Forrás: will.com