Ekskursija zaļajos toņos

Vislētākā transporta problēma Pēterburgā ir tilti. NaktÄ« no tiem jāiznāk no kafejnÄ«cas, nesamaksājot par alu. Nu vai arÄ« jāmaksā taksÄ« par divreiz lielāku summu nekā parasti. No rÄ«ta – kārtÄ«gi aprēķināt laiku, lai, tiklÄ«dz tilts tiek nolikts, bÅ«tu kā veikls mangusts uz dzelzceļa staciju. Variants "nakŔņot kaut kur centrā, blakus stacijai" netiek apspriests kā ideoloÄ£iski kaitÄ«gs.

ā€žSapsansā€, kas pamet 5:30, tika izdomāts, lai izrādÄ«tu naidu pret pÅ«cēm. Protams, ir ļoti ērti nonākt Maskavā pulksten deviņos no rÄ«ta, un Pēterburgā ir neticami skaisti balto naktÄ«s, bet pulksten puspiecos, kad iekāpu taksÄ«, gribējās pagriezt galvu par 270 grādiem tam dziedātājam, kurÅ” izdomāja Å”o rÄ«ta vilcienu.

Ekskursija zaļajos toņos

ā€žVisi labi datacentri ir lÄ«dzÄ«gi cits citamā€ — domāju, kad uzzināju, ka mÅ«s ciemos aicina puiÅ”i no DataLine.

IzrādÄ«jās, ka katrs datacentrs ir labs (vai slikts) mazliet savā veidā, Ä«paÅ”i, kad esi dabÅ«jis sitienus, savācis visus lāpstas apkārt un iemācÄ«jies mācÄ«bas no savām (un, nedaudz, sveŔām) bagātās pieredzes. Tādēļ mēs (piecu vadoÅ”o linkmeup un pievienojuÅ”os draugu un lÄ«dzjÅ«tēju sastāvā) nolēmām pārbaudÄ«t, cik labi (vai ne ļoti) ir datacentri OST un NORD.

GÅ«t mazliet darba ceļā (Å”eit varētu bÅ«t viena mobilā operatora reklāma, bet nē — pokrājumi kā bija sliktie, tādi arÄ« palikuÅ”i), izlādējamies Leningradas stacijā. Nu, vismaz ne pie Gazmanova.

Savu ekskursiju pa "salatÄ«go" datacentriem sākām ar OST — "to paÅ”u", kas nesen "dega". Kāpēc pēdiņās — vēlāk. Bet pagaidām — stāvam, smēķējam, gaidām kavētājus. Fotografējam RT biroju kaimiņos. Å im kaimiņam ir daudz smieklÄ«gu stāstu — sākot no svaiga asfalta ieklāŔanas un ietves apgleznoÅ”anas pirms Augsto Personu ieraÅ”anās, un beidzot ar atlaidēm tuvās kafejnÄ«cās, kuras datalayem viņi piedāvāja lÄ«dzÄ«bas dēļ ar identifikatoriem.

Ekskursija zaļajos toņos
Totalitāras propagandas megafons

Ekskursija zaļajos toņos
Datacentrs stingrā (piekļuves) režīmā

Ieejas karte, uzvedÄ«bas noteikumi, gaļasmaŔīna uz ieejas — gandrÄ«z tādu paÅ”u mēs redzējām izbraucot ekskursijā uz Linxdatacenter. Cik daudz kafijas veikali jÅ«s esat redzējuÅ”i datu centros? Mēs, piemēram, tagad zinām divus. Darbiniekiem un klientiem uz identifikācijas kartēm ir Ā«kafijasĀ» depozÄ«ti, kas regulāri tiek papildināti. Tādēļ saprātÄ«gās robežās kafiju var iegÅ«t pilnÄ«gi bez maksas. MÅ«s, kā dārgus ciemiņus, arÄ« piepildÄ«ja ar kafiju.

Par kafiju nevaru teikt neko sliktu — pavisam parasta Ā«tÄ«klaĀ» kafejnÄ«ca, taču tās atraÅ”anās vieta netieÅ”i pievilina, bet interjers ir tieÅ”i labākajās mÅ«sdienu tradÄ«cijās.

Ekskursija zaļajos toņos
Vietējās kafejnīcas interjers

Ekskursija zaļajos toņos
Uz fotogrāfijām datu centri NORD

Ekskursija sākas ar biroju. Papildus vispazīstamākajām uzrakstiem uz sienām un balti zaļajai krāsu gammai ir arī visādas jautras lietas. Tas ir rekvizīts, kas palicis no korporatīvā teātra izrādēm (jūs varat iedomāties tehnisko direktoru, kas spēlē izrādē? Mēs viņu personīgi pazīstam.).

Ekskursija zaļajos toņos
Un taisnība

Ekskursija zaļajos toņos
Fotogrāfijas no izrādēm

Datu centrs (precÄ«zāk sakot, četri datu centri) atrodas industriālo ēku kompleksā, kas uzbÅ«vēts jau pagājuŔā gadsimtā (toreiz — Ā«CitroĆ«nĀ» fabrika, bet padomju laikos — Ā«HidropiedziņaĀ» rÅ«pnÄ«ca), tādēļ no vienas puses — Å”eit ir stingrs industrials, metāla sijas, loft atmosfēra un dažādu laikmetu industriālie artefakti, kurus joprojām atrod, veicot dažādus darbus. No otras puses — datu centra hermozonas ir jāiekļauj esoÅ”ajās konstrukcijās un periodiski jāiet uz kompromisiem ar realitāti. Tomēr es teiktu, ka Å”ie kompromisi nekādā ziņā nav ietekmējuÅ”i kvalitāti — bet puiÅ”iem, noteikti, nācās piepÅ«lēties projektēŔanas procesā. Baumo, ka kaut kur tuvumā iet Metro-2, bet tas nav precÄ«zi.

Ekskursija zaļajos toņos
Papildus teātrim Å”eit ir arÄ« savu muzejs. EkspozÄ«cijas, protams, — arheoloÄ£iskie atradumi

Pāris vārdu par uguniJā, ēka (precÄ«zāk, jumts) tieŔām dega. Cieta ārējie dzesēŔanas sistēmu bloki un aukstuma caurules. Kaut kur izdega vadi un gaisa kondicionieri palika bez elektrÄ«bas. Kaut kur uzsprāga freonu caurules. Taču neskatoties uz to, hermozonas izturēja tonnām uz tām izlieta Å«dens, aprÄ«kojums izdzÄ«voja. AtjaunoÅ”anu organizēja "Å”tābs" augstākā vadÄ«bā, visi kopā — iztÄ«rÄ«ja visas varÅ”caurules Maskavā un apkārtnē (pat piegādāja naktÄ« uz BMW X5) un visus skaidrās prātā esoÅ”os uzstādÄ«tājus. Kritiskais aprÄ«kojums no cietuÅ”ajiem datu centros (cietuÅ”ajiem no aukstuma trÅ«kuma, nevis no uguns!) operatÄ«vi tika pārcelts uz citām zālēm, tāpēc jau piecos no rÄ«ta tika atjaunotas ne tikai visas savas pakalpojumi, bet arÄ« klienti.

Mēs personÄ«gi pārbaudÄ«jām to zāli, kas visvairāk "cieta" — izņemot deguma smaku un nomainÄ«tām piegrieztēm paklājā, ugunsgrēku vispār nekas neatsvēra (izņemot stendus ar aprÄ«kojumu, kas "uz laiku" tika pārvietoti uz citu datu centru, un tur arÄ« palika).

Ekskursija zaļajos toņos
Statusa paneļa

Pastaigājoties pa koridoriem, redzam skārienekrānu ar kaut ko, kas ļoti atgādina datu centra maŔīnu zāļu shēmu. Tas ir statusa panelis. To ir diezgan daudz pāri koridoriem, un tie ļauj inženieriem uz vietas ātri atrast, piemēram, nepiecieÅ”amo gaisa kondicionieri, kā arÄ« vienkārÅ”i sniedz paÅ”reizējo statusu.

Uzraudzība balstās uz Nagios (Ŕobrīd jau vairāki neatkarīgi klasteri) un aptver visus datu centrus (gan OST, gan NORD). Papildus ir lietotnes Android un iOS (klientiem un darbiniekiem), kā arī statusa lapa tieŔi mājaslapā.

Ekrānā pamanÄ«ju neparasti augstu PUE — ne visur Krievijā to pieņemts skaitÄ«t, taču 1.90 ir diezgan daudz. Atbilde uz to ir izteikti ekonomiska — 2012.-2013. gados stendi datu centros tika pārdoti kā karstie pÄ«rāgi, tāpēc nebija laika jÅ«smot un domāt par energoefektivitāti. Mēs uzstādām to, kas ir tirgÅ«, darām maksimāli ātri un nerÅ«pējamies par Å”iem jÅ«su PUE vispār, jo kāpēc lai to darÄ«tu? Vēl projektēŔanas stadijā tiek izpirkti 80-90% stendu, bet likumdoÅ”ana Krievijā par energoefektivitāti neko negrib zināt. Taču kāda komisija Amsterdamā noteikti uztraucos par tādām cipariem.

Neko personīgu. Tikai bizness.

Ekskursija zaļajos toņos

Vēl viena iezÄ«me ir datu centru apzÄ«mējumi. Katrā vietā datu centri papildus "oficiālajai" ciparu-un-burta kodēŔanai ir arÄ« "cilvēciskie" pseidonÄ«mi no jÅ«ras alfabēta (Alfa-Bravo-Čārlija-Deltā…). Kaut kādā veidā visiem klientiem patÄ«k zÄ«mols Whiskey.

Ekskursija zaļajos toņos
Klientu apkalpoŔanā nav sīku lietu.

Ekskursija zaļajos toņos
Tādi "žogi" tiek uzstādÄ«ti dažiem klientiem. Mums maŔīnu zālēs filmēt nebija atļauts, tāpēc DataLine Ā© foto.

DataLine klienti ir tikai lielas un cienÄ«jamas kompānijas, viņi ļoti nepatÄ«k, kad fotografē viņu aprÄ«kojumu. It Ä«paÅ”i, ja klienta nosaukums (vai logs) ir rakstÄ«ts lieliem burtiem tieÅ”i uz stenda. Nevaram teikt, ka viņi to mÄ«l — un tas ir viss. Tādēļ mēs filmējām jau slavenas sienas ar dažādiem uzrakstiem un inženieru telpas. ArÄ« inženieru telpas nav atļauts fotografēt visur un visu, bet mēs centāmies. Tā kā klientu vidÅ« ir lielas un cienÄ«jamas kompānijas, viņiem mēdz bÅ«t specifiskas prasÄ«bas — Ä«paÅ”i stendi (vai vispār kādas super gludās krātuves no vairākiem pārdevējiem), savi žogi, savas kontroles sistēmas, sava videonovēroÅ”ana un ātras reaģēŔanas grupa ar ieročiem. Kopumā, viens no neoficiālajiem (un oficiālajiem) DataLine noteikumiem ir rÅ«pēties par klientu un darÄ«t viņam labu. Sākot no vestēm un aprÄ«kotām darba vietām ar piekļuvi internetam un uzlādes iekārtām, un beidzot ar dažādiem pasākumiem klientiem. Pēdējie ir ļoti noderÄ«gi arÄ« no tā viedokļa, ka tie paÅ”i cilvēki, pārejot no uzņēmuma uz uzņēmumu, ved viņus uz DataLine. Tādēļ, ka Å”eit viss ir ērti, komfortabli un uzticami. DataLine bizness ir ne tikai stenda vietu noma. Tas ir arÄ« mākoņpakalpojums, kas ir sertificēts gan pēc 152-FZ, gan pēc PCI-DSS (mēs plānojam veidot par to podkāstu, sekojiet lÄ«dzi paziņojumiem), kā arÄ« saziņas nodroÅ”ināŔana (mÅ«su Ŕķiedras starp vietām un no katras vietas uz M9, mÅ«su optiskais gredzens pa pilsētu, un tā lÄ«dz pat pēdējā jÅ«dze lÄ«dz klienta birojam).

Ekskursija zaļajos toņos
M — motivācija.

Runājot par uzrakstiem — idejas nāk ne tikai no darbiniekiem, bet arÄ« no partneriem un klientiem, pēc tam par vislabākajām var nobalsot. oficiālajā lapā DataLine FB. Un arÄ« tur var piedāvāt savu ideju.

Ekskursija zaļajos toņos
TikŔanās pie Elbas.

Ekskursija zaļajos toņos
Kross fotogrāfija nodroŔināta ar DataLine kompāniju.

Apstājamies pie Meet-Me-Room, kur atrodas operatori. MMR (to ir trÄ«s pāri OST, pēc optiskajiem ievadiem, aktÄ«vai un pasÄ«vai) tiek savienoti visi pieslēgumi no datu centriem. Krustojums viss ir garlaicÄ«gi un kārtÄ«gi. Taču tur, kur atrodas operatoru aktÄ«vs, atceramies labākos gadus un kadrus no kādas BM18: nÅ«jas no vadiem un dažādas iekārtas (D-Link, Extreme, Juniper, Mikrotik... un tā lÄ«dz ASR9k). Å eit ir vairāk par pus simtu operatoru, tāpēc viss ir krāsains. No MMR optika un vara izplatās pa maŔīnu zālēm. Minimums divas trases uz katru (iespējamas variācijas), tāpēc par pieslēguma uzticamÄ«bu var neuztraukties. MMR saucas "Elba", kas ir ļoti smalki.

Ekskursija zaļajos toņos
IBM Power n-der?

Vēl viena atradze — tas ir IBM P-sērija, kuru ne reizi nav ieslēguÅ”i, un tas jau vairākus gadus stāv vienā no gaiteņiem. MaŔīnu (kopā ar lentu bibliotēku un krātuvi) pasÅ«tÄ«ja viens no klientiem, bet "nepienācās", tāpēc to uzdāvināja datu centram. KopÅ” tā laika tas stāv.

DroÅ”i vien labi bÅ«t bagātiem puiÅ”iem un darÄ«t tādus ziedojumus, jā? (Bet varbÅ«t nemaz nepiedzÄ«voja, bet aizmirsās. Vai zaudēja kārtÄ«s. Bet jau sen stāv.)

Ekskursija zaļajos toņos
Tāds skaistulis stāv pie NORD-4

Ejot uz enerÄ£ijas centru — trÄ«s (vai pat četri) DGU uz katru Datu centru (jāpiezÄ«mē, ka OST ir četri). DÄ«zeļdzinējs sasniedz pilnu jaudu 30-40 sekunžu laikā un dod 1900 kVA. Rezervācija N+1, sinhronizācija un citas lietas — komplektā. Visilgākais laiks sēdēŔanai uz dÄ«zeļiem OST — 12 stundas. NORD — 2,5 dienas (galu galā 85 tonnu uzglabāŔana nav tik vienkārÅ”a).

Protams, ir lÄ«gumi ar dažādām degvielas kompānijām par degvielas piegādi. PārslēgÅ”anās uz dÄ«zeļdegvielu notiek regulāri, tāpēc gan degviela patērējas, gan lÄ«gumi tiek pārbaudÄ«ti. Starp citu, pēc kolēģu vārdiem, NORD, testējot DGU, kas parasti ilgst ne vienu stundu, vietā, kur izplÅ«st karstais gaiss no dÄ«zeļdzinējiem, pat ziemā paspēj izzaļot zāle.

Pēc Ä«sa uzkodu pārtraukuma jau zināmā kafijas mājā dodamies uz NORD laukumu. Tas arÄ« nav viens datu centrs, bet četri neatkarÄ«gi ēkas vienā teritorijā. Katram ir savi elektropievadi, savi dÄ«zeļdzinēji un savs dzesēŔanas sistēma. NORD-1 un NORD-2 ir izturējuÅ”i Uptime Institute M&O auditu. Visjaunākais (un vislabākais DataLine datu centrs) — NORD-4, tāpēc dodamies tieÅ”i Å”eit.

Neskatoties uz lielo datu centru skaitu Maskavā, joprojām tiek novērots trÅ«kums. Protams, vienu vai divas stelles jums bez problēmām piegādās. Pat divdesmit varēs dabÅ«t. Vairāk — jau ir jautājums (bet DataLine klientiem ar tādām vajadzÄ«bām — nav neviens, ne divi). Konkrēti NORD-4 brÄ«va vieta (pagaidām) ir, jo viens liels klients pārcēlās uz savu jauniem uzcelto datu centru, bet citās vietās var gadÄ«ties, ka tā neveiksies. Tomēr patlaban notiek NORD-5 projektēŔana, kuru sola atklāt 2020. gada sākumā.

Bet atgriezÄ«simies pie mÅ«su ekskursijas. Tā kā braucām ar maŔīnu, mÅ«s laida cauri vārtiem, kur mÅ«s ņēma mērÄ·Ä« automāti, mÅ«su maŔīnas numuru salÄ«dzināja ar pieteikumu, un visus pasažierus lÅ«dza izkāpt, lai saņemtu atļaujas (protams, pēc pases). Jo B — droŔība.

NORD-4 ir uzņēmuma lepnums un vairāku gadu pieredzes apkopojums datu centru bÅ«vē un ekspluatācijā, tam ir Uptime Institute Tier III sertifikāti dizaina projektam un objektam (t.i., uzceltais datu centrs), kā arÄ« Operāciju ilgtspējai — puiÅ”i pie darba ir piegājuÅ”i maksimāli atbildÄ«gi. IekŔā ir četras neatkarÄ«gas hermētiskās zonas, katrā pa diviem zālēm vienā ēkā. Katram ir sava enerÄ£ijas centrā (DGU, akumulatoru telpas) dzesēŔanas kontÅ«ri un ugunsdzēsÄ«bas sistēmas. Kopējais — optikas ievadi (to ir divi uz ēku) un MMR.

Ekskursija zaļajos toņos

Ekskursija zaļajos toņos
Veselīga inženiera modifikācija

Ieejot datu centrā mÅ«s sagaida jau pazÄ«stamā kafejnÄ«ca (nu, kāpēc gan ne?). Pacelamies uz uzraudzÄ«bas centru. Galvenie paÅ”laik ir divi — OST un NORD-4 (NORD-1, 2, 3 arÄ« ir savi dežūrējoÅ”ie). No katra centra var vērot abas platformas, tā kā pat Å”eit ir nodroÅ”ināta redundancy n+1. Uz videostenda — jau pazÄ«stamie mÅ«su dashboardi zaļā gammā (parametru tur, protams, ir krietni vairāk, nekā uz statusa displeja). Nedaudz sarunājamies par uzraudzÄ«bu — nekādu modernu Prometeus un Grafana, tikai Nagios, tikai hardkors un paÅ”rakstÄ«ta vizualizācija. Pēdējo desmit gadu (pat, patiesÄ«bā, pat vairāk) laikā ir uzrakstÄ«tas jau neskaitāmas individuālās pārbaudes un skripti, tāpēc pāriet uz kaut ko citu Ŕķiet kā noteikta avantÅ«ra. Aptuveni reizi mēnesÄ« parādās nākamā kompānija, kas piedāvā "ātri un bez sāpēm" atrisināt visas problēmas, bet pagaidām tas tomēr nav izdevies. Videostends, starp citu, arÄ« darbojas uz paÅ”izveidotā risinājuma, kas izrādÄ«jās vairākas reizes lētāks par komerciālajiem analogiem.

Ekskursija zaļajos toņos
Å ejienes CUPS

Kad daudzu gadu garumā projektē, bÅ«vē un ekspluatē datu centrus, tad vairs nebaidies darÄ«t kaut ko pats, bet neiegādāties gatavu. DataLine, piemēram, nebaidās teikt, ka viņi, tikai pateicoties mērogam, ir uzdÅ«ruÅ”ies maksimālajam skaitam grābekļu, un katrs jaunais Datu centrs ir grÅ«tÄ«bu un pieredzes bērns, kas jau pārsniedz desmit gadu robežu. Protams, katrā jaunajā Datu centrā ir savi jauninājumi, un, pastaigājoties pa NORD, tu bieži vien noÄ·er sevi pie domas, ka cilvēki vienkārÅ”i paņēma un izdarÄ«ja labi. Nevis prāta dēļ, ne arÄ« reitingu un sertifikātu dēļ — parasts inženieru process, kad katrā iterācijā tu attÄ«sties un kļūsti aizvien labāks. Ārējais novērotājs teiks, ka tas ir garlaicÄ«gi un konservatÄ«vi, bet klients, pretēji, atbalsta Ŕādu stabilitāti ar savām finansēm. Un, lai izdarÄ«tu labi, nemaz nav obligāti iegādāties inženieru sistēmas vai programmatÅ«ru par daudz, daudz naudas (lai gan bez tā, dažreiz, nemaz nav iespējams). Bieži vien izŔķiroÅ”ais ir pieredze, zināŔanas un inženieru radoÅ”ums.

Piemēram, ēka NORD-4 sastāv no 3,5 stāviem. Pirmie trÄ«s – pilnvērtÄ«gi, ar griestiem 4,5 metru augstumā, kur atrodas maŔīnu zāles. Savukārt pēdējais – tehniskais – ir tikai 1,8 metru augsts un ir veltÄ«ts tÄ«ri dzesēŔanas sistēmai. Tā kā stāvs ir tehniskais, prasÄ«bas tam ir ievērojami zemākas, kas ļāva vienkārÅ”ot projektu un ietaupÄ«t lÄ«dzekļus.

Ekskursija zaļajos toņos
Skats uz trīsstūraino datu centru

Ekskursija zaļajos toņos
Maksam ir īpaŔs kung-fu, kā neizskatīties fotogrāfijās

Noslēdzam ekskursiju uz jumta – no Å”ejienes paveras lielisks skats uz blakus esoÅ”o TEC un dzÄ«vojamo apbÅ«vi, kā arÄ« uz citām NORD ēkām. Divas no tām ir trÄ«sstÅ«rainas. Par Å”o iemeslu kolēģi pat smējās, sakot, ka "DataLine – idiots, bÅ«vē trÄ«sstÅ«rainu datu centru" lai tur novietotu trÄ«sstÅ«rveida plauktus un trÄ«sstÅ«rveida serverus. Bet nekas – uzbÅ«vēja un veiksmÄ«gi ekspluatē, kā arÄ« efektÄ«vi izmanto esoÅ”o teritoriju (kas Maskavā, jāsaka, nav bez maksas). Vēl viens pārsteidzoÅ”s fakts – lielākā daļa komerciālo klientu vēlas izvietoties tieÅ”i Maskavā. Lokācija pusotru simtu kilometru attālumā pa Minskas Å”oseju (pat ja ir visas nepiecieÅ”amās jaudas un komunikācijas) vairs nevienu neinteresē. Tāpēc visi saspiesti vienuviet.

Ekskursija zaļajos toņos
GrandÄ«ri – tas jau nav datu centrs, bet TEC

Uz Ŕo mūsu nākamo ceļojumu ir pienācis gals.

Pēc tam sekoja garas un produktīvas sarunas par kopējiem plāniem un nākotnes podkāstiem (cerams, nebūs jāja gaidīt ilgi), tāpēc sekojiet jaunumiem, drīz būs vēl interesantāk.

Bet tiem, kas vēlas redzēt visu ar savām acÄ«m, DataLine aicina uz ekskursiju. PilnÄ«gi bez maksas, bet ar iepriekŔēju rezervāciju. Tam, kurÅ” nosauks slepeno vārdu "linkmeup" – bonuss karmā.

Sekojiet līdzi!

Avots: habr.com

Iegādājieties uzticamu tÄ«mekļa hostingu ar DDoS aizsardzÄ«bu, VPS VDS serveriem šŸ”„ Iegādājieties uzticamu tÄ«mekļa hostingu ar DDoS aizsardzÄ«bu, VPS VDS serveriem | ProHoster