🥇Kasdienybė duomenų centre: neakivaizdžios detalės per 7 veiklos metus. Ir tęsinys apie žiurkę

Iš karto pasakysiu: ta žiurkė atvežtame serveryje, kuriai prieš porą metų po elektros šoko davėme arbatos, greičiausiai pabėgo. Nes kartą matėme jos draugę ant rato. Ir iš karto nusprendėme įrengti ultragarsinius repelentus.

Dabar aplink duomenų centrą – prakeikta žemė: jokie paukščiai ant pastato nenusileis, o tikriausiai visi kurmiai ir kirminai pabėgo. Dėl to nerimavo garsas gali sukelti HDD gedimą, bet patikrinta, dažniai nėra vienodi.

Kita istorija daug linksmesnė. Kartą gavome aparatūrą už porą milijonų rublių dėžutėje su posvyrio, vibracijos ir drėgmės jutikliais. Viskas vientisa. Atsargiai nuėmė pakuotę, o geležies gabalas buvo sulenktas. Mistikas.

Kūnas tiesus lanku. Taip gražu.

Detektyvų istorija

Neteiktume tam jokios reikšmės, nes lenktas metalinis korpusas buvo kone dizaino įvaizdis. Toks gražus, be traškučių. Ir jei šalia nebūtų kitų panašių aparatūros dalių, išpakuodami net nebūtume pagalvoję, kad kažkas negerai. Bet netoliese buvo tokių pat, tik taisyklingesnės geometrinės formos.

Laimei, tokios aparatūros išpakavimas yra filmuojamas (rekomenduoju visiems įsisavinti šį įprotį), todėl galėjome įrodyti gamintojui, kad ji tokia atkeliavo. Nepažeista pakuotė ir tvarkingai išlenktas korpusas nėra judesių smūgis. Greičiausiai ji buvo sužalota dar prieš išvykdama į Rusiją.

Pardavėjas sako: „O, vaikinai, pagal garantiją tuoj pat pakeisime jį už jus“. Ir tada mūsų laukė epinė pasala.

Faktas yra tas, kad muitinė leidžia mums importuoti tokią įrangą su dokumentais be teisės eksportuoti. Tai yra, jūs galite jį atvežti, bet negalite jo perparduoti kam nors už Rusijos ribų. Kai grąžiname, pavyzdžiui, perdegusį maitinimo šaltinį, viskas aišku. Tai atsarginė dalis, maitinimo šaltinis.

Ir tada turėjau viską išsiųsti atgal:
- Vaikinai, pažiūrėkite, mes siunčiame aparatūros dalį atgal gamintojui.
- Visa įranga?
- Taip.
– Modelis toks ir toks?
- Taip.
- Ar gali dirbti?
– Nežinome, mes jo neįjungėme.
- Taigi tai yra visa įranga.
- Na, tai neveikia.
– Na, žiūrėk, visa įranga yra tokio modelio. Jokių reeksporto teisių. Mes tavęs neįleisime.

Apskritai buvo daug pritūpimų, kol supratome, kad ne eksportuojame, o grąžiname. Galų gale mums pavyko padaryti viską.

Buvo ir batų užvalkalai

Pirmiausia, prieš daugelį metų, turėjome pirmąjį automatinį – administratoriaus svajonę. Įdedate batų užvalkalų pakuotę, ji pati juos išpakuoja, atidaro ir pastato į tokią padėtį, kad tereikia užlipti. Chp-chpk ir viskas.

Maždaug po šešių mėnesių ji sukramtė apie šimtą pakelių batų užvalkalų ir užspringo. Paaiškėjo, kad judančių dalių tiek daug, kad arba reikia kartą per mėnesį taisyti savo apkrovimu (po objektą vaikšto daug klientų inžinierių, nes esame komercinis duomenų centras), arba reikia pirkti. naujas.

Antra bėda ta, kad vėliau, vieno iš eilinių valymo metu, kažkodėl radome „mėlyną skudurėlį“, kabantį ant vieno iš mūsų bandymų lentynų grotelių. Teismo medicinos ekspertas, atstovaujamas „X-Team“ inžinieriaus, nustatė batų užvalkalo korpuso fragmentą. Paaiškėjo, kad klinikoje patogu dėvėti batų užvalkalus: vaikščiojau pusvalandį ir viskas. Kai kurie inžinieriai gali dirbti su technine įranga visą dieną. Maišantis kojomis. Labai maišosi. Ir batų užvalkalai susidėvi iki šių mažų skiautelių, kurios skraido aplink turbinų salę.

Beveik iš karto nusipirkome naują batų užvalkalą. Mes paėmėme termo bagažinės dėklą: tai mašina, į kurią įkraunama plėvelė, kuri atsargiai termiškai sutraukia šią plėvelę ant bato viršaus. Gražus, efektyvus, patvarus. Mažiau išsibarstymo. Turėjome gana ilgai, bet susitraukiančią plėvelę teko keisti maždaug kartą per 1-2 valandas, nes padas buvo linkęs nukristi savaime.

Iš pradžių manėme, kad mums nepasisekė, bet žmonės kažkaip išsprendžia šią problemą. Bet ne. Paklausėme Vakarų kolegų – ta pati istorija. Dėl to jie pradėjo galvoti, kaip tai padaryti tinkamai. Grįžti iš turbinos salės naujų batų užvalkalų, atvirai kalbant, tokia mintis. Radome pramoninių valiklių statybvietėms ir pramonei. Tai kažkas panašaus į kelius, kuriais pamaina patenka į dirbtuves. Takai su krūva ritinėlių išvalo viską, o padaryti taip, kad nori nenori susigaudys ir nuvalys. Jie kainuoja nuo pusės milijono iki milijono rublių. Kasinėjome ir radome tą patį už 200 tūkst., bet koją reikia įkišti pačiam. Dydžiu jis panašus į batų poliravimo mašiną. Ateini, įkiši ten koją, ji ją kramto ir grąžina švarią. Jie padėjo jį prie įėjimo į duomenų centrą.

Tai puikiai veikia, išskyrus dvi problemas. Pirma, greitai tapo aišku, kad tai normalu mums, inžinieriams. Tačiau praktiškai į duomenų centrą pasidairyti ateina įvairūs žmonės, įskaitant ir aukščiausius didelių įmonių vadovus. Su batais iš odos iš drakono asilo. Ir net užtepti kremą ant batų, jų šepetėlis kainuoja brangiau nei mano treniruočių sportbačiai, jie specialiai atrenka šerius. Būtent jie atsisakė įkišti kojas į mūsų stebuklingą įrenginį. Antroji problema iškilo žiemą: kai batai tikrai netvarkingi, negali visko ištraukti iš gilaus protektoriaus. Tada jūs vaikštote po salę, palikdami ektoplazmos pėdsakus.

Mes nusprendėme paprastai. Šalia padėjome susuktą batų užvalkalą. Vis dėlto turime viską kopijuoti pagal standartą.

Iškilo nauja problema. Stebėdami užsakovų inžinierių elgesį, pamatėme tokį vaizdą: jie iš pradžių įsikišo kojas į mašiną valymui, o tada iš susukto batų užvalkalo kabliavo batų užvalkalus. Dabar jie iškabino ženklą, kad tai yra arba vienas, arba kitas, ir geriau valytis patiems, bet jei gyvenimo principai draudžia valytis batus, tai dėvėkite batų užvalkalus. Atrodo, kad bilietas, kuris buvo porai dienų, bet truko ilgai, buvo uždarytas. Štai įrenginys:

„ku“ du kartus

Pagal PCI DSS reikalavimus, turite sugebėti vizualiai atskirti duomenų centre esančių žmonių vaidmenis. Atidžiai nežiūrint į perėją ir ką nors ten neskaitant, o tiesiogiai vizualiai, kaip kariškiai vienas kitą atskiria pagal petnešėles, tik dar ryškiau. Nusprendėme nesipuikuoti ir panaudojome seną gerą Chatlan metodą – kelnių spalvų diferencijavimą. Tiksliau, jie pradėjo gaminti skirtingų spalvų juosteles. Mūsų administratoriai iš karto paėmė Greeną kaip savo mėgstamiausią.

Tai skamba paprastai, bet sukėlė tris netikėtus efektus:

Prireikė įtraukiklių, kad šie dėvimi būtų automatiškai įtraukiami (tai yra dalykai, kurie patys reguliuoja juostos ilgį). Surašėme techninę specifikaciją, kurioje atsižvelgėme į visus visų skyrių pageidavimus. Tai buvo strateginė klaida. Spalva, formatas, medžiaga, įtraukiklis ne plastmasinis, meškerė pagaminta iš metalo logotipui uždėti, kad būtų įsiūta į juostą. Gabalai pasirodė tokie brangūs, kad tada teko sumažinti reikalavimus ir keisti formatą.
Pradėjus veikti kelnių diferenciacijai, tapo labai patogu. Rangovai turi kai kurias juosteles, išoriniai administratoriai turi kitas, o mūsų administratoriai turi kitas. Galite pamatyti, kas turi kokį vaidmenį. Elektrai - tik pilki, kondicionieriui - mėlyni. Ir tada mums reikėjo juostelių vairuotojams (tai yra atskiras vaidmuo, jie gali patekti į iškrovimo zoną, bet negali išeiti iš jos, išskyrus lauką). Vairuotojams leidimo nereikia. Iš pradžių davėme juosteles be leidimų. Tuomet apsaugininkai nusprendė, kad tai visiškai keista ir žemina vairuotojų orumą. Jie turi savo karinę logiką, todėl dabar vairuotojai atvažiuoja gauti leidimo iš karto su kaspinu, tačiau šis leidimas neleidžia niekur vykti. Saugumo požiūriu tai pasirodo esąs žymeklis, kad saugumas patikrino šį asmenį.
Vienas iš mūsų inžinierių pasiūlė vietoj juostelės pasidaryti žalius uniforminius megztinius. Ir jis atsiuntė racionalizacijos pasiūlymą. Jie tai padarė pusiaukelėje: paliko leidimus su kaspinu, be to, iš tikrųjų pasiuvo žalius uniforminius megztinius. Dabar turime administratoriaus uniformą. Apsaugos darbuotojai pokštą palaikė ir įtraukė į nuostatus. Dabar tai privaloma (kelnės, marškiniai, megztinis, bet megztinį galima nuimti).

Mūsų klientai taip pat dažnai skųsdavosi kreivais maršrutais žemėlapiuose prieš įeidami į mūsų Compressor duomenų centrą. Įvedate adresą, bet kelias rodomas neteisingai. Lankytojai važiavo ne ta kryptimi, nes ten buvo geležinkelis, o už jo – kamštis, o ten apsisukti nebuvo kaip. Iš pradžių norėjome virš kelio pastatyti ženklus. Mieste yra tokia paslauga – po įprastais ženklais pastatykite geltonus papildomus ženklus, jie laikomi reklama. O kaina jiems – kaip reklama: Entuziastovo plente vienas ženklas per metus kainuoja milijoną rublių. Tuo pačiu metu mes parašėme „Yandex“, ir jie net staiga atsakė. Ir jie nustojo veikti. Jūs netgi galite nurodyti vartų diodus: įėjimas per vienus, išėjimas per kitus.

„Google“, jei mus skaitote, žinokite: jūs vis dar turite problemą, ir mes nežinome, kam apie tai pasakyti, kad būtume išgirsti.

Kvietimo laiškuose buvo nuorodos ne tik į adresą, bet ir į adresą su maršrutu, pagrįstu vartotojo geografine vieta. Dėl to pralaimėjimų buvo mažiau.

Gobo projektoriai ir kiti smulkūs daiktai

Ar žinote, kas yra gobo projektoriai? Mes irgi nežinojome. Kažkaip galvojome, kaip pažymėti stelažų eiles. Patys stelažai, žinoma, yra pažymėti specialiais greito atjungimo ženklais, tačiau jie matomi iš 1-2 metrų atstumo. Pati salė yra 500 kv.m., tad vietos pasiklysti ten yra pakankamai. Todėl pagaliau pradėjome žymėti eilutes. Prasidėjo protų šturmas. Kaip pažymėti, kuo ir kur? Ant grindų, ant sienos, iškabos ant lubų ir t.t. Ir tada mūsų kolega pamatė, kad „Ikea“ kažkada buvo lipdukai, kurie nusidėvi ant grindų, o tada atsirado šviesios rodyklės. Na, mes nusprendėme tai pakeisti paprastu būdu: eikite į Ikea ir išverskite vieną iš projektorių pažiūrėti. Negalėjome gauti: kol nešėme kėdes, pardavėja paklausė, ką mes darome. Ir jis iškart padėjo, sakydamas, kad tai gobas. Pasirodo, tai ne pats projektorius, o plokštelė ar objektyvas spalvotam vaizdui. Šis filtras yra gobo. Vienas projektorius kainuoja nuo 40 tūkstančių rublių (yra galinga lempa, skirta naudoti dieną), o keturiose mašinų patalpose turime po 14 eilių. Todėl ant jo klijuojame lipdukus.

Taip pat turime diagramas ant sienų, kurios bėgant metams blunka. Juos keitėme į laminuotus, su specialiomis „įsiūtomis“ kišenėmis auditoriams. Mūsų atveju inspektorius yra vyriausiasis inžinierius, kurio pareigos apima visų duomenų centre esančių schemų tinkamumo tikrinimą. Taigi, visos schemos turi būti kasmet tikrinamos ir tokio auditoriaus pasirašytos. O specialaus mažo žurnalo buvimas diagramos kišenėje palengvina šią procedūrą ir nereikalauja pačios diagramos keisti kas trejus metus. Pelnas!

Lauke atlikome rotacinį pakeltų grindų valymą. Mes reguliariai valome, turime valymo būdus ir laiką. Tačiau sunkių stelažų ratai palieka žymes. Mes atlikome valymą. Dabar nerimaujame: neatrodo daug tvarkingiau, bet tam tikriems žmonėms, na, turintiems savo skoniui atitinkančius flomasterius, atsirado akcentai iš tam tikrų kampų. Dabar apie tai galvojame ir ieškome kažkokios chemijos, kuri išbalintų grindis ir suteiks blizgesio. Kad net ir išrinktiesiems nekiltų klausimų.

Ar matėte konsolės stovus? Tai tarsi keliaujantys švediško stalo stalai, tačiau vietoj gėrimų yra terminalas, skirtas prisijungti prie stovo. Taigi, ant šių konsolinių stelažų ratai nukrenta ir stringa, kaip vežimėliai prekybos centre. Esame nepaprastai pavargę. Dėl to vienintelis įmanomas būdas jį atgaivinti – įsigyti naują ratą. Bet jau nebebuvo įmanoma gauti ratų specialiai mūsų modeliams, apklausėme visus rangovus. Todėl stelažą sukūrėme patys, daugiausia dėmesio skirdami judėjimo patogumui mašinų skyriuje ir priežiūrai. Labai gerai pavyko.

Buvo istorija su sintetinėmis kojinėmis. Yra toks dalykas – antistatinės apyrankės. Tai yra tada, kai eini prie stovo, prijungi apyrankę prie stelažo žemės ir ji susisiekia su potencialų išlyginimo sistema. Taigi, stovas yra įžemintas, bet gali pasirodyti, kad inžinierius neįžemintas. Kolegos iš ankstesnių darbo vietų pasakojo, kaip porą kartų matė vaizdo stebėjimo kibirkštis, o mes iš nuodėmės nusprendėme įpareigoti visus tuo naudotis tiesiogiai pagal reglamentą.

Kritiniai incidentai

Kalbant rimčiau, buvo situacija, kai visi aušintuvai buvo išjungti iš karto. Mūsų aušintuvai nėra apsaugoti UPS, nes mes tikime fizika, o kaip temperatūros rezervą turime šalto vandens baseiną. Jei kas nors užgestų, jums reikia ne akumuliatorių, kad maitintų vandenį aušinančius aušintuvus, o tiesiog paties šalto vandens, jau paruošto. Patogu ir paprasta, bet yra niuansas. Aušintuvuose sumontuota automatinė saugos įranga, kuri juos išjungia esant pavojingiems elektros tinklo parametrams. Jei įėjimas išjungtas, įjungiame dyzelinio generatoriaus komplektą, o tada iš jų maitinami aušintuvai. Viskas būtų gerai, jei negyventume Rusijoje. Daug kartų turėjome tinklo nutrūkimų, bet viskas buvo gerai. Tačiau vieną dieną įvyko staigus šuolis, iš pradžių žemyn, paskui staigiai aukštyn, paskui vėl žemyn – per kelias sekundes įvesties parametrai pasikeitė apie 4 kartus. Žinoma, aušintuvai buvo išjungti. Pirmiausia bandėme juos įjungti nuotoliniu būdu, bet jie apsisaugodavo labai patikimai, tarsi avariniu atveju. Pamaina turėjo vaikščioti užsidėjusi kojas ant stogo ir jas įjungti rankiniu būdu. Svarbu tai, kad pagal TierIII standartą tokia situacija yra teisėta priežastis uždaryti duomenų centrą. Neturėjome sustojimo, nes žmonės yra ant žemės su galva, o yra treniruotės su pratimais. Dėl to vartotojo sąsaja tiesiog reguliariai mus pakliuvo, kad įsitikintume, jog TIII veikia. Jei ką, mes perdavėme vartotojo sąsajos sertifikatą TIII Gold – Operational Sustainability. Rusijos komercinėje duomenų centrų rinkoje nėra nieko šaunesnio, išskyrus mūsų, tik vienas turi tokį patį pasiekimą Duomenų centras. Atkreipiu dėmesį, kad pakartotinis sertifikavimas yra sunkesnis nei gauti sertifikatą nuo nulio, nes jie patikrina ankstesnį laikotarpį taip, tarsi jūs nesate savimi, ir reikia daug daugiau įrodymų.

Įdomus incidentas įvyko su kameromis. Nusprendėme bet kuriuo atveju perskaičiuoti akląsias zonas, nubrėžėme sankryžas, plane nubraižėme žiūrėjimo kampų įstrižaines ir staiga vienos salės centre radome apie 30 centimetrų x 15 metrų akląją zoną. Siauras ir ilgas. Kitame kambaryje tokio dalyko nėra. Paaiškėjo, kad besisukanti kamera bėgant metams lėtai pajudėjo taip, kad ėmė rodyti apie pusantro laipsnio į kairę, nei turėtų būti kraštutinėje padėtyje.

Pašte buvo dar vienas didelis incidentas apie DDIBP remontinį pakeitimą.