Datu centra ikdiena: nepārprotami sīkumi 7 darbības gados. Un turpinājums par žurku

Datu centra ikdiena: nepārprotami sīkumi 7 darbības gados. Un turpinājums par žurku

Teikšu uzreiz: tā žurka atvestajā serverī, kurai pirms pāris gadiem iedevām tēju pēc elektrošoka, visticamāk, aizbēga. Jo mēs reiz redzējām viņas draugu uz apļa. Un mēs uzreiz nolēmām uzstādīt ultraskaņas repellerus.

Tagad ap datu centru ir nolādēta zeme: neviens putns uz ēkas nenolaidīsies, un, iespējams, visi kurmji un tārpi ir izbēguši. Bija noraizējies par to skaņas var izraisīt HDD kļūmi, bet pārbaudīts, frekvences nav vienādas.

Nākamais stāsts ir daudz jautrāks. Kādreiz saņēmām aparatūru par pāris miljoniem rubļu kastītē ar slīpuma, vibrācijas un mitruma sensoriem. Viss ir vesels. Uzmanīgi noņēma iepakojumu, un dzelzs gabals bija saliekts. Mistiķis.

Ķermenis ir taisns lokā. Tik skaisti.

Detektīvu stāsts

Mēs tam nepiešķirtu nekādu nozīmi, jo izliektais metāla korpuss bija gandrīz vai dizaina tēls. Tik skaista, bez čipsiem. Un, ja tuvumā nebūtu citu līdzīgu aparatūras vienību, mēs, izpakojot, pat nebūtu domājuši, ka kaut kas nav kārtībā. Bet turpat blakus bija tādi paši, tikai ar regulārāku ģeometrisku formu.

Par laimi šādas aparatūras izpakošana tiek nofilmēta (iesaku visiem iejusties šajā ieradumā), tāpēc varējām pierādīt ražotājam, ka tā sanāca. Neskarts iepakojums un glīti saliekts korpuss nav kustinātāju trieciens. Visticamāk, viņa bija ievainota vēl pirms došanās uz Krieviju.

Pārdevējs saka: "Ah, puiši, nekavējoties nomainīsim to jūsu vietā saskaņā ar garantiju." Un tad mūs sagaidīja episkā slazds.

Fakts ir tāds, ka muita ļauj mums ievest šādas iekārtas ar dokumentiem bez eksporta tiesībām. Tas ir, jūs varat to atvest, bet jūs nevarat to pārdot tālāk kādam ārpus Krievijas. Kad, piemēram, nosūtām atpakaļ izdegušu barošanas bloku, viss ir skaidrs. Šī ir rezerves daļa, barošanas avots.

Un tad man viss bija jānosūta atpakaļ:
- Puiši, paskatieties, mēs nosūtām aparatūru atpakaļ ražotājam.
- Viss aprīkojums?
- Jā.
— Modeli tādu un tādu?
- Jā.
- Var strādāt?
— Mēs nezinām, mēs to neieslēdzām.
- Tātad šī ir vesela iekārta.
- Nu, tas nedarbojas.
- Nu, paskaties, viss aprīkojums ir no šī modeļa. Nav reeksporta tiesību. Mēs tevi nelaidīsim iekšā.

Vispār bija liela ķepurošanās, pirms izdomājām, ka neeksportējam, bet atdodam. Galu galā mums viss izdevās.

Bija arī apavu pārvalki

Pirmkārt, pirms daudziem gadiem mums bija pirmā automātiskā, administratora sapnis. Jūs ievietojat tur apavu pārvalku paku, tas pats tos izpako, atver un noliek tādā stāvoklī, ka jums vienkārši jāuzkāpj uz tiem. Chp-chpk un darīts.

Pēc apmēram sešiem mēnešiem viņa sakošļāja apmēram simts apavu pārvalku pakas un aizrījās. Izrādījās, ka kustīgo detaļu ir tik daudz, ka vai nu jāremontē reizi mēnesī pie savas slodzes (mums pa objektu staigā daudz klientu inženieru, jo esam komerciāls datu centrs), vai arī jāpērk. jaunu.

Otra problēma ir tā, ka vēlāk, vienā no regulārajām tīrīšanām, mēs kaut kā atradām "mazu zilu lupatiņu", kas karājās uz viena no mūsu testēšanas plauktiem. Tiesu medicīnas eksperts, kuru pārstāvēja X-Team inženieris, identificēja apavu pārvalka korpusa fragmentu. Izrādījās, ka klīnikā bija ērti valkāt apavu pārvalkus: es pastaigājos pusstundu, un tas arī viss. Un daži inženieri var strādāt ar aparatūru visu dienu. Sajaucot kājas. Daudz jauktas. Un apavu pārvalki nolietojas šajās mazajās drumstalās, kas lido pa turbīnu zāli.

Gandrīz uzreiz nopirkām jaunu apavu pārvalku. Mēs paņēmām termozābaku futrāli: šī ir iekārta, kurā tiek ielādēta plēve, un tā rūpīgi termiski sarauj šo plēvi uz kurpes. Skaista, efektīva, izturīga. Mazāka izkliede. Mums tā bija diezgan ilgu laiku, bet saraušanās plēvi nācās mainīt apmēram reizi 1-2 stundās, jo zole mēdza nokrist pati.

Sākumā domājām, ka mums nav paveicies, bet cilvēki kaut kā atrisina šo problēmu. Bet nē. Jautājām Rietumu kolēģiem – tas pats stāsts. Rezultātā viņi sāka domāt, kā to normāli izdarīt. Atgriezties no turbīnu zāles pēc jauniem apavu pārvalkiem, atklāti sakot, tā ir ideja. Mēs atradām rūpnieciskos tīrīšanas līdzekļus būvlaukumiem un rūpniecībai. Tie ir kaut kas līdzīgs celiņiem, pa kuriem maiņa ienāk darbnīcā. Taciņas ar rullīšu kaudzi visu iztīra, un ir veidotas tā, lai gribot negribot aizķersies un notīrīs. Tie maksā no pusmiljona līdz miljonam rubļu. Rakāmies apkārt un atradām tādu pašu par 200 tūkstošiem, bet kāja jāliek pašam. Pēc izmēra tas ir līdzīgs apavu pulēšanas mašīnai. Tu nāc klāt, iebāz tur kāju, viņa to sakošļā un atdod tīru. Viņi to novietoja pie datu centra ieejas.

Tas darbojas lieliski, izņemot divas problēmas. Pirmais ir tas, ka ātri kļuva skaidrs, ka mums, inženieriem, tas ir normāli. Taču praksē uz datu centru paskatīties nāk dažādi cilvēki, arī lielu uzņēmumu augstākā līmeņa vadītāji. Ar kurpēm no ādas no pūķa dupša. Un pat krēma uzklāšanai uz apaviem to otiņa maksā vairāk nekā manas treniņu kedas, tās speciāli atlasa sariņus. Tieši viņi atteicās likt kājas mūsu brīnumierīcē. Otra problēma radās ziemā: kad apavi ir ļoti nekārtīgi, tie nevar visu dabūt ārā no dziļā protektora. Tad jūs staigājat pa zāli, atstājot ektoplazmas pēdas.

Mēs izlēmām vienkārši. Blakus novietojām sarullētu apavu pārvalku. Tomēr mums viss ir jādublē saskaņā ar standartu.

Ir radusies jauna problēma. Vērojot klientu inženieru uzvedību, mēs redzējām šādu attēlu: viņi vispirms iebāza kājas mašīnā tīrīšanai, bet pēc tam no velmēta apavu pārvalka ielika apavu pārvalkus. Tagad izlikuši zīmi, ka tas ir vai nu viens, vai otrs, un labāk tīrīt sevi, bet, ja dzīves principi aizliedz tīrīt apavus, tad valkājiet apavu pārvalkus. Šķiet, ka biļete, kas bija uz pāris dienām, bet ilga ilgi, bija slēgta. Šeit ir ierīce:

Datu centra ikdiena: nepārprotami sīkumi 7 darbības gados. Un turpinājums par žurku

"ku" divreiz

Saskaņā ar PCI DSS prasībām jums ir jāspēj vizuāli atšķirt datu centrā esošo cilvēku lomas. Cieši nepaskatoties caurlaidē un kaut ko tur nelasot, bet tieši vizuāli, kā militārpersonas viens otru atšķir pēc plecu siksnām, tikai vēl spilgtāk. Nolēmām neizrādīties un izmantojām veco labo Čatlan metodi - bikšu krāsu diferenciāciju. Konkrēti, viņi sāka izgatavot dažādu krāsu caurlaides lentes. Mūsu admini uzreiz paņēma Grīnu par savu favorītu.

Tas izklausās vienkārši, taču izraisīja trīs negaidītus efektus:

  1. Spriegotāji bija nepieciešami, lai automātiski ievilktu šīs caurlaides, kad tās valkātas (tās ir lietas, kas pašas regulē lentes garumu). Mēs uzrakstījām tehnisko specifikāciju, kurā tika ņemtas vērā visas visu nodaļu vēlmes. Tā bija stratēģiska kļūda. Krāsa, formāts, materiāls, spriegotājs nav plastmasa, makšķeraukla izgatavota no metāla, lai uzliktu logotipu, lai tas būtu iešūts lentē. Gabali izrādījās tik dārgi, ka pēc tam nācās samazināt prasības un mainīt formātu.
  2. Kad bikšu diferenciācija sāka darboties, kļuva ļoti ērti. Darbuzņēmējiem ir dažas lentes, ārējiem administratoriem ir citas, un mūsu administratoriem ir citas. Var redzēt, kam ir kāda loma. Elektrībai - tikai pelēkas, kondicionēšanai - zilas. Un tad mums vajadzēja lentes šoferiem (šī ir atsevišķa loma, viņi var iekļūt izkraušanas zonā, bet nevar atstāt to, izņemot ārā). Autovadītājiem caurlaide nav vajadzīga. Sākumā iedevām viņiem lentītes bez piespēlēm. Tad kārtības sargi nolēma, ka tas ir pilnīgi dīvaini un šoferu cilvēka cieņu pazemojoši. Viņiem ir sava militārā loģika, tāpēc tagad braucēji nāk uzreiz saņemt caurlaidi ar lentīti, bet šī caurlaide neļauj nekur doties. No drošības viedokļa tas izrādās marķieris, ka apsardze šo cilvēku ir pārbaudījusi.
  3. Viens no mūsu inženieriem ieteica lentes vietā izgatavot zaļus formas džemperus. Un viņš nosūtīja racionalizācijas priekšlikumu. Viņi to izdarīja pusceļā: viņi atstāja caurlaides ar lenti, turklāt viņi faktiski uzšuva zaļos formas džemperus. Tagad mums ir administratora uniforma. Apsargi joku atbalstīja un iekļāva to nolikumā. Tagad tas ir obligāti (bikses, krekls, džemperis, bet džemperi var noņemt).

Arī mūsu klienti bieži sūdzējās par greiziem maršrutiem kartēs, pirms ienāca mūsu Compressor datu centrā. Jūs ievadāt adresi, bet ceļš tiek parādīts nepareizi. Apmeklētāji beidzās ar taksometru nepareizajā virzienā, jo tur bija dzelzceļš, un aiz tā bija sastrēgums, un tur nevarēja apgriezties. Sākumā gribējām virs ceļa novietot zīmes. Pilsētā ir tāds serviss - zem parastajām zīmēm novietojiet dzeltenas papildzīmes, tās uzskatāmas par reklāmu. Un cena viņiem ir kā reklāma: uz Entuziastovas šosejas viena zīme maksā miljonu rubļu gadā. Tajā pašā laikā mēs rakstījām Yandex, un viņi pat pēkšņi atbildēja. Un viņi pārstāja rīkoties. Jūs pat varat norādīt vārtu diodes: ieeja caur dažām, izeja caur citām.

Google, ja jūs mūs lasāt, tad ziniet: jums joprojām ir problēma, un mēs nezinām, kam par to pastāstīt, lai mūs sadzird.

Uzaicinājuma vēstulēs bija ietvertas saites ne tikai uz adresi, bet arī uz adresi ar maršrutu, kas balstīts uz lietotāja ģeogrāfisko atrašanās vietu. Līdz ar to bija mazāk netrāpījumu.

Gobo projektori un citi mazi priekšmeti

Vai jūs zināt, kas ir gobo projektori? Mēs arī nezinājām. Kaut kā domājām, kā iezīmēt plauktu rindas. Paši statīvi, protams, ir marķēti ar īpašiem ātrās atbrīvošanas marķējumiem, taču tos var redzēt no 1-2 metru attāluma. Pati zāle ir 500 kv.m., tāpēc tur ir pietiekami daudz vietas, kur apmaldīties. Tāpēc beidzot sākām iezīmēt rindas. Ir sākusies prāta vētra. Kā atzīmēt, ar ko un kur? Uz grīdas, pie sienas, izkārtnes pie griestiem utt. Un tad mūsu kolēģis ieraudzīja, ka Ikea kādreiz bija uzlīmes, kas nolietojas uz grīdas, un tad parādījās gaišas bultiņas. Mēs nolēmām to mainīt vienkāršā veidā: dodieties uz Ikea un izgrieziet vienu no projektoriem, lai paskatītos. Mēs to nevarējām dabūt: kamēr nesām krēslus, pārdevējs jautāja, ko mēs darām. Un viņš uzreiz palīdzēja, sakot, ka tas ir gobo. Izrādās, ka tas nav pats projektors, bet gan plāksne vai objektīvs krāsainam attēlam. Šis filtrs ir gobo. Viens projektors maksā no 40 tūkstošiem rubļu (ir jaudīga lampa dienas lietošanai), un mums ir 14 rindas katrā no četrām mašīntelpām. Tāpēc mēs uzlīmējām uzlīmes.

Mums ir arī diagrammas uz sienām, kas gadu gaitā izbalē. Nomainījām pret laminētām, ar speciālām “iešūtām” kabatām auditoriem. Mūsu gadījumā inspektors ir galvenais inženieris, kura pienākumos ietilpst visu datu centrā esošo shēmu atbilstības pārbaude. Tātad visas shēmas ir jāpārbauda katru gadu un jāparaksta šādam auditoram. Un īpaša maza žurnāla klātbūtne diagrammas kabatā atvieglo šo procedūru un neprasa pašas diagrammas nomaiņu ik pēc trim gadiem. Peļņa!

Ārā veicām paaugstinātās grīdas rotācijas tīrīšanu. Mums ir regulāras tīrīšanas, mums ir tīrīšanas metodes un laiki. Bet smago bagāžnieku riteņi atstāj pēdas. Mēs veicām tīrīšanu. Tagad esam nervozi: tas neizskatās daudz glītāks, bet noteiktiem cilvēkiem ir parādījušies izcēlumi no noteiktiem rakursiem, labi, kam ir savi flomāsteri, kas atbilst viņu gaumei. Tagad par to domājam un meklējam kaut kādu ķimikāliju, kas balinātu grīdu un piešķirs spīdumu. Lai pat atlasītajiem nerastos jautājumi.

Vai esat redzējuši konsoļu statīvus? Tie ir kā ceļojoši bufetes galdi, bet dzērienu vietā ir terminālis savienošanai ar plauktu. Tātad šiem konsoles statīviem riteņi nokrīt un iestrēgst kā ratiņi lielveikalā. Mēs esam neticami noguruši. Līdz ar to vienīgais iespējamais veids, kā to atdzīvināt, ir iegādāties jaunu riteni. Taču vairs nebija iespējams dabūt riteņus speciāli mūsu modeļiem, mēs aptaujājām visus darbuzņēmējus. Rezultātā mēs paši izstrādājām plauktu, koncentrējoties uz pārvietošanās vieglumu mašīntelpā un apkopi. Tas izdevās ļoti labi.

Bija stāsts ar sintētiskajām zeķēm. Ir tāda lieta - antistatiskas rokassprādzes. Tas ir tad, kad jūs ejat uz statīva, savienojiet rokassprādzi ar zemi uz statīva, un tā sazinās ar potenciāla izlīdzināšanas sistēmu. Tātad, statīvs ir iezemēts, bet var izrādīties, ka inženieris nav iezemēts. Kolēģi no iepriekšējām darba vietām stāstīja, kā pāris reizes redzējuši dzirksteles videonovērošanā, un mēs nolēmām grēka pēc uzlikt par pienākumu visiem to izmantot tieši saskaņā ar noteikumiem.

Kritiski incidenti

Nopietnāk runājot, bija situācija, ka visi dzesētāji tika nogriezti uzreiz. Mūsu dzesētājus neaizsargā UPS, jo mēs ticam fizika, un mums ir auksta ūdens baseins kā temperatūras rezerve. Ja kaut kas nodziest, jums nav vajadzīgas baterijas, lai darbinātu dzesētājus, kas atdzesē ūdeni, bet vienkārši aukstais ūdens, kas jau ir gatavs. Ērti un vienkārši, bet ir kāda nianse. Dzesētāji ir aprīkoti ar automātisko drošības aprīkojumu, kas tos izslēdz bīstamu elektrotīkla parametru gadījumā. Ja ieeja ir izslēgta, mēs ieslēdzam dīzeļa ģeneratora komplektu, un pēc tam dzesētāji tiek darbināti no tiem. Viss būtu kārtībā, ja mēs nedzīvotu Krievijā. Mums vairākas reizes bija tīkla pārtraukumi, bet viss bija kārtībā. Bet vienu dienu bija straujš lēciens, vispirms uz leju, tad strauji uz augšu, tad atkal uz leju - dažu sekunžu laikā ievades parametri mainījās apmēram 4 reizes. Dzesētāji, protams, tika izslēgti. Vispirms mēģinājām tos ieslēgt attālināti, taču tie pasargāja sevi ļoti uzticami, piemēram, ārkārtas situācijā. Maiņai bija jāiet ar kājām uz jumta un jāieslēdz tās manuāli. Svarīgi, ka saskaņā ar TierIII standartu šāda situācija ir likumīgs iemesls datu centra slēgšanai. Mums nebija pieturas, jo cilvēki atrodas uz zemes ar galvu, un ir treniņš ar vingrinājumiem. Lai pārliecinātos par TIII darbību, lietotāja interfeiss mūs vienkārši regulāri izdrāzīja. Ja kas, mēs esam nokārtojuši lietotāja interfeisa atkārtotu sertifikāciju TIII Gold — Operational Sustainability. Krievijas komerciālajā datu centru tirgū nav nekā foršāka, izņemot mūsējo, tikai vienam ir tāds pats sasniegums Datu centrs. Es atzīmēju, ka atkārtota sertifikācija ir grūtāka nekā sertifikāta iegūšana no nulles, jo viņi pārbauda iepriekšējo periodu tā, it kā jūs nebūtu jūs pats, un ir nepieciešams daudz vairāk pierādījumu.

Bija interesants atgadījums ar kamerām. Nolēmām katram gadījumam pārrēķināt aklās zonas, uzzīmējām krustojumus, uzzīmējām plānā skata leņķu diagonāles, un pēkšņi vienas zāles centrā atradām aptuveni 30 centimetrus reiz 15 metrus lielu aklo zonu. Šaurs un garš. Blakus istabā tāda nav. Izrādījās, ka rotējošā kamera gadu gaitā bija lēnām pārvietojusies tā, ka sāka rādīt aptuveni pusotru grādu pa kreisi, nekā vajadzētu galējā stāvoklī.

Amatā bija vēl viens liels incidents par DDIBP remonta nomaiņu.

atsauces

Avots: www.habr.com

Iegādājieties uzticamu mitināšanu vietnēm ar DDoS aizsardzību, VPS VDS serveriem 🔥 Iegādājieties uzticamu tīmekļa vietņu mitināšanu ar DDoS aizsardzību, VPS VDS serveriem | ProHoster