ProHoster > Blogs > Administrācija > Datu centra ikdiena: nepārprotami sīkumi 7 darbības gados. Un turpinājums par žurku

Datu centra ikdiena: nepārprotami sīkumi 7 darbības gados. Un turpinājums par žurku

Datu centra ikdiena: nepārprotami sīkumi 7 darbības gados. Un turpinājums par žurku

TeikÅ”u uzreiz: tā žurka atvestajā serverÄ«, kurai pirms pāris gadiem iedevām tēju pēc elektroÅ”oka, visticamāk, aizbēga. Jo mēs reiz redzējām viņas draugu uz apļa. Un mēs uzreiz nolēmām uzstādÄ«t ultraskaņas repellerus.

Tagad ap datu centru ir nolādēta zeme: neviens putns uz ēkas nenolaidÄ«sies, un, iespējams, visi kurmji un tārpi ir izbēguÅ”i. Bija noraizējies par to skaņas var izraisÄ«t HDD kļūmi, bet pārbaudÄ«ts, frekvences nav vienādas.

Nākamais stāsts ir daudz jautrāks. Kādreiz saņēmām aparatūru par pāris miljoniem rubļu kastītē ar slīpuma, vibrācijas un mitruma sensoriem. Viss ir vesels. Uzmanīgi noņēma iepakojumu, un dzelzs gabals bija saliekts. Mistiķis.

Ķermenis ir taisns lokā. Tik skaisti.

Detektīvu stāsts

Mēs tam nepieŔķirtu nekādu nozÄ«mi, jo izliektais metāla korpuss bija gandrÄ«z vai dizaina tēls. Tik skaista, bez čipsiem. Un, ja tuvumā nebÅ«tu citu lÄ«dzÄ«gu aparatÅ«ras vienÄ«bu, mēs, izpakojot, pat nebÅ«tu domājuÅ”i, ka kaut kas nav kārtÄ«bā. Bet turpat blakus bija tādi paÅ”i, tikai ar regulārāku Ä£eometrisku formu.

Par laimi Ŕādas aparatÅ«ras izpakoÅ”ana tiek nofilmēta (iesaku visiem iejusties Å”ajā ieradumā), tāpēc varējām pierādÄ«t ražotājam, ka tā sanāca. Neskarts iepakojums un glÄ«ti saliekts korpuss nav kustinātāju trieciens. Visticamāk, viņa bija ievainota vēl pirms doÅ”anās uz Krieviju.

Pārdevējs saka: "Ah, puiÅ”i, nekavējoties nomainÄ«sim to jÅ«su vietā saskaņā ar garantiju." Un tad mÅ«s sagaidÄ«ja episkā slazds.

Fakts ir tāds, ka muita ļauj mums ievest Ŕādas iekārtas ar dokumentiem bez eksporta tiesÄ«bām. Tas ir, jÅ«s varat to atvest, bet jÅ«s nevarat to pārdot tālāk kādam ārpus Krievijas. Kad, piemēram, nosÅ«tām atpakaļ izdeguÅ”u baroÅ”anas bloku, viss ir skaidrs. Å Ä« ir rezerves daļa, baroÅ”anas avots.

Un tad man viss bija jānosūta atpakaļ:
- PuiÅ”i, paskatieties, mēs nosÅ«tām aparatÅ«ru atpakaļ ražotājam.
- Viss aprīkojums?
- Jā.
ā€” Modeli tādu un tādu?
- Jā.
- Var strādāt?
ā€” Mēs nezinām, mēs to neieslēdzām.
- Tātad Ŕī ir vesela iekārta.
- Nu, tas nedarbojas.
- Nu, paskaties, viss aprÄ«kojums ir no Ŕī modeļa. Nav reeksporta tiesÄ«bu. Mēs tevi nelaidÄ«sim iekŔā.

Vispār bija liela Ä·epuroÅ”anās, pirms izdomājām, ka neeksportējam, bet atdodam. Galu galā mums viss izdevās.

Bija arī apavu pārvalki

Pirmkārt, pirms daudziem gadiem mums bija pirmā automātiskā, administratora sapnis. Jūs ievietojat tur apavu pārvalku paku, tas pats tos izpako, atver un noliek tādā stāvoklī, ka jums vienkārŔi jāuzkāpj uz tiem. Chp-chpk un darīts.

Pēc apmēram seÅ”iem mēneÅ”iem viņa sakoŔļāja apmēram simts apavu pārvalku pakas un aizrÄ«jās. IzrādÄ«jās, ka kustÄ«go detaļu ir tik daudz, ka vai nu jāremontē reizi mēnesÄ« pie savas slodzes (mums pa objektu staigā daudz klientu inženieru, jo esam komerciāls datu centrs), vai arÄ« jāpērk. jaunu.

Otra problēma ir tā, ka vēlāk, vienā no regulārajām tÄ«rÄ«Å”anām, mēs kaut kā atradām "mazu zilu lupatiņu", kas karājās uz viena no mÅ«su testÄ“Å”anas plauktiem. Tiesu medicÄ«nas eksperts, kuru pārstāvēja X-Team inženieris, identificēja apavu pārvalka korpusa fragmentu. IzrādÄ«jās, ka klÄ«nikā bija ērti valkāt apavu pārvalkus: es pastaigājos pusstundu, un tas arÄ« viss. Un daži inženieri var strādāt ar aparatÅ«ru visu dienu. Sajaucot kājas. Daudz jauktas. Un apavu pārvalki nolietojas Å”ajās mazajās drumstalās, kas lido pa turbÄ«nu zāli.

GandrÄ«z uzreiz nopirkām jaunu apavu pārvalku. Mēs paņēmām termozābaku futrāli: Ŕī ir iekārta, kurā tiek ielādēta plēve, un tā rÅ«pÄ«gi termiski sarauj Å”o plēvi uz kurpes. Skaista, efektÄ«va, izturÄ«ga. Mazāka izkliede. Mums tā bija diezgan ilgu laiku, bet sarauÅ”anās plēvi nācās mainÄ«t apmēram reizi 1-2 stundās, jo zole mēdza nokrist pati.

Sākumā domājām, ka mums nav paveicies, bet cilvēki kaut kā atrisina Å”o problēmu. Bet nē. Jautājām Rietumu kolēģiem ā€“ tas pats stāsts. Rezultātā viņi sāka domāt, kā to normāli izdarÄ«t. Atgriezties no turbÄ«nu zāles pēc jauniem apavu pārvalkiem, atklāti sakot, tā ir ideja. Mēs atradām rÅ«pnieciskos tÄ«rÄ«Å”anas lÄ«dzekļus bÅ«vlaukumiem un rÅ«pniecÄ«bai. Tie ir kaut kas lÄ«dzÄ«gs celiņiem, pa kuriem maiņa ienāk darbnÄ«cā. Taciņas ar rullÄ«Å”u kaudzi visu iztÄ«ra, un ir veidotas tā, lai gribot negribot aizÄ·ersies un notÄ«rÄ«s. Tie maksā no pusmiljona lÄ«dz miljonam rubļu. Rakāmies apkārt un atradām tādu paÅ”u par 200 tÅ«kstoÅ”iem, bet kāja jāliek paÅ”am. Pēc izmēra tas ir lÄ«dzÄ«gs apavu pulÄ“Å”anas maŔīnai. Tu nāc klāt, iebāz tur kāju, viņa to sakoŔļā un atdod tÄ«ru. Viņi to novietoja pie datu centra ieejas.

Tas darbojas lieliski, izņemot divas problēmas. Pirmais ir tas, ka ātri kļuva skaidrs, ka mums, inženieriem, tas ir normāli. Taču praksē uz datu centru paskatÄ«ties nāk dažādi cilvēki, arÄ« lielu uzņēmumu augstākā lÄ«meņa vadÄ«tāji. Ar kurpēm no ādas no pÅ«Ä·a dupÅ”a. Un pat krēma uzklāŔanai uz apaviem to otiņa maksā vairāk nekā manas treniņu kedas, tās speciāli atlasa sariņus. TieÅ”i viņi atteicās likt kājas mÅ«su brÄ«numierÄ«cē. Otra problēma radās ziemā: kad apavi ir ļoti nekārtÄ«gi, tie nevar visu dabÅ«t ārā no dziļā protektora. Tad jÅ«s staigājat pa zāli, atstājot ektoplazmas pēdas.

Mēs izlēmām vienkārÅ”i. Blakus novietojām sarullētu apavu pārvalku. Tomēr mums viss ir jādublē saskaņā ar standartu.

Ir radusies jauna problēma. Vērojot klientu inženieru uzvedÄ«bu, mēs redzējām Ŕādu attēlu: viņi vispirms iebāza kājas maŔīnā tÄ«rÄ«Å”anai, bet pēc tam no velmēta apavu pārvalka ielika apavu pārvalkus. Tagad izlikuÅ”i zÄ«mi, ka tas ir vai nu viens, vai otrs, un labāk tÄ«rÄ«t sevi, bet, ja dzÄ«ves principi aizliedz tÄ«rÄ«t apavus, tad valkājiet apavu pārvalkus. Å Ä·iet, ka biļete, kas bija uz pāris dienām, bet ilga ilgi, bija slēgta. Å eit ir ierÄ«ce:

Datu centra ikdiena: nepārprotami sīkumi 7 darbības gados. Un turpinājums par žurku

"ku" divreiz

Saskaņā ar PCI DSS prasÄ«bām jums ir jāspēj vizuāli atŔķirt datu centrā esoÅ”o cilvēku lomas. CieÅ”i nepaskatoties caurlaidē un kaut ko tur nelasot, bet tieÅ”i vizuāli, kā militārpersonas viens otru atŔķir pēc plecu siksnām, tikai vēl spilgtāk. Nolēmām neizrādÄ«ties un izmantojām veco labo Čatlan metodi - bikÅ”u krāsu diferenciāciju. Konkrēti, viņi sāka izgatavot dažādu krāsu caurlaides lentes. MÅ«su admini uzreiz paņēma GrÄ«nu par savu favorÄ«tu.

Tas izklausās vienkārŔi, taču izraisīja trīs negaidītus efektus:

  1. Spriegotāji bija nepiecieÅ”ami, lai automātiski ievilktu Ŕīs caurlaides, kad tās valkātas (tās ir lietas, kas paÅ”as regulē lentes garumu). Mēs uzrakstÄ«jām tehnisko specifikāciju, kurā tika ņemtas vērā visas visu nodaļu vēlmes. Tā bija stratēģiska kļūda. Krāsa, formāts, materiāls, spriegotājs nav plastmasa, makŔķeraukla izgatavota no metāla, lai uzliktu logotipu, lai tas bÅ«tu ieŔūts lentē. Gabali izrādÄ«jās tik dārgi, ka pēc tam nācās samazināt prasÄ«bas un mainÄ«t formātu.
  2. Kad bikÅ”u diferenciācija sāka darboties, kļuva ļoti ērti. Darbuzņēmējiem ir dažas lentes, ārējiem administratoriem ir citas, un mÅ«su administratoriem ir citas. Var redzēt, kam ir kāda loma. ElektrÄ«bai - tikai pelēkas, kondicionÄ“Å”anai - zilas. Un tad mums vajadzēja lentes Å”oferiem (Ŕī ir atseviŔķa loma, viņi var iekļūt izkrauÅ”anas zonā, bet nevar atstāt to, izņemot ārā). AutovadÄ«tājiem caurlaide nav vajadzÄ«ga. Sākumā iedevām viņiem lentÄ«tes bez piespēlēm. Tad kārtÄ«bas sargi nolēma, ka tas ir pilnÄ«gi dÄ«vaini un Å”oferu cilvēka cieņu pazemojoÅ”i. Viņiem ir sava militārā loÄ£ika, tāpēc tagad braucēji nāk uzreiz saņemt caurlaidi ar lentÄ«ti, bet Ŕī caurlaide neļauj nekur doties. No droŔības viedokļa tas izrādās marÄ·ieris, ka apsardze Å”o cilvēku ir pārbaudÄ«jusi.
  3. Viens no mÅ«su inženieriem ieteica lentes vietā izgatavot zaļus formas džemperus. Un viņŔ nosÅ«tÄ«ja racionalizācijas priekÅ”likumu. Viņi to izdarÄ«ja pusceļā: viņi atstāja caurlaides ar lenti, turklāt viņi faktiski uzÅ”uva zaļos formas džemperus. Tagad mums ir administratora uniforma. Apsargi joku atbalstÄ«ja un iekļāva to nolikumā. Tagad tas ir obligāti (bikses, krekls, džemperis, bet džemperi var noņemt).

ArÄ« mÅ«su klienti bieži sÅ«dzējās par greiziem marÅ”rutiem kartēs, pirms ienāca mÅ«su Compressor datu centrā. JÅ«s ievadāt adresi, bet ceļŔ tiek parādÄ«ts nepareizi. Apmeklētāji beidzās ar taksometru nepareizajā virzienā, jo tur bija dzelzceļŔ, un aiz tā bija sastrēgums, un tur nevarēja apgriezties. Sākumā gribējām virs ceļa novietot zÄ«mes. Pilsētā ir tāds serviss - zem parastajām zÄ«mēm novietojiet dzeltenas papildzÄ«mes, tās uzskatāmas par reklāmu. Un cena viņiem ir kā reklāma: uz Entuziastovas Å”osejas viena zÄ«me maksā miljonu rubļu gadā. Tajā paŔā laikā mēs rakstÄ«jām Yandex, un viņi pat pēkŔņi atbildēja. Un viņi pārstāja rÄ«koties. JÅ«s pat varat norādÄ«t vārtu diodes: ieeja caur dažām, izeja caur citām.

Google, ja jūs mūs lasāt, tad ziniet: jums joprojām ir problēma, un mēs nezinām, kam par to pastāstīt, lai mūs sadzird.

Uzaicinājuma vēstulēs bija ietvertas saites ne tikai uz adresi, bet arÄ« uz adresi ar marÅ”rutu, kas balstÄ«ts uz lietotāja Ä£eogrāfisko atraÅ”anās vietu. LÄ«dz ar to bija mazāk netrāpÄ«jumu.

Gobo projektori un citi mazi priekŔmeti

Vai jÅ«s zināt, kas ir gobo projektori? Mēs arÄ« nezinājām. Kaut kā domājām, kā iezÄ«mēt plauktu rindas. PaÅ”i statÄ«vi, protams, ir marķēti ar Ä«paÅ”iem ātrās atbrÄ«voÅ”anas marķējumiem, taču tos var redzēt no 1-2 metru attāluma. Pati zāle ir 500 kv.m., tāpēc tur ir pietiekami daudz vietas, kur apmaldÄ«ties. Tāpēc beidzot sākām iezÄ«mēt rindas. Ir sākusies prāta vētra. Kā atzÄ«mēt, ar ko un kur? Uz grÄ«das, pie sienas, izkārtnes pie griestiem utt. Un tad mÅ«su kolēģis ieraudzÄ«ja, ka Ikea kādreiz bija uzlÄ«mes, kas nolietojas uz grÄ«das, un tad parādÄ«jās gaiÅ”as bultiņas. Mēs nolēmām to mainÄ«t vienkārŔā veidā: dodieties uz Ikea un izgrieziet vienu no projektoriem, lai paskatÄ«tos. Mēs to nevarējām dabÅ«t: kamēr nesām krēslus, pārdevējs jautāja, ko mēs darām. Un viņŔ uzreiz palÄ«dzēja, sakot, ka tas ir gobo. Izrādās, ka tas nav pats projektors, bet gan plāksne vai objektÄ«vs krāsainam attēlam. Å is filtrs ir gobo. Viens projektors maksā no 40 tÅ«kstoÅ”iem rubļu (ir jaudÄ«ga lampa dienas lietoÅ”anai), un mums ir 14 rindas katrā no četrām maŔīntelpām. Tāpēc mēs uzlÄ«mējām uzlÄ«mes.

Mums ir arÄ« diagrammas uz sienām, kas gadu gaitā izbalē. NomainÄ«jām pret laminētām, ar speciālām ā€œieŔūtāmā€ kabatām auditoriem. MÅ«su gadÄ«jumā inspektors ir galvenais inženieris, kura pienākumos ietilpst visu datu centrā esoÅ”o shēmu atbilstÄ«bas pārbaude. Tātad visas shēmas ir jāpārbauda katru gadu un jāparaksta Ŕādam auditoram. Un Ä«paÅ”a maza žurnāla klātbÅ«tne diagrammas kabatā atvieglo Å”o procedÅ«ru un neprasa paÅ”as diagrammas nomaiņu ik pēc trim gadiem. Peļņa!

Ārā veicām paaugstinātās grÄ«das rotācijas tÄ«rÄ«Å”anu. Mums ir regulāras tÄ«rÄ«Å”anas, mums ir tÄ«rÄ«Å”anas metodes un laiki. Bet smago bagāžnieku riteņi atstāj pēdas. Mēs veicām tÄ«rÄ«Å”anu. Tagad esam nervozi: tas neizskatās daudz glÄ«tāks, bet noteiktiem cilvēkiem ir parādÄ«juÅ”ies izcēlumi no noteiktiem rakursiem, labi, kam ir savi flomāsteri, kas atbilst viņu gaumei. Tagad par to domājam un meklējam kaut kādu Ä·imikāliju, kas balinātu grÄ«du un pieŔķirs spÄ«dumu. Lai pat atlasÄ«tajiem nerastos jautājumi.

Vai esat redzējuÅ”i konsoļu statÄ«vus? Tie ir kā ceļojoÅ”i bufetes galdi, bet dzērienu vietā ir terminālis savienoÅ”anai ar plauktu. Tātad Å”iem konsoles statÄ«viem riteņi nokrÄ«t un iestrēgst kā ratiņi lielveikalā. Mēs esam neticami noguruÅ”i. LÄ«dz ar to vienÄ«gais iespējamais veids, kā to atdzÄ«vināt, ir iegādāties jaunu riteni. Taču vairs nebija iespējams dabÅ«t riteņus speciāli mÅ«su modeļiem, mēs aptaujājām visus darbuzņēmējus. Rezultātā mēs paÅ”i izstrādājām plauktu, koncentrējoties uz pārvietoÅ”anās vieglumu maŔīntelpā un apkopi. Tas izdevās ļoti labi.

Bija stāsts ar sintētiskajām zeķēm. Ir tāda lieta - antistatiskas rokassprādzes. Tas ir tad, kad jÅ«s ejat uz statÄ«va, savienojiet rokassprādzi ar zemi uz statÄ«va, un tā sazinās ar potenciāla izlÄ«dzināŔanas sistēmu. Tātad, statÄ«vs ir iezemēts, bet var izrādÄ«ties, ka inženieris nav iezemēts. Kolēģi no iepriekŔējām darba vietām stāstÄ«ja, kā pāris reizes redzējuÅ”i dzirksteles videonovēroÅ”anā, un mēs nolēmām grēka pēc uzlikt par pienākumu visiem to izmantot tieÅ”i saskaņā ar noteikumiem.

Kritiski incidenti

Nopietnāk runājot, bija situācija, ka visi dzesētāji tika nogriezti uzreiz. MÅ«su dzesētājus neaizsargā UPS, jo mēs ticam fizika, un mums ir auksta Å«dens baseins kā temperatÅ«ras rezerve. Ja kaut kas nodziest, jums nav vajadzÄ«gas baterijas, lai darbinātu dzesētājus, kas atdzesē Å«deni, bet vienkārÅ”i aukstais Å«dens, kas jau ir gatavs. Ērti un vienkārÅ”i, bet ir kāda nianse. Dzesētāji ir aprÄ«koti ar automātisko droŔības aprÄ«kojumu, kas tos izslēdz bÄ«stamu elektrotÄ«kla parametru gadÄ«jumā. Ja ieeja ir izslēgta, mēs ieslēdzam dÄ«zeļa Ä£eneratora komplektu, un pēc tam dzesētāji tiek darbināti no tiem. Viss bÅ«tu kārtÄ«bā, ja mēs nedzÄ«votu Krievijā. Mums vairākas reizes bija tÄ«kla pārtraukumi, bet viss bija kārtÄ«bā. Bet vienu dienu bija straujÅ” lēciens, vispirms uz leju, tad strauji uz augÅ”u, tad atkal uz leju - dažu sekunžu laikā ievades parametri mainÄ«jās apmēram 4 reizes. Dzesētāji, protams, tika izslēgti. Vispirms mēģinājām tos ieslēgt attālināti, taču tie pasargāja sevi ļoti uzticami, piemēram, ārkārtas situācijā. Maiņai bija jāiet ar kājām uz jumta un jāieslēdz tās manuāli. SvarÄ«gi, ka saskaņā ar TierIII standartu Ŕāda situācija ir likumÄ«gs iemesls datu centra slēgÅ”anai. Mums nebija pieturas, jo cilvēki atrodas uz zemes ar galvu, un ir treniņŔ ar vingrinājumiem. Lai pārliecinātos par TIII darbÄ«bu, lietotāja interfeiss mÅ«s vienkārÅ”i regulāri izdrāzÄ«ja. Ja kas, mēs esam nokārtojuÅ”i lietotāja interfeisa atkārtotu sertifikāciju TIII Gold ā€” Operational Sustainability. Krievijas komerciālajā datu centru tirgÅ« nav nekā forŔāka, izņemot mÅ«sējo, tikai vienam ir tāds pats sasniegums Datu centrs. Es atzÄ«mēju, ka atkārtota sertifikācija ir grÅ«tāka nekā sertifikāta iegÅ«Å”ana no nulles, jo viņi pārbauda iepriekŔējo periodu tā, it kā jÅ«s nebÅ«tu jÅ«s pats, un ir nepiecieÅ”ams daudz vairāk pierādÄ«jumu.

Bija interesants atgadÄ«jums ar kamerām. Nolēmām katram gadÄ«jumam pārrēķināt aklās zonas, uzzÄ«mējām krustojumus, uzzÄ«mējām plānā skata leņķu diagonāles, un pēkŔņi vienas zāles centrā atradām aptuveni 30 centimetrus reiz 15 metrus lielu aklo zonu. Å aurs un garÅ”. Blakus istabā tāda nav. IzrādÄ«jās, ka rotējoŔā kamera gadu gaitā bija lēnām pārvietojusies tā, ka sāka rādÄ«t aptuveni pusotru grādu pa kreisi, nekā vajadzētu galējā stāvoklÄ«.

Amatā bija vēl viens liels incidents par DDIBP remonta nomaiņu.

atsauces

Avots: www.habr.com

Pievieno komentāru