{"id":35887,"date":"2019-10-31T22:07:25","date_gmt":"2019-10-31T19:07:25","guid":{"rendered":"https:\/\/prohoster.info\/blog\/budni-data-tsentra-neochevidnye-melochi-za-7-let-ekspluatatsii-i-prodolzhenie-pro-krysu\/"},"modified":"2019-10-31T22:07:25","modified_gmt":"2019-10-31T19:07:25","slug":"budni-data-tsentra-neochevidnye-melochi-za-7-let-ekspluatatsii-i-prodolzhenie-pro-krysu","status":"publish","type":"post","link":"https:\/\/prohoster.info\/hr\/blog\/administrirovanie\/budni-data-tsentra-neochevidnye-melochi-za-7-let-ekspluatatsii-i-prodolzhenie-pro-krysu","title":{"rendered":"\u017divot u podatkovnom centru: nevidljive sitnice nakon 7 godina eksploatacije. I nastavak o \u0161takoru","gt_translate_keys":[{"key":"rendered","format":"text"}]},"content":{"rendered":"

\"\u017divot
\n
\nOdmah da ka\u017eem: ona sretnica u dostavljenom serveru, koju smo prije nekoliko godina napojili \u010dajem nakon \u0161to je dobila strujni udar, najvjerojatnije je pobjegla. Jer smo nekako na obilasku vidjeli njenu prijateljicu. I odmah smo odlu\u010dili postaviti ultrazvu\u010dne ometa\u010de. <\/p>\n

Sada je oko data centra prokleta zemlja: ptice ne slije\u0107u na zgradu, a vjerojatno su i svi krtici i crvi pobjegli. Brinuli smo se da zvuk mo\u017ee<\/a><\/noindex> uzrokovati kvar HDD-a, ali smo provjerili, frekvencije nisu te.<\/p>\n

Sljede\u0107a pri\u010da je daleko zabavnija. Nekako smo dobili opremu vrijednu nekoliko milijuna rubalja u kutiji sa senzorima nagiba, vibracija i vla\u017enosti. Sve je netaknuto. Pa\u017eljivo smo skinuli ambala\u017eu, a ure\u0111aj je savijen. Misterija. <\/p>\n

Ku\u0107i\u0161te je potpuno zakrivljeno. Tako lijepo. <\/a><\/noindex><\/p>\n

Detektiv<\/h3>\n

\nNe bismo obratili pa\u017enju na to, jer je zakrivljeno metalno ku\u0107i\u0161te bilo gotovo dizajnersko. Tako lijepo, bez o\u0161te\u0107enja. I da nije bilo drugih sli\u010dnih ure\u0111aja u blizini, ne bismo na otvaranju ni posumnjali da ne\u0161to nije u redu. No, pored su bila sli\u010dna, samo pravilnije geometrijske forme. <\/p>\n

Na sre\u0107u, otvaranje takvih ure\u0111aja snima se na videu (preporu\u010dujem svima da steknu tu naviku), tako da smo uspjeli dokazati proizvo\u0111a\u010du da je takva do\u0161la. Cijela ambala\u017ea i pa\u017eljivo savijeno ku\u0107i\u0161te \u2014 to nije udar od radnika. Najvjerojatnije, o\u0161tetila se jo\u0161 prije nego \u0161to je oti\u0161la u Rusiju. <\/p>\n

Proizvo\u0111a\u010d ka\u017ee: \"Eee, de\u010dki, ajmo je odmah zamijeniti pod jamstvom.\" I tu nas je \u010dekala epohalna zamka. <\/p>\n

Naime, carina nam dopu\u0161ta uvoz takve opreme po dokumentima bez prava izvoza. To jest, mo\u017ee se donijeti, ali joj se ne mo\u017ee preprodati nekome izvan Rusije. Kada vra\u0107amo nazad pregorjeli napajanje, na primjer, sve je jasno. To je rezervni dio, napajanje. <\/p>\n

A sada je trebalo poslati nazad sve:
\n \u2014 De\u010dki, gledajte, vra\u0107amo ure\u0111aj proizvo\u0111a\u010du.
\n \u2014 Oprema u cijelosti?
\n \u2014 Da.
\n \u2014 Model je takav i takav?
\n \u2014 Da.
\n \u2014 Mo\u017ee li raditi?
\n \u2014 Ne znamo, nismo uklju\u010divali.
\n \u2014 Zna\u010di, to je cijela oprema.
\n \u2014 Pa nije radila.
\n \u2014 Pa, gledajte, cijela oprema tog modela. Bez prava ponovnog izvoza. Ne pu\u0161tamo.<\/p>\n

Uglavnom, bilo je mnogo pregovora prije nego \u0161to smo shvatili da je ne izvozimo, nego vra\u0107amo natrag. Na kraju smo uspjeli sve srediti. <\/p>\n

I jo\u0161 su bile za\u0161tite za cipele<\/h3>\n

\nPrvo smo prije mnogo godina imali prvu automatsku ma\u0161inu, san administratora. Ubacite hrpu za\u0161titnih navlaka, ona ih sama raspakuje, otvara i postavlja u polo\u017eaj gdje je dovoljno samo stati. \u010cpok-\u010dpok i gotovi ste. <\/p>\n

Otprilike nakon \u0161est mjeseci, izgleda da je pojeo oko sto paketa za\u0161titnih navlaka i zagu\u0161io se. Ispostavilo se da ima toliko pokretnih dijelova da je potrebno ili je popravljati svaka mjesec dana pod na\u0161im optere\u0107enjem (imamo jako puno in\u017eenjera-naru\u010ditelja na objektu jer smo komercijalni podatkovni centar), ili kupiti novu. <\/p>\n

Drugi problem je \u0161to smo tokom jedne od redovnih \u010di\u0161\u0107enja nekako prona\u0161li \"plavu krpu\" koja se vrtjela na re\u0161etki jednog od na\u0161ih testnih ormara. Sudski vje\u0161tak, in\u017eenjer iz x-tima, prepoznao je dio za\u0161titne navlake. Ispostavilo se da je u klinici s za\u0161titnim navlakama zgodno: pro\u0161etate pola sata \u2014 i to je to. A neki in\u017eenjeri mogu cijeli dan raditi s hardverom. \u0160u\u0161kaju\u0107i na nogama. Jako \u0161u\u0161kaju\u0107i. A pritom se za\u0161titne navlake tro\u0161e u male komadi\u0107e koji lebde po ma\u0161inskoj dvorani. <\/p>\n

Gotovo odmah smo kupili novu ma\u0161inu za za\u0161titne navlake. Uzimamo termi\u010dku ma\u0161inu za za\u0161titne navlake: to je ma\u0161ina u koju se stavlja folija, a ona tu foliju pa\u017eljivo termi\u010dki obavija oko cipele. Lijepo, efikasno, \u010dvrsto. Manje se raspr\u0161uje. Dugo je stajala kod nas, ali trebalo je otprilike svaka 1-2 sata menjati termi\u010dku foliju, jer je \u0111on imao svojstvo da se sam odlijepi. <\/p>\n

Isprva smo mislili da imamo sre\u0107e, dok to drugima nekako ne predstavlja problem. No, nije bilo tako. Pitali smo zapadne kolege \u2014 ista pri\u010da. Na kraju smo po\u010deli razmi\u0161ljati kako to normalno rije\u0161iti. Vra\u0107ati se iz ma\u0161inske dvorane po nove za\u0161titne navlake \u2014 ideja, blago re\u010deno, nije ba\u0161 najbolja. Prona\u0161li smo industrijske \u010dista\u010de za gradili\u0161ta i proizvodne pogone. To su ne\u0161to poput stazica po kojima ulazi smjena. Stazice s hrpom valjaka \u010diste sve i napravljene su tako da, htjeli vi ili ne \u2014 uhvatit \u0107e i o\u010distiti. Ko\u0161taju od pola milijuna do milijun rubalja. Mi smo malo pretra\u017eivali i na\u0161li sli\u010dnu za 200 tisu\u0107a, ali nogu treba umetnuti sami. Po dimenzijama je sli\u010dna ma\u0161ini za \u010di\u0161\u0107enje cipela. Pri\u0111ete, stavite nogu, ona je usisa i vra\u0107a vam je \u010distu. Postavili smo je na ulazu u podatkovni centar. <\/p>\n

Radi odli\u010dno osim dva detalja. Prvi je \u2014 vrlo brzo se pokazalo da je to za nas, in\u017eenjere, u redu. No u praksi, u data centru dolazi raznolika grupa ljudi, me\u0111u kojima su i rukovoditelji velikih kompanija. S cipelama od drakonske ko\u017ee. A za njih \u010dak i \u010detka za nano\u0161enje kreme na cipele ko\u0161ta vi\u0161e od mojih trening tenisica, oni tu posebno biraju vlakna. Oni su odbijali stavljati noge u na\u0161 \u010dudo ure\u0111aj. Drugi problem se pojavio zimi: kada su cipele prave u blatu, ne mo\u017ee sve do\u0107i iz dubokog uzorka. Onda hodate po hali, ostavljate tragove poput ektoplazme. <\/p>\n

Re\u0161ili smo jednostavno. Postavili smo pored rol central za za\u0161titu obu\u0107e. Ionako sve trebamo duplirati prema standardu. <\/p>\n

Pojavio se novi problem. Prate\u0107i pona\u0161anje in\u017eenjera-klijenata, videli smo slikovito: prvo su stavljali nogu u ure\u0111aj za \u010di\u0161\u0107enje, a zatim su stavljali za\u0161titne navlake iz rol central. Sada imamo oznaku koja ka\u017ee ili jedno ili drugo, i bolje se o\u010distiti, ali ako \u017eivotni principi zabranjuju \u010di\u0161\u0107enje obu\u0107e, onda nosite navlake. Naizgled kratkotrajni problem, ali se rastegao i trajao dugo, ali se re\u0161io. Evo ure\u0111aja:<\/p>\n

\"\u017divot
\n <\/p>\n

Dva puta \"ku\"<\/h3>\n

\nPrema zahtevima PCI DSS, potrebno je vizuelno razlikovati uloge ljudi koji se nalaze u data centru. Ne gledaju\u0107i na propusnicu i ne \u010ditaju\u0107i \u0161ta pi\u0161e, ve\u0107 vizualno, kao \u0161to vojnici me\u0111usobno razlikuju po epolete, samo jo\u0161 upadljivije. Odlu\u010dili smo ne preterivati i koristili stari dobar na\u010din \u2014 vizuelnu diferencijaciju boje hla\u010da. Konkretno \u2014 po\u010deli smo praviti propusnice razli\u010ditih boja. Zelena, kao omiljena, odmah su uzeli na\u0161i administratori. <\/p>\n

Zvu\u010di jednostavno, ali to je izazvalo tri neo\u010dekivana efekta:<\/p>\n

    \n
  1. Bili su potrebni retraktori za automatsko uvla\u010denje ovih propusnica prilikom no\u0161enja (to su ure\u0111aji koji samostalno reguli\u0161u du\u017einu vrpce). Napisali smo tehni\u010dki zadatak, uzimaju\u0107i u obzir sve \u017eelje svih odeljenja. To je bila strate\u0161ka gre\u0161ka. Boja, format, materijal, retraktor ne plasti\u010dni, \u017eica od metala, da se logo nanese, da bude u\u0161iven u vrpcu. Ure\u0111aji su postali toliko skupi da je kasnije bilo potrebno smanjiti zahteve i promeniti format. <\/li>\n
  2. Kada je diferencijacija traka postala aktivna, postalo je vrlo prakti\u010dno. Izvo\u0111a\u010di imaju jedne trake, vanjski administratori druge, a na\u0161i administratori tre\u0107e. Jasno je ko ima koju ulogu. U elektroinstalacijama \u2013 samo sive, u klimatizaciji \u2013 plave. Onda su bile potrebne trake za voza\u010de (to je posebna uloga, mogu u\u0107i u zonu istovara, ali ne mogu je napustiti osim napolje). Pri tome voza\u010dima nisu potrebne propusnice. Isprva smo im davali trake bez propusnica. Potom su sigurnosni timovi zaklju\u010dili da je to vrlo \u010dudno i da omalova\u017eava dostojanstvo voza\u010da. Oni imaju svoju vojnu logiku, pa sada voza\u010di dolaze po propusnicu odmah s trakama, ali ta propusnica nigdje ne vodi. Sa stanovi\u0161ta za\u0161tite to postaje marker koji ozna\u010dava da je ta osoba provjerena. <\/li>\n
  3. Jedan od na\u0161ih in\u017eenjera predlo\u017eio je da umjesto traka napravimo uniformirane d\u017eempere zelene boje. I poslao je predlog za racionalizaciju. Napravili smo polovi\u010dno: propusnice s trakama su ostale, plus smo zapravo sa\u0161ili zelene uniformirane d\u017eempere. Sada imamo uniformu za administratore. Sigurnosni timovi su podr\u017eali \u0161alu i uvrstili je u propise. Sada je obavezna (pantalone, ko\u0161ulja, d\u017eemper, ali d\u017eemper se mo\u017ee skinuti). <\/li>\n<\/ol>\n

    \nNa\u0161i klijenti su se \u010desto \u017ealili na pogre\u0161ne rute na kartama do ulaza u na\u0161 data centar \"Kompresor\". Upi\u0161e\u0161 adresu, a put se prikazuje neto\u010dno. Posjetitelji su na kraju skretali na pogre\u0161no mjesto jer tu je \u017eeljezni\u010dka pruga, a iza nje gu\u017eva, i nije mogu\u0107e skrenuti. Isprva smo htjeli postaviti oznake iznad puta. Grad nudi tu uslugu \u2013 postaviti \u017eute dodatne oznake ispod obi\u010dnih, smatraju se reklamom. Cijena za njih je kao za reklamu: na auto-putu Entuziasta jedna oznaka ko\u0161ta milion rubalja godi\u0161nje. Paralelno smo kontaktirali Yandex, i oni su \u010dak iznenada odgovorili. I prestali su s nedisciplinom. \u010cak je mogu\u0107e ozna\u010diti diode na vratima: ulaz kroz jedne, izlaz kroz druge. <\/p>\n

    Google, ako nas \u010ditate, znajte: imate problem koji jo\u0161 uvijek postoji, i ne znamo kome to re\u0107i da nas \u010duje. <\/p>\n

    U pozivnim e-mailovima umetnuli smo linkove ne samo na adresu, ve\u0107 i na adresu s planiranim putem od geo-lokacije korisnika. Na kraju su gre\u0161ke postale manje. <\/p>\n

    Gobo projektori i druge sitnice<\/h3>\n

    \nZnate li \u0161to su gobo projektori? Mi tako\u0111er nismo znali. Razmi\u0161ljali smo o tome kako ozna\u010diti redove stalaka. Stalci su, naravno, ozna\u010deni posebnim brzim oznakama, ali su vidljivi samo s udaljenosti od metar ili dva. Samo dvorana ima 500 kvadratnih metara, tako da se tamo lako mo\u017eete izgubiti. Stoga smo se ipak posvetili ozna\u010davanju redova. Po\u010deo je brainstorming. Kako ozna\u010diti, s \u010dim i gdje? Na podu, na zidu, oznake na stropu itd. I tu je na\u0161 kolega primijetio da su u \u201eIkei\u201d ranije postojale istro\u0161ene naljepnice na podu, a zatim su se pojavile svjetlosne strelice. Pa smo odlu\u010dili jednostavno reversirati: oti\u0107i u \u201eIkeu\u201d i provjeriti jedan od projektora. Nismo uspjeli do\u0107i do njega: dok smo nosili stolice, prodava\u010d nas je upitao \u0161to radimo. A odmah je pomogao, rekav\u0161i da je to gobo. Ispostavilo se da to nije sam projektor, ve\u0107 plo\u010da ili le\u0107a za obojenu sliku. Taj svjetlosni filter je gobo. Jedan projektor ko\u0161ta od 40 tisu\u0107a rubalja (tamo je sna\u017ena \u017earulja za dnevnu uporabu), a imamo 14 redova u svakoj od \u010detiri ma\u0161inske dvorane. Stoga smo zalijepili naljepnice. <\/p>\n

    Tako\u0111er, imamo sheme na zidovima koje s godinama izblijede. Zamijenili smo ih s laminiranim, s \u201eutkanim\u201d posebnim d\u017eepovima za revizorre. Revizor u na\u0161em slu\u010daju je glavni in\u017eenjer, \u010dija je du\u017enost provjeriti a\u017eurnost svih shema postavljenih u podatkovnom centru. Dakle, sve sheme moraju se godi\u0161nje provjeravati i potpisivati od strane tog revizorra. A prisutnost posebnog malog dnevnika u d\u017eepu sheme olak\u0161ava postupak i ne zahtijeva zamjenu same sheme svake tri godine. Profit!<\/p>\n

    Radili smo rotacijsku \u010disto\u0107u la\u017enog poda izvana. Imamo redovite \u010di\u0161\u0107enja, postoje metodologije i vrijeme provo\u0111enja \u010di\u0161\u0107enja. No, od kota\u010da te\u0161kih stalaka ostaju tragovi. Napravili smo \u010di\u0161\u0107enje. Sada se brinemo: vizualna razlika nije drasti\u010dna, ali su se pojavile refleksije pod odre\u0111enim kutovima kod odre\u0111enih ljudi, onih koji imaju svoje markere po svom ukusu. Sada razmi\u0161ljamo i tra\u017eimo neku kemiju koja \u0107e posvijetliti pod i dati mu sjaj. Tako da ne bude ni kod odabranih pitanja.<\/p>\n

    Jeste li vidjeli konzolne stalke? To su kao mobilni banketni stolovi, samo \u0161to umjesto pi\u0107a imaju terminal za povezivanje u stalak. No, kod ovih konzolnih stalaka kota\u010di se otka\u010de i zapinju, kao kod kolica u supermarketu. Iscrpilo nas je to nevjerojatno. Na kraju je jedini mogu\u0107i na\u010din kako ih spasiti \u2014 kupiti novo kolo. A kota\u010de za na\u0161e modele nije bilo lako nabaviti, pitali smo sve dobavlja\u010de. Na kraju smo sami projektirali stalak prema svojim potrebama, fokusiraju\u0107i se na lako\u0107u kretanja po prodajnom prostoru i mogu\u0107nost popravka. Ispalo je jako dobro. <\/p>\n

    Imali smo pri\u010du o sinteti\u010dkim \u010darapama. Postoji takva stvar \u2014 antistati\u010dke narukvice. To je kada pri\u0111ete stajalu, pove\u017eete narukvicu sa zemljom na stajalu, i ona se povezuje sa sustavom izjedna\u010davanja potencijala. Tako, stajalna povr\u0161ina je uzemljena, ali se mo\u017ee dogoditi da in\u017eenjer nije uzemljen. Kolege iz prethodnih radnih mjesta pri\u010dali su kako su nekoliko puta vidjeli iskrice na videonadzoru, pa smo kod sebe odlu\u010dili od svih zlo, obvezati svakoga da se prema pravilniku koristi. <\/p>\n

    Kriti\u010dni incidenti<\/h3>\n

    \nSeriozno, dogodila se situacija kada su svi chillere odjednom prestali raditi. Chillere nemamo za\u0161ti\u0107ene UPS-om, jer vjerujemo u fiziku, a kao rezervu za temperaturu imamo bazen s ohla\u0111enom vodom. Kada ne\u0161to isklju\u010di, potrebna nam je ne baterija za napajanje chillera, koji hlade vodu, ve\u0107 jednostavno hladna voda koja je ve\u0107 spremna. Udobno i jednostavno, ali postoji problem. Na chillerima je za\u0161titna automatika koja ih isklju\u010duje pri opasnim parametrima elektri\u010dne mre\u017ee. Kada se ulaz isklju\u010di, uklju\u010dujemo DGU, i chillere dalje napajamo iz njih. Sve bi to bilo dobro da ne \u017eivimo u Rusiji. Imali smo mnogo padova u mre\u017ei, ali do sada je sve bilo u redu. Me\u0111utim, jednom je do\u0161lo do o\u0161trog skoka, prvo prema dolje, zatim naglo prema gore, pa opet prema dolje \u2013 parametri ulaza su se mijenjali otprilike \u010detiri puta u nekoliko sekundi. Chillere su se naravno isklju\u010dili. Poku\u0161ali smo ih prvo uklju\u010diti daljinski, ali su se vrlo pouzdano za\u0161titili, hitno. Morali smo i\u0107i na krov i ru\u010dno ih uklju\u010divati. \u0160to je va\u017eno, prema Tier III standardu, takva situacija je legitimni razlog za zaustavljanje data centra. Mi nismo imali zaustavljanje, jer su ljudi na terenu pametni, i imamo obuku i vje\u017ebe. Zbog toga nas je UI redovito provjeravao kako bi se uvjerio u TIII Operativnost. Ako i\u0161ta, pro\u0161li smo recertifikaciju UI za TIII Gold \u2013 Operativna Odr\u017eivost. Na ruskom komercijalnom tr\u017ei\u0161tu data centara nema ni\u010deg boljeg, osim na\u0161eg, a s takvom izvrsno\u0161\u0107u ima samo jedan. Data centar<\/a><\/noindex>Istaknuo bih da je te\u017ee recertificirati se nego dobiti certifikat od nule, jer provjeravaju i pro\u0161li period kao da je problemati\u010dan, a potrebno je mnogo vi\u0161e dokaza.<\/p>\n

    Bila je zanimljiva epizoda s kamerama. Odlu\u010dili smo prebrojati slijepe to\u010dke za svaki slu\u010daj, nacrtali smo presjeke, izgradili dijagonale kutova gledanja na planu, i iznenada smo prona\u0161li mrtvu to\u010dku od otprilike 30 centimetara na 15 metara, upravo u sredi\u0161tu jedne od dvorana. Uska i duga. U susjednoj dvorani takve nema. Ispostavilo se da se okretna kamera polako pomicala godinama, da je sada pokazivala otprilike jedan i pol stupanj lijevo od potrebnog krajnjeg polo\u017eaja. <\/p>\n

    Osim toga, bilo je velikog slu\u010daja u postu o popravnoj zamjeni DDI UPS-a.<\/a><\/noindex>.<\/p>\n

    Linkovi<\/h3>\n

    <\/p>\n