Jag sÀger genast: den dÀr rÄttan i servern, som vi gav te för ett par Är sedan efter en elektrisk stöt, rymde troligen. För vi sÄg en gÄng hennes kompis pÄ en runda. Och vi bestÀmde oss omedelbart för att installera ultraljudsrepellers.
Nu finns det ett förbannat land runt datacentret: inga fÄglar kommer att landa pÄ byggnaden, och förmodligen har alla mullvadar och maskar rymt. Var orolig för det orsakar hÄrddiskfel, men kontrolleras, frekvenserna Àr inte desamma.
NÀsta historia Àr mycket roligare. En gÄng fick vi en hÄrdvara för ett par miljoner rubel i en lÄda med lutnings-, vibrations- och fuktighetssensorer. Allt Àr helt. Tog försiktigt bort förpackningen och jÀrnbiten böjdes. Mystiker.
Kroppen Àr rak i en bÄge. SÄ vacker.
Detektiv
Vi skulle inte lÀgga nÄgon vikt vid detta, eftersom den böjda metallkroppen nÀstan var en designbild. SÄ vacker, inga chips. Och om det inte vore för andra liknande hÄrdvaror i nÀrheten, skulle vi inte ens ha tÀnkt pÄ att nÄgot var fel vid uppackningen. Men i nÀrheten fanns samma, bara med en mer regelbunden geometrisk form.
Lyckligtvis filmas uppackningen av sÄdan hÄrdvara (jag rekommenderar att alla skaffar sig denna vana), sÄ vi kunde bevisa för tillverkaren att det kom sÄ hÀr. En intakt förpackning och en snyggt böjd kropp Àr inte ett slag frÄn flyttarna. Troligtvis skadades hon redan innan hon lÀmnade till Ryssland.
SĂ€ljaren sĂ€ger: "Ăh, killar, lĂ„t oss byta det Ă„t er direkt under garantin." Och sedan vĂ€ntade ett episkt bakhĂ„ll pĂ„ oss.
Faktum Àr att tullen tillÄter oss att importera sÄdan utrustning med dokument utan rÀtt att exportera. Det vill sÀga, du kan ta med den, men du kan inte sÀlja den vidare till nÄgon utanför Ryssland. NÀr vi till exempel skickar tillbaka en utbrÀnd strömförsörjning Àr allt klart. Detta Àr en reservdel, en strömförsörjning.
Och sedan var jag tvungen att skicka tillbaka allt:
â Killar, titta, vi skickar tillbaka hĂ„rdvaran till tillverkaren.
- Hela utrustningen?
- Ja.
â Modellera sĂ„ och sĂ„?
- Ja.
- Kan fungera?
â Vi vet inte, vi slog inte pĂ„ det.
â SĂ„ det hĂ€r Ă€r en hel utrustning.
â Nja, det fungerar inte.
â Tja, titta, hela utrustningen Ă€r av den hĂ€r modellen. Inga Ă„terexportrĂ€ttigheter. Vi slĂ€pper inte in dig.
Generellt sett blev det mycket huk innan vi kom pÄ att vi inte exporterade det, utan gav tillbaka det. Till slut lyckades vi göra allt.
Det fanns Àven skoöverdrag
Först för mÄnga Är sedan hade vi den första automatiska, en administratörs dröm. Du lastar in ett paket skoskydd dÀr, den packar upp dem sjÀlv, öppnar dem och sÀtter dem i ett lÀge dÀr du bara behöver trampa pÄ dem. Chp-chpk och det Àr klart.
Efter ungefÀr ett halvÄr tuggade hon igenom ett hundratal förpackningar skoöverdrag och kvÀvdes. Det visade sig att det finns sÄ mÄnga rörliga delar att vi antingen behöver reparera det en gÄng i mÄnaden vid vÄr last (vi har mÄnga kundingenjörer som gÄr runt pÄ anlÀggningen, eftersom vi Àr ett kommersiellt datacenter), eller sÄ mÄste vi köpa en ny.
Det andra problemet Àr att vi senare, under en av de vanliga stÀdningarna, pÄ nÄgot sÀtt hittade en "liten blÄ trasa" som hÀngde pÄ gallret pÄ ett av teststÀllena. Den rÀttsmedicinska experten, representerad av en X-Team-ingenjör, identifierade ett fragment av skoskyddets kropp. Det visade sig att det var bekvÀmt att bÀra skoskydd pÄ kliniken: jag gick runt i en halvtimme och det var allt. Och vissa ingenjörer kan arbeta med hÄrdvara hela dagen. Blandar fötterna. Blandar mycket. Och skoskydden slits ut i dessa smÄ strimlor som flyger runt i turbinhallen.
Vi köpte nÀstan direkt ett nytt skoskydd. Vi tog ett termiskt stövelfodral: det hÀr Àr en maskin i vilken film laddas, och den vÀrmekrymper försiktigt filmen ovanpÄ skon. Vacker, effektiv, hÄllbar. Mindre spridning. Vi hade det ganska lÀnge, men vi var tvungna att byta krympfilm ungefÀr en gÄng var 1-2:e timme, eftersom sulan tenderade att ramla av av sig sjÀlv.
Först trodde vi att vi hade otur, men folk löser det hÀr problemet pÄ nÄgot sÀtt. Men nej. Vi frÄgade vÄra vÀsterlÀndska kollegor - samma historia. Som ett resultat började de fundera pÄ hur de skulle göra normalt. Att ÄtervÀnda frÄn turbinhallen för nya skoöverdrag Àr, Àrligt talat, en so-so idé. Vi hittade industristÀdare för byggarbetsplatser och industrier. Det Àr ungefÀr som stigar lÀngs vilka skiftet gÄr in i verkstaden. Banor med ett gÀng rullar rengör allt, och Àr gjorda pÄ ett sÄdant sÀtt att vare sig du vill det eller inte sÄ kommer det att fÄnga och rengöra. De kostar en halv miljon till en miljon rubel. Vi grÀvde runt och hittade samma för 200 tusen, men du fÄr sÀtta foten i den sjÀlv. Den liknar i storlek en skoputsmaskin. Du kommer upp, trycker in foten dÀr, hon tuggar den och ger den tillbaka ren. De placerade den vid ingÄngen till datacentret.
Det fungerar utmÀrkt förutom tvÄ problem. Den första Àr att det snabbt stod klart att detta Àr normalt för oss ingenjörer. Men i praktiken kommer en mÀngd olika personer till datacentret för att titta, inklusive toppchefer för stora företag. Med skor gjorda av lÀder frÄn en drakrumpa. Och Àven för att applicera krÀm pÄ skor kostar deras borste mer Àn mina trÀningssneakers, de vÀljer borsten speciellt. Det var de som vÀgrade att sÀtta sina fötter i vÄr mirakelapparat. Det andra problemet uppstod pÄ vintern: nÀr skorna verkligen Àr i en enda röra kan de inte fÄ ut allt ur den djupa slitbanan. Sedan gÄr du runt i hallen och lÀmnar spÄr av ektoplasma.
Vi bestĂ€mde oss helt enkelt. Vi placerade ett rullat skoskydd bredvid. ĂndĂ„ mĂ„ste vi duplicera allt enligt standarden.
Ett nytt problem har uppstÄtt. NÀr vi observerade beteendet hos kundingenjörer sÄg vi följande bild: de stack först in fötterna i maskinen för rengöring och krokade sedan skoskydd frÄn ett rullat skoskydd. Nu har de satt upp en skylt att det Àr antingen det ena eller det andra, och det Àr bÀttre att stÀda sjÀlv, men om livets principer förbjuder att rengöra dina skor, anvÀnd dÄ skoskydd. Det verkar som att biljetten, som var pÄ ett par dagar, men varade lÀnge, var stÀngd. HÀr Àr enheten:
"ku" tvÄ gÄnger
Enligt PCI DSS-kraven mĂ„ste du visuellt kunna urskilja rollerna för personer som finns i datacentret. Utan att titta noga pĂ„ passet och lĂ€sa nĂ„got dĂ€r, utan direkt visuellt, som militĂ€r personal sĂ€rskiljer varandra med sina axelband, bara Ă€nnu ljusare. Vi bestĂ€mde oss för att inte visa upp oss och anvĂ€nde den gamla goda Chatlan-metoden â fĂ€rgdifferentiering av byxor. Specifikt började de göra passband i olika fĂ€rger. VĂ„ra administratörer tog genast Green som sin favorit.
Det lÄter enkelt, men det orsakade tre ovÀntade effekter:
- Upprullare behövdes för att automatiskt dra tillbaka dessa pass nÀr de var slitna (detta Àr saker som sjÀlva reglerar lÀngden pÄ tejpen). Vi skrev en teknisk specifikation som tog hÀnsyn till alla avdelningars önskemÄl. Detta var ett strategiskt misstag. FÀrg, format, material, upprullaren Àr inte av plast, fiskelinan Àr gjord av metall för att applicera logotypen sÄ att den sys fast i tejpen. Bitarna visade sig vara sÄ dyra att vi dÄ fick skÀra av kraven och Àndra formatet.
- NÀr vÀl differentieringen av byxorna började fungera blev det vÀldigt bekvÀmt. Entreprenörer har vissa band, externa administratörer har andra och vÄra administratörer har andra. Du kan se vem som har vilken roll. För el - endast grÄ, för luftkonditionering - blÄ. Och dÄ behövde vi band för förare (detta Àr en separat roll, de kan komma in i lossningsomrÄdet, men kan inte lÀmna det förutom utanför). Förare behöver inget pass. Först gav vi dem band utan pass. DÄ beslutade ordningsvakterna att detta var helt mÀrkligt och förnedrande för förarnas mÀnniskovÀrde. De har sin egen militÀra logik, sÄ nu kommer förare för att fÄ ett pass omedelbart med ett band, men det hÀr passet tillÄter dem inte att Äka nÄgonstans. Ur sÀkerhetssynpunkt visar det sig vara en markering för att sÀkerheten har kontrollerat denna person.
- En av vÄra ingenjörer föreslog att göra gröna uniformströjor istÀllet för band. Och han skickade ett rationaliseringsförslag. De gjorde det halvvÀgs: de lÀmnade passen med bandet, plus att de faktiskt sydde de gröna uniformströjorna. Nu har vi en administratörsuniform. SÀkerhetsvakter stödde skÀmtet och tog in det i regelverket. Nu Àr det obligatoriskt (byxor, skjorta, tröja, men tröjan kan tas av).
VÄra kunder klagade ocksÄ ofta pÄ krokiga rutter pÄ kartorna innan de gick in i vÄrt Compressor-datacenter. Du anger adressen, men vÀgen visas felaktigt. Det slutade med att besökarna taxade Ät fel hÄll, eftersom det fanns en jÀrnvÀg dÀr, och bakom den var det trafikstockning, och det fanns ingen möjlighet att vÀnda dÀr. Först ville vi sÀtta skyltar ovanför vÀgen. Staden har en sÄdan tjÀnst - placera gula tillÀggsskyltar under de vanliga skyltarna, de anses vara reklam. Och priset för dem Àr som reklam: pÄ Entuziastov Highway kostar en skylt en miljon rubel om Äret. Samtidigt skrev vi till Yandex, och de svarade till och med plötsligt. Och de slutade agera. Du kan till och med ange gatedioderna: ingÄng genom vissa, utgÄng genom andra.
Google, om du lÀser oss, vet dÄ: du har fortfarande ett problem och vi vet inte vem vi ska berÀtta om det sÄ att vi kan höras.
Inbjudningsbreven innehöll lÀnkar inte bara till en adress, utan till en adress med en rutt baserad pÄ anvÀndarens geolokalisering. Som ett resultat blev det fÀrre missar.
Gobo-projektorer och andra smÄsaker
Vet du vad gobo-projektorer Àr? Vi visste inte heller. PÄ nÄgot sÀtt funderade vi pÄ hur vi skulle markera raderna med stÀll. SjÀlva stativen Àr förstÄs mÀrkta med speciella snabbutlösningsmarkeringar, men de syns pÄ 1-2 meters avstÄnd. SjÀlva hallen Àr 500 kvm, sÄ det finns gott om plats att gÄ vilse dÀr. DÀrför började vi Àntligen markera raderna. En brainstorm har börjat. Hur markerar man, med vad och var? PÄ golvet, pÄ vÀggen, skyltar i taket osv. Och sÄ sÄg vÄr kollega att det pÄ Ikea brukade vara klistermÀrken som bar av pÄ golvet, och dÄ dök det upp ljuspilar. Tja, vi bestÀmde oss för att vÀnda pÄ det pÄ ett enkelt sÀtt: gÄ till Ikea och vÀnd ut en av projektorerna för att titta. Vi kunde inte fÄ det: medan vi bar stolarna frÄgade sÀljaren vad vi gjorde. Och han hjÀlpte genast till och sa att det var en gobo. Det visar sig att detta inte Àr sjÀlva projektorn, utan en platta eller lins för en fÀrgbild. Detta filter Àr en gobo. En projektor kostar frÄn 40 tusen rubel (det finns en kraftfull lampa för dagtid), och vi har 14 rader i vart och ett av de fyra maskinrummen. Det Àr dÀrför vi sÀtter klistermÀrken pÄ den.
Vi har Àven diagram pÄ vÀggarna som bleknar med Ären. Vi bytte dem till laminerade, med speciella "insydda" fickor för revisorer. I vÄrt fall Àr inspektören chefsingenjören, vars ansvar inkluderar att kontrollera relevansen av alla system som finns i datacentret. SÄ alla system mÄste kontrolleras Ärligen och undertecknas av en sÄdan revisor. Och nÀrvaron av en speciell liten tidning i diagrammets ficka gör denna procedur lÀttare och krÀver inte att sjÀlva diagrammet byts ut vart tredje Är. Vinst!
Vi gjorde en roterande rengöring av det upphöjda golvet utanför. Vi har regelbundna stÀdningar, vi har stÀdmetoder och tider. Men hjulen pÄ de tunga stÀllen lÀmnar spÄr. Vi stÀdade. Nu Àr vi nervösa: det ser inte mycket snyggare ut, men höjdpunkter har dykt upp frÄn vissa vinklar för vissa mÀnniskor, ja, som har sina egna tuschpennor för att passa deras smak. Nu funderar vi pÄ det och letar efter nÄgon slags kemikalie som ska bleka golvet och tillföra glans. SÄ att inte ens de utvalda har frÄgor.
Har du sett konsolhyllorna? Dessa Àr som resande buffébord, men istÀllet för drycker finns en terminal för anslutning till hyllan. SÄ, pÄ dessa fribÀrande stÀllningar, faller hjulen av och fastnar, som vagnar i en stormarknad. Vi Àr otroligt trötta. Som ett resultat Àr det enda möjliga sÀttet att Äteruppliva det att köpa ett nytt hjul. Men det gick inte lÀngre att fÄ hjul specifikt för vÄra modeller, vi intervjuade alla entreprenörer. Som ett resultat designade vi racket sjÀlva, med fokus pÄ enkel rörelse i maskinrummet och underhÄllsbarhet. Det gick vÀldigt bra.
Det fanns en historia med syntetiska strumpor. Det finns en sÄdan sak - antistatiska armband. Det Àr nÀr du gÄr till stativet, kopplar armbandet till marken pÄ stativet, och det kommunicerar med potentialutjÀmningssystemet. SÄ racket Àr jordat, men det kan visa sig att ingenjören inte Àr jordad. Kollegor frÄn tidigare arbetsplatser berÀttade hur de sÄg gnistor pÄ videoövervakning ett par gÄnger, och vi bestÀmde oss för att av synd tvinga alla att anvÀnda den direkt enligt bestÀmmelserna.
Kritiska incidenter
Mer allvarligt var det en situation dÀr alla kylare stÀngdes av pÄ en gÄng. VÄra kylaggregat skyddas inte av en UPS, eftersom vi tror pÄ fysik, och vi har en pool med kallt vatten som temperaturreserv. Om nÄgot slocknar behöver du inte batterier för att driva kylaggregaten som kyler vattnet, utan helt enkelt sjÀlva kallvattnet, redan klart. BekvÀmt och enkelt, men det finns en nyans. Kylaggregaten Àr utrustade med automatisk sÀkerhetsutrustning, som stÀnger av dem i hÀndelse av farliga parametrar i det elektriska nÀtverket. Om ingÄngen Àr avstÀngd slÄr vi pÄ dieselgeneratorset, och sedan drivs kylarna frÄn dem. Allt skulle vara bra om vi inte bodde i Ryssland. Vi hade nÀtavbrott mÄnga gÄnger, men allt var bra. Men en dag var det ett kraftigt hopp, först ner, sedan kraftigt upp, sedan ner igen - pÄ nÄgra sekunder Àndrades ingÄngsparametrarna cirka 4 gÄnger. Kylaggregaten stÀngdes av förstÄs. Vi försökte först slÄ pÄ dem pÄ distans, men de skyddade sig mycket tillförlitligt, som en nödsituation. Skiftet fick gÄ med fötterna pÄ taket och slÄ pÄ dem manuellt. Vad som Àr viktigt, enligt TierIII-standarden, Àr en sÄdan situation ett legitimt skÀl för att stÀnga ned datacentret. Vi hade inget stopp, för folk Àr pÄ marken med huvudet, och det finns övningar. För detta knullade anvÀndargrÀnssnittet oss helt enkelt regelbundet, för att vara sÀker pÄ TIII Operational. Om nÄgot sÄ har vi godkÀnt UI-omcertifieringen till TIII Gold - Operational Sustainability. PÄ den ryska kommersiella marknaden för datacenter finns det inget coolare, förutom vÄr, bara en har samma prestation . Jag noterar att omcertifiering Àr svÄrare Àn att fÄ ett intyg frÄn grunden, eftersom de kontrollerar föregÄende period som om du inte var dig sjÀlv, och det krÀvs mycket mer bevis.
Det var en intressant incident med kamerorna. Vi bestÀmde oss för att rÀkna om de döda vinklarna för sÀkerhets skull, ritade korsningar, ritade in diagonaler av betraktningsvinklar pÄ planen, och plötsligt hittade vi en död flÀck pÄ cirka 30 centimeter gÄnger 15 meter mitt i en av hallarna. Smal och lÄng. Det finns inget sÄdant i nÀsta rum. Det visade sig att den roterande kameran sakta hade rört sig under Ären sÄ att den började visa ungefÀr en och en halv grad Ät vÀnster Àn vad den borde i yttersta lÀget.
Det var en annan stor incident i inlÀgget .
referenser
- Đž
- Min e-postadress: PGoryunov@croc.ru
KĂ€lla: will.com
