Jeg vil sige med det samme: den rotte i den medbragte server, som vi gav te for et par år siden efter et elektrisk stød, slap højst sandsynligt. For vi så engang hendes veninde på en runde. Og vi besluttede straks at installere ultralydsrepellere.
Nu er der et forbandet land omkring datacentret: ingen fugle vil lande på bygningen, og sandsynligvis er alle muldvarpe og orme undsluppet. Var bekymret over det forårsage HDD-fejl, men kontrolleret, er frekvenserne ikke de samme.
Den næste historie er meget sjovere. Vi modtog engang et stykke hardware til et par millioner rubler i en æske med hældnings-, vibrations- og fugtsensorer. Alt er hel. Fjernede forsigtigt emballagen, og jernstykket blev bøjet. Mystiker.
Kroppen er lige i en bue. Så smuk.
Detektiv
Det ville vi ikke lægge vægt på, for det buede metalhus var nærmest et designbillede. Så smuk, ingen chips. Og hvis det ikke var for andre lignende stykker hardware i nærheden, ville vi ikke engang have tænkt på at pakke ud, at der var noget galt. Men i nærheden var der de samme, kun med en mere regelmæssig geometrisk form.
Heldigvis bliver udpakningen af sådan hardware filmet (jeg anbefaler, at alle får denne vane), så vi var i stand til at bevise over for producenten, at det ankom sådan. En intakt pakke og en pænt bøjet krop er ikke et slag fra flyttemændene. Mest sandsynligt blev hun skadet, allerede inden hun tog afsted til Rusland.
Sælgeren siger: "Øh, gutter, lad os ændre det for jer med det samme under garantien." Og så ventede os et episk baghold.
Faktum er, at toldvæsenet tillader os at importere sådant udstyr med dokumenter uden ret til at eksportere. Det vil sige, du kan medbringe det, men du kan ikke sælge det videre til nogen uden for Rusland. Når vi for eksempel sender en udbrændt strømforsyning tilbage, er alt klart. Dette er en reservedel, en strømforsyning.
Og så skulle jeg sende alt tilbage:
- Gutter, se, vi sender hardwaren tilbage til producenten.
- Helt udstyr?
- Ja.
— Model sådan og sådan?
- Ja.
- Kan du arbejde?
- Vi ved det ikke, vi tændte det ikke.
- Så det her er et helt stykke udstyr.
- Jamen, det virker ikke.
- Se, hele udstyret er af denne model. Ingen re-eksportrettigheder. Vi vil ikke lukke dig ind.
Generelt var der en del hug, før vi fandt ud af, at vi ikke eksporterede det, men gav det tilbage. Til sidst lykkedes det os at gøre alt.
Der var også skoovertræk
Først for mange år siden havde vi den første automatiske, en administrators drøm. Du lægger en pakke skoovertræk derinde, den pakker dem selv ud, åbner dem og sætter dem i en position, hvor du bare skal træde på dem. Chp-chpk og det er gjort.
Efter omkring seks måneder tyggede hun omkring hundrede pakker skoovertræk igennem og blev kvalt. Det viste sig, at der er så mange bevægelige dele, at vi enten skal reparere det en gang om måneden ved vores last (vi har mange kundeingeniører, der går rundt på anlægget, fordi vi er et kommercielt datacenter), eller også skal vi købe en ny.
Det andet problem er, at vi senere, under en af de almindelige rengøringer, på en eller anden måde fandt en "lille blå klud" hængende på risten på et af stativerne til vores test. Den retsmedicinske ekspert, repræsenteret af en X-Team-ingeniør, identificerede et fragment af skoovertrækkets krop. Det viste sig, at det var praktisk at bære skoovertræk på klinikken: Jeg gik rundt i en halv time, og det var alt. Og nogle ingeniører kan arbejde med hardware hele dagen. Blander fødder. Blander meget. Og skoovertrækket slides i disse små stykker, der flyver rundt i turbinehallen.
Vi købte næsten med det samme et nyt skoovertræk. Vi tog en termisk støvlekuffert: dette er en maskine, som film fyldes i, og den varmekrymper forsigtigt denne film oven på skoen. Smuk, effektiv, holdbar. Mindre spredning. Vi havde den ret længe, men vi skulle skifte krympefilm cirka en gang hver 1-2 time, fordi sålen havde en tendens til at falde af af sig selv.
Først troede vi, at vi var uheldige, men folk løser på en eller anden måde dette problem. Men nej. Vi spurgte vores vestlige kolleger - den samme historie. Som følge heraf begyndte de at tænke over, hvordan de skulle gøre det normalt. At vende tilbage fra turbinehallen efter nye skoovertræk er ærlig talt en halvdårlig idé. Vi fandt industrielle rengøringsmidler til byggepladser og industrier. Det er noget i retning af stier, ad hvilke skiftet går ind i værkstedet. Stier med en masse ruller renser alt, og er lavet sådan, at uanset om du vil have det eller ej, så fanger det og gør rent. De koster en halv million til en million rubler. Vi gravede rundt og fandt den samme til 200, men den skal du selv sætte foden i. Den svarer i størrelse til en skopudsermaskine. Du kommer op, skubber din fod derind, hun tygger den og giver den ren tilbage. De placerede den ved indgangen til datacentret.
Det fungerer godt bortset fra to problemer. Den første er, at det hurtigt blev klart, at dette er normalt for os ingeniører. Men i praksis kommer en række mennesker til datacentret for at se, herunder topledere i store virksomheder. Med sko lavet af læder fra en dragerøv. Og selv for at påføre creme på sko, koster deres børste mere end mine træningssneakers, de vælger specielt børsterne. Det var dem, der nægtede at sætte deres fødder ind i vores mirakelapparat. Det andet problem opstod om vinteren: Når skoene er virkelig rodede, kan de ikke få alt ud af den dybe slidbane. Så går du rundt i hallen og efterlader spor af ektoplasma.
Vi besluttede simpelthen. Vi placerede et rullet skobetræk ved siden af. Alligevel skal vi duplikere alt i henhold til standarden.
Et nyt problem er opstået. Da vi observerede kundeingeniørernes adfærd, så vi følgende billede: de stak først deres fødder ind i maskinen til rengøring og krogede derefter skoovertræk fra et rullet skoovertræk. Nu har de sat et skilt op om, at det enten er det ene eller det andet, og det er bedre at gøre rent selv, men hvis livets principper forbyder at rense dine sko, så tag skoovertræk på. Det ser ud til, at billetten, som var for et par dage, men holdt i lang tid, var lukket. Her er enheden:
"ku" to gange
I henhold til PCI DSS-kravene skal du være i stand til visuelt at skelne rollerne for personer, der befinder sig i datacentret. Uden at se nærmere på passet og læse noget der, men direkte visuelt, som militært personel adskiller hinanden ved deres skulderstropper, kun endnu lysere. Vi besluttede os for ikke at vise os frem og brugte den gode gamle Chatlan-metode – farvedifferentiering af bukser. Specifikt begyndte de at lave pasbånd af forskellige farver. Vores administratorer tog straks Green som deres favorit.
Det lyder enkelt, men det forårsagede tre uventede effekter:
- Retraktorer var nødvendige for automatisk at trække disse gennemløb tilbage, når de var slidte (dette er ting, der selv regulerer båndets længde). Vi skrev en teknisk specifikation, der tog højde for alle ønsker fra alle afdelinger. Dette var en strategisk fejltagelse. Farve, format, materiale, retraktoren er ikke plastik, fiskelinen er lavet af metal til at påføre logoet, så det sys ind i båndet. Stykkerne viste sig at være så dyre, at vi så måtte skære kravene og ændre formatet.
- Da differentieringen af bukserne begyndte at virke, blev det meget praktisk. Entreprenører har nogle bånd, eksterne administratorer har andre, og vores administratorer har andre. Du kan se, hvem der har hvilken rolle. Til el - kun grå, til aircondition - blå. Og så havde vi brug for bånd til chauffører (dette er en separat rolle, de kan komme ind i aflæsningsområdet, men kan ikke forlade det undtagen udenfor). Chauffører behøver ikke et pas. Først gav vi dem bånd uden pas. Så besluttede sikkerhedsvagterne, at dette var fuldstændig mærkeligt og nedværdigende for chaufførernes menneskelige værdighed. De har deres egen militærlogik, så nu kommer chauffører for at modtage et pas med det samme med et bånd, men dette pas tillader dem ikke at gå nogen steder. Ud fra et sikkerhedsmæssigt synspunkt viser det sig at være en markør for, at security har tjekket denne person.
- En af vores ingeniører foreslog at lave grønne uniformstrøjer i stedet for bånd. Og han sendte et rationaliseringsforslag. De gjorde det halvvejs: de efterlod passet med båndet, plus at de faktisk syede de grønne uniformstrøjer. Nu har vi en administratoruniform. Sikkerhedsvagter støttede joken og inkluderede den i reglerne. Nu er det obligatorisk (bukser, skjorte, trøje, men trøjen kan tages af).
Vores kunder klagede også ofte over skæve ruter på kortene, inden de gik ind i vores Compressor-datacenter. Du indtaster adressen, men vejen vises forkert. Besøgende endte med at taxa i den forkerte retning, for der var en jernbane der, og bagved var der en trafikprop, og der var ingen måde at vende om der. Først ville vi sætte skilte over vejen. Byen har sådan en service - placer gule ekstra skilte under de sædvanlige skilte, de betragtes som reklamer. Og prisen for dem er som reklame: På Entuziastov Highway koster et skilt en million rubler om året. Samtidig skrev vi til Yandex, og de svarede endda pludselig. Og de holdt op med at optræde. Du kan endda specificere portdioderne: indgang gennem nogle, udgang gennem andre.
Google, hvis du læser os, så ved: du stadig har et problem, og vi ved ikke, hvem vi skal fortælle om det, så vi kan blive hørt.
Invitationsbreve indeholdt links ikke kun til en adresse, men til en adresse med en rute baseret på brugerens geolokation. Som følge heraf var der færre misser.
Gobo projektorer og andre småting
Ved du, hvad gobo-projektorer er? Det vidste vi heller ikke. På en eller anden måde tænkte vi på, hvordan vi skulle markere rækkerne af stativer. Selve stativerne er naturligvis markeret med specielle quick-release markeringer, men de kan ses på 1-2 meters afstand. Selve hallen er på 500 kvm, så der er god plads til at fare vild der. Derfor begyndte vi endelig at markere rækkerne. En brainstorm er begyndt. Hvordan markerer man, med hvad og hvor? På gulvet, på væggen, skilte på loftet mv. Og så så vores kollega, at der i Ikea plejede at være klistermærker, der blev slidt væk på gulvet, og så dukkede der lyspile op. Nå, vi besluttede at vende det om på en enkel måde: gå til Ikea og slå en af projektorerne ud for at se. Vi kunne ikke få det: Mens vi bar stolene, spurgte sælgeren, hvad vi lavede. Og han hjalp straks og sagde, at det var en gobo. Det viser sig, at dette ikke er selve projektoren, men en plade eller linse til et farvebillede. Dette filter er en gobo. En projektor koster fra 40 tusind rubler (der er en kraftig lampe til brug i dagtimerne), og vi har 14 rækker i hvert af de fire maskinrum. Derfor sætter vi klistermærker på den.
Vi har også diagrammer på væggene, der falmer med årene. Vi ændrede dem til laminerede, med specielle "indsyede" lommer til revisorer. I vores tilfælde er inspektøren chefingeniøren, hvis ansvar omfatter at kontrollere relevansen af alle ordninger placeret i datacentret. Så alle ordninger skal kontrolleres årligt og underskrives af sådan en revisor. Og tilstedeværelsen af et specielt lille magasin i lommen på diagrammet gør denne procedure lettere og kræver ikke udskiftning af selve diagrammet hvert tredje år. Profit!
Vi foretog en roterende rengøring af det hævede gulv udenfor. Vi har regelmæssige rengøringer, vi har rengøringsmetoder og tidspunkter. Men hjulene på de tunge stativer efterlader mærker. Vi gjorde rengøringen. Nu er vi nervøse: Det ser ikke meget pænere ud, men højdepunkter er dukket op fra bestemte vinkler for visse mennesker, ja, som har deres egne tuschpenne, der passer til deres smag. Nu tænker vi over det og leder efter en slags kemikalie, der vil blege gulvet og tilføje glans. Så selv de udvalgte ikke har spørgsmål.
Har du set konsolreolerne? Disse er som omrejsende buffetborde, men i stedet for drikkevarer er der en terminal til tilslutning til stativet. Så på disse udkragningsstativer falder hjulene af og sætter sig fast som vogne i et supermarked. Vi er utroligt trætte. Som et resultat er den eneste mulige måde at genoplive det på at købe et nyt hjul. Men det var ikke længere muligt at få hjul specifikt til vores modeller, vi interviewede alle entreprenørerne. Som et resultat har vi designet stativet selv med fokus på nem bevægelse rundt i maskinrummet og vedligeholdelse. Det lykkedes meget godt.
Der var en historie med syntetiske sokker. Der er sådan noget - antistatiske armbånd. Det er, når du går til stativet, forbinder armbåndet til jorden på stativet, og det kommunikerer med potentialudligningssystemet. Så stativet er jordet, men det kan vise sig, at ingeniøren ikke er jordet. Kolleger fra tidligere arbejdspladser fortalte os, hvordan de så gnister på videoovervågning et par gange, og vi besluttede af synd at forpligte alle til at bruge det direkte i henhold til reglerne.
Kritiske hændelser
Mere alvorligt var der en situation, hvor alle kølere blev afbrudt på én gang. Vores kølere er ikke beskyttet af en UPS, fordi vi tror på fysik, og vi har en pool med koldt vand som temperaturreserve. Hvis noget går ud, behøver du ikke batterier til at drive de kølere, der køler vandet, men blot selve det kolde vand, der allerede er klar. Praktisk og enkel, men der er en nuance. Kølerne er udstyret med automatisk sikkerhedsudstyr, som slukker dem i tilfælde af farlige parametre i det elektriske netværk. Hvis indgangen er slukket, tænder vi for dieselgeneratorsættet, og så får chillerne strøm fra dem. Alt ville være fint, hvis vi ikke boede i Rusland. Vi havde netværkssvigt mange gange, men alt var fint. Men en dag var der et skarpt hop, først ned, så kraftigt op, så ned igen - på få sekunder ændrede inputparametrene sig omkring 4 gange. Kølerne slukkede selvfølgelig. Vi forsøgte først at tænde dem eksternt, men de beskyttede sig selv meget pålideligt, som en nødsituation. Skiftet skulle gå med fødderne på taget og tænde dem manuelt. Hvad der er vigtigt, ifølge TierIII-standarden, er en sådan situation en legitim grund til at lukke datacentret ned. Vi havde ikke et stop, for folk er på jorden med hovedet, og der er øvelser med øvelser. Til dette kneppede brugergrænsefladen os simpelthen regelmæssigt for at være sikker på TIII Operational. Om noget har vi videregivet UI-recertificering til TIII Gold - Operational Sustainability. På det russiske kommercielle marked for datacentre er der ikke noget sejere, bortset fra vores, kun én har den samme præstation . Jeg bemærker, at gencertificering er sværere end at få et certifikat fra bunden, da de tjekker den foregående periode, som om du ikke var dig selv, og der kræves meget mere bevis.
Der var en interessant hændelse med kameraerne. Vi besluttede at genberegne de blinde vinkler for en sikkerheds skyld, tegnede kryds, tegnede diagonaler af betragtningsvinkler på planen, og pludselig fandt vi en blind vinkel på omkring 30 centimeter gange 15 meter lige i midten af en af hallerne. Smal og lang. Sådan noget er der ikke i det næste rum. Det viste sig, at det roterende kamera langsomt havde bevæget sig gennem årene, så det begyndte at vise omkring halvanden grad til venstre, end det burde i yderpositionen.
Der var endnu en stor hændelse i posten .
RЎSЃS <P "RєRё
- и
- Min mail: [e-mail beskyttet]
Kilde: www.habr.com