{"id":34264,"date":"2019-10-31T21:57:17","date_gmt":"2019-10-31T18:57:17","guid":{"rendered":"https:\/\/prohoster.info\/blog\/glavnaya-prichina-avarij-v-data-tsentrah-prokladka-mezhdu-kompyuterom-i-kreslom\/"},"modified":"2019-10-31T21:57:17","modified_gmt":"2019-10-31T18:57:17","slug":"glavnaya-prichina-avarij-v-data-tsentrah-prokladka-mezhdu-kompyuterom-i-kreslom","status":"publish","type":"post","link":"https:\/\/prohoster.info\/et\/blog\/administrirovanie\/glavnaya-prichina-avarij-v-data-tsentrah-prokladka-mezhdu-kompyuterom-i-kreslom","title":{"rendered":"Peamine p\u00f5hjus h\u00e4irete tekkimiseks andmekeskustes on vahemaa arvuti ja tooli vahel","gt_translate_keys":[{"key":"rendered","format":"text"}]},"content":{"rendered":"

Suurte h\u00e4irete teema kaasaegsetes andmekeskustes tekitab k\u00fcsimusi, mida esimeses artiklis ei k\u00e4sitletud \u2014 otsustasime seda arendada.<\/em><\/p>\n

\n\"Peamine<\/a><\/noindex><\/p>\n

Uptime Institute'i statistika kohaselt on enamiku andmekeskuste intsidentide p\u00f5hjuseks elektrivarustuse s\u00fcsteemide rike \u2014 nende osa on 39% juhtumitest. J\u00e4rgnevad inimfaktorid \u2014 need moodustavad veel 24% h\u00e4iretest. Kolmandaks t\u00e4htsuselt (15%) on jahutuss\u00fcsteemide rikkeid, neljandal kohal (12%) loodus\u00f5nnetused. \u00dclej\u00e4\u00e4nud h\u00e4dade kogusumma moodustab vaid 10%. Austades respekteeritud organisatsiooni andmeid, p\u00fc\u00fcame tuvastada erinevates h\u00e4iretes midagi \u00fchist ja m\u00f5ista, kas neid oleks saanud v\u00e4ltida. Spoiler: enamikul juhtudel on see v\u00f5imalik.<\/p>\n

<\/p>\n

Kontaktiteadus<\/h2>\n

<\/p>\n

Lihtsalt \u00f6eldes esineb elektritoite puhul kahte t\u00fc\u00fcpi probleeme: kas \u00fchendust pole seal, kus see peaks olema, v\u00f5i on see seal, kus \u00fchendust olema ei tohiks. V\u00f5ib pikalt arutada, kui usaldusv\u00e4\u00e4rsed on t\u00e4nap\u00e4evaste katkematute toiteallikate s\u00fcsteemid, kuid need ei s\u00e4\u00e4sta alati. V\u00f5tame n\u00e4iteks meediakajastust saanud juhtumi British Airways'i andmekeskusest, mis kuulub em ettev\u00f5ttele International Airlines Group. Heathrow lennujaama l\u00e4heduses asuvad kaks sellist objekti \u2014 Boadicea House ja Comet House. Esimeses neist toimus 27. mail 2017 juhuslik elektrikatkestus, mis viis UPS-s\u00fcsteemi \u00fclekoormuse ja rikki. Tulemuseks oli osa IT-seadmestikust f\u00fc\u00fcsiliselt kahjustatud ning viimane rikke k\u00f5rvaldamiseks kulus kolm p\u00e4eva. <\/p>\n

<\/p>\n

Lennufirmadel tuli t\u00fchistada v\u00f5i edasi l\u00fckata \u00fcle tuhande lennu, umbes 75 000 reisijat ei saanud \u00f5igeaegselt lennata \u2014 h\u00fcvitisi maksti v\u00e4lja 128 miljonit dollarit, lisaks andmekeskuste taastamiseks kulunud kulud. T\u00f5rkete p\u00f5hjused on ebaselged. Kui usaldada International Airlines Groupi tegevjuhi Willie Walshi s\u00f5nu sisemistele uurimistulemustele, juhtus see inseneride vea t\u00f5ttu. Siiski, katkematu elektrivarustuss\u00fcsteem pidi sellise katkestuse vastu pidama \u2014 just selleks see paigaldati. Andmekeskusi juhtisid v\u00e4listeenusettev\u00f5tte CBRE Managed Services spetsialistid, seet\u00f5ttu p\u00fc\u00fcdis British Airways kahjusid Londonis kohtus sisse n\u00f5uda. <\/p>\n

\n\"Peamine<\/p>\n

Toitekatkestused toimuvad sarnaste stsenaariumite kaudu: k\u00f5igepealt katkeb varustus elektri tarnijast, m\u00f5nikord halva ilma v\u00f5i sisemiste probleemide t\u00f5ttu (sealhulgas personali vead), seej\u00e4rel ei suuda katkematu toiteallika s\u00fcsteem koormust taluda v\u00f5i l\u00fchiajaline sinusoidne katkestus p\u00f5hjustab paljude teenuste t\u00f5rkeid, mille taastamiseks kulub tohutult aega ja raha. Kas selliseid \u00f5nnetusi on v\u00f5imalik v\u00e4ltida? Muidugi. Kui s\u00fcsteem on \u00f5igesti projekteeritud, kuid isegi suurte andmekeskuste loojad ei ole vigade eest kaitstud. <\/p>\n

<\/p>\n

Inimfaktor<\/h2>\n

<\/p>\n

Kui andmekeskuse personali valed tegevused on s\u00fcndmuse otsene p\u00f5hjus, siis probleemid m\u00f5jutavad enamasti (kuigi mitte alati) IT-infrastruktuuri tarkvaraosi. Selliseid \u00f5nnetusi juhtub isegi suurtes korporatsioonides. 2017. aasta veebruaris p\u00f5hjustas \u00fcks tehnilise toe meeskonda kuuluv liige vale kirjutamise t\u00f5ttu Amazon Web Servicesi serverite osa v\u00e4ljal\u00fclitamist. See viga juhtus Amazon Simple Storage Service (S3) klientide arvepidamise protsessi t\u00f5rkeotsingu k\u00e4igus. T\u00f6\u00f6taja \u00fcritas eemaldada teatavat arvu virtualiseeritud servereid, mida arveldamisse s\u00fcsteem kasutas, kuid tabas hoopis suuremat klastrit.<\/p>\n

\n\"Peamine<\/p>\n

T\u00f6\u00f6taja vea t\u00f5ttu kadusid serverid, millel olid t\u00f6\u00f6s olulised Amazon Cloud Storage'i tarkvaramoodulid. Esiteks kannatas indekseerimisseade, mis sisaldab teavet metaanete ja k\u00f5igi S3 objektide asukoha kohta Ameerika regioonis US-EAST-1. Insidenti puudutas ka andmete talletamiseks ja talletamisruumi haldamiseks kasutatav s\u00fcsteem. P\u00e4rast virtuaalmasinate kustutamist vajasid need kaks s\u00fcsteemi t\u00e4ielikku taask\u00e4ivitamist, ning Amazonit ootas \u00fcllatus \u2014 pikema ajavahemiku jooksul ei suutnud avalik pilveandmete salvestus teenindada klientide p\u00e4ringuid. <\/p>\n

<\/p>\n

M\u00f5ju osutus ulatuslikuks, kuna paljusid suuri ressursse kasutavad Amazon S3. H\u00e4ired m\u00f5jutasid Trello, Coursera, IFTTT ja, mis k\u00f5ige murettekitavam, Amazon S&P 500 partnerite teenuseid. Kahju sellistes olukordades on keeruline arvestada, kuid selle suurusj\u00e4rguks oli sadu miljoniid Ameerika \u00dchendriikide dollareid. Nagu n\u00e4ete, et suurte pilveteenuste tegevuse peatamiseks piisab \u00fchest vale k\u00e4sust. See ei olnud erand, 16. mail 2019 toimusid Yandex.Cloud'i teenuse t\u00f5ttu ennetust\u00f6\u00f6d. eemaldatud<\/a><\/noindex> kasutajate virtuaalmasinad tsoonis ru-central1-c, mis on kunagi olnud seisundis SUSPENDED. Siin on juba kannatada saanud kliendiandmed, millest osa on p\u00f6\u00f6rdumatult kadunud. Muidugi, inimesed pole t\u00e4iuslikud, kuid t\u00e4nap\u00e4eva infotehnoloogia s\u00fcsteemid oskavad juba ammu j\u00e4lgida privileege omavate kasutajate tegevust enne nende k\u00e4skude t\u00e4itmist. Kui Yandexisse v\u00f5i Amazonisse sellised lahendused juurutada, on sarnaseid intsidente v\u00f5imalik v\u00e4ltida.<\/p>\n

\n\"Peamine<\/p>\n

k\u00fclmunud jahutus<\/h2>\n

<\/p>\n

Jaanuaris 2017 toimus suur avarii Dmitrovi andmekeskuses, mis kuulub ettev\u00f5ttele \u00abMegaFon\u00bb. Tol ajal langes Moskva piirkonnas temperatuur kuni \u221235 \u00b0C, mis p\u00f5hjustas hoone jahutuss\u00fcsteemi rikke. Operaatori pressiteenistus ei avaldanud juhtumi p\u00f5hjustest palju teavet \u2014 Venemaa ettev\u00f5tted on \u00e4\u00e4rmiselt vastumeelsed r\u00e4\u00e4kima enda objektide avariidest, olles avalikkuse osas L\u00e4\u00e4ne riikidest oluliselt maha j\u00e4\u00e4nud. Sotsiaalmeedias levitati versiooni, et t\u00e4navatel asuvates torudes k\u00fclmus jahutusvedelik ja et tilkus et\u00fcleengl\u00fckool. Kui uskuda seda versiooni, ei suutnud ekspluatatsiooniteenistus pika p\u00fcha t\u00f5ttu kiiresti hankida 30 tonni jahutusvedelikku ning pidi j\u00e4\u00e4ma improviseeritud lahendustega ning korraldama k\u00f5rvalekalletega frik\u00fclmutamise. Tugevad k\u00fclmad s\u00fcvendasid probleemide ulatust \u2014 jaanuarikuus toimus Venemaal \u00e4kki talv, kuigi keegi ei oodanud seda. Tulemuseks pidid t\u00f6\u00f6tajad v\u00e4lja l\u00fclitama osa serveririiulitest, mist\u00f5ttu oli operaatori teenused kaks p\u00e4eva m\u00f5nele kasutajale k\u00e4ttesaamatud. <\/p>\n

\n\"Peamine<\/p>\n

V\u00f5ib-olla saab siin r\u00e4\u00e4kida ka ilmastiku anomaaliatest, kuid sellised k\u00fclmad ei ole pealinna piirkonnas midagi ebatavalist. Talvel v\u00f5ib Moskva l\u00e4hedal temperatuur langeda isegi veel madalamatele n\u00e4itudele, seet\u00f5ttu ehitatakse andmekeskuseid arvestusega, et need t\u00f6\u00f6tavad usaldusv\u00e4\u00e4rselt temperatuuril \u221242\u00b0\u0421. K\u00f5ige sagedamini eba\u00f5nnestuvad k\u00fclmutuss\u00fcsteemid k\u00fclmas, kuna gl\u00fckooli kontsentratsioon on liiga madal ja soojusvedelikus on liiga palju vett. On probleeme ka torustike paigaldamise v\u00f5i s\u00fcsteemi projekteerimise ja testimise vigadega, mis on peamiselt seotud sooviga kokku hoida. Tulemuseks on t\u00f5sine avarii, mida oleks olnud t\u00e4iesti v\u00f5imalik v\u00e4ltida.<\/p>\n

<\/p>\n

Looduskatastroofid <\/h2>\n

<\/p>\n

K\u00f5ige sagedamini p\u00f5hjustavad \u00e4ikesetormid ja\/v\u00f5i orkaanid andmekeskuse inseneri infrastruktuuri t\u00f6\u00f6katkestusi, mis viib teenuste seiskumiseni ja\/v\u00f5i seadmete f\u00fc\u00fcsilise kahjustuseni. Halva ilma poolt p\u00f5hjustatud intsidente juhtub \u00fcsna tihti. 2012. aastal m\u00f6\u00f6dus Ameerika \u00dchendriikide l\u00e4\u00e4nerannikult orkaan Sandy tugeva vihmaga. Peer 1 andmekeskus, mis asub pilvel\u00f5hkujas Madal-Manhattani piirkonnas, kaotas v\u00e4list elektrienergiat<\/a><\/noindex>, p\u00e4rast soolase merevee uputamist keldritesse. Objektide h\u00e4daabi generaatorid olid paigutatud 18. korrusele ning nende k\u00fctusevaru oli piiratud \u2014 New Yorgis p\u00e4rast 9\/11 terrorir\u00fcnnakuid kehtestatud reeglid keelavad suures koguses k\u00fctuse hoidmise \u00fclemistel korrustel. <\/p>\n

\n