{"id":34264,"date":"2019-10-31T21:57:17","date_gmt":"2019-10-31T18:57:17","guid":{"rendered":"https:\/\/prohoster.info\/blog\/glavnaya-prichina-avarij-v-data-tsentrah-prokladka-mezhdu-kompyuterom-i-kreslom\/"},"modified":"2019-10-31T21:57:17","modified_gmt":"2019-10-31T18:57:17","slug":"glavnaya-prichina-avarij-v-data-tsentrah-prokladka-mezhdu-kompyuterom-i-kreslom","status":"publish","type":"post","link":"https:\/\/prohoster.info\/sv\/blog\/administrirovanie\/glavnaya-prichina-avarij-v-data-tsentrah-prokladka-mezhdu-kompyuterom-i-kreslom","title":{"rendered":"Den fr\u00e4msta orsaken till incidenter i datacenter \u00e4r ledningen mellan datorn och stolen.","gt_translate_keys":[{"key":"rendered","format":"text"}]},"content":{"rendered":"

\u00c4mnet om stora incidenter i moderna datacenter v\u00e4cker fr\u00e5gor som inte besvarades i den f\u00f6rsta artikeln \u2013 vi har d\u00e4rf\u00f6r beslutat att utveckla den.<\/em><\/p>\n

\n\"Den<\/a><\/noindex><\/p>\n

Om man ska tro statistiken fr\u00e5n Uptime Institute \u00e4r de flesta incidenter i datacentren relaterade till fel i str\u00f6mf\u00f6rs\u00f6rjningen \u2013 dessa st\u00e5r f\u00f6r 39 % av h\u00e4ndelserna. D\u00e4refter f\u00f6ljer den m\u00e4nskliga faktorn \u2013 vilket utg\u00f6r ytterligare 24 % av incidenterna. Den tredje st\u00f6rsta orsaken (15 %) var fel i kylsystemet, och p\u00e5 fj\u00e4rde plats (12 %) \u00e5terfanns naturkatastrofer. Den totala andelen av \u00f6vriga problem utg\u00f6r endast 10 %. Utan att ifr\u00e5gas\u00e4tta uppgifterna fr\u00e5n den respekterade organisationen, l\u00e5t oss lyfta fram en gemensam n\u00e4mnare i olika incidenter och f\u00f6rs\u00f6ka f\u00f6rst\u00e5 om de kunde ha undvikits. Spoiler: de kunde i de flesta fall.<\/p>\n

<\/p>\n

Kraftkontaktens vetenskap<\/h2>\n

<\/p>\n

F\u00f6renklat sagt, med str\u00f6mf\u00f6rs\u00f6rjning finns det i princip tv\u00e5 problem: antingen finns det ingen kontakt d\u00e4r den b\u00f6r vara, eller s\u00e5 finns det kontakt d\u00e4r den inte b\u00f6r finnas. Man kan diskutera l\u00e4nge om tillf\u00f6rlitligheten hos moderna str\u00f6mf\u00f6rs\u00f6rjningssystem, men de r\u00e4ddar l\u00e5ngt ifr\u00e5n alltid situationen. Ta bara det omskrivna fallet med det datacenter som British Airways anv\u00e4nder, som tillh\u00f6r moderbolaget International Airlines Group. I n\u00e4rheten av Heathrow finns det tv\u00e5 s\u00e5dana anl\u00e4ggningar \u2013 Boadicea House och Comet House. I den f\u00f6rstn\u00e4mnda intr\u00e4ffade den 27 maj 2017 en oavsiktlig str\u00f6mavbrott som ledde till \u00f6verbelastning och haveri av UPS-systemet. Resultatet blev att en del av IT-utrustningen skadades fysiskt, och det tog tre dagar att \u00e5tg\u00e4rda den senaste incidenten. <\/p>\n

<\/p>\n

Flygbolaget tvingades st\u00e4lla in eller omboka mer \u00e4n tusen flygningar, cirka 75 000 passagerare kunde inte flyga i tid \u2013 ers\u00e4ttningsbetalningar uppgick till 128 miljoner dollar, utan att r\u00e4kna med kostnaderna f\u00f6r att \u00e5terst\u00e4lla datacenterns funktionalitet. Historien om orsakerna till str\u00f6mavbrottet \u00e4r otydlig. Om man ska tro resultaten av den interna utredningen, som offentliggjordes av VD:n f\u00f6r International Airlines Group, Willie Walsh, berodde det p\u00e5 ett ingenj\u00f6rsmisstag. \u00c4nd\u00e5 borde str\u00f6mf\u00f6rs\u00f6rjningssystemet ha klarat av ett s\u00e5dant avbrott \u2013 det var just f\u00f6r det syftet det installerades. Datacentret styrdes av specialister fr\u00e5n det outsourcade f\u00f6retaget CBRE Managed Services, varf\u00f6r British Airways f\u00f6rs\u00f6kte f\u00e5 ers\u00e4ttning f\u00f6r skadorna genom Londons domstol. <\/p>\n

\n\"Den<\/p>\n

Str\u00f6mavbrott intr\u00e4ffar enligt liknande scenarier: f\u00f6rst sker en avbrott p\u00e5 grund av eln\u00e4tsleverant\u00f6ren, ibland p\u00e5 grund av d\u00e5ligt v\u00e4der eller interna problem (inklusive personalfel), och sedan klarar inte det obekv\u00e4m elkraftsystemet av belastningen eller kortvariga avbrott i sinuskurvan orsakar nedbrutna tj\u00e4nster, d\u00e4r \u00e5terst\u00e4llning av funktionalitet tar mycket tid och pengar. Kan man undvika s\u00e5dana liknande olyckor? Sj\u00e4lvklart. Om systemet designas p\u00e5 r\u00e4tt s\u00e4tt, men \u00e4ven skaparna av stora datacenter \u00e4r inte f\u00f6rskonade fr\u00e5n fel. <\/p>\n

<\/p>\n

M\u00e4nsklig faktor<\/h2>\n

<\/p>\n

N\u00e4r den direkta orsaken till incidenten \u00e4r felaktiga \u00e5tg\u00e4rder fr\u00e5n datacenterpersonalen p\u00e5verkas oftast (men inte alltid) programvarudelen av IT-infrastrukturen. S\u00e5dana incidenter intr\u00e4ffar \u00e4ven i stora f\u00f6retag. I februari 2017 orsakade en felaktigt inskriven kommando av en medlem i teknisk driftgrupp i ett av datacentren att en del av Amazon Web Services servrar st\u00e4ngdes av. Felet intr\u00e4ffade under avvecklingen av faktureringsprocessen f\u00f6r kunder av Amazons molnlagringstj\u00e4nst Simple Storage Service (S3). Medarbetaren f\u00f6rs\u00f6kte ta bort ett antal virtuella servrar som anv\u00e4ndes av faktureringssystemet, men kom \u00e5t en st\u00f6rre kluster.<\/p>\n

\n\"Den<\/p>\n

Som ett resultat av ingenj\u00f6ren misstag togs servrarna bort d\u00e4r viktiga programmoduler av Amazons molnlagring k\u00f6rdes. F\u00f6rst drabbades indexeringssubsystemet som inneh\u00f6ll information om metadata och plats f\u00f6r alla S3-objekt i den amerikanska regionen US-EAST-1. Incidentet p\u00e5verkade \u00e4ven det system som anv\u00e4nds f\u00f6r att lagra data och hantera det tillg\u00e4ngliga lagringsutrymmet. Efter att de virtuella maskinerna tagits bort kr\u00e4vde dessa tv\u00e5 subsystem en fullst\u00e4ndig omstart, och l\u00e4ngre fram v\u00e4ntade ingenj\u00f6rerna p\u00e5 Amazon en \u00f6verraskning \u2014 under en l\u00e4ngre tid kunde det offentliga molnlagringssystemet inte hantera kunders f\u00f6rfr\u00e5gningar. <\/p>\n

<\/p>\n

Effekten blev omfattande, eftersom m\u00e5nga stora resurser anv\u00e4nder Amazon S3. St\u00f6rningar p\u00e5verkade Trello, Coursera, IFTTT och, mest bekymmersamt, stora partnertj\u00e4nster till Amazon fr\u00e5n S&P 500-listan. Att uppskatta skadan i s\u00e5dana fall \u00e4r inte l\u00e4tt, men det hamnar i ordningen hundratals miljoner amerikanska dollar. Som ni ser, f\u00f6r att st\u00e4nga ner tj\u00e4nsten hos den st\u00f6rsta molnplattformen r\u00e4cker det med en felaktig kommandon. Detta \u00e4r inte ett unikt fall; den 16 maj 2019 under servicearbete, tj\u00e4nsten Yandex.Cloud bort<\/a><\/noindex> virtuella maskiner f\u00f6r anv\u00e4ndare i zonen ru-central1-c som minst en g\u00e5ng har varit i status SUSPENDED. H\u00e4r har kunddata redan skadats, varav en del har f\u00f6rlorats f\u00f6r alltid. Sj\u00e4lvklart \u00e4r m\u00e4nniskor inte perfekta, men moderna informationss\u00e4kerhetssystem kan l\u00e4nge kontrollera privilegierade anv\u00e4ndares handlingar innan de genomf\u00f6r de kommandon de anger. Om s\u00e5dana l\u00f6sningar inf\u00f6rs i Yandex eller Amazon kan liknande incidenter undvikas.<\/p>\n

\n\"Den<\/p>\n

Fryst kylning<\/h2>\n

<\/p>\n

I januari 2017 intr\u00e4ffade en stor olycka i dmitrovskaya datacenter f\u00f6r f\u00f6retaget \"Megafon\". D\u00e5 sj\u00f6nk temperaturen i Moskva-regionen till \u221235 \u00b0C, vilket ledde till att kylsystemet i anl\u00e4ggningen slutade fungera. Operat\u00f6rens pressavdelning var inte speciellt ben\u00e4gen att sprida information om orsakerna till incidenten \u2014 ryska f\u00f6retag \u00e4r mycket ovilliga att tala om olyckor i sina egna anl\u00e4ggningar, och vi ligger l\u00e5ngt efter v\u00e4st i termer av offentlighet. P\u00e5 sociala medier fanns det en teori om att kylv\u00e4tskan fr\u00f6s i r\u00f6rledningar p\u00e5 gatan och att etylenglykol l\u00e4ckte ut. Om man ska tro den versionen, s\u00e5 kunde inte driftsavdelningen snabbt f\u00e5 30 ton kylv\u00e4tska p\u00e5 grund av de l\u00e5nga helgerna och improviserade med tillg\u00e4ngliga medel genom att skapa en provisorisk frikylning som br\u00f6t mot driftsreglerna. Den str\u00e4nga kylan f\u00f6rv\u00e4rrade problemet \u2014 pl\u00f6tsligt intr\u00e4ffade en vinter i januari i Ryssland, trots att ingen hade f\u00f6rv\u00e4ntat sig det. Som ett resultat var personalen tvungen att st\u00e4nga av str\u00f6mmen till vissa serverst\u00e4ll, vilket gjorde att vissa tj\u00e4nster fr\u00e5n operat\u00f6ren var otillg\u00e4ngliga i tv\u00e5 dagar. <\/p>\n

\n\"Den<\/p>\n

Kanske kan man ocks\u00e5 prata om en v\u00e4deranomali h\u00e4r, men s\u00e5dana frostiga temperaturer \u00e4r inget ovanligt f\u00f6r storstadsregionen. Under vintern kan temperaturen i Moskvaomr\u00e5det sjunka till mer extremt l\u00e5ga niv\u00e5er, d\u00e4rf\u00f6r byggs datacenter med ber\u00e4kning p\u00e5 att de ska fungera stabilt vid \u221242\u00b0C. Oftast slutar kylsystemen att fungera i kylan p\u00e5 grund av f\u00f6r l\u00e5g koncentration av glykoler och \u00f6verskott av vatten i v\u00e4rme\u00f6verf\u00f6ringsl\u00f6sningen. Det f\u00f6rekommer \u00e4ven problem med r\u00f6rinstallationer eller ber\u00e4kningar i projektering och testning av systemet, som huvudsakligen beror p\u00e5 en \u00f6nskan att spara. Slutligen intr\u00e4ffar en allvarlig olycka som helt hade kunnat undvikas.<\/p>\n

<\/p>\n

Naturkatastrofer <\/h2>\n

<\/p>\n

Oftast st\u00f6r \u00e5skstormar och\/eller orkaner driften av datacenterets ingenj\u00f6rsinfrastruktur, vilket leder till stopp av tj\u00e4nster och\/eller fysisk skada p\u00e5 utrustningen. Incidenter orsakade av d\u00e5ligt v\u00e4der intr\u00e4ffar ganska ofta. \u00c5r 2012 svepte orkanen Sandy med kraftigt regn \u00f6ver den v\u00e4stra kusten av USA. Datacentret Peer 1, bel\u00e4get i ett h\u00f6ghus p\u00e5 Lower Manhattan, f\u00f6rlorade sin externa elf\u00f6rs\u00f6rjning<\/a><\/noindex>, efter att saltvatten \u00f6versv\u00e4mmat k\u00e4llarutrymmena. N\u00f6dgeneratorerna var placerade p\u00e5 18:e v\u00e5ningen, och br\u00e4nslelagret f\u00f6r dem var begr\u00e4nsat \u2013 regler som inf\u00f6rdes i New York efter 9\/11-terrorattackerna f\u00f6rbjuder lagring av stora m\u00e4ngder br\u00e4nsle p\u00e5 \u00f6vre v\u00e5ningar. <\/p>\n

\n