Is-suġġett ta 'inċidenti kbar fiċ-ċentri tad-dejta moderni jqajjem mistoqsijiet li ma ġewx imwieġba fl-ewwel artiklu - iddeċidejna li niżviluppawh.
Skont statistika mill-Uptime Institute, il-maġġoranza tal-inċidenti fiċ-ċentri tad-dejta huma relatati ma 'ħsarat fis-sistema tal-provvista tal-enerġija — jammontaw għal 39% tal-inċidenti. Warajhom il-fattur uman, li jammonta għal 24% oħra tal-inċidenti. It-tielet l-iktar raġuni importanti (15%) kienet il-falliment tas-sistema tal-arja kundizzjonata, u fir-raba’ post (12%) kienu d-diżastri naturali. Is-sehem totali ta 'problemi oħra huwa biss 10%. Mingħajr ma niddubitaw id-dejta ta 'organizzazzjoni rispettata, aħna se nenfasizzaw xi ħaġa komuni f'inċidenti differenti u nippruvaw nifhmu jekk setgħux ġew evitati. Spoiler: huwa possibbli f'ħafna każijiet.
Ix-Xjenza tal-Kuntatti
Fi kliem sempliċi, hemm biss żewġ problemi bil-provvista tal-enerġija: jew m'hemm l-ebda kuntatt fejn għandu jkun, jew hemm kuntatt fejn m'għandux ikun hemm kuntatt. Tista 'titkellem għal żmien twil dwar l-affidabilità ta' sistemi moderni ta 'provvista ta' enerġija mingħajr interruzzjoni, iżda mhux dejjem isalvawk. Ħu l-każ ta 'profil għoli taċ-ċentru tad-dejta użat minn British Airways, li huwa proprjetà tal-kumpanija prinċipali International Airlines Group. Hemm żewġ proprjetajiet bħal dawn li jinsabu ħdejn l-Ajruport ta’ Heathrow – Boadicea House u Comet House. Fl-ewwel waħda minn dawn, fis-27 ta 'Mejju 2017, seħħet qtugħ aċċidentali tad-dawl, li wassal għal tagħbija żejda u ħsara fis-sistema UPS. B’riżultat ta’ dan, xi wħud mit-tagħmir tal-IT saritilhom ħsara fiżika, u l-aħħar diżastru ħa tlett ijiem biex isolvu.
Il-linja tal-ajru kellha tikkanċella jew tiskeda mill-ġdid aktar minn elf titjira, madwar 75 elf passiġġier ma setgħux itiru fil-ħin - intefqu $ 128 miljun fuq il-ħlas ta 'kumpens, mingħajr ma jingħaddu l-ispejjeż meħtieġa biex tiġi restawrata l-funzjonalità taċ-ċentri tad-dejta. L-istorja tar-raġunijiet għall-blackout mhix ċara. Jekk temmen ir-riżultati tal-investigazzjoni interna mħabbra mill-Kap Eżekuttiv tal-International Airlines Group Willie Walsh, kien minħabba żball mill-inġiniera. Madankollu, is-sistema ta 'provvista ta' enerġija mingħajr interruzzjoni kellha tiflaħ għal tali għeluq - huwa għalhekk li ġiet installata. Iċ-ċentru tad-data kien immexxi minn speċjalisti mill-kumpanija ta’ outsourcing CBRE Managed Services, u għalhekk British Airways ippruvat tirkupra l-ammont ta’ ħsara permezz ta’ qorti ta’ Londra.
Qtugħ tal-enerġija jseħħ f'xenarji simili: l-ewwel hemm blackout minħabba t-tort tal-fornitur tal-elettriku, xi kultant minħabba temp ħażin jew problemi interni (inklużi żbalji umani), u mbagħad is-sistema ta 'provvista ta' enerġija mingħajr interruzzjoni ma tistax tlaħħaq mat-tagħbija jew qasir -interruzzjoni fit-terminu tal-mewġa sine tikkawża fallimenti ta 'ħafna servizzi, li tikkawża restawr li jieħu ħafna ħin u flus. Huwa possibbli li jiġu evitati inċidenti bħal dawn? Bla dubju. Jekk tiddisinja s-sistema b'mod korrett, anke l-ħallieqa ta 'ċentri tad-dejta kbar mhumiex immuni minn żbalji.
Fattur uman
Meta l-kawża immedjata ta 'inċident hija l-azzjonijiet mhux korretti tal-persunal taċ-ċentru tad-dejta, il-problemi l-aktar spiss (iżda mhux dejjem) jaffettwaw il-parti tas-softwer tal-infrastruttura tal-IT. Inċidenti bħal dawn iseħħu anke f'korporazzjonijiet kbar. Fi Frar 2017, minħabba membru tat-tim reklutat ħażin tal-grupp ta 'operazzjoni teknika ta' wieħed miċ-ċentri tad-dejta, parti mis-servers ta 'Amazon Web Services ġiet diżattivata. Sar żball waqt id-debug tal-proċess tal-kontijiet għall-klijenti tal-ħażna tal-cloud tal-Amazon Simple Storage Service (S3). Impjegat ipprova jħassar numru ta’ servers virtwali użati mis-sistema tal-kontijiet, iżda laqat cluster akbar.
Bħala riżultat ta 'żball ta' inġinier, servers li jmexxu moduli importanti tas-softwer tal-ħażna tal-sħab tal-Amazon tħassru. L-ewwel affettwata kienet is-subsistema tal-indiċjar, li fiha informazzjoni dwar il-metadejta u l-post tal-oġġetti S3 kollha fir-reġjun Amerikan tal-US-EAST-1. L-inċident affettwa wkoll is-subsistema użata biex tospita dejta u timmaniġġja l-ispazju disponibbli għall-ħażna. Wara li tħassru l-magni virtwali, dawn iż-żewġ sottosistemi kienu jeħtieġu bidu mill-ġdid sħiħ, u mbagħad l-inġiniera tal-Amazon kienu sorpriża - għal żmien twil, il-ħażna pubblika tal-cloud ma setgħetx isservi t-talbiet tal-klijenti.
L-impatt kien mifrux, peress li ħafna riżorsi kbar jużaw Amazon S3. Il-waqfien affettwaw lil Trello, Coursera, IFTTT u, l-aktar spjaċevoli, is-servizzi tal-imsieħba ewlenin tal-Amazon mil-lista S & P 500. Il-ħsara f'każijiet bħal dawn hija diffiċli biex tiġi kkalkulata, iżda kienet fir-reġjun ta 'mijiet ta' miljuni ta 'dollari Amerikani. Kif tistgħu taraw, kmand wieħed ħażin huwa biżżejjed biex jiskonnettja s-servizz tal-akbar pjattaforma tas-sħab. Dan mhuwiex każ iżolat; fis-16 ta’ Mejju 2019, waqt xogħol ta’ manutenzjoni, is-servizz Yandex.Cloud magni virtwali ta' utenti fiż-żona ru-central1-c li kienu fl-istatus SOSPIŻ mill-inqas darba. Id-dejta tal-klijenti diġà ġiet imħassra hawn, li wħud minnhom intilfet b'mod irrimedjabbli. Naturalment, in-nies huma imperfetti, iżda s-sistemi moderni tas-sigurtà tal-informazzjoni ilhom kapaċi jimmonitorjaw l-azzjonijiet tal-utenti privileġġjati qabel ma jeżegwixxu l-kmandi li daħlu. Jekk tali soluzzjonijiet jiġu implimentati f'Yandex jew Amazon, inċidenti bħal dawn jistgħu jiġu evitati.
Tkessiħ iffriżat
F'Jannar 2017, seħħ inċident kbir fiċ-ċentru tad-dejta Dmitrov tal-kumpanija Megafon. Imbagħad it-temperatura fir-reġjun ta 'Moska niżlet għal -35 °C, li wassal għall-falliment tas-sistema tat-tkessiħ tal-faċilità. Is-servizz tal-istampa tal-operatur ma tkellemx b'mod partikolari dwar ir-raġunijiet għall-inċident - il-kumpaniji Russi huma estremament riluttanti li jitkellmu dwar l-inċidenti fil-faċilitajiet li huma proprjetarji; f'termini ta 'pubbliċità, aħna qegħdin lura ħafna wara l-Punent. Kien hemm verżjoni li tiċċirkola fuq in-netwerks soċjali dwar l-iffriżar ta 'likwidu li jkessaħ f'pajpijiet imqiegħda tul it-triq u tnixxija ta' ethylene glycol. Skontha, is-servizz tal-operazzjoni ma setax jikseb malajr 30 tunnellata ta 'likwidu li jkessaħ minħabba vaganzi twal u ħareġ bl-użu ta' mezzi improvizzati, organizza tkessiħ ħieles improvizzat bi ksur tar-regoli għat-tħaddim tas-sistema. Kesħa qawwija aggravat il-problema - f'Jannar, ix-xitwa f'daqqa waħda laqtet lir-Russja, għalkemm ħadd ma kien qed jistennieha. Bħala riżultat, il-persunal kellu jitfi l-enerġija għal parti mill-ixkafef tas-server, u huwa għalhekk li xi servizzi tal-operatur ma kinux disponibbli għal jumejn.
Probabbilment, nistgħu nitkellmu dwar anomalija tat-temp hawn, iżda ġlata bħal dawn mhumiex xi ħaġa mhux tas-soltu għar-reġjun tal-kapital. It-temperaturi fix-xitwa fir-reġjun ta 'Moska jistgħu jinżlu għal livelli aktar baxxi, għalhekk iċ-ċentri tad-dejta jinbnew bl-istennija ta' tħaddim stabbli f'-42 ° C. Ħafna drabi, is-sistemi tat-tkessiħ ifallu f'temp kiesaħ minħabba konċentrazzjoni mhux għolja biżżejjed ta 'glikoli u ilma żejjed fis-soluzzjoni tal-likwidu li jkessaħ. Hemm ukoll problemi bl-installazzjoni ta 'pajpijiet jew b'kalkoli ħżiena fid-disinn u l-ittestjar tas-sistema, prinċipalment assoċjati max-xewqa li tiffranka l-flus. Bħala riżultat, iseħħ inċident serju mill-blu, li seta’ ġie evitat.
Diżastri naturali
Ħafna drabi, maltempati bir-ragħad u/jew uragani jfixklu l-infrastruttura tal-inġinerija ta’ ċentru tad-dejta, li jwasslu għal interruzzjonijiet tas-servizz u/jew ħsara fiżika lit-tagħmir. Inċidenti kkawżati minn temp ħażin iseħħu spiss. Fl-2012, l-Uragan Sandy ħakem mal-Kosta tal-Punent tal-Istati Uniti b’xita qawwija. Jinsabu f'bini għoli f'Lower Manhattan, iċ-ċentru tad-dejta Peer 1 , wara li l-ilma tal-baħar mielaħ għarraq il-kantini. Il-ġeneraturi tal-emerġenza tal-faċilità kienu jinsabu fit-18-il sular, u l-provvista tal-fjuwil tagħhom kienet limitata - regoli introdotti fi New York wara l-attakki terroristiċi tal-9 ta’ Settembru jipprojbixxu l-ħażna ta’ kwantitajiet kbar ta’ fjuwil fis-sulari ta’ fuq.
Il-pompa tal-fjuwil falliet ukoll, u għalhekk il-persunal qattgħu diversi jiem iġorru d-diżil lejn il-ġeneraturi bl-idejn. L-erojiżmu tat-tim salva liċ-ċentru tad-dejta minn inċident serju, iżda kien verament meħtieġ? Aħna ngħixu fuq pjaneta b'atmosfera ta 'nitroġenu-ossiġnu u ħafna ilma. Maltempati bir-ragħad u uragani huma komuni hawn (speċjalment fiż-żoni kostali). Id-disinjaturi probabbilment jagħmlu tajjeb li jikkunsidraw ir-riskji involuti u jibnu sistema xierqa ta 'provvista ta' enerġija mingħajr interruzzjoni. Jew għall-inqas agħżel post aktar addattat għaċ-ċentru tad-dejta minn għoli fuq gżira.
Kull ħaġa oħra
Uptime Institute jidentifika varjetà ta 'inċidenti f'din il-kategorija, fosthom huwa diffiċli li tagħżel wieħed tipiku. Serq ta’ kejbils tar-ram, karozzi li jiġġarrfu f’ċentri tad-dejta, appoġġ tal-linja tal-enerġija u substations tat-transformer, nirien, operaturi ta’ skavaturi li jagħmlu ħsara lill-ottika, annimali gerriema (firien, fniek u anke wombats, li fil-fatt huma marsupjali), kif ukoll dawk li jħobbu jipprattikaw l-isparar fuq wajers - il-menu huwa estensiv. Il-ħsarat fl-enerġija jistgħu saħansitra jikkawżaw elettriku marijuana pjantaġġun illegali. Fil-biċċa l-kbira tal-każijiet, nies speċifiċi jsiru l-ħatja tal-inċident, jiġifieri nerġgħu qed nittrattaw il-fattur uman, meta l-problema jkollha isem u kunjom. Anke jekk mal-ewwel daqqa t'għajn l-inċident ikun assoċjat ma' ħsara teknika jew diżastri naturali, dan jista' jiġi evitat sakemm il-faċilità tkun iddisinjata u mħaddma sew. L-uniċi eċċezzjonijiet huma każijiet ta' ħsara kritika lill-infrastruttura taċ-ċentru tad-dejta jew qerda ta' bini u strutturi minħabba diżastru naturali. Dawn huma tassew ċirkustanzi ta 'force majeure, u l-problemi l-oħra kollha huma kkawżati mis-siegla bejn il-kompjuter u s-siġġu - forsi din hija l-aktar parti mhux affidabbli ta' kwalunkwe sistema kumplessa.
Sors: www.habr.com