{"id":84108,"date":"2020-06-05T07:42:44","date_gmt":"2020-06-05T05:42:44","guid":{"rendered":"https:\/\/prohoster.info\/blog\/administrirovanie\/tushit-li-servera-esli-zagorelsya-smouk-test-dataczentra"},"modified":"2020-06-05T07:42:44","modified_gmt":"2020-06-05T05:42:44","slug":"tushit-li-servera-esli-zagorelsya-smouk-test-dataczentra","status":"publish","type":"post","link":"https:\/\/prohoster.info\/lv\/blog\/administrirovanie\/tushit-li-servera-esli-zagorelsya-smouk-test-dataczentra","title":{"rendered":"Vai ir j\u0101izsl\u0113dz serveri, ja datu centra sm\u0113\u0137\u0113\u0161anas tests \"aizdeg\u0101s\"?","gt_translate_keys":[{"key":"rendered","format":"text"}]},"content":{"rendered":"

K\u0101das saj\u016btas j\u016bs justu, ja k\u0101du skaistu vasaras dienu datu centrs ar j\u016bsu apr\u012bkojumu izskat\u012btos \u0161\u0101di?<\/p>\n

\"Vai
\n
\nSveiki visiem! Mani sauc Dmitrijs Samsonovs, es str\u0101d\u0101ju k\u0101 vado\u0161ais sist\u0113mu administrators uz\u0146\u0113mum\u0101 \u201cOdnoklassniki<\/a><\/noindex>\u201d. Att\u0113l\u0101 ir viens no \u010detriem datu centriem, kuros ir uzst\u0101d\u012bts apr\u012bkojums, kas apkalpo m\u016bsu projektu. Aiz \u0161\u012bm sien\u0101m atrodas apm\u0113ram 4000 iek\u0101rtu: serveri, datu glab\u0101\u0161anas sist\u0113mas, t\u012bkla apr\u012bkojums utt. \u2013 gandr\u012bz \u2153 no visa m\u016bsu apr\u012bkojuma.
\nLiel\u0101k\u0101 da\u013ca serveru ir Linux. Ir ar\u012b da\u017ei desmiti serveru uz Windows (MS SQL) \u2013 m\u016bsu mantojums, no kura m\u0113s pak\u0101peniski atsak\u0101mies jau daudzus gadus.
\nT\u0101tad, 2019. gada 5. j\u016bnij\u0101 plkst. 14:35 in\u017eenieri vien\u0101 no m\u016bsu datu centriem pazi\u0146oja par ugunsgr\u0113ka trauksmi.
\n<\/a><\/noindex><\/p>\n

Noraid\u012bjums<\/h4>\n

\n14:45. S\u012bki incidenti ar d\u016bmiem datu centros notiek bie\u017e\u0101k, nek\u0101 \u0161\u0137iet. R\u0101d\u012bt\u0101ji iek\u0161pus\u0113 bija norm\u0101li, t\u0101p\u0113c m\u016bsu pirm\u0101 reakcija bija sam\u0113r\u0101 mier\u012bga: tika pie\u0146emts l\u0113mums aizliegt darb\u012bbas ar produkciju, proti, veikt jebk\u0101das konfigur\u0101cijas izmai\u0146as, izv\u0113rst jaunas versijas utt., iz\u0146emot darbus, kas saist\u012bti ar defektu nov\u0113r\u0161anu.<\/p>\n

Dusmas<\/h4>\n

\nVai j\u016bs k\u0101dreiz esat m\u0113\u0123in\u0101ju\u0161i uzzin\u0101t no ugunsdz\u0113s\u0113jiem, kur tie\u0161i uz jumta noticis ugunsgr\u0113ks, vai ar\u012b m\u0113\u0123in\u0101ju\u0161i pa\u0161i iek\u013c\u016bt dego\u0161aj\u0101 jumt\u0101, lai nov\u0113rt\u0113tu situ\u0101ciju? K\u0101da b\u016bs inform\u0101cijas uztic\u012bba, kas ieg\u016bta caur pieciem cilv\u0113kiem?<\/p>\n

14:50. Sa\u0146emt\u0101 inform\u0101cija liecina, ka uguns tuvojas dzes\u0113\u0161anas sist\u0113mai<\/b>. Bet vai t\u0101 tie\u0161\u0101m sasniegs? De\u017e\u016br\u0113jo\u0161ais sist\u0113mu administrators izvada \u0101r\u0113jo trafiku no \u0161\u012b datu centra front\u0113m.<\/p>\n

Pa\u0161laik visu m\u016bsu pakalpojumu frontes ir dubl\u0113tas trijos datu centros, izmanto DNS l\u012bme\u0146a l\u012bdzsvaro\u0161anu, kas \u013cauj iz\u0146emt viena datu centra adreses no DNS, t\u0101d\u0113j\u0101di pasarg\u0101jot lietot\u0101jus no potenci\u0101l\u0101m probl\u0113m\u0101m ar piek\u013cuvi pakalpojumiem. Gad\u012bjum\u0101, ja datu centr\u0101 jau ir radu\u0161\u0101s probl\u0113mas, tas autom\u0101tiski izsl\u0113dzas no rot\u0101cijas. Vair\u0101k var las\u012bt \u0161eit: Slodzes l\u012bdzsvaro\u0161ana un av\u0101rijas iztur\u012bba uz\u0146\u0113mum\u0101 \u201cOdnoklassniki\u201d.<\/a><\/noindex><\/p><\/blockquote>\n

\nUgunsgr\u0113ks m\u016bs l\u012bdz \u0161im nav ietekm\u0113jis \u2013 ne lietot\u0101ji, ne apr\u012bkojums nav cietu\u0161i. Vai tas ir negad\u012bjums? Pirmaj\u0101 dokumenta \u201cR\u012bc\u012bbas pl\u0101ns av\u0101rijas gad\u012bjum\u0101\u201d sada\u013c\u0101 ir sniegta defin\u012bcija j\u0113dzienam \u201cNegad\u012bjums\u201d, un sada\u013ca beidzas ar:
\n\u00abJa ir \u0161aubas, vai tas ir negad\u012bjums vai n\u0113, tad tas ir negad\u012bjums!<\/u>\u00bb<\/b><\/p>\n

14:53. Notiek av\u0101rijas koordinatora iece\u013c\u0161ana.<\/p>\n

Koordinators ir persona, kas kontrol\u0113 sazi\u0146u starp visiem dal\u012bbniekiem, nov\u0113rt\u0113 av\u0101rijas apm\u0113rus, izmanto \"Av\u0101rijas r\u012bc\u012bbas pl\u0101nu\", pieaicina nepiecie\u0161amo person\u0101lu, uzrauga remonta pabeig\u0161anu un, pats galvenais, dele\u0123\u0113 uzdevumus. Citiem v\u0101rdiem sakot, t\u0101 ir persona, kas vada visu av\u0101rijas likvid\u0101cijas procesu.<\/p><\/blockquote>\n

<\/p>\n

Tirdzniec\u012bba<\/h4>\n

\n15:01. S\u0101kam atsl\u0113gt serverus, kas nav saist\u012bti ar ra\u017eo\u0161anu.
\n15:03. Pareizi izsl\u0113dzam visus rezerv\u0113tos pakalpojumus.
\n\u0160eit iek\u013caujas ne tikai priek\u0161\u0113jie r\u0101mji (uz kuriem \u0161aj\u0101 br\u012bd\u012b lietot\u0101ji vairs neiet), un to pal\u012bgpakalpojumi (biznesa lo\u0123ika, ke\u0161atmi\u0146as u.tml.), bet ar\u012b da\u017e\u0101das datub\u0101zes ar replik\u0101cijas faktoru 2 un vair\u0101k (Cassandra<\/a><\/noindex>, bin\u0101ro datu kr\u0101tuve<\/a><\/noindex>, aukst\u0101 kr\u0101tuve<\/a><\/noindex>, NewSQL<\/a><\/noindex> u.c.)
\n15:06. Sa\u0146emta inform\u0101cija, ka ugunsgr\u0113ks apdraud vienu no datu centra z\u0101l\u0113m.<\/b> \u0160aj\u0101 z\u0101l\u0113 mums nav apr\u012bkojuma, bet tas, ka uguns var p\u0101rlekt no jumta uz z\u0101l\u0113m, b\u016btiski maina situ\u0101ciju.
\n(V\u0113l\u0101k noskaidroj\u0101s, ka fiziska apdraud\u0113juma z\u0101lei nebija, jo t\u0101 ir herm\u0113tiski izol\u0113ta no jumta. Apdraud\u0113jums bija tikai \u0161\u012bs z\u0101les dzes\u0113\u0161anas sist\u0113mai.)
\n15:07. At\u013caujam komandu izpildi serveros pa\u0101trin\u0101t\u0101 re\u017e\u012bm\u0101 bez papildu p\u0101rbaud\u0113m (bez m\u016bsu m\u012b\u013c\u0101 kalkulatora<\/a><\/noindex>).
\n15:08. Temperat\u016bra z\u0101l\u0113s ir normas robe\u017e\u0101s.
\n15:12. Konstat\u0113ta temperat\u016bras paaugstin\u0101\u0161an\u0101s z\u0101l\u0113s.<\/b>
\n15:13. Vair\u0101k nek\u0101 puse serveru datu centr\u0101 ir izsl\u0113gti. Turpin\u0101m.
\n15:16. Pie\u0146emts l\u0113mums izsl\u0113gt visu apr\u012bkojumu.
\n15:21. S\u0101kam atsl\u0113gt baro\u0161anu uz stateless serveriem bez pareizas lietojumprogrammas un oper\u0113t\u0101jsist\u0113mas izsl\u0113g\u0161anas.
\n15:23. Tiek izveidota atbild\u012bgo grupa par MS SQL (t\u0101d\u0101 skait\u0101 nav daudz, pakalpojumu atkar\u012bba no tiem nav liela, bet atjauno\u0161anas proced\u016bra ilgst vair\u0101k laika un ir sare\u017e\u0123\u012bt\u0101ka nek\u0101, piem\u0113ram, ar Cassandra).<\/p>\n

Depresija<\/h4>\n

\n15:25. Sa\u0146emta inform\u0101cija par baro\u0161anas izsl\u0113g\u0161anu \u010detr\u0101s z\u0101l\u0113s no 16 (Nr.6, 7, 8, 9).<\/b> 7. un 8. z\u0101l\u0113s atrodas m\u016bsu apr\u012bkojums. Par div\u0101m cit\u0101m m\u016bsu z\u0101l\u0113m (Nr.1 un 3) inform\u0101cijas nav.
\nParasti ugunsgr\u0113ka gad\u012bjum\u0101 elektroapg\u0101di nekav\u0113joties izsl\u0113dz, bet \u0161aj\u0101 gad\u012bjum\u0101, pateicoties saska\u0146otai ugunsdz\u0113s\u0113ju un datu centra tehnisk\u0101 person\u0101la darb\u012bbai, tas netika izdar\u012bts visur un uzreiz, bet gan p\u0113c nepiecie\u0161am\u012bbas.
\n(V\u0113l\u0101k noskaidroj\u0101s, ka baro\u0161ana z\u0101l\u0113s 8 un 9 nebija atsl\u0113gta.)
\n15:28. S\u0101kam atjaunot MS SQL datu b\u0101zes no dubl\u0113jumiem citos datu centros.
\nCik ilgs laiks b\u016bs nepiecie\u0161ams tam? Vai t\u012bkls vis\u0101 mar\u0161rut\u0101 sp\u0113s nodro\u0161in\u0101t pietiekamu caurlaidsp\u0113ju?
\n15:37. Ir fiks\u0113ts, ka da\u017ei t\u012bkla posmi ir atsl\u0113gti.<\/b>
\nMened\u017ements un ra\u017eo\u0161anas t\u012bkls ir fiziski izol\u0113ti viens no otra. Ja ra\u017eo\u0161anas t\u012bkls ir pieejams, j\u016bs varat piek\u013c\u016bt serverim, aptur\u0113t lietojumprogrammu un izsl\u0113gt oper\u0113t\u0101jsist\u0113mu. Ja tas nav pieejams, varat piek\u013c\u016bt caur IPMI, aptur\u0113t lietojumprogrammu un izsl\u0113gt oper\u0113t\u0101jsist\u0113mu. Ja nav neviena no t\u012bkliem, j\u016bs neko nevarat izdar\u012bt. \"Paldies, kapteini!\", - dom\u0101siet j\u016bs.
\n\"Un visp\u0101r, \u0161eit ir diezgan liela ros\u012bba,\" - iesp\u0113jams, dom\u0101siet j\u016bs.
\nViss ir t\u0101, ka serveri pat bez uguns rada milz\u012bgu siltuma daudzumu. Prec\u012bz\u0101k, kad ir dzes\u0113\u0161ana, tie \u0123ener\u0113 siltumu, bet kad t\u0101 nav, tie rad\u012bs elles karstumu, kas lab\u0101kaj\u0101 gad\u012bjum\u0101 izkaus\u0113s da\u013cu apr\u012bkojuma un atsl\u0113gs citu da\u013cu, bet slikt\u0101kaj\u0101 gad\u012bjum\u0101... izrais\u012bs ugunsgr\u0113ku z\u0101l\u0113, kas praktiski garant\u0113ti izn\u012bcin\u0101s visu.<\/p>\n

\"Vai
\n
\n15:39. Fiks\u0113jam probl\u0113mas ar conf datu b\u0101zi.<\/p>\n

Conf datu b\u0101ze ir backend vienam un tam pa\u0161am pakalpojumam, ko izmanto visas ra\u017eo\u0161anas lietojumprogrammas, lai operat\u012bvi main\u012btu iestat\u012bjumus. Bez \u0161\u012bs datu b\u0101zes m\u0113s nevaram p\u0101rvald\u012bt port\u0101la darb\u012bbu, bet pats port\u0101ls var darboties.<\/p><\/blockquote>\n

\n15:41. Temperat\u016bras sensori Core t\u012bkla apr\u012bkojum\u0101 fiks\u0113 r\u0101d\u012bjumus, kas ir tuvu pie\u013caujamiem maksimumiem. T\u0101 ir kast\u012bte, kas aiz\u0146em visu stendu un nodro\u0161ina visu t\u012bklu darb\u012bbu datu centr\u0101.<\/p>\n

\"Vai
\n
\n15:42. Probl\u0113mu izseko\u0161anas r\u012bks un wiki nav pieejami, p\u0101rsl\u0113dzamies uz rezerves re\u017e\u012bmu.
\nTas nav ra\u017eo\u0161ana, bet av\u0101rijas gad\u012bjum\u0101 jebkuras zin\u0101\u0161anu b\u0101zes pieejam\u012bba var b\u016bt kritiska.
\n15:50. Viena no uzraudz\u012bbas sist\u0113m\u0101m ir atsl\u0113gta.
\nTo ir vair\u0101kas, un t\u0101s atbild par da\u017e\u0101diem pakalpojumu darb\u012bbas aspektiem. Da\u017eas no t\u0101m ir konfigur\u0113tas patst\u0101v\u012bgai darb\u012bbai katr\u0101 datu centr\u0101 (t.i., t\u0101s uzrauga tikai savu datu centru), citas sast\u0101v no izklied\u0113t\u0101m sast\u0101vda\u013c\u0101m, kas caurredzami iztur jebkura datu centra zudumu.
\n\u0160aj\u0101 gad\u012bjum\u0101 p\u0101rst\u0101ja darboties biznesa lo\u0123ikas r\u0101d\u012bt\u0101ju anomaliju atkl\u0101\u0161anas sist\u0113ma<\/a><\/noindex>, kas darbojas master-standby re\u017e\u012bm\u0101. P\u0101rsl\u0113dz\u0101mies uz rezerves re\u017e\u012bmu.<\/p>\n

Pie\u0146em\u0161ana<\/h4>\n

\n15:51. Caurs IPMI izsl\u0113dz\u0101m visus serverus bez pareizas darb\u012bbas pabeig\u0161anas, iz\u0146emot MS SQL.
\nVai esat gatavi masveida serveru p\u0101rvald\u012bbai caur IPMI, ja nepiecie\u0161ams?<\/p>\n

T\u0101 ir t\u0101 mirk\u013ca, kad datu centra apr\u012bkojuma gl\u0101b\u0161ana \u0161aj\u0101 posm\u0101 ir pabeigta. Viss, ko var\u0113ja izdar\u012bt, ir izdar\u012bts. Da\u017ei kol\u0113\u0123i var atp\u016bsties.<\/i>
\n16:13. Ir sa\u0146emta inform\u0101cija, ka uz jumta ir pl\u012bsu\u0161as dzes\u0113\u0161anas caurules \u2013 tas atliks datu centra palai\u0161anu p\u0113c ugunsgr\u0113ka nov\u0113r\u0161anas.<\/b>
\n16:19. Saska\u0146\u0101 ar datiem, kas ieg\u016bti no datu centra tehnisk\u0101 person\u0101la, temperat\u016bras paaugstin\u0101\u0161an\u0101s z\u0101l\u0113s ir apst\u0101jusies.
\n17:10. Ir atjaunota conf b\u0101zes darb\u012bba. Tagad varam main\u012bt lietojumprogrammu iestat\u012bjumus.
\nK\u0101p\u0113c tas ir tik svar\u012bgi, ja viss ir uzticams un darbojas pat bez viena datu centra?
\nPirmk\u0101rt, ne viss ir uzticams. Ir da\u017e\u0101das sekund\u0101r\u0101s pakalpojumu, kas pagaid\u0101m pietiekami labi nepiecie\u0161 datus no datu centra, un ir b\u0101zes re\u017e\u012bm\u0101 master-standby. Iesp\u0113ja p\u0101rvald\u012bt iestat\u012bjumus \u013cauj veikt visu nepiecie\u0161amo, lai pat sare\u017e\u0123\u012btajos apst\u0101k\u013cos minimiz\u0113tu negad\u012bjuma sekas uz lietot\u0101jiem.
\nOtrk\u0101rt, k\u013cuva skaidrs, ka tuv\u0101kaj\u0101s stund\u0101s datu centra darb\u012bba piln\u012bb\u0101 netiks atjaunota, t\u0101d\u0113\u013c bija nepiecie\u0161ams veikt pas\u0101kumus, lai ilgsto\u0161a kopiju nepieejam\u012bba nenovestu pie papildu nepatik\u0161an\u0101m, piem\u0113ram, disku p\u0101rpild\u012b\u0161an\u0101s atliku\u0161ajos datu centros.
\n17:29. Pica laiks! Mums str\u0101d\u0101 cilv\u0113ki, nevis roboti.<\/p>\n

\"Vai
\n<\/p>\n

Rehabilit\u0101cija<\/h4>\n

\n18:02. Z\u0101l\u0113s \u2116\u21168 (m\u016bsu), 9, 10 un 11 temperat\u016bra ir stabiliz\u0113jusies. Vien\u0101 no t\u0101m, kas paliek izsl\u0113gtas (\u21167), atrodas m\u016bsu apr\u012bkojums, un temperat\u016bra tur joproj\u0101m turpina pieaugt.
\n18:31. Ir doti za\u013co gaismu iek\u0101rtu palai\u0161anai z\u0101l\u0113s \u2116\u21161 un 3 \u2013 \u0161\u012bs z\u0101les ugunsgr\u0113ks nav sk\u0101ris.<\/p>\n

\u0160obr\u012bd tiek uzs\u0101kta serveru palai\u0161ana z\u0101l\u0113s \u2116\u21161, 3, 8, s\u0101kot ar viskritisk\u0101kajiem. Tiek p\u0101rbaud\u012bta visu palaisto pakalpojumu darb\u012bba. Joproj\u0101m ir probl\u0113mas ar z\u0101li \u21167.<\/i><\/p>\n

18:44. Datu centra tehnisk\u0101 person\u0101ls konstat\u0113ja, ka z\u0101l\u0113 \u21167 (kur atrodas tikai m\u016bsu apr\u012bkojums) daudzi serveri nav izsl\u0113gti. Saska\u0146\u0101 ar m\u016bsu datiem, tur paliek iesl\u0113gti 26 serveri. P\u0113c atk\u0101rtotas p\u0101rbaudes atkl\u0101jam 58 serverus.
\n20:18. Datu centra tehnisk\u0101 person\u0101ls p\u016b\u0161 gaisu z\u0101l\u0113 bez kondicion\u0113\u0161anas caur mobilajiem ventil\u0101cijas kan\u0101liem, kas novietoti cauri koridoriem.
\n23:08. Pirmo administratoru atlaida m\u0101j\u0101s. K\u0101dam nakts laik\u0101 j\u0101atp\u016b\u0161as, lai r\u012bt turpin\u0101tu darbus. T\u0101l\u0101k atlaides v\u0113l da\u013ca administratoru un izstr\u0101d\u0101t\u0101ju.
\n02:56. Esam palaidu\u0161i visu, ko var\u0113j\u0101m palaist. Veicam pla\u0161u visu pakalpojumu p\u0101rbaudi ar automatiz\u0113tajiem testiem.<\/p>\n

\"Vai
\n
\n03:02. Kondicion\u0113\u0161ana p\u0113d\u0113j\u0101, 7. z\u0101l\u0113 ir atjaunota.
\n03:36. Esam aktiviz\u0113ju\u0161i frontus datu centr\u0101 DNS rot\u0101cij\u0101. No \u0161\u012b br\u012b\u017ea s\u0101k ien\u0101kt lietot\u0101ju datpl\u016bsma.
\nAtlaidu liel\u0101ko da\u013cu administratoru m\u0101j\u0101s. Bet da\u017eus cilv\u0113kus atst\u0101jam.<\/p>\n

Neliels FAQ:
\nQ: Kas notika no 18:31 l\u012bdz 02:56?
\nA: Sekojot \u201eR\u012bc\u012bbas pl\u0101nam av\u0101rijas gad\u012bjum\u0101\u201d, m\u0113s palaid\u0101m visus pakalpojumus, s\u0101kot ar vissvar\u012bg\u0101kajiem. \u0160aj\u0101 proces\u0101 koordinators \u010dat\u0101 pie\u0161\u0137ir pakalpojumu br\u012bvajam administratoram, kur\u0161 p\u0101rbauda, vai OS un lietojumprogramma ir palaistas, vai nav k\u013c\u016bdu, un vai r\u0101d\u012bt\u0101ji ir norm\u0101.
\nProcess papildus kav\u0113jas d\u0113\u013c izsl\u0113gtiem dzel\u017eiem. Pat ja OS aptur\u0113\u0161ana un serveru izsl\u0113g\u0161ana norit\u0113ja pareizi, da\u013ca serveru neatgrie\u017eas d\u0113\u013c p\u0113k\u0161\u0146i atteiku\u0161iem diskiem, atmi\u0146ai, \u0161asijai. Elektr\u012bbas samazin\u0101\u0161an\u0101s gad\u012bjum\u0101 atteikumu procents palielin\u0101s.
\nQ: K\u0101p\u0113c nevar vienk\u0101r\u0161i palaist visu uzreiz un p\u0113c tam labot to, kas par\u0101d\u012bsies.monitoring\u0101?
\nA: Viss j\u0101dara pak\u0101peniski, jo starp pakalpojumiem ir atkar\u012bbas. Un visam j\u0101p\u0101rbauda uzreiz, negaidot monitoringu \u2014 jo ar probl\u0113m\u0101m lab\u0101k tikt gal\u0101 uzreiz, negaidot, kad t\u0101s pasliktin\u0101s.<\/p><\/blockquote>\n

\n7:40. P\u0113d\u0113jais admins (koordinators) g\u0101ju gul\u0113t. Pirm\u0101 diena pabeigta.
\n8:09. Pirmie izstr\u0101d\u0101t\u0101ji, in\u017eenieri datu centros un administratori (ieskaitot jauno koordin\u0101toru) uzs\u0101k atjauno\u0161anas darbus.
\n09:37. S\u0101ku\u0161i celtniec\u012bbu 7. z\u0101l\u0113 (p\u0113d\u0113j\u0101).
\nVienlaikus turpin\u0101m atjaunot to, ko neesam pabeigu\u0161i cit\u0101s z\u0101l\u0113s: disku\/atmi\u0146as\/serveru nomai\u0146a, visu, kas \"deg\" monitoring\u0101, remonts, lomu atpaka\u013c p\u0101rsl\u0113g\u0161ana master-standby sh\u0113m\u0101s un citas s\u012bkumi, kuru tom\u0113r ir pietiekami daudz.
\n17:08. At\u013caujam visus parast\u0101s darb\u012bbas ar produkciju.
\n21:45. Otr\u0101s dienas darbi pabeigti.
\n09:45. \u0160odien ir piektdiena. Monitoring\u0101 joproj\u0101m ir daudz s\u012bku probl\u0113mu. Priek\u0161\u0101 ir br\u012bvdienas, visiem gribas atp\u016bsties. Turpin\u0101m masveid\u0101 labot visu, ko var. \u0160tatisk\u0101s administrat\u012bv\u0101s uzdevumi, kurus var\u0113ja atlikt, ir atlikti. Ir jauns koordinators.
\n15:40. Negaid\u012bti restart\u0113j\u0101s puse no Core t\u012bkla apr\u012bkojuma k\u0101 cit\u0101 datu centr\u0101. No rot\u0101cijas tika iz\u0146emti priek\u0161\u0113jie, lai samazin\u0101tu riskus. Ietekmes lietot\u0101jiem nav. V\u0113l\u0101k noskaidroj\u0101s, ka t\u0101 bija boj\u0101ta \u0161asija. Koordinators tagad str\u0101d\u0101 pie divu av\u0101riju labojuma.
\n17:17. T\u012bkla darb\u012bba cit\u0101 datu centr\u0101 ir atjaunota, viss ir p\u0101rbaud\u012bts. Datu centrs ir ieviests rot\u0101cij\u0101.
\n18:29. Tre\u0161o dienu darbs, un kopum\u0101 av\u0101rijas atjauno\u0161ana ir pabeigta.<\/p>\n

P\u0113cv\u0101rds<\/h4>\n

\n04.04.2013. 404. k\u013c\u016bdas dien\u0101<\/a><\/noindex>, \"Odnoklassniki\" izcieta liel\u0101ko av\u0101riju<\/a><\/noindex> \u2014 tr\u012bs dienas port\u0101ls bija piln\u012bb\u0101 vai da\u013c\u0113ji nepieejams. Visa \u0161\u012b laika gait\u0101 vair\u0101k nek\u0101 100 cilv\u0113ki no da\u017e\u0101d\u0101m pils\u0113t\u0101m, no da\u017e\u0101d\u0101m firm\u0101m (v\u0113lreiz liels paldies!), att\u0101lin\u0101ti un tie\u0161i datu centros, manu\u0101li un autom\u0101tiski laboja t\u016bksto\u0161iem serveru.
\nM\u0113s esam izdar\u012bju\u0161i secin\u0101jumus. Lai \u0161\u0101das situ\u0101cijas neatk\u0101rtotos, m\u0113s veic\u0101m un turpina veikt pla\u0161us darbus.<\/p>\n

K\u0101das ir galven\u0101s at\u0161\u0137ir\u012bbas starp pa\u0161reiz\u0113jo av\u0101riju un 404?<\/p>\n