{"id":95870,"date":"2020-10-04T13:41:59","date_gmt":"2020-10-04T11:41:59","guid":{"rendered":"https:\/\/prohoster.info\/blog\/administrirovanie\/pochemu-vazhno-proverit-po-na-vashej-shd-vysokoj-dostupnosti-999999"},"modified":"2020-10-04T13:41:59","modified_gmt":"2020-10-04T11:41:59","slug":"pochemu-vazhno-proverit-po-na-vashej-shd-vysokoj-dostupnosti-999999","status":"publish","type":"post","link":"https:\/\/prohoster.info\/sk\/blog\/administrirovanie\/pochemu-vazhno-proverit-po-na-vashej-shd-vysokoj-dostupnosti-999999","title":{"rendered":"Pre\u010do je d\u00f4le\u017eit\u00e9 overi\u0165 softv\u00e9r na va\u0161om \u00falo\u017enom syst\u00e9me s vysokou dostupnos\u0165ou (99,9999%)","gt_translate_keys":[{"key":"rendered","format":"text"}]},"content":{"rendered":"

\"Pre\u010do<\/p>\n

Ktor\u00e1 verzia firmv\u00e9ru je naj \"spr\u00e1vnej\u0161ia\" a \"funk\u010dn\u00e1\"? Ak SDD zaru\u010duje bezporuchovos\u0165 na 99,9999%, znamen\u00e1 to, \u017ee bude fungova\u0165 bez preru\u0161enia aj bez aktualiz\u00e1cie softv\u00e9ru? Alebo naopak, na dosiahnutie maxim\u00e1lnej bezporuchovosti je v\u017edy potrebn\u00e9 nain\u0161talova\u0165 najnov\u0161\u00ed firmv\u00e9r? Pok\u00fasime sa odpoveda\u0165 na tieto ot\u00e1zky na z\u00e1klade na\u0161ich sk\u00fasenost\u00ed.<\/p>\n

Kr\u00e1tke \u00favodn\u00e9 slovo<\/h3>\n

V\u0161etci ch\u00e1peme, \u017ee v ka\u017edej verzii softv\u00e9ru, \u010di u\u017e ide o opera\u010dn\u00fd syst\u00e9m alebo ovl\u00e1da\u010d pre nejak\u00e9 zariadenie, sa \u010dasto nach\u00e1dzaj\u00fa nedorobky\/bugy a in\u00e9 \"\u0161pecifick\u00e9\" vlastnosti, ktor\u00e9 sa m\u00f4\u017eu, ako \"neprejavi\u0165\" po\u010das celej \u017eivotnosti zariadenia, tak aj \"odhali\u0165\" len za ur\u010dit\u00fdch podmienok. Po\u010det a v\u00fdznam t\u00fdchto nu\u00e1ns z\u00e1vis\u00ed od komplexnosti (funkcionality) softv\u00e9ru a od kvality jeho testovania po\u010das v\u00fdvoja. <\/p>\n

\u010casto zost\u00e1vaj\u00fa pou\u017e\u00edvatelia na \"firmv\u00e9ri z v\u00fdroby\" (zn\u00e1me - \"funguje, tak nezasahuj\") alebo v\u017edy nain\u0161taluj\u00fa najnov\u0161iu verziu (v ich ch\u00e1pan\u00ed posledn\u00e1 znamen\u00e1 najfunk\u010dnej\u0161ia). My v\u0161ak pou\u017e\u00edvame in\u00fd pr\u00edstup - sledujeme z\u00e1znamy zmien pre cel\u00fd pou\u017eit\u00fd softv\u00e9r. v cloude mClouds<\/a><\/noindex> hardware a starostlivo vyber\u00e1me vhodn\u00fd firmv\u00e9r pre ka\u017ed\u00fd kus vybavenia. <\/p>\n

K tomuto z\u00e1veru sme dospeli, ako sa hovor\u00ed, s praxou. Na na\u0161ich sk\u00fasenostiach v\u00e1m prerozpr\u00e1vame, pre\u010do s\u013eubovan\u00fdch 99,9999 % spo\u013eahlivosti \u00falo\u017en\u00e9ho syst\u00e9mu ni\u010d neznamen\u00e1, ak nebudete v\u010das sledova\u0165 aktualiz\u00e1cie a popisy softv\u00e9ru. N\u00e1\u0161 pr\u00edpad bude vhodn\u00fd pre pou\u017e\u00edvate\u013eov \u00falo\u017en\u00fdch syst\u00e9mov ak\u00e9hoko\u013evek dod\u00e1vate\u013ea, preto\u017ee podobn\u00e1 situ\u00e1cia sa m\u00f4\u017ee vyskytn\u00fa\u0165 aj s hardv\u00e9rom ak\u00e9hoko\u013evek v\u00fdrobcu.<\/p>\n

V\u00fdber nov\u00e9ho syst\u00e9mu na ukladanie d\u00e1t<\/h3>\n

Na konci minul\u00e9ho roka sme k na\u0161ej infra\u0161trukt\u00fare pridali zauj\u00edmav\u00fd syst\u00e9m ukladania d\u00e1t: ni\u017e\u0161\u00ed model z l\u00ednie IBM FlashSystem 5000, ktor\u00fd bol v \u010dase zak\u00fapenia ozna\u010dovan\u00fd ako Storwize V5010e. Teraz sa pred\u00e1va pod n\u00e1zvom FlashSystem 5010, ale v podstate ide o t\u00fa ist\u00fa hardv\u00e9rov\u00fa z\u00e1klad\u0148u so rovnak\u00fdm Spectrum Virtualize vo vn\u00fatri. <\/p>\n

Existencia jedn\u00e9ho syst\u00e9mu spr\u00e1vy - to je, mimochodom, hlavn\u00fd rozdiel IBM FlashSystem. Modely ni\u017e\u0161ej s\u00e9rie sa od v\u00fdkonnej\u0161\u00edch modelov prakticky nel\u00ed\u0161ia. V\u00fdber ur\u010dit\u00e9ho modelu iba poskytuje zodpovedaj\u00facu hardv\u00e9rov\u00fa z\u00e1klad\u0148u, ktor\u00fdch vlastnosti umo\u017e\u0148uj\u00fa vyu\u017ei\u0165 ur\u010dit\u00fa funkcionalitu alebo zabezpe\u010di\u0165 vy\u0161\u0161iu \u00farove\u0148 \u0161k\u00e1lovate\u013enosti. Softv\u00e9r pritom identifikuje hardv\u00e9rov\u00fa s\u00fa\u010d\u00e1st a poskytuje potrebn\u00fa a dostato\u010dn\u00fa funkcionalitu pre t\u00fato platformu. <\/p>\n

\"Pre\u010doIBM FlashSystem 5010<\/p>\n

Stru\u010dne o na\u0161om modeli 5010. Ide o dvojkontrol\u00e9rov\u00fd blok \u00falo\u017en\u00e9ho syst\u00e9mu z\u00e1kladnej \u00farovne. Je schopn\u00fd uklada\u0165 disky NLSAS, SAS, SSD. Umiestnenie NVMe na \u0148om nie je dostupn\u00e9, ke\u010f\u017ee tento model S\u00daI je ur\u010den\u00fd na rie\u0161enie \u00faloh, ktor\u00e9 nevy\u017eaduj\u00fa v\u00fdkon NVMe diskov.<\/p>\n

S\u00daI bola zak\u00fapen\u00e1 na ulo\u017eenie arch\u00edvnych inform\u00e1ci\u00ed alebo \u00fadajov, k ktor\u00fdm sa nepristupuje \u010dasto. Preto n\u00e1m sta\u010dil \u0161tandardn\u00fd s\u00fabor jej funkci\u00ed: tiering (Easy Tier), Thin Provision. V\u00fdkon na diskoch NLSAS na \u00farovni 1000-2000 IOPS n\u00e1s tie\u017e celkom uspokojoval. <\/p>\n

Na\u0161a sk\u00fasenos\u0165 \u2014 ako sme nestihli v\u010das aktualizova\u0165 firmv\u00e9r<\/h3>\n

Teraz prid\u00e1me konkr\u00e9tny popis aktualiz\u00e1cie softv\u00e9ru. V \u010dase zak\u00fapenia mala s\u00fastava u\u017e trochu zastaran\u00fa verziu softv\u00e9ru Spectrum Virtualize, a to konkr\u00e9tne, 8.2.1.3.<\/strong><\/p>\n

Presk\u00famali sme popis firmv\u00e9rov a napl\u00e1novali sme aktualiz\u00e1ciu na 8.2.1.9<\/strong>. Keby sme boli trochu pohotovej\u0161\u00ed, t\u00e1to \u010dl\u00e1nok by neexistoval \u2014 na nov\u0161ej firme by k tejto chybe nedo\u0161lo. Z ur\u010dit\u00fdch d\u00f4vodov bolo v\u0161ak aktualizovanie tejto s\u00fastavy odlo\u017een\u00e9.<\/p>\n

V d\u00f4sledku drobn\u00e9ho oneskorenia aktualiz\u00e1cie do\u0161lo k mimoriadne nepr\u00edjemnej situ\u00e1cii, ako je pop\u00edsan\u00e9 v odkaze: https:\/\/www.ibm.com\/support\/pages\/node\/6172341<\/u><\/a><\/noindex>. <\/p>\n

\u00c1no, vo firme tej verzie bol v skuto\u010dnosti relevantn\u00fd takzvan\u00fd APAR (Authorized Program Analysis Report) HU02104. Prejavuje sa to nasledovne. Pod z\u00e1\u0165a\u017eou sa za ur\u010dit\u00fdch okolnost\u00ed za\u010d\u00edna preteka\u0165 vyrovn\u00e1vacia pam\u00e4\u0165, n\u00e1sledne syst\u00e9m prejde do ochrann\u00e9ho re\u017eimu, v ktorom vypne vstup-v\u00fdstup pre pool (Pool). V na\u0161om pr\u00edpade to vypadalo ako vypnutie 3 diskov pre RAID skupinu v re\u017eime RAID 6. Vypnutie trv\u00e1 6 min\u00fat. Potom sa pr\u00edstup k objemom v poole obnov\u00ed.<\/p>\n

Ak niekto nie je obozn\u00e1men\u00fd so \u0161trukt\u00farou a n\u00e1zvami logick\u00fdch ent\u00edt v kontexte IBM Spectrum Virtualize, teraz v\u00e1m to stru\u010dne vysvetl\u00edm.<\/p>\n

\"Pre\u010do\u0160trukt\u00fara logick\u00fdch prvkov S\u00daS<\/p>\n

Disky s\u00fa zoskupen\u00e9 do skup\u00edn, ktor\u00e9 sa naz\u00fdvaj\u00fa MDisk (Managed Disk). MDisk m\u00f4\u017ee predstavova\u0165 klasick\u00fd RAID (0,1,10,5,6) alebo virtualizovan\u00fd \u2013 DRAID (Distributed RAID). Pou\u017eitie DRAID umo\u017e\u0148uje zv\u00fd\u0161i\u0165 v\u00fdkon po\u013ea, preto\u017ee bud\u00fa pou\u017e\u00edvan\u00e9 v\u0161etky disky skupiny, a skr\u00e1ti\u0165 \u010das obnovy, preto\u017ee je potrebn\u00e9 obnovova\u0165 len ur\u010dit\u00e9 bloky, nie v\u0161etky \u00fadaje z nefunk\u010dn\u00e9ho disku.<\/p>\n

\"Pre\u010doRozdelenie blokov \u00fadajov na disky pri pou\u017eit\u00ed Distributed RAID (DRAID) v re\u017eime RAID-5.<\/p>\n

A tento diagram ukazuje logiku pr\u00e1ce obnovy DRAID v pr\u00edpade zlyhania jedn\u00e9ho disku:<\/p>\n

\"Pre\u010doLogika pr\u00e1ce obnovy DRAID pri zlyhan\u00ed jedn\u00e9ho disku<\/p>\n

\u010ealej jeden alebo viac MDisk tvoria tzv. Pool. V r\u00e1mci jedn\u00e9ho poolu sa neodpor\u00fa\u010da pou\u017e\u00edva\u0165 MDisk s r\u00f4znymi \u00farov\u0148ami RAID\/DRAID na diskoch rovnak\u00e9ho typu. Nechceme sa do toho ve\u013emi zaobera\u0165, preto\u017ee pl\u00e1nujeme o tom rozpr\u00e1va\u0165 v r\u00e1mci jedn\u00e9ho z nasleduj\u00facich \u010dl\u00e1nkov. No a vlastne, Pool sa rozde\u013euje na T\u00e9my (Volumes), ktor\u00e9 sa prezentuj\u00fa prostredn\u00edctvom toho alebo in\u00e9ho protokolu blokov\u00e9ho pr\u00edstupu smerom k hostite\u013eom.<\/p>\n

Tak\u017ee, v d\u00f4sledku vzniku situ\u00e1cie, ktor\u00e1 bola pop\u00edsan\u00e1 v APAR HU02104<\/em>, z d\u00f4vodu logick\u00e9ho zlyhania troch diskov, prestal by\u0165 funk\u010dn\u00fd MDisk, \u010do viedlo k zlyhaniu Poolu a pr\u00edslu\u0161n\u00fdch T\u00e9m.<\/p>\n

Ke\u010f\u017ee tieto syst\u00e9my s\u00fa dos\u0165 'inteligentn\u00e9', je mo\u017en\u00e9 ich pripoji\u0165 k cloudov\u00e9mu monitorovaciemu syst\u00e9mu IBM Storage Insights, ktor\u00fd automaticky po vzniku poruchy odo\u0161le po\u017eiadavku na servis do technickej podpory IBM. Vytvor\u00ed sa tiket a odborn\u00edci IBM v dia\u013ekovom re\u017eime vykon\u00e1vaj\u00fa diagnostiku a kontaktuj\u00fa pou\u017e\u00edvate\u013ea syst\u00e9mu. <\/p>\n

V\u010faka tomu sa ot\u00e1zka vyrie\u0161ila pomerne r\u00fdchlo a zo strany technickej podpory bola poskytnut\u00e1 okam\u017eit\u00e1 doporu\u010denie na aktualiz\u00e1ciu n\u00e1\u0161ho syst\u00e9mu na u\u017e sk\u00f4r vybran\u00fa verziu firmv\u00e9ru 8.2.1.9, v ktorej bol tento probl\u00e9m u\u017e vyrie\u0161en\u00fd. To potvrdzuje prisl\u00fachaj\u00faci Release Note<\/u><\/a><\/noindex>.<\/u><\/p>\n

Zhrnutie a na\u0161e odpor\u00fa\u010dania<\/h3>\n

Ako sa hovor\u00ed: \u201edobre je to, \u010do dobre kon\u010d\u00ed\u201c. Chyba v firmv\u00e9ri sa neprejavila v\u00e1\u017enymi probl\u00e9mami \u2014 pr\u00e1ca serverov bola obnoven\u00e1 v najkrat\u0161om mo\u017enom \u010dase a bez straty d\u00e1t. U niektor\u00fdch klientov bolo potrebn\u00e9 re\u0161tartova\u0165 virtu\u00e1lne stroje, ale celkovo sme boli pripraven\u00ed na hor\u0161ie n\u00e1sledky, preto\u017ee denne vykon\u00e1vame z\u00e1lohy v\u0161etk\u00fdch prvkov infra\u0161trukt\u00fary a klientsk\u00fdch strojov. <\/p>\n

Dostali sme potvrdenie, \u017ee aj spo\u013eahliv\u00e9 syst\u00e9my s 99,9999 % s\u013eubovanej dostupnosti potrebuj\u00fa pozornos\u0165 a pravideln\u00fa \u00fadr\u017ebu. Na z\u00e1klade situ\u00e1cie sme si vyvodili nieko\u013eko z\u00e1verov a del\u00edme sa o na\u0161e odpor\u00fa\u010dania:<\/p>\n