Bawo ni iwọ yoo ṣe rilara ti ọjọ ẹrun kan ti o dara ni ile-iṣẹ data pẹlu ohun elo rẹ dabi eyi?
Bawo ni gbogbo eniyan! Orukọ mi ni Dmitry Samsonov, Mo ṣiṣẹ bi oludari eto eto ni "" Fọto naa fihan ọkan ninu awọn ile-iṣẹ data mẹrin nibiti a ti fi ohun elo ti n ṣiṣẹ iṣẹ akanṣe wa sori ẹrọ. Lẹhin awọn odi wọnyi o wa nipa awọn ohun elo 4 ẹgbẹrun: awọn olupin, awọn ọna ipamọ data, ohun elo nẹtiwọọki, ati bẹbẹ lọ. - fere ⅓ ti gbogbo ẹrọ wa.
Pupọ julọ olupin jẹ Linux. Awọn olupin mejila tun wa lori Windows (MS SQL) - ohun-ini wa, eyiti a ti kọ silẹ ni ọna ṣiṣe fun ọpọlọpọ ọdun.
Nitorinaa, ni Oṣu Karun ọjọ 5, ọdun 2019 ni 14:35, awọn onimọ-ẹrọ ni ọkan ninu awọn ile-iṣẹ data wa royin itaniji ina kan.
Aisedeede
14:45. Awọn iṣẹlẹ ẹfin kekere ni awọn ile-iṣẹ data jẹ wọpọ ju bi o ti ro lọ. Awọn olufihan inu awọn gbọngàn jẹ deede, nitorinaa iṣesi akọkọ wa jẹ idakẹjẹ diẹ: wọn ṣe ifilọlẹ wiwọle lori iṣẹ pẹlu iṣelọpọ, iyẹn ni, lori awọn iyipada iṣeto eyikeyi, lori yiyi awọn ẹya tuntun, ati bẹbẹ lọ, ayafi fun iṣẹ ti o ni ibatan si titunṣe nkan kan.
Ibinu
Njẹ o ti gbiyanju lati ṣawari lati ọdọ awọn onija ina ni pato ibi ti ina ti waye lori orule, tabi lati lọ sori orule ti o njo lati ṣe ayẹwo ipo naa? Kini yoo jẹ iwọn igbẹkẹle ninu alaye ti a gba nipasẹ eniyan marun?
14: 50. Alaye ti gba pe ina n sunmọ eto itutu agbaiye. Ṣugbọn ṣe yoo wa bi? Alakoso eto ti o wa ni iṣẹ yọ awọn ijabọ ita kuro ni iwaju ti ile-iṣẹ data yii.
Ni akoko yii, awọn iwaju ti gbogbo awọn iṣẹ wa ti ṣe ẹda ni awọn ile-iṣẹ data mẹta, iwọntunwọnsi ni a lo ni ipele DNS, eyiti o fun wa laaye lati yọ awọn adirẹsi ti ile-iṣẹ data kan kuro ni DNS, nitorinaa aabo awọn olumulo lati awọn iṣoro ti o pọju pẹlu iraye si awọn iṣẹ. . Ti awọn iṣoro ba ti waye tẹlẹ ni ile-iṣẹ data, o fi iyipo silẹ laifọwọyi. O le ka diẹ sii nibi:
Ina naa ko tii kan wa ni eyikeyi ọna sibẹsibẹ - bẹni awọn olumulo tabi ohun elo ko ti bajẹ. Ṣe eyi jẹ ijamba bi? Apa akọkọ ti iwe-ipamọ “Eto Iṣe Iṣe ijamba” n ṣalaye ero ti “Ijamba”, ati apakan naa dopin bii eyi:
«Ti iyemeji ba wa boya ijamba kan wa tabi rara, lẹhinna o jẹ ijamba!»
14:53. A yan oluṣeto pajawiri.
Alakoso ni eniyan ti o nṣakoso ibaraẹnisọrọ laarin gbogbo awọn olukopa, ṣe ayẹwo iwọn ti ijamba naa, lo Eto Iṣe Pajawiri, ṣe ifamọra awọn eniyan pataki, ṣe abojuto ipari awọn atunṣe, ati julọ pataki, ṣe aṣoju awọn iṣẹ-ṣiṣe eyikeyi. Ni awọn ọrọ miiran, eyi ni eniyan ti o ṣakoso gbogbo ilana idahun pajawiri.
Idunadura
15:01. A bẹrẹ lati mu awọn olupin ti ko ni ibatan si iṣelọpọ.
15:03. A pa gbogbo awọn iṣẹ ti a fipamọ ni deede.
Eyi pẹlu kii ṣe awọn iwaju nikan (eyiti nipasẹ aaye yii awọn olumulo ko wọle si) ati awọn iṣẹ iranlọwọ wọn (ọgbọn-ọrọ iṣowo, awọn caches, ati bẹbẹ lọ), ṣugbọn ọpọlọpọ awọn apoti isura infomesonu pẹlu ifosiwewe ẹda 2 tabi diẹ sii (, , , ati be be lo).
15: 06. Alaye ti gba pe ina kan n halẹ ọkan ninu awọn gbọngàn ile-iṣẹ data. A ko ni ohun elo ninu yara yii, ṣugbọn otitọ pe ina le tan lati orule si awọn gbọngàn ti o ṣe iyipada aworan ti ohun ti n ṣẹlẹ.
(O nigbamii wa ni jade wipe o wa ni ko si ti ara irokeke ewu si awọn alabagbepo, niwon o ti hermetically edidi lati orule. Irokeke wà nikan si awọn itutu eto ti yi alabagbepo.)
15:07. A gba pipaṣẹ aṣẹ lori awọn olupin ni ipo isare laisi awọn sọwedowo afikun ().
15:08. Iwọn otutu ninu awọn gbọngàn wa laarin awọn ifilelẹ deede.
15: 12. Alekun iwọn otutu ni awọn gbọngàn ni a gbasilẹ.
15:13. Diẹ ẹ sii ju idaji awọn olupin ti o wa ni ile-iṣẹ data ti wa ni pipa. Jẹ ki a tẹsiwaju.
15:16. A ṣe ipinnu lati pa gbogbo ẹrọ.
15:21. A bẹrẹ lati pa agbara si awọn olupin ti ko ni ipinlẹ laisi pipade ohun elo ati ẹrọ ṣiṣe ni deede.
15:23. Ẹgbẹ kan ti awọn eniyan lodidi fun MS SQL ti wa ni ipin (nibẹ ni o wa diẹ ninu wọn, awọn gbára ti awọn iṣẹ lori wọn ni ko nla, ṣugbọn awọn ilana fun mimu-pada sipo iṣẹ gba to gun ati ki o jẹ diẹ idiju ju, fun apẹẹrẹ, Cassandra).
Ibanujẹ
15: 25. Alaye ti gba nipa agbara ti wa ni pipa ni awọn gbọngàn mẹrin ninu 16 (No. 6, 7, 8, 9). Ohun elo wa wa ni awọn gbọngàn 7 ati 8. Ko si alaye nipa awọn gbọngàn wa meji (No.. 1 ati 3).
Nigbagbogbo, lakoko awọn ina, ipese agbara ti wa ni pipa lẹsẹkẹsẹ, ṣugbọn ninu ọran yii, o ṣeun si iṣẹ iṣakojọpọ ti awọn onija ina ati awọn oṣiṣẹ imọ-ẹrọ ti ile-iṣẹ data, ko ni pipa ni gbogbo ibi ati kii ṣe lẹsẹkẹsẹ, ṣugbọn bi o ṣe pataki.
(A ṣe awari nigbamii pe agbara ko ni pipa ni awọn gbọngàn 8 ati 9.)
15:28. A n bẹrẹ lati ran awọn apoti isura infomesonu MS SQL lati awọn afẹyinti ni awọn ile-iṣẹ data miiran.
Bawo ni yoo ṣe pẹ to? Ṣe agbara nẹtiwọọki to fun gbogbo ipa-ọna naa?
15: 37. Tiipa diẹ ninu awọn ẹya ti nẹtiwọọki naa ti gbasilẹ.
Isakoso ati nẹtiwọọki iṣelọpọ jẹ iyasọtọ ti ara lati ara wọn. Ti nẹtiwọki iṣelọpọ ba wa, lẹhinna o le lọ si olupin naa, da ohun elo duro ki o si pa OS naa. Ti ko ba si, lẹhinna o le wọle nipasẹ IPMI, da ohun elo duro ki o si pa OS naa. Ti ko ba si awọn nẹtiwọki, lẹhinna o ko le ṣe ohunkohun. "O ṣeun, Cap!", Iwọ yoo ronu.
"Ati ni gbogbogbo, ọpọlọpọ rudurudu wa," o tun le ronu.
Ohun naa ni pe awọn olupin, paapaa laisi ina, ṣe ina nla ti ooru. Ni deede diẹ sii, nigbati itutu agbaiye ba wa, wọn ṣe ina ooru, ati nigbati ko ba si itutu agbaiye, wọn ṣẹda inferno hellish, eyiti, ni o dara julọ, yoo yo apakan ti ẹrọ naa ki o pa apakan miiran, ati ni buru julọ… fa a ina inu alabagbepo, eyiti o fẹrẹ jẹ ẹri lati pa ohun gbogbo run.
15:39. A fix awọn iṣoro pẹlu conf database.
Ipamọ data conf jẹ ẹhin fun iṣẹ ti orukọ kanna, eyiti gbogbo awọn ohun elo iṣelọpọ lo lati yi awọn eto pada ni iyara. Laisi ipilẹ yii, a ko le ṣakoso iṣẹ ti ọna abawọle, ṣugbọn ọna abawọle funrararẹ le ṣiṣẹ.
15:41. Awọn sensosi iwọn otutu lori ohun elo nẹtiwọọki Core ṣe igbasilẹ awọn kika kika ti o sunmọ julọ iyọọda. Eyi jẹ apoti ti o wa ni gbogbo agbeko ati ṣe idaniloju iṣẹ ti gbogbo awọn nẹtiwọọki inu ile-iṣẹ data.
15:42. Olutọpa oro ati wiki ko si, yipada si imurasilẹ.
Eyi kii ṣe iṣelọpọ, ṣugbọn ni iṣẹlẹ ti ijamba, wiwa eyikeyi ipilẹ imọ le jẹ pataki.
15:50. Ọkan ninu awọn eto ibojuwo ti wa ni pipa.
Nibẹ ni o wa ni ọpọlọpọ awọn ti wọn, ati awọn ti wọn wa ni lodidi fun yatọ si ise ti awọn iṣẹ. Diẹ ninu wọn ni tunto lati ṣiṣẹ ni aifọwọyi laarin ile-iṣẹ data kọọkan (iyẹn ni, wọn ṣe atẹle ile-iṣẹ data tiwọn nikan), awọn miiran ni awọn paati ti o pin kaakiri ti o yege isonu ti ile-iṣẹ data eyikeyi.
Ni idi eyi o duro lati ṣiṣẹ , eyi ti nṣiṣẹ ni titunto si-imurasilẹ mode. Yipada si imurasilẹ.
Olomo
15:51. Gbogbo awọn olupin ayafi MS SQL ti wa ni pipa nipasẹ IPMI laisi tiipa ni deede.
Ṣe o ṣetan fun iṣakoso olupin nla nipasẹ IPMI ti o ba jẹ dandan?
Akoko pupọ nigbati igbala ti ohun elo ni ile-iṣẹ data ti pari ni ipele yii. Ohun gbogbo ti o le ṣee ṣe ni a ti ṣe. Diẹ ninu awọn ẹlẹgbẹ le sinmi.
16: 13. Alaye ti gba pe awọn paipu freon lati awọn amúlétutù afẹfẹ ti nwaye lori orule - eyi yoo ṣe idaduro ifilọlẹ ti ile-iṣẹ data lẹhin ti a ti yọ ina kuro.
16:19. Gẹgẹbi data ti o gba lati ọdọ awọn oṣiṣẹ imọ-ẹrọ ti ile-iṣẹ data, ilosoke ninu iwọn otutu ninu awọn gbọngàn ti duro.
17:10. A ti mu ibi ipamọ data conf pada. Bayi a le yi awọn eto ohun elo pada.
Kini idi ti eyi ṣe pataki ti ohun gbogbo ba jẹ ifarada-aṣiṣe ati pe o ṣiṣẹ paapaa laisi ile-iṣẹ data kan?
Ni akọkọ, kii ṣe ohun gbogbo jẹ ifarada-aṣiṣe. Orisirisi awọn iṣẹ Atẹle lo wa ti ko ti ye ikuna ile-iṣẹ data daradara to, ati pe awọn apoti isura infomesonu wa ni ipo imurasilẹ titunto si. Agbara lati ṣakoso awọn eto gba ọ laaye lati ṣe ohun gbogbo pataki lati dinku ipa ti awọn abajade ti ijamba lori awọn olumulo paapaa ni awọn ipo ti o nira.
Ni ẹẹkeji, o han gbangba pe iṣẹ ti ile-iṣẹ data kii yoo mu pada ni kikun ni awọn wakati to n bọ, nitorinaa o jẹ dandan lati ṣe awọn igbese lati rii daju pe wiwa igba pipẹ ti awọn ẹda ko yorisi awọn wahala afikun gẹgẹbi awọn disiki kikun ni awọn ile-iṣẹ data ti o ku.
17:29. Pizza akoko! A gba eniyan, kii ṣe awọn roboti.
Isodi titun
18:02. Ni awọn gbọngàn No.. 8 (wa), 9, 10 ati 11 awọn iwọn otutu ti diduro. Ọkan ninu awọn ti o wa ni aisinipo (No. 7) ni awọn ohun elo wa, ati iwọn otutu nibẹ tẹsiwaju lati dide.
18:31. Wọn fun ni lilọ siwaju lati bẹrẹ awọn ohun elo ni awọn gbọngàn No.. 1 ati 3 - awọn gbọngàn wọnyi ko ni ipa nipasẹ ina.
Lọwọlọwọ, awọn olupin ti wa ni ifilọlẹ ni awọn gbọngàn No.. 1, 3, 8, ti o bere pẹlu awọn julọ lominu ni. Iṣiṣẹ ti o tọ ti gbogbo awọn iṣẹ ṣiṣe ni a ṣayẹwo. Awọn iṣoro tun wa pẹlu alabagbepo No.. 7.
18:44. Awọn oṣiṣẹ imọ-ẹrọ ti ile-iṣẹ data ṣe awari pe ninu yara No.. 7 (nibiti ohun elo wa nikan wa) ọpọlọpọ awọn olupin ko wa ni pipa. Gẹgẹbi data wa, awọn olupin 26 wa lori ayelujara nibẹ. Lẹhin ayẹwo keji, a wa awọn olupin 58.
20:18. Awọn onimọ-ẹrọ ile-iṣẹ data n fẹ afẹfẹ nipasẹ yara ti ko ni afẹfẹ nipasẹ awọn ọna gbigbe alagbeka ti n ṣiṣẹ nipasẹ awọn ẹnu-ọna.
23:08. Alakoso akọkọ ti firanṣẹ si ile. Ẹnikan nilo lati sun ni alẹ lati le tẹsiwaju iṣẹ ni ọla. Nigbamii ti, a yoo tu diẹ ninu awọn admins ati awọn olupilẹṣẹ silẹ.
02:56. A ṣe ifilọlẹ ohun gbogbo ti o le ṣe ifilọlẹ. A ṣe ayẹwo pupọ ti gbogbo awọn iṣẹ ni lilo awọn idanwo adaṣe.
03:02. Amuletutu ni kẹhin, 7th alabagbepo ti a ti pada.
03:36. A mu awọn iwaju wa ni ile-iṣẹ data sinu yiyi ni DNS. Lati akoko yii ijabọ olumulo bẹrẹ lati de.
A n firanṣẹ julọ ti ẹgbẹ iṣakoso ile. Ṣugbọn a fi awọn eniyan diẹ silẹ.
FAQ Kekere:
Q: Kini o ṣẹlẹ lati 18:31 si 02:56?
A: Ni atẹle “Eto Iṣe Ajalu”, a ṣe ifilọlẹ gbogbo awọn iṣẹ, bẹrẹ pẹlu awọn pataki julọ. Ni ọran yii, oluṣeto ninu iwiregbe n ṣalaye iṣẹ naa si oludari ọfẹ, ti o ṣayẹwo boya OS ati ohun elo ti bẹrẹ, boya awọn aṣiṣe eyikeyi wa, ati boya awọn itọkasi jẹ deede. Lẹhin ifilọlẹ naa ti pari, o ṣe ijabọ si iwiregbe pe o ni ọfẹ ati gba iṣẹ tuntun lati ọdọ oluṣakoso.
Awọn ilana ti wa ni siwaju slowed mọlẹ nipa kuna hardware. Paapaa ti o ba da OS duro ati tiipa awọn olupin naa lọ ni deede, diẹ ninu awọn olupin ko pada nitori ikuna lojiji ti awọn disiki, iranti, ati chassis. Nigbati agbara ba sọnu, oṣuwọn ikuna yoo pọ si.
Q: Kilode ti o ko le ṣiṣe ohun gbogbo ni ẹẹkan, lẹhinna ṣatunṣe ohun ti o wa ni ibojuwo?
A: Ohun gbogbo gbọdọ ṣee ṣe laiyara, nitori awọn igbẹkẹle wa laarin awọn iṣẹ. Ati pe ohun gbogbo yẹ ki o ṣayẹwo lẹsẹkẹsẹ, laisi idaduro fun ibojuwo - nitori pe o dara lati koju awọn iṣoro lẹsẹkẹsẹ, lai duro fun wọn lati buru sii.
7:40. Admin ti o kẹhin (alakoso) lọ si ibusun. Iṣẹ ọjọ akọkọ ti pari.
8:09. Awọn olupilẹṣẹ akọkọ, awọn ẹlẹrọ ile-iṣẹ data ati awọn alabojuto (pẹlu olutọju tuntun) bẹrẹ iṣẹ imupadabọsipo.
09:37. A bẹrẹ lati gbe gbọngàn No.. 7 (awọn ti o kẹhin).
Ni akoko kanna, a tẹsiwaju lati mu pada ohun ti ko ṣe atunṣe ni awọn yara miiran: rirọpo awọn disiki / iranti / awọn olupin, titunṣe ohun gbogbo ti o “jo” ni ibojuwo, yiyi awọn ipa pada ni awọn eto imuduro oluwa ati awọn ohun kekere miiran, eyiti o wa. sibẹsibẹ oyimbo kan Pupo.
17:08. A gba gbogbo iṣẹ deede pẹlu iṣelọpọ.
21:45. Iṣẹ ti ọjọ keji ti pari.
09:45. Ojo Jimo ni ojo oni. Awọn iṣoro kekere diẹ tun wa ni ibojuwo. Awọn ìparí jẹ niwaju, gbogbo eniyan fe lati sinmi. A tẹsiwaju lati ṣe atunṣe ohun gbogbo ti a le. Awọn iṣẹ ṣiṣe abojuto deede ti o le ti sun siwaju ni sun siwaju. Alakoso jẹ tuntun.
15:40. Lojiji idaji ti akopọ ohun elo netiwọki Core ni ile-iṣẹ data MIIRAN tun bẹrẹ. A mu awọn iwaju kuro ni yiyi lati dinku awọn ewu. Ko si ipa fun awọn olumulo. Nigbamii o wa jade pe o jẹ chassis ti ko tọ. Alakoso n ṣiṣẹ lori atunṣe awọn ijamba meji ni ẹẹkan.
17:17. Ṣiṣẹ nẹtiwọki ni ile-iṣẹ data miiran ti tun pada, ohun gbogbo ti ṣayẹwo. A ti fi ile-iṣẹ data sinu yiyi.
18:29. Iṣẹ ti ọjọ kẹta ati, ni gbogbogbo, atunṣe lẹhin ijamba naa ti pari.
Lẹhin Ọrọ
Ọdun 04.04.2013 , "Awọn ẹlẹgbẹ" — fun ọjọ mẹta ọna abawọle naa jẹ patapata tabi ko si ni apakan. Ni gbogbo akoko yii, diẹ sii ju awọn eniyan 100 lati awọn ilu oriṣiriṣi, lati awọn ile-iṣẹ ọtọtọ (ọpọlọpọ o ṣeun lẹẹkansi!), Latọna jijin ati taara ni awọn ile-iṣẹ data, pẹlu ọwọ ati laifọwọyi, ṣe atunṣe awọn ẹgbẹẹgbẹrun awọn olupin.
A ti ṣe ipinnu. Lati yago fun eyi lati ṣẹlẹ lẹẹkansi, a ti ṣe ati tẹsiwaju lati ṣe iṣẹ nla titi di oni.
Kini awọn iyatọ akọkọ laarin ijamba lọwọlọwọ ati 404?
- A ni “Eto Iṣe ijamba”. Ni ẹẹẹkan mẹẹdogun, a ṣe awọn adaṣe - a ṣe ipa-ṣe ipo pajawiri, eyiti ẹgbẹ kan ti awọn alakoso (gbogbo rẹ) gbọdọ yọkuro ni lilo “Eto Iṣe Pajawiri”. Awọn alabojuto eto aṣaaju gba awọn akoko ti ndun ipa ti Alakoso.
- Ni idamẹrin, ni ipo idanwo, a ya sọtọ awọn ile-iṣẹ data (gbogbo ni ọna) nipasẹ awọn nẹtiwọọki LAN ati WAN, eyiti o fun wa laaye lati ṣe idanimọ awọn igo ni kiakia.
- Awọn disiki ti o bajẹ diẹ, nitori a ti mu awọn iṣedede di: awọn wakati iṣẹ diẹ, awọn iye ala ti o muna fun SMART,
- A fi BerkeleyDB silẹ patapata, data atijọ ati riru ti o nilo akoko pupọ lati gba pada lẹhin atunbere olupin kan.
- A dinku nọmba awọn olupin pẹlu MS SQL ati dinku igbẹkẹle lori awọn ti o ku.
- A ni tiwa , nibi ti a ti n ṣiṣẹ ni gbogbo awọn iṣẹ fun ọdun meji bayi. Awọsanma naa jẹ ki o rọrun pupọ ni gbogbo ọna ṣiṣe pẹlu ohun elo, ati ni iṣẹlẹ ti ijamba o pese iru awọn irinṣẹ alailẹgbẹ bii:
- Duro deede ti gbogbo awọn ohun elo ni titẹ ọkan;
- Iṣilọ irọrun ti awọn ohun elo lati awọn olupin ti o kuna;
- laifọwọyi ni ipo (ni ibere ti ayo awọn iṣẹ) ifilole ti ohun gbogbo data aarin.
Ijamba ti a ṣalaye ninu nkan yii jẹ eyiti o tobi julọ lati ọjọ 404th. Dajudaju, kii ṣe ohun gbogbo lọ laisiyonu. Fun apẹẹrẹ, lakoko wiwa ti ile-iṣẹ data ti o bajẹ ti ina ni ile-iṣẹ data miiran, disk lori ọkan ninu awọn olupin naa kuna, iyẹn ni, ọkan ninu awọn ẹda mẹta ti o wa ninu iṣupọ Cassandra wa ni iraye si, eyiti o jẹ idi ti 4,2% ti alagbeka. awọn olumulo ohun elo ko le wọle. Ni akoko kanna, awọn olumulo ti o ti sopọ tẹlẹ tẹsiwaju lati ṣiṣẹ. Ni apapọ, nitori abajade ijamba naa, diẹ sii ju awọn iṣoro 30 ti a mọ - lati awọn idun banal si awọn ailagbara ninu faaji iṣẹ.
Ṣugbọn iyatọ ti o ṣe pataki julọ laarin ijamba lọwọlọwọ ati 404th ni pe lakoko ti a n ṣe imukuro awọn abajade ti ina, awọn olumulo ṣi nkọ ọrọ ati ṣiṣe awọn ipe fidio si , dun awọn ere, tẹtisi orin, fun kọọkan miiran ebun, ti wo awọn fidio, TV jara ati TV awọn ikanni ni , ati tun sanwọle ni .
Bawo ni awọn ijamba rẹ ṣe lọ?
orisun: www.habr.com