AERODISK ENGINE N2 സ്റ്റോറേജ് സിസ്റ്റത്തിന്റെ ക്രാഷ് ടെസ്റ്റുകൾ, ശക്തി പരിശോധന

എല്ലാവർക്കും ഹായ്! ഈ ലേഖനത്തിലൂടെ, AERODISK Habré-യിൽ ഒരു ബ്ലോഗ് തുറക്കുന്നു. ഹുറേ, സഖാക്കളേ!

ഹബ്രെയെക്കുറിച്ചുള്ള മുൻ ലേഖനങ്ങൾ സ്റ്റോറേജ് സിസ്റ്റങ്ങളുടെ ആർക്കിടെക്ചറിനെയും അടിസ്ഥാന കോൺഫിഗറേഷനെയും കുറിച്ചുള്ള ചോദ്യങ്ങൾ ചർച്ച ചെയ്തു. ഈ ലേഖനത്തിൽ, മുമ്പ് ഉൾപ്പെടുത്തിയിട്ടില്ലാത്തതും എന്നാൽ പലപ്പോഴും ചോദിക്കപ്പെടുന്നതുമായ ഒരു ചോദ്യം ഞങ്ങൾ പരിഗണിക്കും - AERODISK ENGINE സ്റ്റോറേജ് സിസ്റ്റങ്ങളുടെ തെറ്റ് സഹിഷ്ണുതയെക്കുറിച്ച്. AERODISK സ്റ്റോറേജ് സിസ്റ്റം പ്രവർത്തിക്കുന്നത് നിർത്തുന്നുവെന്ന് ഉറപ്പാക്കാൻ ഞങ്ങളുടെ ടീം എല്ലാം ചെയ്യും, അതായത്. പൊട്ടിക്കുക.

ഞങ്ങളുടെ കമ്പനിയുടെ ചരിത്രത്തെക്കുറിച്ചും ഞങ്ങളുടെ ഉൽപ്പന്നങ്ങളെക്കുറിച്ചും വിജയകരമായ നടപ്പാക്കലിന്റെ ഒരു ഉദാഹരണത്തെക്കുറിച്ചും ഉള്ള ലേഖനങ്ങൾ ഇതിനകം ഹബ്രെയിൽ തൂങ്ങിക്കിടക്കുന്നു. ഞങ്ങളുടെ പങ്കാളികൾക്ക് വളരെ നന്ദി - TS സൊല്യൂഷനും സോഫ്റ്റ്‌ലൈൻ കമ്പനികളും.

അതിനാൽ, ഞാൻ ഇവിടെ കോപ്പി-പേസ്റ്റ് മാനേജ്മെന്റ് കഴിവുകൾ പരിശീലിപ്പിക്കില്ല, എന്നാൽ ഈ ലേഖനങ്ങളുടെ ഒറിജിനലുകളിലേക്ക് ലിങ്കുകൾ നൽകും:

• ആർട്ടിക്കിൾ നമ്പർ 1. കമ്പനിയുടെ ചരിത്രത്തെക്കുറിച്ചും AERODISK ENGINE സ്റ്റോറേജ് സിസ്റ്റത്തിന്റെ വാസ്തുവിദ്യയെക്കുറിച്ചും
• ആർട്ടിക്കിൾ നമ്പർ 2. എയറോഡിസ്ക് എഞ്ചിൻ സ്റ്റോറേജ് സിസ്റ്റം എങ്ങനെ വേഗത്തിൽ സജ്ജീകരിക്കാം
• ആർട്ടിക്കിൾ നമ്പർ 3. സേഫ് സിറ്റി പദ്ധതിയുടെ ഭാഗമായി 2018 ഫിഫ ലോകകപ്പിനായി വലിയ തോതിലുള്ള വീഡിയോ നിരീക്ഷണം നടപ്പിലാക്കുന്നതിനെക്കുറിച്ചുള്ള രസകരമായ ഒരു പ്രോജക്റ്റ്

നല്ല വാർത്തകൾ പങ്കുവെക്കാനും ആഗ്രഹിക്കുന്നു. എന്നാൽ ഞാൻ തീർച്ചയായും പ്രശ്നത്തിൽ നിന്ന് തുടങ്ങും. ഒരു യുവ വെണ്ടർ എന്ന നിലയിൽ, മറ്റ് ചിലവുകൾക്കൊപ്പം, ഞങ്ങളുടെ സ്റ്റോറേജ് സിസ്റ്റം എങ്ങനെ ശരിയായി പ്രവർത്തിപ്പിക്കണമെന്ന് പല എഞ്ചിനീയർമാർക്കും അഡ്മിനിസ്ട്രേറ്റർമാർക്കും അറിയില്ല എന്ന വസ്തുത ഞങ്ങൾ നിരന്തരം അഭിമുഖീകരിക്കുന്നു.
മിക്ക സ്റ്റോറേജ് സിസ്റ്റങ്ങളും കൈകാര്യം ചെയ്യുന്നത് ഒരു അഡ്മിനിസ്ട്രേറ്ററുടെ വീക്ഷണകോണിൽ നിന്ന് ഏകദേശം ഒരുപോലെയാണെന്ന് വ്യക്തമാണ്, എന്നാൽ ഓരോ നിർമ്മാതാവിനും അതിന്റേതായ സവിശേഷതകളുണ്ട്. ഞങ്ങളും ഇവിടെ അപവാദമല്ല.

അതിനാൽ, ഐടി സ്പെഷ്യലിസ്റ്റുകളെ പരിശീലിപ്പിക്കുന്നതിനുള്ള ചുമതല ലളിതമാക്കുന്നതിന്, ഈ വർഷം സൗജന്യ വിദ്യാഭ്യാസത്തിനായി നീക്കിവയ്ക്കാൻ ഞങ്ങൾ തീരുമാനിച്ചു. ഇത് ചെയ്യുന്നതിന്, റഷ്യയിലെ പല വലിയ നഗരങ്ങളിലും ഞങ്ങൾ AERODISK കോമ്പറ്റൻസ് സെന്ററുകളുടെ ഒരു ശൃംഖല തുറക്കുന്നു, അതിൽ താൽപ്പര്യമുള്ള ഏതൊരു സാങ്കേതിക വിദഗ്ദ്ധനും തികച്ചും സൗജന്യമായി ഒരു കോഴ്‌സ് എടുക്കാനും എയറോഡിസ്‌ക് എഞ്ചിൻ സംഭരണ ​​​​സംവിധാനങ്ങൾ നിയന്ത്രിക്കുന്നതിനുള്ള സർട്ടിഫിക്കറ്റ് നേടാനും കഴിയും.

ഓരോ കോംപിറ്റൻസ് സെന്ററിലും ഞങ്ങൾ AERODISK സ്റ്റോറേജ് സിസ്റ്റത്തിൽ നിന്നും ഒരു ഫിസിക്കൽ സെർവറിൽ നിന്നും ഒരു പൂർണ്ണമായ ഡെമോ സ്റ്റാൻഡ് ഇൻസ്റ്റാൾ ചെയ്യും, അതിൽ ഞങ്ങളുടെ അധ്യാപകൻ മുഖാമുഖ പരിശീലനം നടത്തും. കോംപിറ്റൻസ് സെന്ററുകളുടെ പ്രവർത്തന ഷെഡ്യൂൾ ഞങ്ങൾ പ്രസിദ്ധീകരിക്കും, പക്ഷേ ഞങ്ങൾ ഇതിനകം നിസ്നി നോവ്ഗൊറോഡിൽ ഒരു കേന്ദ്രം തുറന്നിട്ടുണ്ട്, അടുത്തത് ക്രാസ്നോദർ നഗരമാണ്. ചുവടെയുള്ള ലിങ്കുകൾ ഉപയോഗിച്ച് നിങ്ങൾക്ക് പരിശീലനത്തിനായി സൈൻ അപ്പ് ചെയ്യാം. നഗരങ്ങളെയും തീയതികളെയും കുറിച്ച് നിലവിൽ അറിയപ്പെടുന്ന വിവരങ്ങൾ ഇതാ:

• നിസ്ന്യ നാവ്ഗോർഡ് (ഇതിനകം തുറന്നിരിക്കുന്നു - നിങ്ങൾക്ക് ഇവിടെ സൈൻ അപ്പ് ചെയ്യാം https://aerodisk.promo/nn/);
  16 ഏപ്രിൽ 2019 വരെ, ഏത് പ്രവൃത്തി സമയത്തും നിങ്ങൾക്ക് കേന്ദ്രം സന്ദർശിക്കാം, 16 ഏപ്രിൽ 2019 ന് ഒരു വലിയ പരിശീലന കോഴ്‌സ് സംഘടിപ്പിക്കും.
• ക്രാസ്നോദർ (ഉടൻ തുറക്കുന്നു - നിങ്ങൾക്ക് ഇവിടെ സൈൻ അപ്പ് ചെയ്യാം https://aerodisk.promo/krsnd/ );
  ഏപ്രിൽ 9 മുതൽ ഏപ്രിൽ 25, 2019 വരെ, ഏത് പ്രവൃത്തി സമയത്തും നിങ്ങൾക്ക് കേന്ദ്രം സന്ദർശിക്കാം, 25 ഏപ്രിൽ 2019 ന് ഒരു വലിയ പരിശീലന കോഴ്‌സ് സംഘടിപ്പിക്കും.
• Екатеринбург (ഉടൻ തുറക്കുന്നു, ഞങ്ങളുടെ വെബ്‌സൈറ്റിലോ ഹബ്രെയിലോ ഉള്ള വിവരങ്ങൾ പിന്തുടരുക);
  2019 മെയ്-ജൂൺ.
• Новосибирск (ഞങ്ങളുടെ വെബ്സൈറ്റിലോ ഹബ്രെയിലോ ഉള്ള വിവരങ്ങൾ പിന്തുടരുക);
  ഒക്ടോബർ 2019.
• Красноярск (ഞങ്ങളുടെ വെബ്സൈറ്റിലോ ഹബ്രെയിലോ ഉള്ള വിവരങ്ങൾ പിന്തുടരുക);
  നവംബർ 2019.

തീർച്ചയായും, മോസ്കോ നിങ്ങളിൽ നിന്ന് വളരെ അകലെയല്ലെങ്കിൽ, എപ്പോൾ വേണമെങ്കിലും നിങ്ങൾക്ക് മോസ്കോയിലെ ഞങ്ങളുടെ ഓഫീസ് സന്ദർശിച്ച് സമാനമായ പരിശീലനത്തിന് വിധേയമാക്കാം.

എല്ലാം. ഞങ്ങൾ മാർക്കറ്റിംഗ് പൂർത്തിയാക്കി, നമുക്ക് സാങ്കേതികവിദ്യയിലേക്ക് പോകാം!

ഹബ്രെയിൽ ഞങ്ങളുടെ ഉൽപ്പന്നങ്ങൾ, ലോഡ് ടെസ്റ്റുകൾ, താരതമ്യങ്ങൾ, ഉപയോഗത്തിന്റെ സവിശേഷതകൾ, രസകരമായ നടപ്പാക്കലുകൾ എന്നിവയെക്കുറിച്ചുള്ള സാങ്കേതിക ലേഖനങ്ങൾ ഞങ്ങൾ പതിവായി പ്രസിദ്ധീകരിക്കും.

AERODISK ENGINE N2 സ്റ്റോറേജ് സിസ്റ്റത്തിന്റെ ക്രാഷ് ടെസ്റ്റുകൾ, ശക്തി പരിശോധന

മുന്നറിയിപ്പ്! ലേഖനം വായിച്ചതിനുശേഷം, നിങ്ങൾക്ക് ഇങ്ങനെ പറയാൻ കഴിയും: ശരി, തീർച്ചയായും, വെണ്ടർ സ്വയം പരിശോധിക്കും, അങ്ങനെ എല്ലാം "ഒരു ബാംഗ്", ഹരിതഗൃഹ വ്യവസ്ഥകൾ മുതലായവ പ്രവർത്തിക്കുന്നു. ഞാൻ ഉത്തരം പറയും: അങ്ങനെയൊന്നുമില്ല! ഞങ്ങളുടെ വിദേശ എതിരാളികളിൽ നിന്ന് വ്യത്യസ്തമായി, ഞങ്ങൾ ഇവിടെയുണ്ട്, നിങ്ങളുടെ അടുത്താണ്, നിങ്ങൾക്ക് എല്ലായ്പ്പോഴും ഞങ്ങളുടെ അടുത്ത് (മോസ്കോയിലോ ഏതെങ്കിലും സെൻട്രൽ കമ്മിറ്റിയിലോ) വന്ന് ഞങ്ങളുടെ സ്റ്റോറേജ് സിസ്റ്റം ഏത് വിധത്തിലും പരിശോധിക്കാം. അതിനാൽ, ലോകത്തെ അനുയോജ്യമായ ഒരു ചിത്രത്തിലേക്ക് ഫലങ്ങൾ ക്രമീകരിക്കുന്നതിൽ ഞങ്ങൾക്ക് വലിയ അർത്ഥമില്ല, കാരണം ഞങ്ങൾക്ക് പരിശോധിക്കാൻ വളരെ എളുപ്പമാണ്. പോകാൻ മടിയുള്ളവർക്കും സമയമില്ലാത്തവർക്കും, നമുക്ക് റിമോട്ട് ടെസ്റ്റിംഗ് സംഘടിപ്പിക്കാം. ഇതിനായി ഞങ്ങൾക്ക് ഒരു പ്രത്യേക ലാബ് ഉണ്ട്. ഞങ്ങളെ സമീപിക്കുക.

അച്തുംഗ്-2! ഈ ടെസ്റ്റ് ഒരു ലോഡ് ടെസ്റ്റ് അല്ല, കാരണം ഇവിടെ ഞങ്ങൾ തെറ്റ് സഹിഷ്ണുതയെക്കുറിച്ച് മാത്രമാണ് ശ്രദ്ധിക്കുന്നത്. രണ്ടാഴ്ചയ്ക്കുള്ളിൽ, ഞങ്ങൾ കൂടുതൽ ശക്തമായ ഒരു സ്റ്റാൻഡ് തയ്യാറാക്കുകയും സ്റ്റോറേജ് സിസ്റ്റത്തിന്റെ ലോഡ് ടെസ്റ്റിംഗ് നടത്തുകയും ഫലങ്ങൾ ഇവിടെ പ്രസിദ്ധീകരിക്കുകയും ചെയ്യും (വഴി, ടെസ്റ്റുകൾക്കായുള്ള അഭ്യർത്ഥനകൾ സ്വീകരിക്കുന്നു).

അതിനാൽ, നമുക്ക് അത് തകർക്കാം.

ടെസ്റ്റ് സ്റ്റാൻഡ്

ഞങ്ങളുടെ നിലപാടിൽ ഇനിപ്പറയുന്ന ഹാർഡ്‌വെയർ അടങ്ങിയിരിക്കുന്നു:

• 1 x എയറോഡിസ്ക് എഞ്ചിൻ N2 സ്റ്റോറേജ് സിസ്റ്റം (2 കൺട്രോളറുകൾ, 64GB കാഷെ, 8xFC പോർട്ടുകൾ 8Gb/s, 4xEthernet പോർട്ടുകൾ 10Gb/s SFP+, 4xEthernet പോർട്ടുകൾ 1Gb/s); സ്റ്റോറേജ് സിസ്റ്റത്തിൽ ഇനിപ്പറയുന്ന ഡിസ്കുകൾ ഇൻസ്റ്റാൾ ചെയ്തിട്ടുണ്ട്:
• 4 x SAS SSD ഡിസ്കുകൾ 900 GB;
• 12 x SAS 10k ഡിസ്കുകൾ 1,2 TB;
• വിൻഡോസ് സെർവർ 1 ഉള്ള 2016 x ഫിസിക്കൽ സെർവർ (2xXeon E5 2667 v3, 96GB റാം, 2xFC പോർട്ടുകൾ 8Gb/s, 2xEthernet പോർട്ടുകൾ 10Gb/s SFP+);
• 2 x SAN 8G സ്വിച്ച്;
• 2 x LAN 10G സ്വിച്ച്;

FC, 10G ഇഥർനെറ്റ് എന്നിവ വഴി സ്വിച്ചുകൾ വഴി ഞങ്ങൾ സെർവറിനെ സ്റ്റോറേജ് സിസ്റ്റത്തിലേക്ക് ബന്ധിപ്പിച്ചു. സ്റ്റാൻഡ് ഡയഗ്രം താഴെ.

നമുക്ക് ആവശ്യമുള്ള MPIO, iSCSI ഇനീഷ്യേറ്റർ പോലുള്ള ഘടകങ്ങൾ വിൻഡോസ് സെർവറിൽ ഇൻസ്റ്റാൾ ചെയ്തിട്ടുണ്ട്.
സോണുകൾ FC സ്വിച്ചുകളിൽ ക്രമീകരിച്ചിരിക്കുന്നു, അനുബന്ധ VLAN-കൾ LAN സ്വിച്ചുകളിൽ ക്രമീകരിച്ചിരിക്കുന്നു, കൂടാതെ MTU 9000 സ്റ്റോറേജ് പോർട്ടുകളിലും സ്വിച്ചുകളിലും ഹോസ്റ്റിലും ഇൻസ്റ്റാൾ ചെയ്തിട്ടുണ്ട് (ഇതെല്ലാം എങ്ങനെ ചെയ്യാമെന്ന് ഞങ്ങളുടെ ഡോക്യുമെന്റേഷനിൽ വിവരിച്ചിരിക്കുന്നു, അതിനാൽ ഞങ്ങൾ വിവരിക്കില്ല. ഈ പ്രക്രിയ ഇവിടെ).

ടെസ്റ്റ് രീതിശാസ്ത്രം

ക്രാഷ് ടെസ്റ്റ് പ്ലാൻ ഇപ്രകാരമാണ്:

• FC, Ethernet പോർട്ടുകളുടെ പരാജയം പരിശോധിക്കുന്നു.
• വൈദ്യുതി തകരാർ പരിശോധന.
• കൺട്രോളർ പരാജയ പരിശോധന.
• ഒരു ഗ്രൂപ്പ്/പൂളിൽ ഡിസ്ക് തകരാറുണ്ടോയെന്ന് പരിശോധിക്കുന്നു.

എല്ലാ ടെസ്റ്റുകളും സിന്തറ്റിക് ലോഡ് അവസ്ഥകളിൽ നടത്തപ്പെടും, അത് ഞങ്ങൾ IOMETER പ്രോഗ്രാം സൃഷ്ടിക്കും. സമാന്തരമായി, ഞങ്ങൾ അതേ പരിശോധനകൾ നടത്തും, പക്ഷേ വലിയ ഫയലുകൾ സ്റ്റോറേജ് സിസ്റ്റത്തിലേക്ക് പകർത്തുന്ന സാഹചര്യങ്ങളിൽ.

IOmeter കോൺഫിഗറേഷൻ ഇപ്രകാരമാണ്:

• വായിക്കുക/എഴുതുക - 70/30
• ബ്ലോക്ക് - 128k (സംഭരണ ​​സംവിധാനങ്ങൾ വലിയ ബ്ലോക്കുകളിൽ കഴുകാൻ ഞങ്ങൾ തീരുമാനിച്ചു)
• ത്രെഡുകളുടെ എണ്ണം - 128 (ഇത് ഉൽപ്പാദന ലോഡിന് സമാനമാണ്)
• പൂർണ്ണ റാൻഡം
• തൊഴിലാളികളുടെ എണ്ണം - 4 (FC-ക്ക് 2, iSCSI-ക്ക് 2)

പരീക്ഷയ്ക്ക് ഇനിപ്പറയുന്ന ലക്ഷ്യങ്ങളുണ്ട്:

1. സിന്തറ്റിക് ലോഡും പകർപ്പും പ്രക്രിയ തടസ്സപ്പെടുത്തുകയോ അല്ലെങ്കിൽ വിവിധ പരാജയ സാഹചര്യങ്ങളിൽ പിശകുകൾ ഉണ്ടാക്കുകയോ ചെയ്യുന്നില്ലെന്ന് ഉറപ്പാക്കുക.
2. പോർട്ടുകൾ, കൺട്രോളറുകൾ മുതലായവ സ്വിച്ചുചെയ്യുന്ന പ്രക്രിയ വേണ്ടത്ര ഓട്ടോമേറ്റഡ് ആണെന്നും പരാജയങ്ങളുടെ കാര്യത്തിൽ അഡ്മിനിസ്ട്രേറ്റർ നടപടികൾ ആവശ്യമില്ലെന്നും ഉറപ്പാക്കുക (അതായത്, പരാജയപ്പെടുമ്പോൾ, പരാജയങ്ങളെക്കുറിച്ച് സംസാരിക്കില്ല, തീർച്ചയായും).
3. ലോഗുകളിലെ വിവരങ്ങൾ ശരിയായി പ്രദർശിപ്പിച്ചിട്ടുണ്ടെന്ന് ഉറപ്പാക്കുക.

ഹോസ്റ്റും സ്റ്റോറേജ് സിസ്റ്റവും തയ്യാറാക്കുന്നു

FC, Ethernet പോർട്ടുകൾ (യഥാക്രമം FC, iSCSI എന്നിവ) ഉപയോഗിച്ച് ഞങ്ങൾ സ്റ്റോറേജ് സിസ്റ്റത്തിൽ ബ്ലോക്ക് ആക്‌സസ് ക്രമീകരിച്ചു. ടിഎസ് സൊല്യൂഷനിൽ നിന്നുള്ള ആൺകുട്ടികൾ ഇത് എങ്ങനെ ചെയ്യാമെന്ന് മുൻ ലേഖനത്തിൽ വിശദമായി വിവരിച്ചു (https://habr.com/ru/company/tssolution/blog/432876/). തീർച്ചയായും, ആരും മാനുവലുകളും കോഴ്സുകളും റദ്ദാക്കിയില്ല.

ഞങ്ങളുടെ കൈവശമുള്ള എല്ലാ ഡ്രൈവുകളും ഉപയോഗിച്ച് ഞങ്ങൾ ഒരു ഹൈബ്രിഡ് ഗ്രൂപ്പ് സജ്ജീകരിച്ചു. 2 SSD ഡിസ്കുകൾ കാഷെയിലേക്ക് ചേർത്തു, 2 SSD ഡിസ്കുകൾ ഒരു അധിക സ്റ്റോറേജ് ടയർ ആയി ചേർത്തു (ഓൺലൈൻ-ടയർ). ഒരു ഗ്രൂപ്പിലെ മൂന്ന് ഡിസ്കുകളുടെ പരാജയം ഒരേസമയം പരിശോധിക്കുന്നതിനായി ഞങ്ങൾ 12 SAS10k ഡിസ്കുകളെ RAID-60P (ട്രിപ്പിൾ പാരിറ്റി) ആയി ഗ്രൂപ്പുചെയ്തു. സ്വയമേവ മാറ്റിസ്ഥാപിക്കുന്നതിനായി ഒരു ഡിസ്ക് അവശേഷിക്കുന്നു.

ഞങ്ങൾ രണ്ട് LUN-കൾ ബന്ധിപ്പിച്ചു (ഒന്ന് FC വഴി, ഒന്ന് iSCSI വഴി).

രണ്ട് LUN-കളുടെയും ഉടമ എഞ്ചിൻ-0 കൺട്രോളറാണ്

നമുക്ക് ടെസ്റ്റ് തുടങ്ങാം

മുകളിലുള്ള കോൺഫിഗറേഷൻ ഉപയോഗിച്ച് ഞങ്ങൾ IOMETER പ്രവർത്തനക്ഷമമാക്കുന്നു.

ഞങ്ങൾ 1.8 GB/s ത്രോപുട്ടും 3 മില്ലിസെക്കൻഡ് ലേറ്റൻസിയും രേഖപ്പെടുത്തുന്നു. പിശകുകളൊന്നുമില്ല (മൊത്തം പിശകുകളുടെ എണ്ണം).

അതേ സമയം, ഞങ്ങളുടെ ഹോസ്റ്റിന്റെ ലോക്കൽ ഡ്രൈവ് "C" ൽ നിന്ന്, മറ്റ് ഇന്റർഫേസുകൾ ഉപയോഗിച്ച് ഞങ്ങൾ സമാന്തരമായി രണ്ട് വലിയ 100GB ഫയലുകൾ FC, iSCSI സ്റ്റോറേജ് LUN-കളിലേക്ക് (Windows-ൽ E, G ഡ്രൈവുകൾ) പകർത്താൻ തുടങ്ങുന്നു.

മുകളിൽ LUN FC ലേക്ക് പകർത്തൽ പ്രക്രിയയാണ്, താഴെ iSCSI ലേക്ക്.

ടെസ്റ്റ് #1: I/O പോർട്ടുകൾ പ്രവർത്തനരഹിതമാക്കുന്നു

ഞങ്ങൾ പിന്നിൽ നിന്ന് സ്റ്റോറേജ് സിസ്റ്റത്തെ സമീപിക്കുന്നു))) കൈയുടെ ഒരു ചെറിയ ചലനത്തിലൂടെ ഞങ്ങൾ എഞ്ചിൻ-10 കൺട്രോളറിൽ നിന്ന് എല്ലാ FC, ഇഥർനെറ്റ് 0G കേബിളുകളും പുറത്തെടുക്കുന്നു. ഒരു മോപ്പുമായി ഒരു ക്ലീനിംഗ് ലേഡി നടന്ന് സ്നോട്ട് കിടക്കുന്നതും കേബിളുകൾ കിടക്കുന്നതുമായ തറ കഴുകാൻ തീരുമാനിച്ചതുപോലെയാണ് ഇത് (അതായത് കൺട്രോളർ ഇപ്പോഴും പ്രവർത്തിക്കുന്നു, പക്ഷേ I / O പോർട്ടുകൾ മരിച്ചു).

നമുക്ക് IOMETER നോക്കാം, ഫയലുകൾ പകർത്തുക. ത്രൂപുട്ട് 0,5 GB/s ആയി കുറഞ്ഞു, പക്ഷേ വേഗത്തിൽ അതിന്റെ മുമ്പത്തെ നിലയിലേക്ക് മടങ്ങി (ഏകദേശം 4-5 സെക്കൻഡിനുള്ളിൽ). പിഴവുകളൊന്നുമില്ല.

ഫയലുകൾ പകർത്തുന്നത് നിർത്തിയിട്ടില്ല, വേഗതയിൽ ഒരു കുറവുണ്ട്, പക്ഷേ അത് ഒട്ടും നിർണായകമല്ല (840 MB/s-ൽ നിന്ന് 720 MB/s ആയി കുറഞ്ഞു). കോപ്പിയടി നിർത്തിയിട്ടില്ല.

ഞങ്ങൾ സ്റ്റോറേജ് സിസ്റ്റം ലോഗുകൾ നോക്കുകയും പോർട്ടുകളുടെ ലഭ്യതയില്ലായ്മയെയും ഗ്രൂപ്പിന്റെ സ്വയമേവയുള്ള സ്ഥലം മാറ്റത്തെയും കുറിച്ചുള്ള ഒരു സന്ദേശം കാണുകയും ചെയ്യുന്നു.

എഫ്‌സി പോർട്ടുകളിൽ എല്ലാം അത്ര നല്ലതല്ലെന്നും വിവര പാനൽ ഞങ്ങളോട് പറയുന്നു.

സ്റ്റോറേജ് സിസ്റ്റം I/O പോർട്ടുകളുടെ പരാജയത്തെ അതിജീവിച്ചു വിജയകരമായി.

ടെസ്റ്റ് നമ്പർ 2. സ്റ്റോറേജ് കൺട്രോളർ പ്രവർത്തനരഹിതമാക്കുന്നു

ഉടൻ തന്നെ (സ്‌റ്റോറേജ് സിസ്റ്റത്തിലേക്ക് കേബിളുകൾ തിരികെ പ്ലഗ് ചെയ്‌ത ശേഷം) ചേസിസിൽ നിന്ന് കൺട്രോളർ പുറത്തെടുത്ത് സ്റ്റോറേജ് സിസ്റ്റം അവസാനിപ്പിക്കാൻ ഞങ്ങൾ തീരുമാനിച്ചു.

വീണ്ടും ഞങ്ങൾ സ്റ്റോറേജ് സിസ്റ്റത്തെ പിന്നിൽ നിന്ന് സമീപിക്കുന്നു (ഞങ്ങൾക്ക് ഇത് ഇഷ്ടപ്പെട്ടു))) ഈ സമയം ഞങ്ങൾ എഞ്ചിൻ -1 കൺട്രോളർ പുറത്തെടുക്കുന്നു, അത് ഈ നിമിഷം RDG യുടെ ഉടമയാണ് (ഗ്രൂപ്പ് നീങ്ങിയതാണ്).

IOmeter ലെ സ്ഥിതി ഇപ്രകാരമാണ്. I/O ഏകദേശം 5 സെക്കൻഡ് നിർത്തി. പിശകുകൾ ശേഖരിക്കപ്പെടുന്നില്ല.

5 സെക്കൻഡിനുശേഷം, I/O ഏതാണ്ട് അതേ ത്രൂപുട്ടിൽ പുനരാരംഭിച്ചു, പക്ഷേ 35 മില്ലിസെക്കൻഡ് ലേറ്റൻസിയോടെ (ഏകദേശം രണ്ട് മിനിറ്റുകൾക്ക് ശേഷം ലേറ്റൻസികൾ ശരിയാക്കി). സ്ക്രീൻഷോട്ടുകളിൽ നിന്ന് കാണാൻ കഴിയുന്നതുപോലെ, മൊത്തം പിശകുകളുടെ എണ്ണം മൂല്യം 0 ആണ്, അതായത്, എഴുത്ത് അല്ലെങ്കിൽ വായന പിശകുകൾ ഇല്ല.

നമ്മുടെ ഫയലുകൾ പകർത്തുന്നത് നോക്കാം. നിങ്ങൾക്ക് കാണാനാകുന്നതുപോലെ, ഇത് തടസ്സപ്പെട്ടില്ല, പ്രകടനത്തിൽ നേരിയ കുറവുണ്ടായി, എന്നാൽ മൊത്തത്തിൽ എല്ലാം ഒരേ ~ 800 MB/s-ലേക്ക് മടങ്ങി.

ഞങ്ങൾ സ്റ്റോറേജ് സിസ്റ്റത്തിലേക്ക് പോയി, എഞ്ചിൻ -1 കൺട്രോളർ ലഭ്യമല്ലെന്ന് വിവര പാനലിൽ ഒരു ശാപം കാണുന്നു (തീർച്ചയായും, ഞങ്ങൾ അതിനെ കൊന്നു).

ലോഗുകളിലും സമാനമായ ഒരു എൻട്രി ഞങ്ങൾ കാണുന്നു.

സ്റ്റോറേജ് കൺട്രോളറും പരാജയത്തെ അതിജീവിച്ചു വിജയകരമായി.

ടെസ്റ്റ് നമ്പർ 3: വൈദ്യുതി വിതരണം വിച്ഛേദിക്കുന്നു.

അങ്ങനെയെങ്കിൽ, ഞങ്ങൾ വീണ്ടും ഫയലുകൾ പകർത്താൻ തുടങ്ങി, പക്ഷേ IOMETER നിർത്തിയില്ല.
ഞങ്ങൾ വൈദ്യുതി വിതരണ യൂണിറ്റ് വലിക്കുന്നു.

വിവര പാനലിലെ സ്റ്റോറേജ് സിസ്റ്റത്തിലേക്ക് മറ്റൊരു അലേർട്ട് ചേർത്തു.

സെൻസർ മെനുവിൽ, പിൻവലിക്കപ്പെട്ട പവർ സപ്ലൈയുമായി ബന്ധപ്പെട്ട സെൻസറുകൾ ചുവപ്പായി മാറിയതായി ഞങ്ങൾ കാണുന്നു.

സ്റ്റോറേജ് സിസ്റ്റം പ്രവർത്തിക്കുന്നത് തുടരുന്നു. പവർ സപ്ലൈ യൂണിറ്റിന്റെ പരാജയം സ്റ്റോറേജ് സിസ്റ്റത്തിന്റെ പ്രവർത്തനത്തെ ഒരു തരത്തിലും ബാധിക്കില്ല; ഹോസ്റ്റിന്റെ കാഴ്ചപ്പാടിൽ, പകർപ്പ് വേഗതയും IOMETER സൂചകങ്ങളും മാറ്റമില്ലാതെ തുടർന്നു.

പവർ പരാജയ ടെസ്റ്റ് വിജയിച്ചു വിജയകരമായി.

അവസാന പരിശോധനയ്ക്ക് മുമ്പ്, സ്റ്റോറേജ് സിസ്റ്റം അൽപ്പം ജീവസുറ്റതാക്കാനും കൺട്രോളറും പവർ സപ്ലൈ യൂണിറ്റും തിരികെ കൊണ്ടുവരാനും കേബിളുകൾ ക്രമീകരിക്കാനും ഞങ്ങൾ തീരുമാനിച്ചു, സ്റ്റോറേജ് സിസ്റ്റം അതിന്റെ ഹെൽത്ത് പാനലിലെ പച്ച ഐക്കണുകൾ ഉപയോഗിച്ച് ഞങ്ങളെ സന്തോഷത്തോടെ അറിയിച്ചു. .

ടെസ്റ്റ് നമ്പർ 4. ഒരു ഗ്രൂപ്പിലെ മൂന്ന് ഡിസ്കുകളുടെ പരാജയം

ഈ പരിശോധനയ്ക്ക് മുമ്പ്, ഞങ്ങൾ ഒരു അധിക തയ്യാറെടുപ്പ് ഘട്ടം നടത്തി. എഞ്ചിൻ സ്റ്റോറേജ് സിസ്റ്റം വളരെ ഉപയോഗപ്രദമായ ഒരു കാര്യം നൽകുന്നു എന്നതാണ് വസ്തുത - വ്യത്യസ്തമായ പുനർനിർമ്മാണ നയങ്ങൾ. ടിഎസ് സൊല്യൂഷൻ ഈ സവിശേഷതയെക്കുറിച്ച് നേരത്തെ എഴുതിയിരുന്നു, എന്നാൽ അതിന്റെ സാരാംശം നമുക്ക് ഓർമിക്കാം. പുനർനിർമ്മാണ സമയത്ത് റിസോഴ്സ് അലോക്കേഷന്റെ മുൻഗണന സ്റ്റോറേജ് അഡ്മിനിസ്ട്രേറ്റർക്ക് വ്യക്തമാക്കാൻ കഴിയും. ഒന്നുകിൽ I/O പ്രകടനത്തിന്റെ ദിശയിൽ, അതായത്, പുനർനിർമ്മാണത്തിന് കൂടുതൽ സമയമെടുക്കും, എന്നാൽ പ്രകടനത്തിൽ കുറവില്ല. അല്ലെങ്കിൽ പുനർനിർമ്മാണ വേഗതയുടെ ദിശയിൽ, പക്ഷേ ഉൽപാദനക്ഷമത കുറയും. അല്ലെങ്കിൽ ഒരു സമതുലിതമായ ഓപ്ഷൻ. ഡിസ്ക് ഗ്രൂപ്പ് പുനർനിർമ്മിക്കുമ്പോഴുള്ള സ്റ്റോറേജ് പെർഫോമൻസ് എല്ലായ്‌പ്പോഴും അഡ്‌മിന്റെ തലവേദനയായതിനാൽ, I/O പ്രകടനത്തോടുള്ള പക്ഷപാതവും പുനർനിർമ്മാണ വേഗതയുടെ ചെലവും ഞങ്ങൾ ഒരു നയം പരിശോധിക്കും.

ഇനി ഡിസ്ക് പരാജയമാണോ എന്ന് പരിശോധിക്കാം. ഞങ്ങൾ LUN-കളിലേക്ക് (ഫയലുകളും IOMETER) റെക്കോർഡിംഗും പ്രാപ്തമാക്കുന്നു. ഞങ്ങൾക്ക് ട്രിപ്പിൾ പാരിറ്റി (RAID-60P) ഉള്ള ഒരു ഗ്രൂപ്പ് ഉള്ളതിനാൽ, മൂന്ന് ഡിസ്കുകളുടെ പരാജയത്തെ സിസ്റ്റം നേരിടണം എന്നാണ് ഇതിനർത്ഥം, പരാജയത്തിന് ശേഷം, യാന്ത്രികമായി മാറ്റിസ്ഥാപിക്കൽ പ്രവർത്തിക്കണം, പരാജയപ്പെട്ടവയിലൊന്നിന്റെ സ്ഥാനത്ത് ഒരു ഡിസ്ക് എടുക്കണം. RDG-യിൽ, പുനർനിർമ്മാണം അതിൽ ആരംഭിക്കണം.

ആരംഭിക്കുന്നു. ആദ്യം, സ്റ്റോറേജ് ഇന്റർഫേസിലൂടെ, നമുക്ക് പുറത്തെടുക്കാൻ ആഗ്രഹിക്കുന്ന ഡിസ്കുകൾ ഹൈലൈറ്റ് ചെയ്യാം (ഓട്ടോചേഞ്ച് ഡിസ്ക് നഷ്ടപ്പെടാതിരിക്കാനും വലിക്കാതിരിക്കാനും).

ഹാർഡ്‌വെയറിലെ സൂചന ഞങ്ങൾ പരിശോധിക്കുന്നു. എല്ലാം ശരിയാണ്, ഹൈലൈറ്റ് ചെയ്ത മൂന്ന് ഡിസ്കുകൾ ഞങ്ങൾ കാണുന്നു.

ഞങ്ങൾ ഈ മൂന്ന് ഡിസ്കുകൾ പുറത്തെടുക്കുന്നു.

ഹോസ്റ്റിൽ എന്താണ് ഉള്ളതെന്ന് നോക്കാം. അവിടെയും... പ്രത്യേകിച്ച് ഒന്നും സംഭവിച്ചില്ല.

ഡിസ്കുകൾ നീക്കം ചെയ്യുകയും പുനർനിർമ്മാണം ആരംഭിക്കുകയും ചെയ്യുമ്പോൾ (5-10% ഉള്ളിൽ) പകർത്തൽ സൂചകങ്ങൾ (അവ തുടക്കത്തേക്കാൾ ഉയർന്നതാണ്, കാരണം കാഷെ ചൂടായതിനാൽ) IOMETER ഉം വളരെയധികം മാറില്ല.

സ്റ്റോറേജ് സിസ്റ്റത്തിൽ എന്താണ് ഉള്ളതെന്ന് നോക്കാം.

ഗ്രൂപ്പിന്റെ അവസ്ഥയിൽ, പുനർനിർമ്മാണ പ്രക്രിയ ആരംഭിച്ചതായും അത് പൂർത്തിയാകാറായതായും കാണുന്നു.

RDG അസ്ഥികൂടത്തിൽ 2 ഡിസ്കുകൾ ചുവന്ന നിലയിലാണെന്നും ഒരെണ്ണം ഇതിനകം മാറ്റിസ്ഥാപിച്ചിട്ടുണ്ടെന്നും കാണാം. ഓട്ടോറിപ്ലേസ്‌മെന്റ് ഡിസ്‌ക് ഇപ്പോൾ ഇല്ല; അത് പരാജയപ്പെട്ട മൂന്നാമത്തെ ഡിസ്‌കിനെ മാറ്റിസ്ഥാപിച്ചു. പുനർനിർമ്മിക്കുന്നതിന് കുറച്ച് മിനിറ്റുകൾ എടുത്തു, 3 ഡിസ്കുകൾ പരാജയപ്പെടുമ്പോൾ ഫയലുകൾ എഴുതുന്നത് തടസ്സപ്പെട്ടില്ല, കൂടാതെ I/O പ്രകടനത്തിൽ കാര്യമായ മാറ്റമുണ്ടായില്ല.

ഡിസ്ക് പരാജയ പരിശോധന തീർച്ചയായും വിജയിച്ചു വിജയകരമായി.

തീരുമാനം

ഈ ഘട്ടത്തിൽ, സംഭരണ ​​സംവിധാനങ്ങൾക്കെതിരായ അക്രമം അവസാനിപ്പിക്കാൻ ഞങ്ങൾ തീരുമാനിച്ചു. നമുക്ക് സംഗ്രഹിക്കാം:

• എഫ്‌സി പോർട്ട് പരാജയ പരിശോധന - വിജയിച്ചു
• ഇഥർനെറ്റ് പോർട്ട് പരാജയ പരിശോധന - വിജയിച്ചു
• കൺട്രോളർ പരാജയ പരിശോധന - വിജയിച്ചു
• പവർ പരാജയ പരീക്ഷ - വിജയിച്ചു
• ഗ്രൂപ്പ്പൂളിൽ ഡിസ്ക് പരാജയം പരിശോധിക്കുന്നു - വിജയിച്ചു

പരാജയങ്ങളൊന്നും റെക്കോർഡിംഗ് നിർത്തുകയോ സിന്തറ്റിക് ലോഡിൽ പിശകുകൾ വരുത്തുകയോ ചെയ്തില്ല; തീർച്ചയായും, ഒരു പെർഫോമൻസ് ഹിറ്റ് ഉണ്ടായിരുന്നു (അത് എങ്ങനെ മറികടക്കാമെന്ന് ഞങ്ങൾക്കറിയാം, അത് ഞങ്ങൾ ഉടൻ ചെയ്യും), എന്നാൽ ഇവ സെക്കൻഡുകൾ ആയതിനാൽ ഇത് തികച്ചും സ്വീകാര്യമാണ്. ഉപസംഹാരം: എയറോഡിസ്ക് സ്റ്റോറേജ് സിസ്റ്റത്തിന്റെ എല്ലാ ഘടകങ്ങളുടെയും തെറ്റ് സഹിഷ്ണുത തലത്തിൽ പ്രവർത്തിച്ചു, പരാജയത്തിന്റെ പോയിന്റുകളൊന്നുമില്ല.

വ്യക്തമായും, ഒരു ലേഖനത്തിൽ ഞങ്ങൾക്ക് എല്ലാ പരാജയ സാഹചര്യങ്ങളും പരിശോധിക്കാൻ കഴിയില്ല, എന്നാൽ ഏറ്റവും ജനപ്രിയമായവ ഉൾക്കൊള്ളാൻ ഞങ്ങൾ ശ്രമിച്ചു. അതിനാൽ, നിങ്ങളുടെ അഭിപ്രായങ്ങളും ഭാവി പ്രസിദ്ധീകരണങ്ങൾക്കുള്ള നിർദ്ദേശങ്ങളും തീർച്ചയായും മതിയായ വിമർശനങ്ങളും അയയ്ക്കുക. ചർച്ച ചെയ്യുന്നതിൽ ഞങ്ങൾക്ക് സന്തോഷമുണ്ട് (അല്ലെങ്കിൽ ഇതിലും മികച്ചത്, പരിശീലനത്തിലേക്ക് വരൂ, ഞാൻ ഷെഡ്യൂൾ തനിപ്പകർപ്പാക്കുന്നു)! പുതിയ പരീക്ഷണങ്ങൾ വരെ!

• നിസ്ന്യ നാവ്ഗോർഡ് (ഇതിനകം തുറന്നിരിക്കുന്നു - നിങ്ങൾക്ക് ഇവിടെ സൈൻ അപ്പ് ചെയ്യാം https://aerodisk.promo/nn/);
  16 ഏപ്രിൽ 2019 വരെ, ഏത് പ്രവൃത്തി സമയത്തും നിങ്ങൾക്ക് കേന്ദ്രം സന്ദർശിക്കാം, 16 ഏപ്രിൽ 2019 ന് ഒരു വലിയ പരിശീലന കോഴ്‌സ് സംഘടിപ്പിക്കും.
• ക്രാസ്നോദർ (ഉടൻ തുറക്കുന്നു - നിങ്ങൾക്ക് ഇവിടെ സൈൻ അപ്പ് ചെയ്യാം https://aerodisk.promo/krsnd/ );
  ഏപ്രിൽ 9 മുതൽ ഏപ്രിൽ 25, 2019 വരെ, ഏത് പ്രവൃത്തി സമയത്തും നിങ്ങൾക്ക് കേന്ദ്രം സന്ദർശിക്കാം, 25 ഏപ്രിൽ 2019 ന് ഒരു വലിയ പരിശീലന കോഴ്‌സ് സംഘടിപ്പിക്കും.
• Екатеринбург (ഉടൻ തുറക്കുന്നു, ഞങ്ങളുടെ വെബ്‌സൈറ്റിലോ ഹബ്രെയിലോ ഉള്ള വിവരങ്ങൾ പിന്തുടരുക);
  2019 മെയ്-ജൂൺ.
• Новосибирск (ഞങ്ങളുടെ വെബ്സൈറ്റിലോ ഹബ്രെയിലോ ഉള്ള വിവരങ്ങൾ പിന്തുടരുക);
  ഒക്ടോബർ 2019.
• Красноярск (ഞങ്ങളുടെ വെബ്സൈറ്റിലോ ഹബ്രെയിലോ ഉള്ള വിവരങ്ങൾ പിന്തുടരുക);
  നവംബർ 2019.

അവലംബം: www.habr.com