Huawei OceanStor Dorado 18000 V6: તેની હાઇ-એન્ડ પ્રકૃતિ શું છે

અમે વિગતવાર દલીલ કરીએ છીએ કે શું OceanStor Dorado 18000 V6 ને આવનારા વર્ષો માટે યોગ્ય અનામત સાથે સાચી ઉચ્ચ-અંતની સ્ટોરેજ સિસ્ટમ બનાવે છે. તે જ સમયે, અમે ઓલ-ફ્લેશ સ્ટોરેજ વિશેના સામાન્ય ભયને દૂર કરીએ છીએ અને બતાવીએ છીએ કે કેવી રીતે Huawei તેમાંથી સૌથી વધુ સ્ક્વિઝ કરે છે: એન્ડ-ટુ-એન્ડ NVMe, SCM પર વધારાની કેશિંગ અને અન્ય ઉકેલોનો સંપૂર્ણ સમૂહ.

નવો ડેટા લેન્ડસ્કેપ - નવો ડેટા સ્ટોરેજ

તમામ ઉદ્યોગોમાં ડેટાની તીવ્રતા વધી રહી છે. અને બેંકિંગ ક્ષેત્ર આનું સ્પષ્ટ ઉદાહરણ છે. છેલ્લા કેટલાક વર્ષોમાં, બેંકિંગ વ્યવહારોની સંખ્યામાં દસ ગણાથી વધુ વધારો થયો છે. બતાવે છે તેમ બીસીજી અભ્યાસ, એકલા રશિયામાં, 2010 થી 2018 ના સમયગાળામાં, પ્લાસ્ટિક કાર્ડ્સનો ઉપયોગ કરીને બિન-રોકડ વ્યવહારોની સંખ્યામાં ત્રીસ ગણો વધારો જોવા મળ્યો - પ્રતિ વર્ષ 5,8 થી 172 પ્રતિ વ્યક્તિ. મુદ્દો મુખ્યત્વે માઇક્રોપેમેન્ટ્સની જીતનો છે: આપણામાંના મોટાભાગના લોકો ઓનલાઈન બેંકિંગથી પરિચિત થઈ ગયા છે, અને હવે અમારી પાસે બેંક અમારી આંગળીના ટેરવે છે - અમારા ફોન પર.

ક્રેડિટ સંસ્થાનું આઈટી ઈન્ફ્રાસ્ટ્રક્ચર આવા પડકાર માટે તૈયાર હોવું જોઈએ. અને આ ખરેખર એક પડકાર છે. અન્ય બાબતોની સાથે, જો અગાઉ બેંકને માત્ર તેના કામકાજના કલાકો દરમિયાન ડેટાની ઉપલબ્ધતા સુનિશ્ચિત કરવાની જરૂર હતી, તો હવે તે 24/7 છે. તાજેતરમાં સુધી, 5 ms સ્વીકાર્ય વિલંબ દર ગણવામાં આવતો હતો, તો શું? હવે 1 એમએસ પણ ઓવરકિલ છે. આધુનિક સ્ટોરેજ સિસ્ટમ માટે, લક્ષ્ય 0,5 ms છે.

આ જ વસ્તુ વિશ્વસનીયતા સાથે છે: 2010 ના દાયકામાં, એક પ્રયોગમૂલક સમજણ બનાવવામાં આવી હતી કે તે તેના સ્તરને "પાંચ દસ" - 99,999% પર લાવવા માટે પૂરતું છે. સાચું, આ સમજ જૂની થઈ ગઈ છે. 2020 માં, વ્યવસાયો માટે સ્ટોરેજ માટે 99,9999% અને એકંદર આર્કિટેક્ચર સોલ્યુશન માટે 99,99999% માંગ કરવી એકદમ સામાન્ય છે. અને આ કોઈ ધૂન નથી, પરંતુ તાત્કાલિક જરૂરિયાત છે: કાં તો ઈન્ફ્રાસ્ટ્રક્ચર જાળવણી માટે કોઈ સમય વિન્ડો નથી, અથવા તે નાનું છે.

સ્પષ્ટતા માટે, આ સૂચકાંકોને પૈસાના પ્લેન પર પ્રોજેક્ટ કરવા માટે અનુકૂળ છે. સૌથી સહેલો રસ્તો નાણાકીય સંસ્થાઓના ઉદાહરણ પર છે. ઉપરનો ચાર્ટ બતાવે છે કે વિશ્વની ટોચની 10 બેંકોમાંથી દરેક કલાક દીઠ કેટલી કમાણી કરે છે. એકલા ઇન્ડસ્ટ્રિયલ એન્ડ કોમર્શિયલ બેંક ઓફ ચાઇના માટે, આ $5 મિલિયન કરતાં ઓછું નથી. આ બરાબર છે કે ચીનની સૌથી મોટી ક્રેડિટ સંસ્થાના આઇટી ઇન્ફ્રાસ્ટ્રક્ચરના ડાઉનટાઇમનો એક કલાક કેટલો ખર્ચ થશે (અને માત્ર ખોવાયેલા નફાને ધ્યાનમાં લેવામાં આવે છે. ગણતરી!). આ પરિપ્રેક્ષ્યમાં, તે સ્પષ્ટ છે કે ડાઉનટાઇમમાં ઘટાડો અને વિશ્વસનીયતામાં વધારો, માત્ર થોડા ટકા જ નહીં, પરંતુ ટકાના અપૂર્ણાંક દ્વારા પણ, સંપૂર્ણપણે તર્કસંગત રીતે ન્યાયી છે. માત્ર વધતી જતી સ્પર્ધાત્મકતાના કારણોસર નહીં, પરંતુ માત્ર બજારની સ્થિતિ જાળવી રાખવા માટે.

અન્ય ઉદ્યોગોમાં તુલનાત્મક ફેરફારો થઈ રહ્યા છે. ઉદાહરણ તરીકે, હવાઈ પરિવહનમાં: રોગચાળા પહેલા, હવાઈ મુસાફરી ફક્ત વર્ષ-દર વર્ષે વેગ પકડી રહી હતી, અને ઘણા લોકોએ તેનો ઉપયોગ લગભગ ટેક્સીની જેમ કરવાનું શરૂ કર્યું. ઉપભોક્તા પેટર્નની વાત કરીએ તો, સેવાઓની સંપૂર્ણ ઉપલબ્ધતાની આદત સમાજમાં મૂળ બની ગઈ છે: એરપોર્ટ પર પહોંચ્યા પછી, અમને Wi-Fi કનેક્શન, ચુકવણી સેવાઓની ઍક્સેસ, વિસ્તારનો નકશો વગેરેની જરૂર છે. પરિણામે, જાહેર જગ્યાઓમાં ઈન્ફ્રાસ્ટ્રક્ચર અને સેવાઓ પરનો ભાર અનેક ગણો વધી ગયો છે. અને ઇન્ફ્રાસ્ટ્રક્ચર અને બાંધકામ માટેના તે અભિગમો કે જેને અમે એક વર્ષ પહેલા પણ સ્વીકાર્ય માનતા હતા તે ઝડપથી જૂના બની રહ્યા છે.

શું ઓલ-ફ્લેશ પર સ્વિચ કરવાનું ખૂબ વહેલું છે?

ઉપર જણાવેલ સમસ્યાઓને ઉકેલવા માટે, પ્રદર્શનની દ્રષ્ટિએ, AFA - ઓલ-ફ્લેશ એરે, એટલે કે, સંપૂર્ણપણે ફ્લેશ પર બનેલ એરે - શ્રેષ્ઠ ફિટ છે. જ્યાં સુધી, તાજેતરમાં સુધી, ત્યાં સુધી શંકાઓ હતી કે શું તેઓ HDDs અને હાઇબ્રિડના આધારે એસેમ્બલ કરેલા લોકો સાથે વિશ્વસનીયતામાં તુલનાત્મક છે. છેવટે, સોલિડ-સ્ટેટ ફ્લેશ મેમરીમાં નિષ્ફળતાઓ વચ્ચેનો સરેરાશ સમય અથવા MTBF (નિષ્ફળતા વચ્ચેનો સરેરાશ સમય) નામનું મેટ્રિક હોય છે. I/O કામગીરીને કારણે કોષોનું અધોગતિ, અરે, આપેલ છે.

તેથી એસએસડીએ લાંબા સમય સુધી જીવવાનો આદેશ આપ્યો હોય તેવી ઘટનામાં ડેટાના નુકસાનને કેવી રીતે અટકાવવું તે પ્રશ્ન દ્વારા ઓલ-ફ્લેશની સંભાવનાઓ છવાયેલી હતી. બેકઅપ એ એક પરિચિત વિકલ્પ છે, આધુનિક જરૂરિયાતોને આધારે ફક્ત પુનઃપ્રાપ્તિ સમય અસ્વીકાર્ય રીતે મોટો હશે. બહાર નીકળવાનો બીજો રસ્તો એ છે કે સ્પિન્ડલ ડ્રાઇવ્સ પર સ્ટોરેજનું બીજું સ્તર સેટ કરવું, જો કે, આવી યોજના સાથે, "કડક ફ્લેશ" સિસ્ટમના કેટલાક ફાયદાઓ ખોવાઈ જાય છે.

જો કે, સંખ્યાઓ અન્યથા કહે છે: તાજેતરના વર્ષોમાં ગૂગલ સહિત ડિજિટલ અર્થતંત્રના દિગ્ગજોના આંકડા દર્શાવે છે કે ફ્લેશ હાર્ડ ડ્રાઈવ કરતાં અનેક ગણી વધુ વિશ્વસનીય છે. તદુપરાંત, ટૂંકા ગાળામાં અને લાંબા ગાળામાં બંને: ફ્લેશ ડ્રાઇવ નિષ્ફળ થતાં પહેલાં સરેરાશ ચારથી છ વર્ષ પસાર થાય છે. ડેટા સ્ટોરેજની વિશ્વસનીયતાના સંદર્ભમાં, તેઓ સ્પિન્ડલ મેગ્નેટિક ડિસ્ક પરની ડ્રાઇવ્સ કરતાં કોઈપણ રીતે હલકી ગુણવત્તાવાળા નથી, અને તેમને વટાવી પણ જાય છે.

સ્પિન્ડલ ડ્રાઇવની તરફેણમાં અન્ય પરંપરાગત દલીલ તેમની પરવડે તેવી છે. કોઈ શંકા નથી, હાર્ડ ડ્રાઈવ પર ટેરાબાઈટ સ્ટોર કરવાની કિંમત હજુ પણ પ્રમાણમાં ઓછી છે. અને જો તમે ફક્ત સાધનસામગ્રીની કિંમતને ધ્યાનમાં લો છો, તો SSD કરતાં સ્પિન્ડલ ડ્રાઇવ પર ટેરાબાઇટ રાખવાનું સસ્તું છે. જો કે, નાણાકીય આયોજનના સંદર્ભમાં, તે માત્ર એટલું જ મહત્વનું નથી કે કોઈ ચોક્કસ ઉપકરણ કેટલું ખરીદ્યું હતું, પરંતુ તે પણ મહત્વનું છે કે લાંબા સમય સુધી તેની માલિકીની કુલ કિંમત શું છે - ત્રણથી સાત વર્ષ સુધી.

આ ખૂણાથી, તે સંપૂર્ણપણે અલગ છે. જો આપણે ડુપ્લિકેશન અને કમ્પ્રેશનની અવગણના કરીએ, જે નિયમ તરીકે, ફ્લેશ એરે પર ઉપયોગમાં લેવાય છે અને તેમની કામગીરીને વધુ આર્થિક રીતે નફાકારક બનાવે છે, તો પણ મીડિયા દ્વારા કબજે કરેલી રેક સ્પેસ, ગરમીનો વ્યય અને પાવર વપરાશ જેવી લાક્ષણિકતાઓ રહે છે. અને તેમના મતે, ફ્લશ તેના પુરોગામી કરતા આગળ છે. પરિણામે, ફ્લેશ સ્ટોરેજ સિસ્ટમનો TCO, તમામ પરિમાણોને ધ્યાનમાં લેતા, ઘણીવાર સ્પિન્ડલ ડ્રાઇવ્સ અથવા હાઇબ્રિડ પરના એરેના કિસ્સામાં લગભગ અડધો હોય છે.

ESG અહેવાલો અનુસાર, Dorado V6 ઓલ-ફ્લેશ સ્ટોરેજ સિસ્ટમ્સ પાંચ વર્ષના અંતરાલમાં 78% સુધી માલિકી ઘટાડાનો ખર્ચ હાંસલ કરી શકે છે, જેમાં કાર્યક્ષમ ડિડપ્લિકેશન અને કમ્પ્રેશનનો સમાવેશ થાય છે, અને ઓછા પાવર વપરાશ અને ગરમીના વિસર્જનને કારણે. જર્મન વિશ્લેષણાત્મક કંપની DCIG પણ આજે ઉપલબ્ધ TCOની દ્રષ્ટિએ શ્રેષ્ઠ તરીકે ઉપયોગ કરવા માટે તેમને ભલામણ કરે છે.

સોલિડ સ્ટેટ ડ્રાઇવનો ઉપયોગ ઉપયોગી જગ્યા બચાવવા, નિષ્ફળતાઓની સંખ્યા ઘટાડવા, સોલ્યુશનની જાળવણી માટેનો સમય ઘટાડવા, પાવર વપરાશ અને સ્ટોરેજ સિસ્ટમ્સના ગરમીના વિસર્જનને ઘટાડવાનું શક્ય બનાવે છે. અને તે તારણ આપે છે કે એએફએ ઓછામાં ઓછું આર્થિક રીતે સ્પિન્ડલ ડ્રાઇવ પરના પરંપરાગત એરે સાથે તુલનાત્મક છે, અને ઘણી વખત તેમને વટાવી પણ જાય છે.

Huawei રોયલ ફ્લશ

અમારા ઓલ-ફ્લેશ સ્ટોરેજમાં, ટોચનું સ્થાન હાઇ-એન્ડ સિસ્ટમ OceanStor Dorado 18000 V6નું છે. અને માત્ર અમારી વચ્ચે જ નહીં: સમગ્ર ઉદ્યોગમાં, તે ઝડપનો રેકોર્ડ ધરાવે છે - મહત્તમ ગોઠવણીમાં 20 મિલિયન આઇપીઓએસ સુધી. વધુમાં, તે અત્યંત વિશ્વસનીય છે: ભલે બે નિયંત્રકો એક સાથે ઉડે, અથવા એક પછી એક સાત નિયંત્રકો સુધી, અથવા એક જ સમયે એક આખું એન્જિન, ડેટા ટકી રહેશે. તેમાં બનેલ AI આંતરિક પ્રક્રિયાઓનું સંચાલન કરવામાં સુગમતા સહિત "અઢાર-હજારમા" ને નોંધપાત્ર લાભો પ્રદાન કરે છે. ચાલો જોઈએ કે આ બધું કેવી રીતે પ્રાપ્ત થાય છે.

મોટાભાગે, હ્યુઆવેઇની શરૂઆત સારી છે કારણ કે તે બજારમાં એકમાત્ર ઉત્પાદક છે જે સ્ટોરેજ સિસ્ટમ્સ પોતે બનાવે છે - સંપૂર્ણ અને સંપૂર્ણ. આપણી પોતાની સર્કિટરી છે, આપણો પોતાનો માઇક્રોકોડ છે, આપણી પોતાની સેવા છે.

OceanStor Dorado સિસ્ટમ્સમાં કંટ્રોલર Huawei ની પોતાની ડિઝાઇન અને પ્રોડક્શનના પ્રોસેસર પર બનેલ છે - Kunpeng 920. તે ઇન્ટેલિજન્ટ બેઝબોર્ડ મેનેજમેન્ટ કંટ્રોલર (iBMC) નો પણ ઉપયોગ કરે છે. AI ચિપ્સ, જેમ કે Ascend 310, જે નિષ્ફળતાના અનુમાનને શ્રેષ્ઠ બનાવે છે અને સેટિંગ્સ પર ભલામણો કરે છે, તે પણ Huawei તરફથી છે, જેમ કે I/O બોર્ડ્સ - સ્માર્ટ I/O મોડ્યુલ છે. છેલ્લે, સોલિડ-સ્ટેટ ડ્રાઈવમાં કંટ્રોલર્સ ડિઝાઇન અને ઇન-હાઉસ બનાવવામાં આવે છે. આ બધાએ અભિન્ન રીતે સંતુલિત અને ઉચ્ચ-પ્રદર્શન સોલ્યુશન બનાવવા માટેનો આધાર પૂરો પાડ્યો.

છેલ્લા એક વર્ષમાં, અમે આને રજૂ કરવા માટે એક પ્રોજેક્ટ અમલમાં મૂક્યો છે, અમારી સૌથી ટોપ-એન્ડ સ્ટોરેજ સિસ્ટમ, સૌથી મોટી રશિયન બેંકોમાંની એકમાં. પરિણામે, મેટ્રો ક્લસ્ટરમાં 40 થી વધુ OceanStor Dorado 18000 V6 એકમો સ્થિર કામગીરી દર્શાવે છે: દરેક સિસ્ટમમાંથી એક મિલિયનથી વધુ IOPS દૂર કરી શકાય છે, અને આ અંતરને કારણે વિલંબને ધ્યાનમાં લે છે.

એન્ડ-ટુ-એન્ડ NVMe

Huawei ની નવીનતમ સ્ટોરેજ સિસ્ટમ્સ એન્ડ-ટુ-એન્ડ NVMe ને સપોર્ટ કરે છે, જેના પર અમે એક કારણસર ભાર મૂકીએ છીએ. ડ્રાઈવો એક્સેસ કરવા માટે પરંપરાગત રીતે ઉપયોગમાં લેવાતા પ્રોટોકોલ્સનો વિકાસ IT પ્રાચીનકાળમાં કરવામાં આવ્યો હતો: તે SCSI આદેશો (હેલો, 1980!) પર આધારિત છે, જે પછાત સુસંગતતાને સુનિશ્ચિત કરવા માટે ઘણા બધા કાર્યોને ખેંચે છે. તમે ઍક્સેસની કોઈપણ પદ્ધતિ લો છો, આ કિસ્સામાં પ્રોટોકોલ ઓવરહેડ પ્રચંડ છે. પરિણામે, SCSI સાથે જોડાયેલા પ્રોટોકોલનો ઉપયોગ કરતા સ્ટોરેજ માટે, I/O વિલંબ 0,4–0,5 ms કરતા ઓછો ન હોઈ શકે. બદલામાં, ફ્લેશ મેમરી સાથે કામ કરવા માટે રચાયેલ પ્રોટોકોલ હોવાને કારણે અને કુખ્યાત બેકવર્ડ કોમ્પેટિબિલિટીને ખાતર ક્રેચથી મુક્ત કરવામાં આવે છે, NVMe - નોન-વોલેટાઇલ મેમરી એક્સપ્રેસ - લેટન્સીને 0,1 ms સુધી પછાડે છે, વધુમાં, સ્ટોરેજ સિસ્ટમ પર નહીં, પરંતુ ચાલુ રહે છે. સમગ્ર સ્ટેક, હોસ્ટથી ડ્રાઇવ્સ સુધી. આશ્ચર્યની વાત નથી કે, NVMe નજીકના ભવિષ્ય માટે ડેટા સ્ટોરેજ ડેવલપમેન્ટ વલણો સાથે સુસંગત છે. અમે NVMe પર પણ આધાર રાખ્યો - અને ધીમે ધીમે SCSI થી દૂર જઈ રહ્યા છીએ. ડોરાડો લાઇન સહિત આજે ઉત્પાદિત તમામ Huawei સ્ટોરેજ સિસ્ટમ્સ NVMe ને સપોર્ટ કરે છે (જોકે, એન્ડ-ટુ-એન્ડ તરીકે તે માત્ર Dorado V6 શ્રેણીના અદ્યતન મોડલ્સ પર જ લાગુ કરવામાં આવે છે).

ફ્લેશલિંક: અ ફિસ્ટફુલ ઓફ ટેક્નોલોજી

સમગ્ર OceanStor Dorado લાઇન માટે પાયાનો ટેક્નોલોજી FlashLink છે. વધુ સ્પષ્ટ રીતે, તે એક શબ્દ છે જે ઉચ્ચ પ્રદર્શન અને વિશ્વસનીયતાને સુનિશ્ચિત કરવા માટે સેવા આપતા તકનીકોના અભિન્ન સમૂહને જોડે છે. આમાં ડુપ્લિકેશન અને કમ્પ્રેશન ટેક્નોલોજી, RAID 2.0+ ડેટા વિતરણ પ્રણાલીનું કાર્ય, "કોલ્ડ" અને "હોટ" ડેટાનું વિભાજન, ફુલ-સ્ટ્રાઇપ ક્રમિક ડેટા રેકોર્ડિંગ (રેન્ડમ રાઇટ્સ, નવા અને બદલાયેલા ડેટા સાથે, એકીકૃત કરવામાં આવે છે. મોટા સ્ટેક અને ક્રમિક રીતે લખવામાં આવે છે, જે વાંચવા-લેખવાની ઝડપ વધારે છે).

અન્ય વસ્તુઓની સાથે, ફ્લેશલિંકમાં બે મહત્વપૂર્ણ ઘટકોનો સમાવેશ થાય છે - વેઅર લેવલિંગ અને ગ્લોબલ ગાર્બેજ કલેક્શન. તેમની સાથે અલગથી વ્યવહાર થવો જોઈએ.

વાસ્તવમાં, કોઈપણ સોલિડ સ્ટેટ ડ્રાઈવ એ લઘુચિત્રમાં સ્ટોરેજ સિસ્ટમ છે, જેમાં મોટી સંખ્યામાં બ્લોક્સ અને કંટ્રોલર છે જે ડેટાની ઉપલબ્ધતાને સુનિશ્ચિત કરે છે. અને તે અન્ય વસ્તુઓની વચ્ચે, એ હકીકતને કારણે પ્રદાન કરવામાં આવે છે કે "માર્યા" કોષોમાંથી ડેટા "માર્યા નથી" માં સ્થાનાંતરિત થાય છે. આ ખાતરી કરે છે કે તેઓ વાંચી શકાય છે. આવા ટ્રાન્સફર માટે વિવિધ અલ્ગોરિધમ્સ છે. સામાન્ય કિસ્સામાં, નિયંત્રક તમામ સ્ટોરેજ કોષોના વસ્ત્રોને સંતુલિત કરવાનો પ્રયાસ કરે છે. આ અભિગમમાં નુકસાન છે. જ્યારે ડેટા SSD ની અંદર ખસેડવામાં આવે છે, ત્યારે તે જે I/O કામગીરી કરે છે તેની સંખ્યા નાટકીય રીતે ઘટી જાય છે. હમણાં માટે, તે જરૂરી અનિષ્ટ છે.

આમ, જો સિસ્ટમમાં ઘણા બધા SSDs હોય, તો પરફોર્મન્સ ગ્રાફ પર તીવ્ર ઉતાર-ચઢાવ સાથે "જોયું" દેખાય છે. મુશ્કેલી એ છે કે પૂલમાંથી એક ડ્રાઇવ કોઈપણ સમયે ડેટા સ્થાનાંતરણ શરૂ કરી શકે છે, અને એકંદર પ્રદર્શન એરેમાંના તમામ SSDsમાંથી એક જ સમયે દૂર કરવામાં આવે છે. પરંતુ હ્યુઆવેઇ ઇજનેરોએ "જોયું" કેવી રીતે ટાળવું તે શોધી કાઢ્યું.

સદનસીબે, ડ્રાઇવમાંના નિયંત્રકો અને સ્ટોરેજ કંટ્રોલર અને Huawei ના ફર્મવેર બંને "મૂળ" છે, OceanStor Dorado 18000 V6 માં આ પ્રક્રિયાઓ કેન્દ્રિય રીતે, એરેમાંની તમામ ડ્રાઇવ્સ પર સિંક્રનસ રીતે શરૂ કરવામાં આવી છે. વધુમાં, સ્ટોરેજ કંટ્રોલરના આદેશ પર, અને જ્યારે કોઈ ભારે I/O લોડ ન હોય ત્યારે.

ડેટા ટ્રાન્સફર કરવા માટે યોગ્ય ક્ષણ પસંદ કરવામાં આર્ટિફિશિયલ ઇન્ટેલિજન્સ ચિપ પણ સામેલ છે: પાછલા કેટલાક મહિનાના હિટના આંકડાઓના આધારે, તે નજીકના ભવિષ્યમાં સક્રિય I/O ની અપેક્ષા રાખવી કે કેમ તેની સૌથી વધુ સંભાવના સાથે આગાહી કરવામાં સક્ષમ છે, અને જો જવાબ નકારાત્મક છે, અને વર્તમાન ક્ષણે સિસ્ટમ પરનો ભાર ઓછો છે, તો નિયંત્રક બધી ડ્રાઇવને આદેશ આપે છે: જેમને વેઅર લેવલિંગની જરૂર છે તેઓએ તે એક જ સમયે અને સિંક્રનસ કરવું જોઈએ.

ઉપરાંત, સિસ્ટમ કંટ્રોલર જુએ છે કે દરેક સ્ટોરેજ સેલમાં શું ચાલી રહ્યું છે, સ્પર્ધાત્મક ઉત્પાદકોની સ્ટોરેજ સિસ્ટમ્સથી વિપરીત: તેમને તૃતીય-પક્ષ વિક્રેતાઓ પાસેથી સોલિડ-સ્ટેટ મીડિયા ખરીદવાની ફરજ પાડવામાં આવે છે, જેના કારણે નિયંત્રકોને સેલ-સ્તરની વિગતો ઉપલબ્ધ નથી. આવા સ્ટોરેજની.

પરિણામ સ્વરૂપે, OceanStor Dorado 18000 V6 પાસે વેર લેવલિંગ ઓપરેશન પર કામગીરીમાં ઘટાડાનો ખૂબ જ ટૂંકા ગાળા છે, અને તે મુખ્યત્વે ત્યારે કરવામાં આવે છે જ્યારે તે અન્ય કોઈપણ પ્રક્રિયાઓમાં દખલ ન કરે. આ સતત ધોરણે ઉચ્ચ સ્થિર કામગીરી આપે છે.

શું OceanStor Dorado 18000 V6 ને વિશ્વસનીય બનાવે છે

આધુનિક ડેટા સ્ટોરેજ સિસ્ટમ્સમાં વિશ્વસનીયતાના ચાર સ્તરો છે:

• હાર્ડવેર, ડ્રાઇવ સ્તરે;
• આર્કિટેક્ચરલ, સાધનોના સ્તરે;
• સોફ્ટવેર ભાગ સાથે આર્કિટેક્ચરલ;
• સંચિત, સમગ્ર ઉકેલ સાથે સંબંધિત.

અમે તમને યાદ કરાવી દઈએ છીએ કે, અમારી કંપની સ્ટોરેજ સિસ્ટમના તમામ ઘટકો પોતે જ ડિઝાઇન કરે છે અને તેનું ઉત્પાદન કરે છે, અમે ચાર સ્તરોમાંના દરેક સ્તરે વિશ્વસનીયતા સુનિશ્ચિત કરીએ છીએ, આ ક્ષણે તેમાંથી કયા પર શું થઈ રહ્યું છે તેનું સંપૂર્ણ નિરીક્ષણ કરવાની ક્ષમતા સાથે.

ડ્રાઇવ્સની વિશ્વસનીયતાની ખાતરી મુખ્યત્વે અગાઉ વર્ણવેલ વેર લેવલિંગ અને ગ્લોબલ ગાર્બેજ કલેક્શન દ્વારા આપવામાં આવે છે. જ્યારે SSD સિસ્ટમમાં બ્લેક બોક્સ જેવું લાગે છે, ત્યારે તેને ખ્યાલ નથી હોતો કે તેમાં કોષો કેવી રીતે ખરી જાય છે. OceanStor Dorado 18000 V6 માટે, ડ્રાઈવો પારદર્શક છે, જે એરેમાંની તમામ ડ્રાઈવોમાં સમાનરૂપે સંતુલન શક્ય બનાવે છે. આમ, તે SSD ના જીવનને નોંધપાત્ર રીતે લંબાવવા અને તેમની કામગીરીની ઉચ્ચ સ્તરની વિશ્વસનીયતા સુરક્ષિત કરે છે.

ઉપરાંત, ડ્રાઇવની વિશ્વસનીયતા તેમાં વધારાના બિનજરૂરી કોષો દ્વારા પ્રભાવિત થાય છે. અને એક સરળ અનામતની સાથે, સ્ટોરેજ સિસ્ટમ કહેવાતા DIF કોષોનો ઉપયોગ કરે છે, જેમાં ચેકસમ્સ હોય છે, તેમજ RAID એરે સ્તર પર સુરક્ષા ઉપરાંત દરેક બ્લોકને એક જ ભૂલથી બચાવવા માટે વધારાના કોડ્સ હોય છે.

આર્કિટેક્ચરલ વિશ્વસનીયતાની ચાવી એ SmartMatrix સોલ્યુશન છે. ટૂંકમાં, આ ચાર નિયંત્રકો છે જે એક એન્જિન (એન્જિન) ના ભાગ તરીકે નિષ્ક્રિય બેકપ્લેન પર બેસે છે. આમાંના બે એન્જિન - અનુક્રમે, આઠ નિયંત્રકો સાથે - ડ્રાઇવ્સ સાથે સામાન્ય છાજલીઓ સાથે જોડાયેલા છે. સ્માર્ટમેટ્રિક્સનો આભાર, જો આઠમાંથી સાત નિયંત્રકો કાર્ય કરવાનું બંધ કરે તો પણ, વાંચન અને લેખન બંને માટે તમામ ડેટાની ઍક્સેસ રહેશે. અને આઠમાંથી છ નિયંત્રકોની ખોટ સાથે, કેશીંગ કામગીરી ચાલુ રાખવાનું પણ શક્ય બનશે.

સમાન નિષ્ક્રિય બેકપ્લેન પરના I/O બોર્ડ આગળના છેડે અને પાછળના છેડા પર બંને નિયંત્રકો માટે ઉપલબ્ધ છે. આવી ફુલ-મેશ કનેક્શન સ્કીમ સાથે, ભલે ગમે તે નિષ્ફળ જાય, ડ્રાઇવ્સની ઍક્સેસ હંમેશા સાચવવામાં આવે છે.

સ્ટોરેજ સિસ્ટમ સામે રક્ષણ કરવામાં સક્ષમ હોય તેવા નિષ્ફળતા મોડ્સના સંદર્ભમાં આર્કિટેક્ચરની વિશ્વસનીયતા વિશે વાત કરવી સૌથી યોગ્ય છે.

જો એક જ સમયે બે નિયંત્રકો "બંધ પડે" તો સ્ટોરેજ પરિસ્થિતિને નુકસાન વિના ટકી રહેશે. આવી સ્થિરતા એ હકીકતને કારણે પ્રાપ્ત થાય છે કે કોઈપણ કેશ બ્લોકમાં ચોક્કસપણે વિવિધ નિયંત્રકો પર વધુ બે નકલો હોય છે, એટલે કે, કુલ તે ત્રણ નકલોમાં અસ્તિત્વમાં છે. અને ઓછામાં ઓછું એક અલગ એન્જિન પર છે. આમ, જો આખું એન્જિન કામ કરવાનું બંધ કરે તો પણ - તેના ચારેય નિયંત્રકો સાથે - તે ખાતરી આપવામાં આવે છે કે કેશ મેમરીમાં હતી તે બધી માહિતી સાચવવામાં આવશે, કારણ કે કેશ બાકીના એન્જિનમાંથી ઓછામાં ઓછા એક નિયંત્રકમાં ડુપ્લિકેટ કરવામાં આવશે. અંતે, સીરીયલ કનેક્શન સાથે, તમે સાત જેટલા નિયંત્રકો ગુમાવી શકો છો, અને જો તેઓ બે બ્લોકમાં દૂર કરવામાં આવે તો પણ, - અને ફરીથી, તમામ I/O અને કેશમાંથી તમામ ડેટા સાચવવામાં આવશે.

જ્યારે અન્ય ઉત્પાદકોના હાઇ-એન્ડ સ્ટોરેજ સાથે સરખામણી કરવામાં આવે ત્યારે, તે જોઈ શકાય છે કે માત્ર Huawei બે નિયંત્રકો અથવા સમગ્ર એન્જિનના મૃત્યુ પછી પણ સંપૂર્ણ ડેટા સુરક્ષા અને સંપૂર્ણ ઉપલબ્ધતા પ્રદાન કરે છે. મોટાભાગના વિક્રેતાઓ કહેવાતા કંટ્રોલર જોડીઓ સાથેની સ્કીમનો ઉપયોગ કરે છે જેમાં ડ્રાઈવો જોડાયેલ હોય છે. કમનસીબે, આ રૂપરેખાંકનમાં, જો બે નિયંત્રકો નિષ્ફળ જાય, તો ડ્રાઇવમાં I/O ઍક્સેસ ગુમાવવાનું જોખમ રહેલું છે.

અરે, એક ઘટકની નિષ્ફળતા ઉદ્દેશ્યથી બાકાત નથી. આ કિસ્સામાં, પ્રદર્શન થોડા સમય માટે ઘટશે: તે જરૂરી છે કે પાથ ફરીથી બનાવવામાં આવે અને I/O ઑપરેશન માટે ઍક્સેસ ફરીથી શરૂ કરવામાં આવે તે બ્લોક્સના સંદર્ભમાં જે કાં તો લખવા માટે આવ્યા હતા, પરંતુ હજુ સુધી લખવામાં આવ્યા ન હતા, અથવા વિનંતી કરવામાં આવી હતી. વાંચી શકાય. OceanStor Dorado 18000 V6 નો સરેરાશ પુનઃનિર્માણ સમય લગભગ એક સેકન્ડનો છે, જે ઉદ્યોગના સૌથી નજીકના એનાલોગ (4 સે) કરતા નોંધપાત્ર રીતે ઓછો છે. આ સમાન નિષ્ક્રિય બેકપ્લેનને આભારી છે: જ્યારે નિયંત્રક નિષ્ફળ જાય છે, ત્યારે બાકીના તરત જ તેનું ઇનપુટ/આઉટપુટ જુએ છે, અને ખાસ કરીને કયા ડેટા બ્લોક પર લખવામાં આવ્યો નથી; પરિણામે, નજીકના નિયંત્રક પ્રક્રિયાને પસંદ કરે છે. આથી માત્ર એક સેકન્ડમાં કામગીરી પુનઃસ્થાપિત કરવાની ક્ષમતા. મારે ઉમેરવું જ જોઈએ, અંતરાલ સ્થિર છે: એક નિયંત્રક માટે સેકન્ડ, બીજા માટે સેકન્ડ, વગેરે.

OceanStor Dorado 18000 V6 નિષ્ક્રિય બેકપ્લેનમાં, બધા બોર્ડ કોઈપણ વધારાના સરનામાં વિના તમામ નિયંત્રકો માટે ઉપલબ્ધ છે. આનો અર્થ એ છે કે કોઈપણ નિયંત્રક કોઈપણ પોર્ટ પર I/O લેવા માટે સક્ષમ છે. ગમે તે ફ્રન્ટએન્ડ પોર્ટ I/O માં આવે, નિયંત્રક તેની પ્રક્રિયા કરવા માટે તૈયાર હશે. તેથી - આંતરિક ટ્રાન્સફરની ન્યૂનતમ સંખ્યા અને સંતુલનનું ધ્યાનપાત્ર સરળીકરણ.

ફ્રન્ટએન્ડ બેલેન્સિંગ મલ્ટિપાથિંગ ડ્રાઈવરનો ઉપયોગ કરીને કરવામાં આવે છે, અને વધારાની બેલેન્સિંગ સિસ્ટમમાં જ હાથ ધરવામાં આવે છે, કારણ કે બધા નિયંત્રકો બધા I/O પોર્ટ જુએ છે.

પરંપરાગત રીતે, તમામ Huawei એરે એવી રીતે ડિઝાઇન કરવામાં આવે છે કે તેમની પાસે નિષ્ફળતાનો એક પણ બિંદુ નથી. હોટ સ્વેપિંગ, સિસ્ટમને રીબૂટ કર્યા વિના, તેના તમામ ઘટકોને ધિરાણ આપે છે: નિયંત્રકો, પાવર મોડ્યુલ્સ, કૂલિંગ મોડ્યુલ્સ, I/O બોર્ડ, વગેરે.

RAID-TP જેવી ટેકનોલોજી પણ સમગ્ર સિસ્ટમની વિશ્વસનીયતામાં વધારો કરે છે. આ એક RAID જૂથનું નામ છે, જે તમને ત્રણ ડ્રાઈવો સુધીની એક સાથે નિષ્ફળતાના કિસ્સામાં તમારી જાતને વીમો લેવાની મંજૂરી આપે છે. તદુપરાંત 1 TB પુનઃનિર્માણ સતત 30 મિનિટથી ઓછો સમય લે છે. સ્પિન્ડલ ડ્રાઇવ પરના ડેટાની સમાન રકમ કરતાં શ્રેષ્ઠ રેકોર્ડ થયેલ પરિણામ આઠ ગણું ઝડપી છે. આમ, 7,68 અથવા તો 15 TB કહો, અને સિસ્ટમની વિશ્વસનીયતા વિશે ચિંતા કરશો નહીં, અત્યંત કેપેસિયસ ડ્રાઇવ્સનો ઉપયોગ કરવો શક્ય છે.

તે મહત્વનું છે કે પુનઃનિર્માણ ફાજલ ડ્રાઇવમાં નહીં, પરંતુ ફાજલ જગ્યામાં હાથ ધરવામાં આવે છે - અનામત ક્ષમતા. દરેક ડ્રાઇવમાં સમર્પિત જગ્યા હોય છે જેનો ઉપયોગ નિષ્ફળતા પછી ડેટા પુનઃપ્રાપ્ત કરવા માટે થાય છે. આમ, પુનઃપ્રાપ્તિ "ઘણાથી એક" યોજના અનુસાર નહીં, પરંતુ "ઘણાથી ઘણા" યોજના અનુસાર હાથ ધરવામાં આવે છે, જેના કારણે પ્રક્રિયાને નોંધપાત્ર રીતે ઝડપી બનાવવી શક્ય છે. અને જ્યાં સુધી મફત ક્ષમતા છે ત્યાં સુધી પુનઃપ્રાપ્તિ ચાલુ રહી શકે છે.

અમારે કેટલાક સ્ટોરેજમાંથી ઉકેલની વિશ્વસનીયતાનો પણ ઉલ્લેખ કરવો જોઈએ - મેટ્રો ક્લસ્ટરમાં, અથવા, Huawei ની પરિભાષામાં, HyperMetro. આવી યોજનાઓ અમારી ડેટા સ્ટોરેજ સિસ્ટમ્સની સમગ્ર મોડલ શ્રેણી પર સપોર્ટેડ છે અને ફાઇલ અને બ્લોક એક્સેસ બંનેને મંજૂરી આપે છે. વધુમાં, એક બ્લોક પર, તે ફાઈબર ચેનલ અને ઈથરનેટ (iSCSI મારફતે સહિત) બંને દ્વારા કાર્ય કરે છે.

સારમાં, અમે એક સ્ટોરેજ સિસ્ટમથી બીજી સ્ટોરેજ સિસ્ટમમાં દ્વિપક્ષીય પ્રતિકૃતિ વિશે વાત કરી રહ્યા છીએ, જેમાં નકલ કરાયેલ LUN ને મુખ્ય તરીકે સમાન LUN-ID આપવામાં આવે છે. ટેક્નોલોજી મુખ્યત્વે બે અલગ-અલગ સિસ્ટમમાંથી કેશની સુસંગતતાને કારણે કામ કરે છે. આમ, હોસ્ટ માટે તે કઈ બાજુ પર છે તેનાથી કોઈ ફરક પડતો નથી: અહીં અને ત્યાં બંને તે સમાન લોજિકલ ડ્રાઇવ જુએ છે. પરિણામે, બે સાઈટ પર ફેલાયેલ ફેઈલઓવર ક્લસ્ટરને જમાવવાથી કંઈપણ તમને રોકતું નથી.

કોરમ માટે, ભૌતિક અથવા વર્ચ્યુઅલ Linux મશીનનો ઉપયોગ થાય છે. તે ત્રીજી સાઇટ પર સ્થિત હોઈ શકે છે, અને તેના સંસાધનોની જરૂરિયાતો નાની છે. કોરમ VM હોસ્ટ કરવા માટે માત્ર વર્ચ્યુઅલ સાઇટ ભાડે લેવી એ સામાન્ય દૃશ્ય છે.

ટેક્નોલોજી વિસ્તરણને પણ મંજૂરી આપે છે: બે સ્ટોરેજ - મેટ્રો ક્લસ્ટરમાં, વધારાની સાઇટ - અસુમેળ પ્રતિકૃતિ સાથે.

ઐતિહાસિક રીતે, ઘણા ગ્રાહકોએ "સ્ટોરેજ ઝૂ" ની રચના કરી છે: વિવિધ ઉત્પાદકો, વિવિધ મોડેલો, વિવિધ પેઢીઓ, વિવિધ કાર્યક્ષમતા સાથે સ્ટોરેજ સિસ્ટમ્સનો સમૂહ. જો કે, યજમાનોની સંખ્યા પ્રભાવશાળી હોઈ શકે છે, અને ઘણી વખત તેઓ વર્ચ્યુઅલાઈઝ થાય છે. આવા સંજોગોમાં, વહીવટની પ્રાથમિકતાઓમાંની એક એ છે કે યજમાનોને ઝડપથી, એકસરખી અને સગવડતાપૂર્વક લોજિકલ ડિસ્ક પૂરી પાડવી, પ્રાધાન્ય એવી રીતે કે જ્યાં આ ડિસ્ક ભૌતિક રીતે સ્થિત છે તેની તપાસ ન થાય. અમારું OceanStor DJ સોફ્ટવેર સોલ્યુશન તેના માટે જ ડિઝાઇન કરવામાં આવ્યું છે, જે સર્વસંમતિથી વિવિધ સ્ટોરેજ સિસ્ટમ્સનું સંચાલન કરી શકે છે અને ચોક્કસ સ્ટોરેજ મોડલ સાથે જોડાયેલા વિના તેમની પાસેથી સેવાઓ પ્રદાન કરી શકે છે.

સમાન AI

પહેલેથી જ ઉલ્લેખ કર્યો છે તેમ, OceanStor Dorado 18000 V6 માં આર્ટિફિશિયલ ઇન્ટેલિજન્સ એલ્ગોરિધમ્સ - Ascend સાથે બિલ્ટ-ઇન પ્રોસેસર્સ છે. તેનો ઉપયોગ, પ્રથમ, નિષ્ફળતાઓની આગાહી કરવા માટે, અને બીજું, ટ્યુનિંગ માટેની ભલામણો બનાવવા માટે થાય છે, જે સંગ્રહની કામગીરી અને વિશ્વસનીયતામાં પણ વધારો કરે છે.

આગાહી ક્ષિતિજ બે મહિના છે: AI મશીનરી ધારે છે કે આ સમય દરમિયાન ઉચ્ચ સંભાવના સાથે શું થશે, શું તે વિસ્તરણ કરવાનો, ઍક્સેસ નીતિઓ બદલવાનો સમય છે, વગેરે. ભલામણો અગાઉથી જારી કરવામાં આવે છે, જે તમને સમય પહેલાં સિસ્ટમ જાળવણી વિન્ડો શેડ્યૂલ કરવાની મંજૂરી આપે છે. .

Huawei તરફથી AI વિકાસનો આગળનો તબક્કો તેને વૈશ્વિક સ્તરે લાવવાનો છે. સેવા જાળવણી દરમિયાન - નિષ્ફળતા અથવા ભલામણો - Huawei અમારા તમામ ગ્રાહકોના સ્ટોરેજમાંથી લોગિંગ સિસ્ટમ્સમાંથી માહિતી એકત્ર કરે છે. એકત્રિત માહિતીના આધારે, આવી અથવા સંભવિત નિષ્ફળતાઓનું વિશ્લેષણ કરવામાં આવે છે અને વૈશ્વિક ભલામણો કરવામાં આવે છે - એક ચોક્કસ સ્ટોરેજ સિસ્ટમ અથવા તો ડઝનની કામગીરી પર આધારિત નથી, પરંતુ આવા હજારો સાથે શું થઈ રહ્યું છે અને બન્યું છે તેના આધારે. ઉપકરણો નમૂના વિશાળ છે, અને તેના આધારે, AI એલ્ગોરિધમ્સ ખૂબ જ ઝડપથી શીખવાનું શરૂ કરે છે, તેથી જ આગાહીઓની ચોકસાઈ નોંધપાત્ર રીતે વધે છે.

સુસંગતતા

2019-2020 માં, VMware ઉત્પાદનો સાથે અમારા ઉપકરણોની ક્રિયાપ્રતિક્રિયા વિશે ઘણી બધી સૂચનાઓ હતી. આખરે તેમને રોકવા માટે, અમે જવાબદારીપૂર્વક જાહેર કરીએ છીએ: VMware એ Huawei નું ભાગીદાર છે. અમારા હાર્ડવેરની તેના સૉફ્ટવેર સાથે સુસંગતતા માટે તમામ કલ્પનાશીલ પરીક્ષણો હાથ ધરવામાં આવ્યા હતા, અને પરિણામે, VMware વેબસાઇટ પર, હાર્ડવેર સુસંગતતા શીટ કોઈપણ રિઝર્વેશન વિના અમારા ઉત્પાદનની હાલમાં ઉપલબ્ધ સ્ટોરેજ સિસ્ટમ્સની સૂચિ આપે છે. બીજા શબ્દોમાં કહીએ તો, VMware સોફ્ટવેર એન્વાયર્નમેન્ટ સાથે, તમે સંપૂર્ણ સપોર્ટ સાથે Dorado V6 સહિત Huawei સ્ટોરેજનો ઉપયોગ કરી શકો છો.

બ્રોકેડ સાથેના અમારા સહયોગ માટે પણ આવું જ છે. અમે સુસંગતતા માટે અમારા ઉત્પાદનોની ક્રિયાપ્રતિક્રિયા અને પરીક્ષણ કરવાનું ચાલુ રાખીએ છીએ અને વિશ્વાસપૂર્વક કહી શકીએ છીએ કે અમારી સ્ટોરેજ સિસ્ટમ નવીનતમ બ્રોકેડ એફસી સ્વીચો સાથે સંપૂર્ણપણે સુસંગત છે.

શું આગામી છે?

અમે અમારા પ્રોસેસરોને વિકસાવવાનું અને સુધારવાનું ચાલુ રાખીએ છીએ: તેઓ ઝડપી, વધુ વિશ્વસનીય બને છે, તેમનું પ્રદર્શન વધે છે. અમે AI ચિપ્સમાં પણ સુધારો કરી રહ્યા છીએ - તેના આધારે, મોડ્યુલ પણ બનાવવામાં આવે છે જે ડિડુપ્લિકેશન અને કમ્પ્રેશનને ઝડપી બનાવે છે. જેમની પાસે અમારા રૂપરેખાકારની ઍક્સેસ છે તેઓએ નોંધ્યું હશે કે આ કાર્ડ્સ પહેલેથી જ Dorado V6 મોડલ્સમાં ઓર્ડર માટે ઉપલબ્ધ છે.

અમે સ્ટોરેજ ક્લાસ મેમરી પર વધારાના કેશીંગ તરફ પણ આગળ વધી રહ્યા છીએ - ખાસ કરીને ઓછી વિલંબ સાથે બિન-અસ્થિર મેમરી, વાંચન દીઠ લગભગ દસ માઇક્રોસેકન્ડ. અન્ય બાબતોમાં, SCM મુખ્યત્વે મોટા ડેટા સાથે કામ કરતી વખતે અને OLTP કાર્યોને હલ કરતી વખતે પ્રદર્શનમાં વધારો આપે છે. આગામી અપડેટ પછી, SCM કાર્ડ્સ ઓર્ડર માટે ઉપલબ્ધ થવા જોઈએ.

અને અલબત્ત, ફાઇલ એક્સેસ કાર્યક્ષમતા Huawei ડેટા સ્ટોરેજની સમગ્ર શ્રેણીમાં વિસ્તૃત કરવામાં આવશે - અમારા અપડેટ્સ માટે ટ્યુન રહો.

સોર્સ: www.habr.com