ہم پوری طرح سے بحث کرتے ہیں کہ OceanStor Dorado 18000 V6 آنے والے سالوں کے لیے ایک معقول ریزرو کے ساتھ واقعی اعلیٰ درجے کا ڈیٹا اسٹوریج سسٹم بناتا ہے۔ ایک ہی وقت میں، ہم آل فلیش اسٹوریج کے بارے میں عام خدشات کو دور کرتے ہیں اور یہ ظاہر کرتے ہیں کہ ہواوے ان میں سے کس طرح زیادہ سے زیادہ فائدہ اٹھاتا ہے: آخر سے آخر تک NVMe، SCM پر اضافی کیشنگ اور دیگر حلوں کا ایک پورا گروپ۔
نیا ڈیٹا لینڈ اسکیپ - نیا ڈیٹا اسٹوریج
تمام صنعتوں میں ڈیٹا کی شدت بڑھ رہی ہے۔ اور بینکنگ سیکٹر اس کی واضح مثال ہے۔ پچھلے کچھ سالوں میں بینکنگ لین دین کی تعداد میں دس گنا سے زیادہ اضافہ ہوا ہے۔ جیسے دکھایا گیا ہے صرف روس میں، 2010 سے 2018 کے عرصے میں، پلاسٹک کارڈز کا استعمال کرتے ہوئے غیر نقد لین دین کی تعداد میں تیس گنا سے زیادہ اضافہ ہوا - 5,8 سے 172 فی شخص فی سال۔ نقطہ بنیادی طور پر مائیکرو پیمنٹس کی فتح کے بارے میں ہے: ہم میں سے اکثر آن لائن بینکنگ سے واقف ہو چکے ہیں، اور اب ہمارے پاس بینک ہماری انگلیوں پر ہے - ہمارے فون پر۔
کسی کریڈٹ ادارے کا آئی ٹی انفراسٹرکچر ایسے چیلنج کے لیے تیار ہونا چاہیے۔ اور یہ واقعی ایک چیلنج ہے۔ دوسری چیزوں کے علاوہ، اگر پہلے بینک کو صرف اپنے کاروباری اوقات کے دوران ڈیٹا کی دستیابی کو یقینی بنانے کی ضرورت تھی، تو اب اسے 24/7 دستیاب ہونے کی ضرورت ہے۔ کچھ عرصہ پہلے تک، 5 ms کو قابل قبول تاخیر کا معیار سمجھا جاتا تھا، لیکن پھر کیا؟ اب 1 ایم ایس بھی بہت زیادہ ہے۔ جدید اسٹوریج سسٹم کے لیے، ہدف کی قیمت 0,5 ms ہے۔
وہی چیز قابل اعتماد کے ساتھ ہے: 2010 کی دہائی میں، ایک تجرباتی تفہیم قائم کیا گیا تھا کہ یہ اس کی سطح کو "پانچ دسیوں" - 99,999٪ تک لانے کے لئے کافی ہے۔ سچ ہے کہ یہ فہم پرانی ہو چکی ہے۔ 2020 میں، کاروبار کے لیے سٹوریج کے لیے 99,9999% اور مجموعی فن تعمیر کے حل کے لیے 99,99999% کا مطالبہ کرنا بالکل معمول کی بات ہے۔ اور یہ کوئی سنک نہیں ہے، بلکہ ایک فوری ضرورت ہے: یا تو انفراسٹرکچر کی دیکھ بھال کے لیے کوئی ٹائم ونڈو نہیں ہے، یا یہ چھوٹا ہے۔
وضاحت کے لیے، ان اشاریوں کو پیسے کے جہاز پر پیش کرنا آسان ہے۔ سب سے آسان طریقہ یہ ہے کہ مالیاتی تنظیموں کی مثال استعمال کی جائے۔ اوپر والا چارٹ ظاہر کرتا ہے کہ دنیا کے 10 بڑے بینکوں میں سے ہر ایک فی گھنٹہ کتنا کماتا ہے۔ صرف انڈسٹریل اینڈ کمرشل بینک آف چائنا کے لیے، یہ $5 ملین سے کم نہیں ہے۔ چین کے سب سے بڑے کریڈٹ ادارے کے IT انفراسٹرکچر کے ایک گھنٹہ کے ڈاؤن ٹائم کی لاگت بالکل وہی ہے (اور حساب کتاب صرف کھوئے ہوئے منافع کو مدنظر رکھتا ہے!)۔ اس نقطہ نظر سے، یہ واضح ہے کہ صرف چند فیصد ہی نہیں، بلکہ ایک فیصد کے ایک حصے سے بھی، ڈاؤن ٹائم کو کم کرنا اور بھروسے میں اضافہ، پوری طرح عقلی طور پر جائز ہے۔ نہ صرف مسابقت میں اضافے کی وجہ سے، بلکہ صرف مارکیٹ کی پوزیشن کو برقرار رکھنے کی خاطر۔
دیگر صنعتوں میں تقابلی تبدیلیاں رونما ہو رہی ہیں۔ مثال کے طور پر، ہوائی نقل و حمل میں: وبائی مرض سے پہلے، ہوائی سفر صرف سال بہ سال رفتار حاصل کر رہا تھا، اور بہت سے لوگوں نے اسے ٹیکسی کی طرح استعمال کرنا شروع کر دیا۔ جہاں تک صارفین کے نمونوں کا تعلق ہے، خدمات کی مکمل دستیابی کی عادت معاشرے میں جڑ پکڑ چکی ہے: ہوائی اڈے پر پہنچنے پر، ہمیں وائی فائی کنکشن، ادائیگی کی خدمات تک رسائی، علاقے کا نقشہ وغیرہ کی ضرورت ہوتی ہے۔ عوامی مقامات پر بنیادی ڈھانچے اور خدمات پر بوجھ کئی گنا بڑھ گیا ہے۔ اور بنیادی ڈھانچے اور تعمیرات کے وہ نقطہ نظر جنہیں ہم نے ایک سال پہلے بھی قابل قبول سمجھا تھا تیزی سے پرانا ہوتا جا رہا ہے۔
کیا آل فلیش پر سوئچ کرنا بہت جلدی ہے؟
اوپر بیان کردہ مسائل کو حل کرنے کے لیے، کارکردگی کے لحاظ سے، AFA - آل فلیش اری، یعنی مکمل طور پر فلیش پر بنی ہوئی صفیں - بہترین فٹ ہیں۔ کچھ عرصہ پہلے تک، اس بارے میں اب بھی شکوک و شبہات موجود تھے کہ آیا وہ HDDs اور ہائبرڈ کی بنیاد پر جمع ہونے والوں کے مقابلے میں قابل اعتماد تھے۔ سب کے بعد، سالڈ اسٹیٹ فلیش میموری میں ایک میٹرک ہوتا ہے جسے ناکامیوں کے درمیان میین ٹائم کہتے ہیں، یا MTBF (ناکامیوں کے درمیان اوسط وقت)۔ I/O آپریشنز کی وجہ سے سیل انحطاط، افسوس، ایک دیا گیا ہے۔
لہذا آل-فلیش کے امکانات اس سوال کی وجہ سے ابر آلود ہو گئے تھے کہ اگر SSD مر جائے تو ڈیٹا کے نقصان کو کیسے روکا جائے۔ بیک اپ ایک عام آپشن ہے، لیکن بحالی کا وقت جدید تقاضوں کی بنیاد پر ناقابل قبول حد تک طویل ہوگا۔ اس سے باہر نکلنے کا دوسرا طریقہ یہ ہے کہ اسپنڈل ڈرائیوز پر اسٹوریج کی دوسری سطح کو ترتیب دیا جائے، لیکن اس اسکیم کے ساتھ "سختی سے فلیش" سسٹم کے کچھ فوائد ضائع ہو جاتے ہیں۔
تاہم، اعداد و شمار کچھ اور کہتے ہیں: حالیہ برسوں میں گوگل سمیت ڈیجیٹل اکانومی کے جنات کے اعدادوشمار بتاتے ہیں کہ فلیش ہارڈ ڈرائیوز سے کئی گنا زیادہ قابل اعتماد ہے۔ مزید یہ کہ، مختصر مدت اور طویل مدت دونوں میں: فلیش ڈرائیوز ناکام ہونے سے پہلے اوسطاً چار سے چھ سال گزر جاتے ہیں۔ ڈیٹا اسٹوریج کی وشوسنییتا کے لحاظ سے، وہ کسی بھی طرح سے اسپنڈل میگنیٹک ڈسک پر چلنے والی ڈرائیوز سے کمتر نہیں ہیں، اور یہاں تک کہ ان سے آگے نکل جاتے ہیں۔
سپنڈل ڈرائیوز کے حق میں ایک اور روایتی دلیل ان کی استطاعت ہے۔ اس میں کوئی شک نہیں کہ ہارڈ ڈرائیو پر ٹیرا بائٹ کو ذخیرہ کرنے کی لاگت اب بھی نسبتاً کم ہے۔ اور اگر آپ صرف ہارڈ ویئر کے اخراجات کو مدنظر رکھتے ہیں، تو ایس ایس ڈی کے مقابلے اسپنڈل ڈرائیو پر ٹیرا بائٹ ذخیرہ کرنا سستا ہے۔ تاہم، مالیاتی منصوبہ بندی کے تناظر میں، یہ نہ صرف اہمیت رکھتا ہے کہ کوئی خاص ڈیوائس کتنی قیمت میں خریدی گئی تھی، بلکہ یہ بھی اہم ہے کہ اسے طویل عرصے تک رکھنے کی کل لاگت کیا ہے - تین سے سات سال تک۔
اس زاویے سے، سب کچھ بالکل مختلف ہے۔ یہاں تک کہ اگر ہم ڈپلیکیشن اور کمپریشن کو نکال لیں، جو عام طور پر فلیش اریوں پر استعمال ہوتے ہیں اور ان کے آپریشن کو معاشی طور پر زیادہ منافع بخش بناتے ہیں، تو بھی ریک میں میڈیا کے زیر قبضہ جگہ، گرمی کی کھپت اور بجلی کی کھپت جیسی خصوصیات باقی رہتی ہیں۔ اور ان کے مطابق، فلش اپنے پیشروؤں کو پیچھے چھوڑ دیتا ہے۔ نتیجے کے طور پر، تمام پیرامیٹرز کو مدنظر رکھتے ہوئے فلیش سٹوریج سسٹم کا TCO اکثر تقریباً آدھا کم ہوتا ہے جتنا کہ سپنڈل ڈرائیوز یا ہائبرڈز پر صفوں کے معاملے میں۔
ESG ایجنسی کی رپورٹوں کے مطابق، Dorado V6 All-Flash سٹوریج سسٹمز پر پانچ سال کے وقفہ کے دوران ملکیت کی لاگت میں 78% تک کی کمی حاصل کرنا ممکن ہے - بشمول موثر ڈیڈپلیکیشن اور کمپریشن کے ذریعے اور کم پاور کی وجہ سے۔ کھپت اور گرمی کی کھپت. جرمن تجزیاتی کمپنی DCIG ان کو TCO کے لحاظ سے آج دستیاب بہترین کے طور پر استعمال کرنے کی سفارش کرتی ہے۔
سالڈ سٹیٹ ڈرائیوز کا استعمال قابل استعمال جگہ کو بچانا، ناکامیوں کی تعداد کو کم کرنا، حل کی خدمت کے لیے وقت کو کم کرنا، اور توانائی کی کھپت اور اسٹوریج سسٹم کی گرمی کی کھپت کو کم کرنا ممکن بناتا ہے۔ اور یہ پتہ چلتا ہے کہ AFA اقتصادی طور پر کم از کم اسپنڈل ڈرائیوز پر روایتی صفوں کے مقابلے کے قابل ہے، اور اکثر ان سے آگے نکل جاتا ہے۔
Huawei سے رائل فلش
ہمارے آل فلیش سٹوریجز میں، سرفہرست مقام ہائی اینڈ سسٹم OceanStor Dorado 18000 V6 کا ہے۔ اور نہ صرف ہمارے درمیان: مجموعی طور پر صنعت میں، اس کی رفتار کا ریکارڈ ہے - زیادہ سے زیادہ کنفیگریشن میں 20 ملین IPOS تک۔ اس کے علاوہ، یہ انتہائی قابل اعتماد ہے: یہاں تک کہ اگر دو کنٹرولرز ایک ساتھ پرواز کریں، یا ایک کے بعد ایک سات کنٹرولرز، یا ایک مکمل انجن ایک ساتھ، ڈیٹا زندہ رہے گا۔ اس میں بنایا گیا AI "اٹھارہ ہزارویں" کو کافی فوائد فراہم کرتا ہے، بشمول اندرونی عمل کو منظم کرنے میں لچک۔ آئیے دیکھتے ہیں کہ یہ سب کیسے حاصل ہوتا ہے۔
کافی حد تک، Huawei کا آغاز ہے کیونکہ یہ مارکیٹ میں واحد مینوفیکچرر ہے جو خود ڈیٹا سٹوریج سسٹم بناتا ہے - مکمل طور پر اور مکمل طور پر۔ ہمارا اپنا سرکٹری، اپنا مائیکرو کوڈ، اور ہماری اپنی سروس ہے۔
OceanStor Dorado سسٹمز میں کنٹرولر Huawei کے اپنے ڈیزائن اور پروڈکشن کے پروسیسر پر بنایا گیا ہے - Kunpeng 920۔ یہ Intelligent Baseboard Management Controller (iBMC) استعمال کرتا ہے، ہمارا بھی۔ AI چپس، یعنی Ascend 310، جو ناکامی کی پیشین گوئیوں کو بہتر بناتے ہیں اور سیٹنگز پر سفارشات کرتے ہیں، بھی Huawei سے ہیں، جیسا کہ I/O بورڈز - Smart I/O ماڈیول ہیں۔ آخر میں، سالڈ اسٹیٹ ڈرائیوز کے کنٹرولرز اندرون ملک ڈیزائن اور تیار کیے جاتے ہیں۔ یہ سب ایک مکمل طور پر متوازن اور اعلی کارکردگی کا حل بنانے کی بنیاد فراہم کرتا ہے۔
پچھلے ایک سال کے دوران، ہم نے اس کو لاگو کرنے کے لیے ایک پروجیکٹ نافذ کیا ہے، ہمارا ٹاپ آف دی لائن اسٹوریج سسٹم، ایک بڑے روسی بینک میں۔ نتیجے کے طور پر، میٹرو کلسٹر میں OceanStor Dorado 40 V18000 کے 6 سے زیادہ یونٹ مستحکم کارکردگی دکھاتے ہیں: ہر سسٹم سے ایک ملین سے زیادہ IOPS کو ہٹایا جا سکتا ہے، اور یہ فاصلے کی وجہ سے ہونے والی تاخیر کو مدنظر رکھتا ہے۔
آخر سے آخر تک NVMe
جدید ترین Huawei اسٹوریج سسٹمز اینڈ ٹو اینڈ NVMe کو سپورٹ کرتے ہیں، جس پر ہم ایک وجہ سے توجہ مرکوز کرتے ہیں۔ روایتی طور پر استعمال شدہ سٹوریج تک رسائی کے پروٹوکولز کو IT کے پروقار دنوں میں تیار کیا گیا تھا: وہ SCSI کمانڈز (ہیلو، 1980 کی دہائی!) پر مبنی ہیں، جو پسماندہ مطابقت کو یقینی بنانے کے لیے بہت سے افعال کو شامل کرتے ہیں۔ آپ جو بھی رسائی کا طریقہ منتخب کرتے ہیں، اس معاملے میں پروٹوکول اوور ہیڈ بہت بڑا ہے۔ نتیجے کے طور پر، اسٹوریج ڈیوائسز کے لیے جو SCSI پر مبنی پروٹوکول استعمال کرتے ہیں، I/O لیٹنسی 0,4–0,5 ms سے کم نہیں ہو سکتی۔ بدلے میں، فلیش میموری کے ساتھ کام کرنے کے لیے بنایا گیا ایک پروٹوکول اور بدنام زمانہ پسماندہ مطابقت کی خاطر بیساکھیوں سے آزاد ہونے کے ناطے، NVMe - Non-volatile Memory Express - لیٹنسی کو 0,1 ms تک کم کرتا ہے، اور سٹوریج سسٹم پر نہیں، بلکہ پورے پر۔ اسٹیک، میزبان سے ڈرائیوز تک۔ یہ حیرت کی بات نہیں ہے کہ NVMe مستقبل قریب میں ڈیٹا اسٹوریج کے ترقیاتی رجحانات کے مطابق ہے۔ ہم نے بھی اپنی شرطیں NVMe پر رکھی ہیں اور آہستہ آہستہ SCSI سے دور ہو رہے ہیں۔ ڈوراڈو لائن سمیت آج تیار کردہ تمام Huawei سٹوریج سسٹم NVMe کو سپورٹ کرتے ہیں (تاہم، آخر سے آخر تک یہ صرف Dorado V6 سیریز کے جدید ماڈلز پر لاگو ہوتا ہے)۔
فلیش لنک: مٹھی بھر ٹیکنالوجیز
پوری OceanStor Dorado لائن کے لیے بنیادی ٹیکنالوجی FlashLink ہے۔ مزید واضح طور پر، یہ ایک اصطلاح ہے جو ٹیکنالوجیز کے ایک لازمی سیٹ کو یکجا کرتی ہے جو اعلی کارکردگی اور وشوسنییتا کو یقینی بنانے کے لیے کام کرتی ہے۔ اس میں ڈپلیکیشن اور کمپریشن ٹیکنالوجیز، RAID 2.0+ ڈیٹا ڈسٹری بیوشن سسٹم کا کام، "کولڈ" اور "گرم" ڈیٹا کی علیحدگی، تمام پٹیوں کی ترتیب وار ڈیٹا ریکارڈنگ (رینڈم ریکارڈز، نئے اور تبدیل شدہ ڈیٹا کے ساتھ، کو اکٹھا کیا جاتا ہے۔ بڑا اسٹیک اور ترتیب وار لکھا جاتا ہے، جس سے پڑھنے لکھنے کی رفتار بڑھ جاتی ہے)۔
دیگر چیزوں کے علاوہ، فلیش لنک میں دو اہم اجزاء شامل ہیں - پہن لیولنگ اور عالمی کچرا جمع کرنا۔ وہ الگ سے رہنے کے قابل ہیں۔
درحقیقت، کوئی بھی سالڈ سٹیٹ ڈرائیو منی ایچر میں ایک اسٹوریج سسٹم ہے، جس میں بڑی تعداد میں بلاکس اور ایک کنٹرولر ہوتا ہے جو ڈیٹا کی دستیابی کو یقینی بناتا ہے۔ اور اس بات کو یقینی بنایا جاتا ہے، دوسری چیزوں کے علاوہ، اس حقیقت سے کہ "مارے گئے" سیلز سے ڈیٹا "مارے نہیں گئے" میں منتقل کیا جاتا ہے۔ یہ یقینی بناتا ہے کہ وہ پڑھ سکتے ہیں. اس طرح کی منتقلی کے لیے مختلف الگورتھم ہیں۔ عام طور پر، کنٹرولر تمام سٹوریج سیلز کے لباس کو متوازن کرنے کی کوشش کرتا ہے۔ اس نقطہ نظر کا ایک منفی پہلو ہے۔ جب ڈیٹا SSD کے اندر منتقل ہوتا ہے، تو اس کے انجام دینے والے I/O آپریشنز کی تعداد ڈرامائی طور پر کم ہو جاتی ہے۔ اس وقت یہ ایک ضروری برائی ہے۔
اس طرح، اگر کسی سسٹم میں بہت زیادہ سالڈ سٹیٹ ڈرائیوز ہیں، تو اس کی کارکردگی کا گراف تیز اتار چڑھاؤ کے ساتھ "آرے دانت" کا نمونہ دکھائے گا۔ مصیبت یہ ہے کہ پول سے کوئی ایک ڈرائیو کسی بھی وقت ڈیٹا کی منتقلی شروع کر سکتی ہے، اور مجموعی کارکردگی کو صف میں موجود تمام SSDs سے بیک وقت ہٹا دیا جاتا ہے۔ لیکن ہواوے کے انجینئروں نے یہ معلوم کیا کہ "آری" سے کیسے بچنا ہے۔
خوش قسمتی سے، ڈرائیوز میں کنٹرولرز، سٹوریج کنٹرولر، اور مائیکرو کوڈ اصل میں Huawei کے ہیں؛ OceanStor Dorado 18000 V6 میں یہ عمل مرکزی طور پر، صف میں موجود تمام ڈرائیوز پر ہم آہنگی سے شروع کیے گئے ہیں۔ مزید برآں، سٹوریج کنٹرولر کے حکم پر اور خاص طور پر جب کوئی بھاری I/O بوجھ نہ ہو۔
ڈیٹا کی منتقلی کے لیے صحیح وقت کا انتخاب کرنے میں مصنوعی ذہانت کی چپ بھی شامل ہے: پچھلے چند مہینوں میں درخواستوں کے اعدادوشمار کی بنیاد پر، یہ سب سے زیادہ امکان کے ساتھ یہ پیش گوئی کرنے کے قابل ہے کہ آیا مستقبل قریب میں فعال I/O کی توقع کی جائے، اور اگر جواب نفی میں ہے، اور اس وقت سسٹم پر بوجھ کم ہے، تو کنٹرولر تمام ڈرائیوز کو کمانڈ کرتا ہے: جن لوگوں کو Wear Leveling کی ضرورت ہے وہ اسے ایک ساتھ اور ہم وقت سازی سے انجام دیں۔
اس کے علاوہ، سسٹم کنٹرولر دیکھتا ہے کہ ہر سٹوریج سیل میں کیا ہو رہا ہے، مقابلہ کرنے والے مینوفیکچررز کے سٹوریج سسٹم کے برعکس: وہ تھرڈ پارٹی وینڈرز سے سالڈ سٹیٹ میڈیا خریدنے پر مجبور ہیں، یہی وجہ ہے کہ سیل لیول کی تفصیل کنٹرولرز کو دستیاب نہیں ہے۔ اس طرح کے ذخیروں کی.
نتیجے کے طور پر، OceanStor Dorado 18000 V6 میں Wear Leveling آپریشن کے دوران کارکردگی کے نقصان کا ایک بہت ہی مختصر دورانیہ ہوتا ہے، اور یہ بنیادی طور پر اس وقت انجام پاتا ہے جب یہ کسی دوسرے عمل میں مداخلت نہیں کرتا ہے۔ یہ مسلسل بنیادوں پر اعلی، مستحکم کارکردگی دیتا ہے۔
OceanStor Dorado 18000 V6 کو کیا قابل اعتماد بناتا ہے؟
جدید ڈیٹا سٹوریج سسٹم میں قابل اعتمادی کے چار درجے ہیں:
- ہارڈ ویئر، ڈرائیو کی سطح پر؛
- آرکیٹیکچرل، سازوسامان کی سطح پر؛
- سافٹ ویئر کے حصے کے ساتھ آرکیٹیکچرل؛
- مجموعی، مجموعی طور پر فیصلے سے متعلق۔
چونکہ، ہم آپ کو یاد دلاتے ہیں، ہماری کمپنی سٹوریج سسٹم کے تمام اجزاء کو خود ڈیزائن اور تیار کرتی ہے، اس لیے ہم چاروں سطحوں میں سے ہر ایک پر بھروسے کو یقینی بناتے ہیں، اس قابلیت کے ساتھ کہ اس وقت ان میں سے کس پر کیا ہو رہا ہے۔
ڈرائیوز کی وشوسنییتا کی ضمانت بنیادی طور پر پہلے بیان کردہ Wear Leveling اور Global Garbage Collection کے ذریعے دی گئی ہے۔ جب ایک SSD سسٹم میں بلیک باکس کی طرح لگتا ہے، تو اسے اندازہ نہیں ہوتا ہے کہ اس میں موجود خلیات بالکل کیسے ختم ہو جاتے ہیں۔ OceanStor Dorado 18000 V6 کے لیے، ڈرائیوز شفاف ہیں، جو صف میں موجود تمام ڈرائیوز میں یکساں توازن کی اجازت دیتی ہیں۔ اس طرح، SSDs کی زندگی کو نمایاں طور پر بڑھانا اور ان کے آپریشن کی اعلیٰ سطحی وشوسنییتا کو یقینی بنانا ممکن ہے۔
ڈرائیو کی وشوسنییتا اس میں اضافی فالتو خلیوں سے بھی متاثر ہوتی ہے۔ اور ایک سادہ ریزرو کے ساتھ ساتھ، سٹوریج سسٹم نام نہاد DIF سیلز کا استعمال کرتا ہے، جس میں چیکسم کے ساتھ ساتھ اضافی کوڈ بھی ہوتے ہیں جو RAID صف کی سطح پر تحفظ کے علاوہ ہر بلاک کو ایک ہی غلطی سے بچانا ممکن بناتے ہیں۔
تعمیراتی اعتبار کی کلید SmartMatrix حل ہے۔ مختصر میں، یہ چار کنٹرولرز ہیں جو ایک انجن کے حصے کے طور پر ایک غیر فعال بیک پلین پر بیٹھتے ہیں۔ اس طرح کے دو انجن - بالترتیب آٹھ کنٹرولرز کے ساتھ - ڈرائیوز کے ساتھ عام شیلف سے جڑے ہوئے ہیں۔ SmartMatrix کی بدولت، یہاں تک کہ اگر آٹھ میں سے سات کنٹرولرز کام کرنا بند کر دیں، تب بھی تمام ڈیٹا تک رسائی، پڑھنا اور لکھنا، برقرار رہے گا۔ اور اگر آٹھ میں سے چھ کنٹرولرز کھو جاتے ہیں، تو کیشنگ آپریشنز کو جاری رکھنا بھی ممکن ہو جائے گا۔
ایک ہی غیر فعال بیک پلین پر I/O بورڈ تمام کنٹرولرز کے لیے دستیاب ہیں، دونوں فرنٹ اینڈ اور بیک اینڈ۔ اس مکمل میش کنکشن اسکیم کے ساتھ، چاہے کچھ بھی غلط ہو، ڈرائیوز تک رسائی ہمیشہ برقرار رہتی ہے۔
ناکامی کے منظرناموں کے تناظر میں کسی فن تعمیر کی وشوسنییتا کے بارے میں بات کرنا انتہائی مناسب ہے، جس کے خلاف ڈیٹا اسٹوریج سسٹم تحفظ فراہم کرنے کے قابل ہے۔
اگر ایک ہی وقت میں دو کنٹرولرز "گر جائیں" تو اسٹوریج بغیر کسی نقصان کے صورت حال سے بچ جائے گا۔ اس طرح کا استحکام اس حقیقت کی وجہ سے حاصل کیا جاتا ہے کہ کسی بھی کیش بلاک کی یقینی طور پر مختلف کنٹرولرز پر دو اور کاپیاں ہوتی ہیں، یعنی مجموعی طور پر یہ تین کاپیوں میں موجود ہے۔ مزید یہ کہ کم از کم ایک دوسرے انجن پر ہے۔ اس طرح، یہاں تک کہ اگر پورا انجن کام کرنا بند کر دے - اس کے چاروں کنٹرولرز کے ساتھ - تمام معلومات کے تحفظ کی ضمانت دی جاتی ہے جو کیش میموری میں تھی، کیونکہ بقیہ انجن سے کم از کم ایک کنٹرولر میں کیش کو ڈپلیکیٹ کیا جائے گا۔ آخر میں، ڈیزی چین کنکشن کے ساتھ، آپ سات کنٹرولرز تک کھو سکتے ہیں، اور یہاں تک کہ اگر انہیں دو بلاکس میں ہٹا دیا جائے، اور دوبارہ تمام I/O اور کیش میموری سے تمام ڈیٹا محفوظ ہو جائے گا۔
جب دوسرے مینوفیکچررز کے ہائی اینڈ اسٹوریج کے ساتھ موازنہ کیا جائے تو یہ واضح ہے کہ صرف ہواوے ہی دو کنٹرولرز یا پورے انجن کی موت کے بعد بھی مکمل ڈیٹا تحفظ اور مکمل دستیابی فراہم کرتا ہے۔ زیادہ تر دکاندار نام نہاد کنٹرولر جوڑوں کے ساتھ ایک اسکیم استعمال کرتے ہیں جس سے ڈرائیوز منسلک ہوتی ہیں۔ بدقسمتی سے، اس ترتیب میں، اگر دو کنٹرولرز ناکام ہو جاتے ہیں، تو ڈرائیو تک I/O رسائی کھونے کا خطرہ ہے۔
افسوس، کسی ایک جزو کی ناکامی کو معروضی طور پر رد نہیں کیا جا سکتا۔ اس صورت میں، کارکردگی کو کچھ وقت کے لیے نقصان پہنچے گا: ان بلاکس کے حوالے سے جو یا تو لکھنے کے لیے آئے تھے، لیکن ابھی تک نہیں لکھے گئے، یا ان کے لیے درخواست کی گئی ہے، ان بلاکس کے حوالے سے راستوں کو دوبارہ تعمیر کرنے اور I/O آپریشنز کے لیے دوبارہ شروع کرنے کے لیے ضروری ہے۔ پڑھنا OceanStor Dorado 18000 V6 میں لین کی تبدیلی کا اوسط وقت تقریباً ایک سیکنڈ ہے - جو انڈسٹری کے قریب ترین اینالاگ (4 سیکنڈ) سے نمایاں طور پر کم ہے۔ یہ اسی غیر فعال بیک پلے کی بدولت حاصل ہوتا ہے: جب کنٹرولر ناکام ہوجاتا ہے، تو دوسرے فوراً اس کا ان پٹ آؤٹ پٹ دیکھتے ہیں، اور خاص طور پر کون سا ڈیٹا بلاک ریکارڈ نہیں کیا گیا تھا۔ نتیجے کے طور پر، قریب ترین کنٹرولر اس عمل کو اٹھاتا ہے۔ لہذا پیداواری صلاحیت کو لفظی طور پر ایک سیکنڈ میں بحال کرنے کی صلاحیت۔ یہ شامل کیا جانا چاہئے کہ وقفہ مستحکم ہے: ایک کنٹرولر کے لئے ایک سیکنڈ، دوسرے کے لئے ایک سیکنڈ، وغیرہ۔
OceanStor Dorado 18000 V6 غیر فعال بیک پلین میں، تمام بورڈز بغیر کسی اضافی ایڈریس کے تمام کنٹرولرز کے لیے قابل رسائی ہیں۔ اس کا مطلب ہے کہ کوئی بھی کنٹرولر کسی بھی بندرگاہ پر I/O لینے کے قابل ہے۔ I/O جس بھی فرنٹ اینڈ پورٹ پر آتا ہے، کنٹرولر اس پر کارروائی کرنے کے لیے تیار ہوگا۔ اس کے نتیجے میں کم سے کم تعداد میں داخلی منتقلی اور توازن کی قابل توجہ آسانیاں پیدا ہوتی ہیں۔
فرنٹ اینڈ بیلنسنگ ملٹی پاتھنگ ڈرائیور کا استعمال کرتے ہوئے کی جاتی ہے، اور اس کے علاوہ سسٹم کے اندر ہی بیلنسنگ کی جاتی ہے، کیونکہ تمام کنٹرولرز تمام I/O پورٹس کو دیکھتے ہیں۔
روایتی طور پر، تمام Huawei arrays کو اس طرح سے ڈیزائن کیا گیا ہے کہ ان میں ناکامی کا ایک بھی نقطہ نہیں ہے۔ سسٹم کو ریبوٹ کیے بغیر تمام اجزاء کو گرم تبدیل کیا جا سکتا ہے: کنٹرولرز، پاور ماڈیولز، کولنگ ماڈیولز، I/O بورڈز وغیرہ۔
RAID-TP جیسی ٹیکنالوجی بھی مجموعی طور پر سسٹم کی وشوسنییتا کو بڑھاتی ہے۔ یہ ایک RAID گروپ کا نام ہے، جو آپ کو بیک وقت تین ڈرائیوز کی ناکامی کی صورت میں خود کو بیمہ کروانے کی اجازت دیتا ہے۔ مزید یہ کہ 1 ٹی بی کی دوبارہ تعمیر میں مسلسل 30 منٹ سے بھی کم وقت لگتا ہے۔ بہترین ریکارڈ شدہ نتیجہ اسپنڈل ڈرائیو پر ڈیٹا کی اتنی ہی مقدار کے مقابلے میں آٹھ گنا تیز ہے۔ اس طرح، انتہائی صلاحیت والی ڈرائیوز کا استعمال کرنا ممکن ہے، 7,68 یا اس سے بھی 15 TB، اور سسٹم کی وشوسنییتا کے بارے میں فکر نہ کریں۔
یہ ضروری ہے کہ دوبارہ تعمیر اسپیئر ڈرائیو میں نہیں، بلکہ اسپیئر اسپیس میں کی جائے - ریزرو کی گنجائش۔ ہر ڈرائیو میں وقف شدہ جگہ ہوتی ہے جو ناکامی کے بعد ڈیٹا کی وصولی کے لیے استعمال ہوتی ہے۔ اس طرح، بحالی "بہت سے ایک" اسکیم کے مطابق نہیں، بلکہ "بہت سے کئی" اسکیم کے مطابق کی جاتی ہے، جس کی بدولت اس عمل کو نمایاں طور پر تیز کرنا ممکن ہے۔ اور جب تک مفت گنجائش ہے، بحالی جاری رہ سکتی ہے۔
الگ سے، یہ کئی سٹوریجز سے حل کی وشوسنییتا کا ذکر کرنے کے قابل ہے - میٹرو کلسٹر میں، یا ہواوے کی اصطلاح میں، HyperMetro۔ اس طرح کی اسکیمیں ہمارے ڈیٹا اسٹوریج سسٹم کی پوری رینج میں معاون ہیں اور فائل اور بلاک رسائی دونوں کے ساتھ کام کرنے کی اجازت دیتی ہیں۔ مزید یہ کہ بلاک کی بنیاد پر یہ فائبر چینل اور ایتھرنیٹ (بشمول iSCSI) دونوں کے ذریعے کام کرتا ہے۔
خلاصہ یہ کہ ہم ایک سٹوریج سسٹم سے دوسرے میں دو طرفہ نقل کے بارے میں بات کر رہے ہیں، جس میں نقل شدہ LUN کو وہی LUN-ID دیا جاتا ہے جیسا کہ مرکزی ہے۔ ٹیکنالوجی بنیادی طور پر دو مختلف سسٹمز سے کیچز کی مستقل مزاجی کی وجہ سے کام کرتی ہے۔ اس طرح، میزبان کے لیے اس سے کوئی فرق نہیں پڑتا کہ وہ کس طرف ہے: یہاں اور وہاں دونوں ایک ہی منطقی ڈرائیو دیکھتا ہے۔ نتیجے کے طور پر، کوئی بھی چیز آپ کو دو سائٹس پر پھیلے ہوئے فیل اوور کلسٹر کو تعینات کرنے سے نہیں روکتی ہے۔
کورم کے لیے ایک فزیکل یا ورچوئل لینکس مشین استعمال کی جاتی ہے۔ یہ کسی تیسری سائٹ پر واقع ہو سکتا ہے، اور اس کے وسائل کی ضروریات کم ہیں۔ ایک عام منظر نامہ صرف ایک کورم VM کی میزبانی کے لیے ایک ورچوئل سائٹ کرایہ پر لینا ہے۔
ٹیکنالوجی توسیع کی بھی اجازت دیتی ہے: میٹرو کلسٹر میں اسٹوریج کی دو سہولیات، غیر مطابقت پذیر نقل کے ساتھ ایک اضافی سائٹ۔
تاریخی طور پر، بہت سے صارفین نے ایک "اسٹوریج زو" تشکیل دیا ہے: مختلف مینوفیکچررز، مختلف ماڈلز، مختلف نسلوں، مختلف فعالیت کے ساتھ اسٹوریج سسٹمز کا ایک گروپ۔ ایک ہی وقت میں، میزبانوں کی تعداد متاثر کن ہوسکتی ہے، اور وہ اکثر ورچوئلائز ہوتے ہیں۔ ایسے حالات میں، انتظامیہ کے ترجیحی کاموں میں سے ایک یہ ہے کہ میزبانوں کو فوری، یکساں اور آسانی کے ساتھ منطقی ڈسک فراہم کرے، ترجیحا یہ معلوم کیے بغیر کہ یہ ڈسکیں جسمانی طور پر کہاں واقع ہیں۔ ہمارے سافٹ ویئر سلوشن OceanStor DJ کو اسی کے لیے ڈیزائن کیا گیا ہے، جو ڈیٹا سٹوریج کے مختلف سسٹمز کو یکجا کر سکتا ہے اور کسی مخصوص سٹوریج ماڈل سے منسلک کیے بغیر ان سے خدمات فراہم کر سکتا ہے۔
AI کے ساتھ بھی
جیسا کہ پہلے ہی ذکر کیا گیا ہے، OceanStor Dorado 18000 V6 میں مصنوعی ذہانت کے الگورتھم - Ascend کے ساتھ بلٹ ان پروسیسرز ہیں۔ ان کا استعمال، سب سے پہلے، ناکامیوں کی پیشن گوئی کرنے کے لیے، اور دوسرا، ترتیب کی سفارشات پیدا کرنے کے لیے کیا جاتا ہے، جس سے اسٹوریج کی کارکردگی اور وشوسنییتا بھی بڑھ جاتی ہے۔
پیشین گوئی کا افق دو ماہ کا ہے: AI انجن فرض کرتا ہے کہ اس وقت کے دوران کیا ہونے کا امکان ہے، چاہے یہ توسیع کرنے، رسائی کی پالیسیوں کو تبدیل کرنے کا وقت ہو، وغیرہ۔ سفارشات پیشگی جاری کی جاتی ہیں، جو آپ کو ونڈوز کے لیے شیڈول کرنے کی اجازت دیتی ہیں۔ نظام کی بحالی وقت سے پہلے۔
Huawei سے AI کی ترقی کے اگلے مرحلے میں اسے عالمی سطح پر لے جانا شامل ہے۔ سروس مینٹیننس کے دوران — ہینڈلنگ میں ناکامی یا سفارشات — Huawei ہمارے تمام صارفین کی سٹوریج کی سہولیات سے لاگنگ سسٹمز سے معلومات کو جمع کرتا ہے۔ جو کچھ جمع کیا جاتا ہے اس کی بنیاد پر، پیش آنے والی یا ممکنہ طور پر ممکنہ ناکامیوں کا تجزیہ کیا جاتا ہے اور عالمی سفارشات کی جاتی ہیں - یہ ایک مخصوص اسٹوریج سسٹم یا درجن بھر کے کام کرنے پر نہیں، بلکہ اس بات پر ہے کہ اس طرح کے ہزاروں آلات کے ساتھ کیا ہو رہا ہے اور ہوا ہے۔ . نمونہ بہت بڑا ہے، اور اس کی بنیاد پر، AI الگورتھم بہت تیزی سے سیکھنا شروع کر دیتے ہیں، یہی وجہ ہے کہ پیشین گوئیوں کی درستگی نمایاں طور پر بڑھ جاتی ہے۔
مطابقت
2019-2020 میں، VMware پروڈکٹس کے ساتھ ہمارے آلات کے تعامل کے بارے میں بہت سے تاثرات تھے۔ آخرکار انہیں روکنے کے لیے، ہم ذمہ داری کے ساتھ اعلان کرتے ہیں: VMware Huawei کا پارٹنر ہے۔ ہمارے ہارڈ ویئر کی اس کے سافٹ ویئر کے ساتھ مطابقت کا تعین کرنے کے لیے ہر قابل فہم ٹیسٹ کیا گیا، اور اس کے نتیجے میں، VMware ویب سائٹ پر، ہارڈ ویئر کی مطابقت کی شیٹ بغیر کسی تحفظات کے ہماری پروڈکشن کے موجودہ دستیاب اسٹوریج سسٹمز کی فہرست بناتی ہے۔ دوسرے لفظوں میں، VMware سافٹ ویئر ماحول کے ساتھ آپ Huawei اسٹوریج کو استعمال کر سکتے ہیں، بشمول Dorado V6، مکمل تعاون کے ساتھ۔
بروکیڈ کے ساتھ ہمارے تعاون کا بھی یہی حال ہے۔ ہم اپنی مصنوعات کی مطابقت اور جانچ کرنا جاری رکھتے ہیں - اور ان کے نتائج کی بنیاد پر، ہم اعتماد سے کہہ سکتے ہیں کہ ہمارے اسٹوریج سسٹمز جدید ترین بروکیڈ ایف سی سوئچز کے ساتھ پوری طرح مطابقت رکھتے ہیں۔
اس کے بعد کیا ہے؟
ہم اپنے پروسیسرز کو تیار اور بہتر بناتے رہتے ہیں: وہ تیز تر، زیادہ قابل اعتماد، اور ان کی کارکردگی میں اضافہ ہوتا ہے۔ ہم AI چپس کو بھی بہتر کر رہے ہیں - ان کی بنیاد پر ماڈیول تیار کیے جا رہے ہیں جو ڈیڈپلیکیشن اور کمپریشن کو تیز کرتے ہیں۔ جن لوگوں کو ہمارے کنفیگریٹر تک رسائی ہے انہوں نے محسوس کیا ہوگا کہ Dorado V6 ماڈلز میں یہ کارڈ پہلے سے ہی آرڈر کے لیے دستیاب ہیں۔
ہم سٹوریج کلاس میموری پر اضافی کیشنگ کی طرف بھی بڑھ رہے ہیں - خاص طور پر کم لیٹنسی کے ساتھ غیر اتار چڑھاؤ والی میموری، تقریباً دس مائیکرو سیکنڈ فی پڑھی۔ دیگر چیزوں کے علاوہ، SCM بنیادی طور پر بڑے ڈیٹا کے ساتھ کام کرنے اور OLTP کے مسائل حل کرنے پر کارکردگی کو فروغ دیتا ہے۔ اگلی اپ ڈیٹ کے بعد، ایس سی ایم کارڈز آرڈر کے لیے دستیاب ہو جائیں گے۔
اور یقیناً، فائل تک رسائی کی فعالیت کو Huawei ڈیٹا اسٹوریج ماڈلز کی پوری رینج میں بڑھا دیا جائے گا - ہماری اپ ڈیٹس کے لیے ہمارے ساتھ رہیں۔
ماخذ: www.habr.com