نناقش بالتفصيل ما الذي يجعل OceanStor Dorado 18000 V6 نظام تخزين متطور حقًا مع احتياطي لائق للسنوات القادمة. في الوقت نفسه ، نبدد المخاوف الشائعة حول تخزين All-Flash ونوضح كيف تستغل Huawei أقصى استفادة منها: NVMe من طرف إلى طرف ، والتخزين المؤقت الإضافي على SCM ، ومجموعة كاملة من الحلول الأخرى.
مشهد بيانات جديد - تخزين بيانات جديد
كثافة البيانات آخذة في الارتفاع في جميع الصناعات. والقطاع المصرفي مثال واضح على ذلك. على مدى السنوات القليلة الماضية ، زاد عدد المعاملات المصرفية أكثر من عشرة أضعاف. كما يظهر ، فقط في روسيا في الفترة من 2010 إلى 2018 ، أظهر عدد المعاملات غير النقدية باستخدام البطاقات البلاستيكية زيادة بأكثر من ثلاثين ضعفًا - من 5,8 إلى 172 لكل شخص سنويًا. بادئ ذي بدء ، انتصار المدفوعات الصغيرة: أصبح معظمنا مرتبطًا بالخدمات المصرفية عبر الإنترنت ، والبنك الآن في متناول أيدينا - على الهاتف.
يجب أن تكون البنية التحتية لتكنولوجيا المعلومات لمؤسسة ائتمانية جاهزة لمثل هذا التحدي. وهذا حقا تحد. من بين أمور أخرى ، إذا احتاج البنك في وقت سابق إلى ضمان توفر البيانات فقط خلال ساعات العمل ، فهو الآن 24/7. حتى وقت قريب ، كانت 5 مللي ثانية تعتبر معدل انتقال مقبول ، فماذا في ذلك؟ الآن حتى 1 مللي ثانية مبالغة. بالنسبة لنظام التخزين الحديث ، الهدف هو 0,5 مللي ثانية.
الشيء نفسه مع الموثوقية: في 2010s ، تم تشكيل فهم تجريبي أنه يكفي لرفع مستواها إلى "خمس عشرات" - 99,999٪. صحيح أن هذا الفهم قد عفا عليه الزمن. في عام 2020 ، من الطبيعي تمامًا أن تتطلب الأعمال التجارية 99,9999٪ للتخزين و 99,99999٪ للهندسة الشاملة. وهذه ليست نزوة على الإطلاق ، ولكنها حاجة ملحة: إما أنه لا توجد نافذة زمنية لصيانة البنية التحتية ، أو أنها صغيرة.
من أجل الوضوح ، من الملائم عرض هذه المؤشرات على مستوى المال. أسهل طريقة هي على سبيل المثال من المؤسسات المالية. يوضح الرسم البياني أعلاه مقدار ربح كل بنك من أكبر 10 بنوك في العالم في الساعة. بالنسبة للبنك الصناعي والتجاري الصيني وحده ، لا يقل هذا المبلغ عن 5 ملايين دولار. وهذا هو بالضبط مقدار تكلفة ساعة تعطل البنية التحتية لتكنولوجيا المعلومات لأكبر مؤسسة ائتمانية في الصين (وتؤخذ الأرباح الضائعة فقط في الاعتبار في الحساب!). من هذا المنظور ، من الواضح أن تقليل وقت التوقف عن العمل وزيادة الموثوقية ، ليس فقط بنسبة قليلة ، ولكن حتى بنسبة كسور في المائة ، لهما ما يبرره منطقيًا تمامًا. ليس فقط لأسباب تتعلق بزيادة القدرة التنافسية ، ولكن ببساطة من أجل الحفاظ على مراكز السوق.
التغييرات المماثلة تحدث في الصناعات الأخرى. على سبيل المثال ، في النقل الجوي: قبل الوباء ، كان السفر الجوي يكتسب زخمًا فقط من عام إلى آخر ، وبدأ الكثيرون في استخدامه كسيارة أجرة تقريبًا. بالنسبة لأنماط المستهلك ، فقد ترسخت عادة التوافر الكامل للخدمات في المجتمع: عند الوصول إلى المطار ، نحتاج إلى الاتصال بشبكة Wi-Fi ، والوصول إلى خدمات الدفع ، والوصول إلى خريطة المنطقة ، وما إلى ذلك. نتيجة لذلك ، زاد الحمل على البنية التحتية والخدمات في الأماكن العامة عدة مرات. وتلك المقاربات الخاصة ببنيتها التحتية ، والبناء ، التي اعتبرناها مقبولة حتى قبل عام ، سرعان ما أصبحت عتيقة.
هل من السابق لأوانه التبديل إلى All-Flash؟
لحل المشكلات المذكورة أعلاه ، من حيث الأداء ، فإن AFA - مصفوفات الفلاش بالكامل ، أي المصفوفات المبنية بالكامل على الفلاش - هي الأنسب. ما لم تكن هناك شكوك حتى وقت قريب حول ما إذا كانت قابلة للمقارنة من حيث الموثوقية مع تلك التي تم تجميعها على أساس محركات الأقراص الثابتة والأقراص الهجينة. بعد كل شيء ، تحتوي ذاكرة فلاش الحالة الصلبة على مقياس يسمى متوسط الوقت بين حالات الفشل ، أو MTBF (متوسط الوقت بين حالات الفشل). تدهور الخلايا بسبب عمليات الإدخال / الإخراج ، للأسف ، أمر مفروغ منه.
لذلك طغت على آفاق All-Flash مسألة كيفية منع فقدان البيانات في حالة استمرار أوامر SSD لفترة طويلة. يعد النسخ الاحتياطي خيارًا مألوفًا ، فقط وقت الاسترداد سيكون كبيرًا بشكل غير مقبول بناءً على المتطلبات الحديثة. هناك طريقة أخرى للخروج وهي إعداد مستوى ثانٍ من التخزين على محركات أقراص المغزل ، ومع ذلك ، مع مثل هذا المخطط ، يتم فقد بعض مزايا نظام "الفلاش الصارم".
ومع ذلك ، تشير الأرقام إلى خلاف ذلك: تُظهر إحصاءات عمالقة الاقتصاد الرقمي ، بما في ذلك Google ، في السنوات الأخيرة أن الفلاش أكثر موثوقية بعدة مرات من محركات الأقراص الثابتة. علاوة على ذلك ، سواء في فترة زمنية قصيرة أو طويلة: في المتوسط ، تمر أربع إلى ست سنوات قبل أن تفشل محركات الأقراص المحمولة. من حيث موثوقية تخزين البيانات ، فهي ليست بأي حال من الأحوال أدنى من محركات الأقراص على الأقراص المغناطيسية المغزلية ، أو حتى تتفوق عليها.
حجة تقليدية أخرى لصالح محركات المغزل هي قدرتها على تحمل التكاليف. لا شك أن تكلفة تخزين تيرابايت على القرص الصلب لا تزال منخفضة نسبيًا. وإذا كنت تأخذ في الاعتبار تكلفة المعدات فقط ، فمن الأرخص الاحتفاظ بالتيرابايت على محرك المغزل مقارنة بمحرك أقراص ذي حالة صلبة. ومع ذلك ، في سياق التخطيط المالي ، لا يهم فقط مقدار شراء جهاز معين ، ولكن أيضًا التكلفة الإجمالية لامتلاكه لفترة طويلة - من ثلاث إلى سبع سنوات.
من هذه الزاوية ، الأمر مختلف تمامًا. حتى إذا تجاهلنا إزالة البيانات المكررة والضغط ، والتي ، كقاعدة عامة ، تُستخدم في مصفوفات الفلاش وتجعل تشغيلها أكثر ربحية من الناحية الاقتصادية ، تظل هناك خصائص مثل مساحة الرف التي تشغلها الوسائط ، وتبديد الحرارة ، واستهلاك الطاقة. ووفقًا لهم ، فإن التدفق يتفوق على أسلافه. ونتيجة لذلك ، فإن التكلفة الإجمالية للملكية لأنظمة تخزين الفلاش ، مع الأخذ في الاعتبار جميع المعلمات ، غالبًا ما تكون تقريبًا نصف ما هي عليه في حالة المصفوفات الموجودة على محركات أقراص المغزل أو المحركات الهجينة.
وفقًا لتقارير ESG ، يمكن لأنظمة التخزين Dorado V6 All-Flash تحقيق خفض في تكلفة الملكية بنسبة تصل إلى 78٪ على مدى خمس سنوات ، بما في ذلك من خلال إلغاء المضاعفات والضغط بكفاءة ، وبسبب انخفاض استهلاك الطاقة وتبديد الحرارة. توصي الشركة التحليلية الألمانية DCIG باستخدامها على أنها الأفضل من حيث التكلفة الإجمالية للملكية المتاحة اليوم.
يتيح استخدام محركات الأقراص ذات الحالة الصلبة توفير مساحة قابلة للاستخدام وتقليل عدد حالات الفشل وتقليل وقت صيانة الحلول وتقليل استهلاك الطاقة وتبديد الحرارة لأنظمة التخزين. واتضح أن AFA يمكن مقارنته اقتصاديًا على الأقل بالمصفوفات التقليدية على محركات المغزل ، وغالبًا ما يتفوق عليها.
هواوي رويال فلوش
من بين مخازن All-Flash الخاصة بنا ، ينتمي المكان الأول إلى نظام OceanStor Dorado 18000 V6 عالي الجودة. وليس فقط بيننا: بشكل عام ، في الصناعة ، لديها سجل سرعة قياسي - ما يصل إلى 20 مليون IPOS في التكوين الأقصى. بالإضافة إلى ذلك ، فهي موثوقة للغاية: حتى إذا طار اثنان من وحدات التحكم في وقت واحد ، أو ما يصل إلى سبعة وحدات تحكم واحدة تلو الأخرى ، أو محرك كامل في وقت واحد ، فإن البيانات ستبقى. يتم توفير مزايا كبيرة لـ "ثمانية عشر ألفًا" من خلال الذكاء الاصطناعي المتصل به ، بما في ذلك المرونة في إدارة العمليات الداخلية. دعونا نرى كيف يتم تحقيق ذلك.
إلى حد كبير ، تمتلك Huawei السبق لأنها الشركة المصنعة الوحيدة في السوق التي تصنع أنظمة التخزين بنفسها - بشكل كامل وكامل. لدينا الدوائر الخاصة بنا ، الرمز الصغير الخاص بنا ، الخدمة الخاصة بنا.
تم تصميم وحدة التحكم في أنظمة OceanStor Dorado على معالج من تصميم وإنتاج شركة Huawei - Kunpeng 920. وهي تستخدم وحدة التحكم الذكية في إدارة اللوح الأساسي (iBMC) ، وكذلك وحدة التحكم الخاصة بنا. رقائق AI ، وبالتحديد Ascend 310 ، والتي تعمل على تحسين تنبؤات الفشل وتقديم توصيات للإعدادات ، هي أيضًا Huawei ، بالإضافة إلى لوحات الإدخال / الإخراج - وحدة الإدخال / الإخراج الذكية. أخيرًا ، تم تصميم وتصنيع وحدات التحكم في محركات أقراص الحالة الثابتة من قبلنا. كل هذا قدم الأساس لصنع حل متوازن متكامل وعالي الأداء.
على مدار العام الماضي ، قمنا بتنفيذ مشروع لتقديم هذا ، وهو نظام التخزين الأكثر تطورًا لدينا ، في أحد أكبر البنوك الروسية. نتيجة لذلك ، تظهر أكثر من 40 وحدة OceanStor Dorado 18000 V6 في مجموعة المترو أداءً مستقرًا: يمكن إزالة أكثر من مليون IOPS من كل نظام ، وهذا يأخذ في الاعتبار التأخيرات بسبب المسافة.
NVMe نهاية إلى نهاية
تدعم أحدث أنظمة التخزين من Huawei NVMe من طرف إلى طرف ، وهو ما نؤكد عليه لسبب ما. تم تطوير البروتوكولات المستخدمة تقليديًا للوصول إلى محركات الأقراص في العصور القديمة لتكنولوجيا المعلومات: فهي تستند إلى أوامر SCSI (مرحبًا ، 1980s!) ، والتي تسحب الكثير من الوظائف لضمان التوافق مع الإصدارات السابقة. مهما كانت طريقة الوصول التي تتخذها ، فإن عبء البروتوكول في هذه الحالة هائل. نتيجة لذلك ، بالنسبة للمخازن التي تستخدم بروتوكولات مرتبطة بـ SCSI ، لا يمكن أن يكون تأخير الإدخال / الإخراج أقل من 0,4–0,5 مللي ثانية. في المقابل ، كونه بروتوكولًا مصممًا للعمل مع ذاكرة فلاش وتحريره من العكازات من أجل التوافق مع الإصدارات السابقة ، فإن NVMe - ذاكرة غير متطايرة - تقلل زمن الوصول إلى 0,1 مللي ثانية ، علاوة على ذلك ، ليس على نظام التخزين ، ولكن على المكدس بأكمله ، من المضيف إلى محركات الأقراص. ليس من المستغرب أن تتماشى NVMe مع اتجاهات تطوير تخزين البيانات في المستقبل المنظور. لقد اعتمدنا أيضًا على NVMe - ونبتعد تدريجياً عن SCSI. تدعم جميع أنظمة تخزين Huawei التي تم إنتاجها اليوم ، بما في ذلك خط Dorado ، NVMe (ومع ذلك ، يتم تطبيقه بشكل شامل فقط على الطرز المتقدمة من سلسلة Dorado V6).
FlashLink: حفنة من التقنيات
تقنية حجر الأساس لخط OceanStor Dorado بالكامل هي FlashLink. بتعبير أدق ، هو مصطلح يجمع بين مجموعة متكاملة من التقنيات التي تعمل على ضمان الأداء العالي والموثوقية. يتضمن ذلك تقنيات إلغاء البيانات المكررة والضغط ، وعمل نظام توزيع البيانات RAID 2.0+ ، والفصل بين البيانات "الباردة" و "الساخنة" ، وتسجيل البيانات المتسلسلة كامل الشريط (عمليات الكتابة العشوائية ، مع البيانات الجديدة والمتغيرة ، يتم تجميعها في ملف مكدس كبير ومكتوب بالتتابع ، مما يزيد من سرعة القراءة والكتابة).
من بين أشياء أخرى ، يتضمن FlashLink عنصرين مهمين - Wear Leveling و Global Garbage Collection. يجب التعامل معها بشكل منفصل.
في الواقع ، أي محرك أقراص مزود بذاكرة مصنوعة من مكونات صلبة هو نظام تخزين في صورة مصغرة ، مع عدد كبير من الكتل ووحدة تحكم تضمن توفر البيانات. ويتم توفيره ، من بين أمور أخرى ، بسبب حقيقة أن البيانات من الخلايا "المقتولة" يتم نقلها إلى "غير مقتول". هذا يضمن أنه يمكن قراءتها. هناك خوارزميات مختلفة لهذا النقل. في الحالة العامة ، تحاول وحدة التحكم موازنة تآكل جميع خلايا التخزين. هذا النهج له جانب سلبي. عندما يتم نقل البيانات داخل SSD ، يتم تقليل عدد عمليات الإدخال / الإخراج التي تقوم بها بشكل كبير. في الوقت الحالي ، إنه شر لا بد منه.
وبالتالي ، إذا كان هناك الكثير من محركات أقراص الحالة الصلبة في النظام ، فسيظهر "المنشار" على الرسم البياني للأداء ، مع صعود وهبوط حاد. المشكلة هي أن محرك أقراص واحد من التجمع يمكنه بدء ترحيل البيانات في أي وقت ، ويتم إزالة الأداء العام في نفس الوقت من جميع محركات أقراص الحالة الصلبة في المصفوفة. لكن مهندسي Huawei اكتشفوا كيفية تجنب "المنشار".
لحسن الحظ ، تعد كل من وحدات التحكم في محركات الأقراص ووحدة التحكم في التخزين والبرامج الثابتة الخاصة بشركة Huawei "أصلية" ، ويتم إطلاق هذه العمليات في OceanStor Dorado 18000 V6 مركزيًا وبشكل متزامن على جميع محركات الأقراص في المصفوفة. علاوة على ذلك ، بناءً على أمر وحدة التحكم في التخزين ، وبالتحديد في حالة عدم وجود حمل إدخال / إخراج ثقيل.
تشارك شريحة الذكاء الاصطناعي أيضًا في اختيار اللحظة المناسبة لنقل البيانات: استنادًا إلى إحصائيات الزيارات للأشهر القليلة الماضية ، فهي قادرة على التنبؤ بأعلى احتمالية فيما إذا كنت تتوقع إدخال / إخراج نشط في المستقبل القريب ، و إذا كانت الإجابة سلبية ، وكان الحمل على النظام في الوقت الحالي صغيرًا ، فإن وحدة التحكم تطلب جميع محركات الأقراص: يجب على أولئك الذين يحتاجون إلى Wear Leveling القيام بذلك مرة واحدة وبشكل متزامن.
بالإضافة إلى ذلك ، ترى وحدة التحكم في النظام ما يحدث في كل خلية من محرك الأقراص ، على عكس أنظمة التخزين للشركات المصنعة المنافسة: فهي مجبرة على شراء وسائط الحالة الصلبة من البائعين الخارجيين ، وهذا هو سبب عدم توفر التفاصيل على مستوى الخلية لـ المتحكمين في هذه المستودعات.
نتيجة لذلك ، يتمتع OceanStor Dorado 18000 V6 بفترة قصيرة جدًا من تدهور الأداء في عملية Wear Leveling ، ويتم إجراؤه بشكل أساسي عندما لا يتداخل مع أي عمليات أخرى. هذا يعطي أداءً مستقرًا عاليًا على أساس مستمر.
ما الذي يجعل OceanStor Dorado 18000 V6 موثوقًا به
هناك أربعة مستويات من الموثوقية في أنظمة تخزين البيانات الحديثة:
- الأجهزة على مستوى القيادة ؛
- معماري على مستوى المعدات ؛
- المعمارية مع جزء البرنامج ؛
- تراكمي يتعلق بالحل ككل.
نظرًا لأن شركتنا ، كما نتذكر ، تصمم وتصنع جميع مكونات نظام التخزين نفسه ، فإننا نقدم الموثوقية في كل مستوى من المستويات الأربعة ، مع القدرة على المراقبة الدقيقة لما يحدث في أي منها في الوقت الحالي.
يتم ضمان موثوقية محركات الأقراص بشكل أساسي من خلال نظام Wear Leveling and Global Garbage Collection الموصوف سابقًا. عندما يبدو SSD على شكل صندوق أسود للنظام ، فليس لديه أي فكرة عن كيفية تآكل الخلايا فيه بالضبط. بالنسبة لمحرك OceanStor Dorado 18000 V6 ، تكون محركات الأقراص شفافة ، مما يجعل من الممكن تحقيق التوازن بالتساوي عبر جميع محركات الأقراص في المصفوفة. وبالتالي ، فقد اتضح أنه يطيل عمر SSD بشكل كبير ويؤمن مستوى عالٍ من الموثوقية في تشغيله.
أيضًا ، تتأثر موثوقية محرك الأقراص بخلايا زائدة عن الحاجة فيه. وإلى جانب الاحتياطي البسيط ، يستخدم نظام التخزين ما يسمى بخلايا DIF ، والتي تحتوي على مجاميع اختبارية ، بالإضافة إلى رموز إضافية لحماية كل كتلة من خطأ واحد ، بالإضافة إلى الحماية على مستوى مصفوفة RAID.
مفتاح الموثوقية المعمارية هو حل SmartMatrix. باختصار ، هذه أربع وحدات تحكم تجلس على لوحة معززة سلبية كجزء من محرك واحد (محرك). اثنان من هذه المحركات - على التوالي ، مع ثمانية وحدات تحكم - متصلان بأرفف مشتركة مع محركات. بفضل SmartMatrix ، حتى إذا توقفت سبعة من كل ثمانية وحدات تحكم عن العمل ، فسيظل الوصول إلى جميع البيانات ، للقراءة والكتابة. ومع فقدان ستة من أصل ثمانية وحدات تحكم ، سيكون من الممكن مواصلة عمليات التخزين المؤقت.
تتوفر لوحات الإدخال / الإخراج على نفس اللوحة الخلفية السلبية لجميع وحدات التحكم ، سواء على الواجهة الأمامية أو الخلفية. مع نظام الاتصال الشبكي الكامل هذا ، بغض النظر عن الفشل ، يتم الحفاظ دائمًا على الوصول إلى محركات الأقراص.
من الأنسب التحدث عن موثوقية بنية في سياق أوضاع الفشل التي يستطيع نظام التخزين الحماية منها.
سوف يستمر التخزين في البقاء على قيد الحياة دون خسارة إذا "سقط" اثنان من وحدات التحكم ، بما في ذلك في نفس الوقت. يتم تحقيق هذا الاستقرار نظرًا لحقيقة أن أي كتلة ذاكرة تخزين مؤقت تحتوي بالتأكيد على نسختين إضافيتين على وحدات تحكم مختلفة ، أي أنها في المجموع في ثلاث نسخ. واحد على الأقل يعمل بمحرك مختلف. وبالتالي ، حتى إذا توقف المحرك بالكامل عن العمل - مع جميع وحدات التحكم الأربعة الخاصة به - فمن المؤكد أنه سيتم حفظ جميع المعلومات الموجودة في ذاكرة التخزين المؤقت ، لأنه سيتم تكرار ذاكرة التخزين المؤقت في وحدة تحكم واحدة على الأقل من المحرك المتبقي. أخيرًا ، مع الاتصال التسلسلي ، يمكنك أن تفقد ما يصل إلى سبع وحدات تحكم ، وحتى إذا تم التخلص منها في كتل من اثنين ، - ومرة أخرى ، سيتم الاحتفاظ بجميع الإدخال / الإخراج وجميع البيانات من ذاكرة التخزين المؤقت.
عند المقارنة مع التخزين عالي الجودة من الشركات المصنعة الأخرى ، يمكن ملاحظة أن شركة Huawei هي الوحيدة التي توفر الحماية الكاملة للبيانات والتوافر الكامل حتى بعد وفاة جهازي تحكم أو المحرك بأكمله. يستخدم معظم البائعين مخططًا مع ما يسمى بأزواج وحدة التحكم التي تتصل بها محركات الأقراص. لسوء الحظ ، في هذا التكوين ، إذا فشلت جهازي تحكم ، فهناك خطر فقدان وصول الإدخال / الإخراج إلى محرك الأقراص.
للأسف ، فشل مكون واحد لا يتم استبعاده بشكل موضوعي. في هذه الحالة ، سينخفض الأداء لبعض الوقت: من الضروري إعادة بناء المسارات واستئناف الوصول إلى عمليات الإدخال / الإخراج فيما يتعلق بتلك الكتل التي جاءت إما للكتابة ، ولكن لم تتم كتابتها بعد ، أو طُلب منها ذلك أن تقرأ. يتمتع OceanStor Dorado 18000 V6 بمتوسط وقت إعادة بناء يبلغ ثانية واحدة تقريبًا ، وهو أقل بكثير من أقرب نظير في الصناعة (4 ثوان). يتم تحقيق ذلك بفضل نفس اللوحة المعززة المنفعلة: عندما تفشل وحدة التحكم ، يرى الباقي على الفور المدخلات / المخرجات ، وعلى وجه الخصوص كتلة البيانات التي لم تتم الكتابة إليها ؛ نتيجة لذلك ، تلتقط أقرب وحدة تحكم العملية. ومن هنا تأتي القدرة على استعادة الأداء في ثانية واحدة فقط. يجب أن أضيف ، الفاصل الزمني ثابت: ثانية لوحدة تحكم واحدة ، وثانية لوحدة تحكم أخرى ، إلخ.
في OceanStor Dorado 18000 V6 ، تتوفر جميع اللوحات لجميع وحدات التحكم دون أي عناوين إضافية. هذا يعني أن أي وحدة تحكم قادرة على التقاط الإدخال / الإخراج على أي منفذ. مهما كان منفذ الإدخال / الإخراج الأمامي ، ستكون وحدة التحكم جاهزة لمعالجته. ومن ثم - الحد الأدنى لعدد التحويلات الداخلية وتبسيط ملحوظ للموازنة.
يتم تنفيذ موازنة الواجهة الأمامية باستخدام برنامج التشغيل متعدد المسارات ، ويتم إجراء موازنة إضافية داخل النظام نفسه ، نظرًا لأن جميع وحدات التحكم ترى جميع منافذ الإدخال / الإخراج.
تقليديًا ، تم تصميم جميع صفيفات Huawei بطريقة لا تحتوي على نقطة فشل واحدة. التبديل السريع ، دون إعادة تشغيل النظام ، يفسح المجال لجميع مكوناته: وحدات التحكم ، وحدات الطاقة ، وحدات التبريد ، لوحات الإدخال / الإخراج ، إلخ.
يزيد من موثوقية النظام ككل والتكنولوجيا مثل RAID-TP. هذا هو اسم مجموعة RAID ، والتي تسمح لك بالتأمين ضد الفشل المتزامن لما يصل إلى ثلاثة محركات. و تستغرق عملية إعادة بناء 1 تيرابايت باستمرار أقل من 30 دقيقة. أفضل نتيجة مسجلة هي ثماني مرات أسرع من نفس الكمية من البيانات على محرك المغزل. وبالتالي ، من الممكن استخدام محركات كبيرة للغاية ، على سبيل المثال 7,68 أو حتى 15 تيرابايت ، ولا تقلق بشأن موثوقية النظام.
من المهم ألا تتم إعادة البناء في محرك احتياطي ، ولكن في مساحة احتياطية - سعة احتياطية. يتم استخدام مساحة مخصصة لكل محرك أقراص لاستعادة البيانات بعد الفشل. وبالتالي ، لا يتم إجراء الاسترداد وفقًا لمخطط "كثير لواحد" ، ولكن وفقًا لمخطط "كثير إلى كثير" ، والذي من خلاله يمكن تسريع العملية بشكل كبير. وطالما كانت هناك سعة حرة ، يمكن أن يستمر التعافي.
يجب أن نذكر أيضًا موثوقية الحل من عدة مخازن - في مجموعة مترو ، أو ، في مصطلحات Huawei ، HyperMetro. يتم دعم هذه المخططات على مجموعة النماذج الكاملة لأنظمة تخزين البيانات الخاصة بنا وتسمح بالوصول إلى الملفات والحظر. علاوة على ذلك ، في المجموعة الأولى ، تعمل عبر القناة الليفية وشبكة إيثرنت (بما في ذلك عبر بروتوكول iSCSI).
في جوهرها ، نحن نتحدث عن النسخ ثنائي الاتجاه من نظام تخزين إلى آخر ، حيث يتم إعطاء LUN المكرر نفس معرف LUN مثل النظام الرئيسي. تعمل التكنولوجيا بشكل أساسي بسبب اتساق ذاكرات التخزين المؤقت من نظامين مختلفين. وبالتالي ، بالنسبة للمضيف ، لا يهم أي جانب هو: هنا وهناك يرى نفس الدافع المنطقي. نتيجة لذلك ، لا شيء يمنعك من نشر مجموعة تجاوز الفشل التي تغطي موقعين.
للحصول على النصاب القانوني ، يتم استخدام جهاز Linux مادي أو افتراضي. يمكن أن يكون موجودًا في الموقع الثالث ، ومتطلبات موارده صغيرة. السيناريو الشائع هو استئجار موقع افتراضي حصريًا لاستضافة نصاب افتراضي.
تسمح التقنية أيضًا بالتوسع: مخزنان - في مجموعة مترو ، موقع إضافي - مع النسخ المتماثل غير المتزامن.
تاريخياً ، أنشأ العديد من العملاء "حديقة حيوانات التخزين": مجموعة من أنظمة التخزين من جهات تصنيع مختلفة ، ونماذج مختلفة ، وأجيال مختلفة ، بوظائف مختلفة. ومع ذلك ، يمكن أن يكون عدد المضيفين مثيرًا للإعجاب ، وغالبًا ما يكونون افتراضيًا. في مثل هذه الظروف ، تتمثل إحدى أولويات الإدارة في توفير أقراص منطقية بشكل سريع وموحد وملائم للمضيفين ، ويفضل أن يكون ذلك بطريقة لا تتعمق في المكان الذي توجد فيه هذه الأقراص فعليًا. هذا ما تم تصميم حل برنامج OceanStor DJ الخاص بنا من أجله ، والذي يمكنه بالإجماع إدارة أنظمة التخزين المختلفة وتقديم الخدمات منها دون الارتباط بنموذج تخزين معين.
نفس الذكاء الاصطناعي
كما ذكرنا سابقًا ، يحتوي OceanStor Dorado 18000 V6 على معالجات مدمجة مع خوارزميات الذكاء الاصطناعي - Ascend. يتم استخدامها ، أولاً ، للتنبؤ بالفشل ، وثانيًا ، لتشكيل توصيات للضبط ، مما يزيد أيضًا من أداء وموثوقية التخزين.
أفق التنبؤ هو شهرين: تفترض آلات الذكاء الاصطناعي ما سيحدث باحتمالية عالية خلال هذا الوقت ، سواء حان الوقت للتوسيع ، أو تغيير سياسات الوصول ، وما إلى ذلك. يتم إصدار التوصيات مسبقًا ، مما يسمح لك بالتخطيط للنوافذ من أجل صيانة النظام مسبقًا من الوقت.
تتمثل المرحلة التالية من تطوير الذكاء الاصطناعي من Huawei في نقله إلى المستوى العالمي. في سياق صيانة الخدمة - تجاوز الفشل أو التوصيات - تجمع Huawei المعلومات من أنظمة التسجيل من جميع مخازن عملائنا. استنادًا إلى المعلومات التي تم جمعها ، يتم إجراء تحليل للفشل الذي حدث أو محتمل ويتم تقديم توصيات عالمية - لا تستند إلى تشغيل نظام تخزين معين أو حتى عشرات ، ولكن بناءً على ما يحدث وما حدث مع الآلاف من هؤلاء. الأجهزة. العينة ضخمة ، وبناءً عليها ، تبدأ خوارزميات الذكاء الاصطناعي في التعلم بسرعة كبيرة ، وهذا هو سبب زيادة دقة التنبؤات بشكل كبير.
التوافق
في 2019-2020 ، كان هناك الكثير من التلميح حول تفاعل أجهزتنا مع منتجات VMware. لإيقافهم أخيرًا ، نعلن بمسؤولية: VMware شريك Huawei. تم إجراء جميع الاختبارات التي يمكن تصورها من أجل توافق أجهزتنا مع برامجها ، ونتيجة لذلك ، على موقع VMware الإلكتروني ، تسرد ورقة توافق الأجهزة أنظمة التخزين المتوفرة حاليًا لإنتاجنا دون أي تحفظات. بمعنى آخر ، مع بيئة برنامج VMware ، يمكنك استخدام تخزين Huawei ، بما في ذلك Dorado V6 ، مع الدعم الكامل.
الشيء نفسه ينطبق على تعاوننا مع Brocade. نواصل التفاعل مع منتجاتنا واختبارها للتأكد من توافقها ويمكننا أن نعلن بثقة أن أنظمة التخزين لدينا متوافقة تمامًا مع أحدث محولات Brocade FC.
ما هي الخطوة التالية؟
نواصل تطوير معالجاتنا وتحسينها: تصبح أسرع وأكثر موثوقية ويزداد أدائها. نعمل أيضًا على تحسين رقائق الذكاء الاصطناعي - بناءً عليها ، يتم أيضًا إنتاج وحدات تعمل على تسريع إلغاء البيانات المكررة والضغط. قد يكون أولئك الذين لديهم حق الوصول إلى أداة التهيئة الخاصة بنا قد لاحظوا أن هذه البطاقات متاحة بالفعل للطلب في طرازات Dorado V6.
نحن نتجه أيضًا نحو التخزين المؤقت الإضافي على ذاكرة فئة التخزين - ذاكرة غير متطايرة مع زمن انتقال منخفض بشكل خاص ، حوالي عشرة ميكروثانية لكل قراءة. من بين أشياء أخرى ، يوفر SCM تعزيزًا للأداء ، بشكل أساسي عند العمل مع البيانات الكبيرة وعند حل مهام OLTP. بعد التحديث القادم ، يجب أن تصبح بطاقات SCM متاحة للطلب.
وبالطبع ، سيتم توسيع وظيفة الوصول إلى الملفات عبر النطاق الكامل لتخزين بيانات Huawei - ترقبوا تحديثاتنا.
المصدر: www.habr.com