يوم جيد، عزيزي سكان خابروفسك!
أود أن أواصل قصتي حول تجميع "كمبيوتر القرية العملاق". وسأشرح سبب تسميتها بهذه الطريقة، والسبب بسيط. أنا نفسي أعيش في قرية. والاسم هو تصيد طفيف لأولئك الذين يصرخون على الإنترنت "لا توجد حياة خارج طريق موسكو الدائري!"، "القرية الروسية أصبحت سكيرًا وتموت!" لذا، قد يكون هذا صحيحًا في مكان ما، لكنني سأكون الاستثناء من القاعدة. أنا لا أشرب الخمر، ولا أدخن، وأقوم بأشياء لا يستطيع كل "المفرقعات الحضرية" تحملها. لكن لنعد إلى أغنامنا، أو بشكل أدق، إلى الخادم، الذي كان في نهاية الجزء الأول من المقال «يظهر بالفعل علامات الحياة».
كانت اللوحة مستلقية على الطاولة، وتسلقت عبر BIOS، وأعدتها حسب رغبتي، وابتعدت عن Ubuntu 16.04 Desktop من أجل البساطة وقررت توصيل بطاقة فيديو بـ "الجهاز الفائق". لكن الشيء الوحيد الذي كان في متناول اليد هو GTS 250 مع مروحة ضخمة غير أصلية. الذي قمت بتثبيته في فتحة PCI-E 16x بالقرب من زر الطاقة.
"لقد التقطتها مع علبة Belomor (c)" لذا من فضلك لا تلومني على جودة الصورة. أفضل التعليق على ما تم التقاطه عليهم.
أولاً، اتضح أنه عند تثبيتها في الفتحة، حتى بطاقة الفيديو القصيرة تضع اللوحة على فتحات الذاكرة، وفي هذه الحالة لا يمكن تثبيتها وحتى المزالج يجب إنزالها. ثانيًا، يغطي شريط التثبيت الحديدي لبطاقة الفيديو زر الطاقة، لذا كان لا بد من إزالته. بالمناسبة، يتم إضاءة زر الطاقة نفسه بواسطة مصباح LED ثنائي اللون، والذي يضيء باللون الأخضر عندما يكون كل شيء على ما يرام ويومض باللون البرتقالي في حالة وجود أي مشاكل أو ماس كهربائي وتعثر حماية مصدر الطاقة أو طاقة +12VSB العرض مرتفع جدًا أو منخفض جدًا.
في الواقع، هذه اللوحة الأم ليست مصممة لتضمين بطاقات الفيديو "مباشرة" في فتحات PCI-E 16x الخاصة بها، فهي جميعها متصلة بالمنافذ الصاعدة. ولتركيب بطاقة التوسعة في الفتحات القريبة من زر الطاقة، توجد رافعات زاوية، وأخرى منخفضة لتثبيت البطاقات القصيرة حتى طول مشعاع المعالج الأول، وزاوية مرتفعة مع موصل طاقة إضافي +12 فولت لتركيب بطاقة الفيديو "فوق" مبرد قياسي منخفض 1U. ويمكن أن تشمل بطاقات الفيديو الكبيرة مثل GTX 780 أو GTX 980 أو GTX 1080 أو بطاقات GPGPU المتخصصة Nvidia Tesla K10-K20-K40 أو “بطاقات الحوسبة” Intel Xeon Phi 5110p وما شابه.
ولكن في رافع GPGPU، يمكن توصيل البطاقة المضمنة في EdgeSlot مباشرة، فقط عن طريق توصيل طاقة إضافية مرة أخرى بنفس الموصل الموجود في رافع الزاوية العالية. بالنسبة للمهتمين، يُطلق على هذا الناهض المرن على موقع eBay اسم "Dell PowerEdge C8220X PCI-E GPGPU DJC89" ويكلف حوالي 2.5-3 ألف روبل. تعتبر الرافعات الزاوية المزودة بمصدر طاقة إضافي نادرة جدًا وكان علي التفاوض للحصول عليها من متجر قطع غيار خوادم متخصص من خلال Whisper. تكلفتها 7 آلاف للقطعة الواحدة.
سأقول على الفور، "الرجال الخطرون (tm)" يمكنهم أيضًا توصيل زوج من GTX 980 باللوحة باستخدام رافعات مرنة صينية 16x، كما فعل أحد الأشخاص في "That Same Forum"؛ بالمناسبة، الصينيون يصنعون تمامًا الحرف الجيدة التي تعمل على PCI-E 16x 2.0 بأسلوب الناهضات المرنة Thermaltek، ولكن إذا تسبب لك هذا يومًا ما في حرق دوائر الطاقة على لوحة الخادم، فلن تلوم إلا نفسك. لم أخاطر بمعدات باهظة الثمن واستخدمت الرافعات الأصلية ذات الطاقة الإضافية وواحدة صينية مرنة، معتقدًا أن توصيل بطاقة واحدة "مباشرة" لن يحرق اللوحة.
ثم وصلت الموصلات التي طال انتظارها لتوصيل الطاقة الإضافية وقمت بعمل ذيل للناهض في EdgeSlot. ويتم استخدام نفس الموصل، ولكن مع دبوس مختلف، لتوفير طاقة إضافية للوحة الأم. يقع هذا الموصل بجوار نفس موصل EdgeSlot مباشرةً، ويوجد دبوس مثير للاهتمام هناك. إذا كان الناهض يحتوي على سلكين +2 و12 مشتركين، فإن اللوحة بها 2 أسلاك +3 و12 مشترك.
هذا هو في الواقع نفس GTS 250 المضمن في رافع GPGPU. بالمناسبة، يتم توفير طاقة إضافية للناهضين واللوحة الأم - من موصل الطاقة الثاني +12 فولت لوحدة المعالجة المركزية الخاصة بمصدر الطاقة الخاص بي. قررت أنه سيكون من الأصح القيام بذلك.
تروي الحكاية نفسها بسرعة، ولكن ببطء تصل الطرود إلى روسيا من الصين وأماكن أخرى حول العالم. ولذلك، كانت هناك فجوات كبيرة في تجميع "الكمبيوتر العملاق". ولكن أخيرًا وصل إلي خادم Nvidia Tesla K20M المزود بمبرد سلبي. علاوة على ذلك، فهي صفر تمامًا، من التخزين، ومختومة في صندوقها الأصلي، في عبوتها الأصلية، مع أوراق الضمان. وبدأت المعاناة: كيف نبردها؟
أولاً، تم شراء مبرد مخصص به "توربينات" صغيرة من إنجلترا، وهنا في الصورة، مع ناشر من الورق المقوى محلي الصنع.
واتضح أنهم حماقة كاملة. لقد أحدثوا الكثير من الضوضاء، ولم يكن الحامل مناسبًا على الإطلاق، وانفجروا بشكل ضعيف وأحدثوا اهتزازًا لدرجة أنني كنت أخشى أن تسقط المكونات من لوحة Tesla! لماذا تم إلقاؤهم في سلة المهملات على الفور تقريبًا؟
بالمناسبة، في الصورة تحت Tesla، يمكنك رؤية مشعات النحاس لخادم LGA 2011 1U المثبتة على المعالجات مع الحلزون من Coolerserver الذي تم شراؤه من Aliexpress. مبردات لائقة جدًا، على الرغم من أنها صاخبة قليلاً. أنها تناسب تماما.
لكن في الواقع، بينما كنت أنتظر مبردًا جديدًا لشركة Tesla، بعد أن طلبت هذه المرة حلزونًا كبيرًا BFB1012EN من أستراليا مزودًا بحامل مطبوع ثلاثي الأبعاد، وصل الأمر إلى نظام تخزين الخادم. تحتوي لوحة الخادم على موصل mini-SAS يتم من خلاله إخراج 3 موصلات SATA وموصلين آخرين من نوع SATA. جميع معايير SATA 4 ولكن هذا يناسبني.
إن Intel C602 RAID المدمج في مجموعة الشرائح ليس سيئًا والشيء الرئيسي هو أنه يتخطى أمر TRIM لمحركات أقراص الحالة الصلبة، وهو ما لا تفعله العديد من وحدات تحكم RAID الخارجية الرخيصة.
على موقع eBay، اشتريت كابل mini-SAS إلى 4 SATA بطول متر، وعلى Avito اشتريت عربة قابلة للتبديل السريع مع فتحة مقاس 5,25 بوصة لـ 4 × 2,5 بوصة SAS-SATA. لذلك عندما وصل الكابل والسلة، تم تثبيت Seagates بسعة 4 تيرابايت، وتم بناء RAID5 لأربعة أجهزة في BIOS، وبدأت في تثبيت خادم Ubuntu... وواجهت حقيقة أن برنامج تقسيم القرص لم يسمح لي لإنشاء قسم مبادلة على الغارة.
لقد قمت بحل المشكلة وجهاً لوجه - اشتريت محول ASUS HYPER M.2 x 2 MINI وM.4 SSD Samsung 2 EVO 960 Gb من DNS وقررت تخصيص الجهاز ذو السرعة القصوى للتبديل، حيث سيعمل النظام مع تحميل حسابي مرتفع، ومن الواضح أن الذاكرة لا تزال أقل من حجم البيانات. وكانت الذاكرة بسعة 250 جيجابايت أغلى من SSD.
نفس المحول مع SSD مثبت في زاوية منخفضة.
توقع الأسئلة - "لماذا لا تجعل النظام بأكمله على M.2 ويكون لديك سرعة وصول قصوى أعلى من سرعة الغارة على SATA؟" - أنا سأجيب. أولاً، إن سعة 1 تيرابايت أو أكثر من محركات أقراص M2 SSD باهظة الثمن بالنسبة لي. ثانيًا، حتى بعد تحديث BIOS إلى الإصدار الأحدث 2.8.1، لا يزال الخادم لا يدعم تحميل أجهزة M.2 NVE. لقد قمت بتجربة حيث قام النظام بضبط /التمهيد على USB FLASH 64 Gb وكل شيء آخر على M.2 SSD، لكن لم يعجبني ذلك. على الرغم من أن هذا المزيج عملي تمامًا من حيث المبدأ. إذا أصبحت وحدات M.2 NVE ذات السعة العالية أرخص، فقد أعود إلى هذا الخيار، ولكن في الوقت الحالي يناسبني نظام SATA RAID كنظام تخزين جيدًا.
عندما قررت استخدام النظام الفرعي للقرص وتوصلت إلى مزيج من 2 x SSD Kingston 240 Gb RAID1 "/" + 4 x HDD Seagate 1 Tb RAID5 "/home" + M.2 SSD Samsung 960 EVO 250 Gb "مبادلة" فهو كذلك حان الوقت لمواصلة تجاربي مع GPU كان لدي بالفعل سيارة Tesla ومبرد أسترالي وصل للتو مع حلزون "شرير" يأكل ما يصل إلى 2.94 أمبير عند 12 فولت، واحتلت الفتحة الثانية M.2، وبالنسبة للثالثة استعرت GT 610 "للتجارب".
هنا في الصورة جميع الأجهزة الثلاثة متصلة، ومحرك الأقراص M.3 SSD عبر رافع Thermaltech المرن لبطاقات الفيديو الذي يعمل على الناقل 2 دون أخطاء. إنها على هذا النحو، مصنوعة من العديد من "الأشرطة" الفردية المشابهة لتلك التي تُصنع منها كابلات SATA. تعتبر رافعات PCI-E 3.0x المصنوعة من كبل مسطح متجانس، مثل IDE-SCSI القديم، كارثة، وسوف تعاني من الأخطاء بسبب التداخل المتبادل. وكما قلت من قبل، فإن الصينيين الآن يصنعون أيضًا رافعات مشابهة لتلك الموجودة في Thermaltek، ولكنها أقصر.
بالاشتراك مع Tesla K20 + GT 610، جربت الكثير من الأشياء، وفي نفس الوقت اكتشفت أنه عند توصيل بطاقة فيديو خارجية وتحويل الإخراج إليها في BIOS، لا يعمل vKVM، وهو ما لم يحدث حقًا يغضبني. على أي حال، لم أخطط لاستخدام فيديو خارجي على هذا النظام، ولا توجد مخرجات فيديو على Teslas، ولوحة الإدارة عن بعد عبر SSH وبدون X-owls تعمل بشكل رائع بمجرد أن تتذكر قليلاً ما هو سطر الأوامر بدون واجهة المستخدم الرسومية . لكن IPMI + vKVM يعمل على تبسيط الإدارة وإعادة التثبيت والمشكلات الأخرى المتعلقة بالخادم البعيد إلى حد كبير.
بشكل عام، IPMI لهذا المجلس هو عظيم. منفذ منفصل 100 ميجابت، القدرة على إعادة تكوين حقن الحزم في أحد منافذ 10 جيجابت، خادم ويب مدمج لإدارة الطاقة والتحكم في الخوادم، تنزيل عميل vKVM Java منه مباشرة وعميل لتركيب الأقراص عن بعد أو صور لإعادة التثبيت... الشيء الوحيد هو أن العملاء هم نفس العميل القديم Java Oracle، والذي لم يعد مدعومًا في Linux وبالنسبة للوحة الإدارة عن بعد، كان علي الحصول على جهاز كمبيوتر محمول مزود بنظام Win XP SP3 مع هذا الضفدع القديم. حسنًا، العميل بطيء، هناك ما يكفي للوحة الإدارة وكل ذلك، لكن لا يمكنك ممارسة الألعاب عن بُعد، فإطار FPS صغير. والفيديو ASPEED المدمج مع IPMI ضعيف، فقط VGA.
في عملية التعامل مع الخادم تعلمت الكثير وتعلمت الكثير في مجال أجهزة الخادم الاحترافية من شركة Dell. وهو ما لا أندم عليه على الإطلاق، فضلاً عن الوقت والمال الذي أنفقه جيدًا. سيتم متابعة القصة التعليمية حول التجميع الفعلي للإطار بكل مكونات الخادم لاحقًا.
رابط الجزء 3:
المصدر: www.habr.com