eBay, Aliexpress र कम्प्युटर स्टोरबाट स्पेयर पार्ट्सबाट "गाउँको सुपर कम्प्युटर" भेला गर्ने कथा। भाग 2

शुभ दिन, प्रिय Khabrovsk निवासीहरू!

यो छुटेको लागि कथाको पहिलो भागको लिङ्क

म "गाउँको सुपर कम्प्युटर" एसेम्बल गर्ने बारे मेरो कथा जारी राख्न चाहन्छु। र म व्याख्या गर्नेछु किन यसलाई यसरी भनिन्छ - कारण सरल छ। म आफै गाउँमा बस्छु । र नाम इन्टरनेटमा "मस्को रिंग रोड भन्दा बाहिर कुनै जीवन छैन!", "रूसी गाउँ मदिरा भएको छ र मर्दैछ!" त्यसोभए, कतै यो सत्य हुन सक्छ, तर म नियमको अपवाद हुनेछु। म पिउँदिन, म धुम्रपान गर्दिन, म चीजहरू गर्छु जुन हरेक "शहरी क्र्याकर(हरू)" ले खर्च गर्न सक्दैन। तर हामी हाम्रा भेडाहरूमा फर्कौं, वा अझ सटीक रूपमा, सर्भरमा, जुन लेखको पहिलो भागको अन्त्यमा पहिले नै "जीवनका संकेतहरू देखाउँदै" थियो।

बोर्ड टेबलमा पल्टिएको थियो, मैले BIOS मार्फत चढें, यसलाई मेरो मनपर्ने सेटअप गरें, सरलताको लागि Ubuntu 16.04 डेस्कटपलाई ड्यास गरें र भिडियो कार्डलाई "सुपर मेसिन" मा जडान गर्ने निर्णय गरें। तर हातमा एक मात्र चीज GTS 250 थियो जुन ठूलो गैर-मूल फ्यान संलग्न थियो। जुन मैले पावर बटनको नजिक PCI-E 16x स्लटमा स्थापना गरें।





"मैले यसलाई बेलोमोर (c) को प्याकसँग लिएको छु" त्यसैले कृपया फोटोको गुणस्तरको लागि मलाई दोष नदिनुहोस्। म बरु तिनीहरूमा के कब्जा गरिएको छ टिप्पणी गर्न चाहन्छु।

सबैभन्दा पहिले, यो पत्ता लाग्यो कि जब स्लटमा स्थापना हुन्छ, एक छोटो भिडियो कार्डले पनि मेमोरी स्लटहरू विरुद्ध बोर्डलाई आराम गर्दछ, जसमा यस अवस्थामा यो स्थापना गर्न सकिँदैन र ल्याचहरू पनि कम गर्नुपर्दछ। दोस्रो, भिडियो कार्डको फलामको माउन्टिङ स्ट्रिपले पावर बटनलाई ढाक्छ, त्यसैले यसलाई हटाउनुपर्‍यो। जे होस्, पावर बटन आफैंमा दुई रङ LED द्वारा उज्यालो हुन्छ, जुन सबै कुरा मिल्दा हरियो उज्यालो हुन्छ र कुनै समस्या भएमा, सर्ट सर्किट र बिजुली आपूर्ति सुरक्षा ट्रिप भएको वा +12VSB पावर भएमा सुन्तला रङ झिम्काउँछ। आपूर्ति धेरै उच्च वा धेरै कम छ।

वास्तवमा, यो मदरबोर्ड यसको PCI-E 16x स्लटहरूमा भिडियो कार्डहरू "सीधा" समावेश गर्न डिजाइन गरिएको छैन; तिनीहरू सबै राइजरहरूसँग जोडिएका छन्। पावर बटन नजिकको स्लटहरूमा विस्तार कार्ड स्थापना गर्न, त्यहाँ कुना राइजरहरू छन्, पहिलो प्रोसेसर रेडिएटरको लम्बाइसम्म छोटो कार्डहरू स्थापना गर्नको लागि तल्लो, र स्थापना गर्नको लागि थप +12V पावर कनेक्टरको साथ उच्च कुना। भिडियो कार्ड "माथि" एक मानक कम 1U कूलर। यसमा GTX 780, GTX 980, GTX 1080 वा विशेष GPGPU कार्डहरू Nvidia Tesla K10-K20-K40 वा "कम्प्युटिंग कार्डहरू" Intel Xeon Phi 5110p र यस्तै जस्ता ठूला भिडियो कार्डहरू समावेश गर्न सकिन्छ।

तर GPGPU राइजरमा, EdgeSlot मा समावेश गरिएको कार्ड सिधै जडान गर्न सकिन्छ, केवल उच्च कुनामा राइजरमा जस्तै समान कनेक्टरसँग थप पावर जडान गरेर। इच्छुकहरूका लागि, eBay मा यो लचिलो राइजरलाई "Dell PowerEdge C8220X PCI-E GPGPU DJC89" भनिन्छ र यसको लागत लगभग 2.5-3 हजार रूबल छ। अतिरिक्त बिजुली आपूर्तिको साथ कुना राइजरहरू धेरै दुर्लभ छन् र मैले तिनीहरूलाई व्हिस्पर मार्फत विशेष सर्भर पार्ट्स स्टोरबाट प्राप्त गर्न वार्ता गर्नुपर्‍यो। तिनीहरूको लागत प्रति 7 हजार।

म तुरुन्तै भन्छु, "जोखिमका साथीहरू (tm)" ले GTX 980 को एक जोडी चिनियाँ लचिलो राइजर 16x को साथ बोर्डमा जडान गर्न सक्छ, जसरी एक व्यक्तिले "द्याट सेम फोरम" मा गरेको थियो; वैसे, चिनियाँहरूले धेरै कमाउँछन्। PCI-E 16x 2.0 मा थर्मलटेक लचिलो राइजरको शैलीमा काम गर्ने राम्रो शिल्पहरू, तर यदि यो एक दिनले तपाइँलाई सर्भर बोर्डमा पावर सर्किटहरू जलाउनको कारण बनाउँछ भने, तपाइँ आफैंलाई दोष दिनुहुनेछ। मैले महँगो उपकरणहरू जोखिममा ल्याइनँ र अतिरिक्त पावर र एउटा चिनियाँ लचिलो र एउटा कार्ड "सीधै" जडान गर्दा बोर्ड जल्दैन भन्ने अनुमान गर्दै मूल राइजरहरू प्रयोग गरें।

त्यसपछि अतिरिक्त पावर जडानको लागि लामो-प्रतीक्षित कनेक्टरहरू आइपुगे र मैले EdgeSlot मा मेरो राइजरको लागि पुच्छर बनाए। र एउटै कनेक्टर, तर फरक पिनआउटको साथ, मदरबोर्डमा थप पावर आपूर्ति गर्न प्रयोग गरिन्छ। यो कनेक्टर उही एजस्लट कनेक्टरको छेउमा छ, त्यहाँ एक रोचक पिनआउट छ। यदि राइजरमा २ तारहरू +१२ र २ साझा छन् भने, बोर्डमा ३ तारहरू +१२ र १ साझा छन्।

यो वास्तवमा उही GTS 250 हो जुन GPGPU राइजरमा समावेश छ। वैसे, मेरो पावर सप्लाईको CPU को दोस्रो +12V पावर कनेक्टरबाट - राइजर र मदरबोर्डमा थप पावर आपूर्ति गरिन्छ। मैले निर्णय गरे कि यो गर्न अझ सही हुनेछ।

परी कथा चाँडै बताउँछ, तर बिस्तारै पार्सलहरू चीन र विश्वभरका अन्य ठाउँहरूबाट रूसमा आइपुग्छन्। तसर्थ, "सुपर कम्प्युटर" को सभा मा ठूलो अंतर थियो। तर अन्ततः निष्क्रिय रेडिएटरको साथ Nvidia Tesla K20M सर्भर मलाई आइपुग्यो। यसबाहेक, यो बिल्कुल शून्य छ, भण्डारणबाट, यसको मूल बक्समा छापिएको छ, यसको मूल प्याकेजमा, वारेन्टी कागजातहरू सहित। र पीडा सुरु भयो: यसलाई कसरी चिसो गर्ने?

पहिले, इङ्गल्याण्डबाट दुई साना "टर्बाइनहरू" भएको कस्टम कूलर खरिद गरिएको थियो, यहाँ यो तस्विरमा छ, घरको बनाएको कार्डबोर्ड डिफ्यूजरको साथ।

र तिनीहरू पूर्ण बकवास साबित भए। तिनीहरूले धेरै शोर गरे, माउन्ट बिल्कुल फिट भएन, तिनीहरू कमजोर रूपमा उडाए र यस्तो कम्पन दिए कि मलाई डर थियो कि कम्पोनेन्टहरू टेस्ला बोर्डबाट खस्नेछन्! किन तिनीहरूलाई लगभग तुरुन्तै रद्दीटोकरीमा फालियो?

वैसे, टेस्ला अन्तर्गत फोटोमा तपाईले एलजीए 2011 1U सर्भर तांबे रेडिएटरहरू प्रोसेसरहरूमा स्थापित देख्न सक्नुहुन्छ Aliexpress बाट खरिद गरिएको कूलरसर्भरबाट घोंघाको साथ। धेरै सभ्य कूलरहरू, थोरै आवाज भए पनि। तिनीहरू पूर्ण रूपमा फिट छन्।

तर वास्तवमा, जब म टेस्लाको लागि नयाँ कूलरको लागि पर्खिरहेको थिएँ, यस पटक अष्ट्रेलियाबाट थ्रीडी प्रिन्टेड माउन्टको साथ ठूलो BFB1012EN स्नेल अर्डर गरेपछि, यो सर्भर भण्डारण प्रणालीमा आयो। सर्भर बोर्डमा एक मिनी-एसएएस कनेक्टर छ जसको माध्यमबाट 3 SATA र 4 थप SATA कनेक्टरहरू आउटपुट छन्। सबै SATA मानक 2 तर त्यो मलाई उपयुक्त छ।

चिपसेटमा एकीकृत इंटेल C602 RAID खराब छैन र मुख्य कुरा यो हो कि यसले SSDs को लागि TRIM आदेश छोड्छ, जुन धेरै सस्तो बाह्य RAID नियन्त्रकहरूले गर्दैनन्।

eBay मा मैले मिटर-लामो मिनी SAS देखि 4 SATA केबल किनें, र Avito मा मैले 5,25 x 4″ SAS-SATA को लागि 2,5″ बे भएको हट-स्वैप कार्ट किनें। त्यसोभए जब केबल र टोकरी आइपुग्यो, त्यसमा 4 टेराबाइट Seagates स्थापना गरिएको थियो, BIOS मा 5 यन्त्रहरूको लागि RAID4 बनाइएको थियो, मैले सर्भर Ubuntu स्थापना गर्न थालें ... र डिस्क विभाजन कार्यक्रमले मलाई अनुमति दिएन भन्ने तथ्यमा दौडियो। छापामा स्वैप विभाजन सिर्जना गर्न।

मैले समस्याको हेड-अन समाधान गरें - मैले DNS बाट ASUS HYPER M.2 x 2 MINI र M.4 SSD Samsung 2 EVO 960 Gb एडाप्टर किनें र निर्णय गरे कि अधिकतम गति यन्त्र स्वैपको लागि आवंटित गरिनुपर्छ, किनकि प्रणालीले काम गर्नेछ। उच्च कम्प्युटेशनल लोड संग, र मेमोरी अझै पनि स्पष्ट रूपमा डाटा साइज भन्दा कम छ। र 250 GB मेमोरी यस SSD भन्दा महँगो थियो।

तल्लो कुनाको राइजरमा स्थापना भएको SSD को साथ यो समान एडाप्टर।

प्रश्नहरूको अनुमान गर्दै - "किन सम्पूर्ण प्रणाली M.2 मा बनाउँदैन र SATA मा छापा भन्दा बढी पहुँच गति उच्च छ?" - म जवाफ दिन्छु। पहिलो, 1 TB वा बढी M2 SSDs मेरो लागि धेरै महँगो छ। दोस्रो, नवीनतम संस्करण 2.8.1 मा BIOS अद्यावधिक गरेपछि पनि, सर्भरले अझै पनि M.2 NVE उपकरणहरू लोड गर्न समर्थन गर्दैन। मैले एउटा प्रयोग गरें जहाँ प्रणालीले USB FLASH 64 Gb मा सेट /बुट गर्यो र M.2 SSD मा सबै कुरा, तर मलाई यो मन परेन। यद्यपि, सिद्धान्तमा, यस्तो संयोजन एकदम व्यावहारिक छ। यदि उच्च-क्षमता M.2 NVEs सस्तो भयो भने, म यो विकल्पमा फर्कन सक्छु, तर अहिलेको लागि SATA RAID भण्डारण प्रणालीको रूपमा मलाई राम्रोसँग उपयुक्त छ।
जब मैले डिस्क सबसिस्टमको बारेमा निर्णय गरें र 2 x SSD Kingston 240 Gb RAID1 “/” + 4 x HDD Seagate 1 Tb RAID5 “/home” + M.2 SSD Samsung 960 EVO 250 Gb “swap” को संयोजन लिएर आएँ। GPU को साथ मेरो प्रयोग जारी राख्न समय मसँग पहिले नै एउटा टेस्ला थियो र एउटा अष्ट्रेलियाली कूलर भर्खरै एउटा "दुष्ट" स्नेल लिएर आएको थियो जसले 2.94V मा 12A जति खान्छ, दोस्रो स्लट M.2 ले ओगटेको थियो र तेस्रोको लागि मैले GT 610 "प्रयोगहरूको लागि" उधारो लिएको थिएँ।

यहाँ तस्बिरमा सबै ३ वटा यन्त्रहरू जोडिएका छन्, र M.3 SSD भिडियो कार्डहरूको लागि लचिलो थर्मलटेक राइजर मार्फत छ जसले त्रुटिविना ३.० बसमा काम गर्छ। यो यस्तो छ, धेरै व्यक्तिगत "रिबन" बाट बनेको छ जसबाट SATA केबलहरू बनाइन्छ। एक मोनोलिथिक फ्ल्याट केबलबाट बनेको PCI-E 2x राइजरहरू, पुरानो IDE-SCSI जस्तै, एक विपत्ति हो, तिनीहरू आपसी हस्तक्षेपका कारण त्रुटिहरूबाट ग्रस्त हुनेछन्। र मैले पहिले नै भनेझैं, चिनियाँहरूले अब थर्मलटेकको जस्तै राइजरहरू पनि बनाउँछन्, तर छोटो।

Tesla K20 + GT 610 सँग संयोजनमा, मैले धेरै चीजहरू प्रयास गरें, एकै समयमा मैले पत्ता लगाएँ कि बाह्य भिडियो कार्ड जडान गर्दा र BIOS मा आउटपुट स्विच गर्दा, vKVM ले काम गर्दैन, जुन वास्तवमा थिएन। मलाई विचलित। जे भए पनि, मैले यस प्रणालीमा बाह्य भिडियो प्रयोग गर्ने योजना बनाएको छैन, त्यहाँ Teslas मा कुनै भिडियो आउटपुटहरू छैनन्, र SSH मार्फत रिमोट एडमिन प्यानल र X-owls बिना राम्रो काम गर्दछ एक पटक तपाईले थोरै याद गर्नुभयो भने GUI बिना कमाण्ड लाइन के हो। । तर IPMI + vKVM ले रिमोट सर्भरको साथ व्यवस्थापन, पुन: स्थापना र अन्य समस्याहरूलाई धेरै सरल बनाउँछ।

सामान्यतया, यो बोर्डको IPMI उत्कृष्ट छ। एक अलग 100 Mbit पोर्ट, 10 Gbit पोर्टहरू मध्ये एउटामा प्याकेट इन्जेक्सन पुन: कन्फिगर गर्ने क्षमता, पावर व्यवस्थापन र सर्भरहरूको नियन्त्रणको लागि निर्मित वेब सर्भर, यसबाट सीधा vKVM Java क्लाइन्ट डाउनलोड गर्ने र डिस्कहरूको रिमोट माउन्टिङको लागि क्लाइन्ट। वा पुनर्स्थापनाका लागि छविहरू... मात्र कुरा यो हो कि क्लाइन्टहरू पुरानो जाभा ओरेकल जस्तै हुन्, जुन अब लिनक्समा समर्थित छैन र रिमोट एडमिन प्यानलको लागि मैले Win XP SP3 सँग ल्यापटप प्राप्त गर्नुपर्‍यो। प्राचीन टोड। ठीक छ, ग्राहक ढिलो छ, त्यहाँ प्रशासक प्यानल र ती सबैको लागि पर्याप्त छ, तर तपाईं टाढाबाट खेल खेल्न सक्नुहुन्न, FPS सानो छ। र IPMI सँग एकीकृत ASPEED भिडियो कमजोर छ, केवल VGA।

सर्भरसँग व्यवहार गर्ने प्रक्रियामा, मैले डेलबाट व्यावसायिक सर्भर हार्डवेयरको क्षेत्रमा धेरै कुरा सिकें र धेरै सिकें। जसमा मलाई कुनै पछुतो छैन, साथै समय र पैसा राम्रोसँग खर्च भयो। वास्तवमा सबै सर्भर कम्पोनेन्टहरूसँग फ्रेम जम्मा गर्ने बारे शैक्षिक कथा पछि जारी रहनेछ।

भाग 3 को लिङ्क: habr.com/en/post/454480

स्रोत: www.habr.com