eBay, Aliexpress અને કમ્પ્યુટર સ્ટોરના સ્પેરપાર્ટ્સમાંથી "ગામડાના સુપર કમ્પ્યુટર"ને એસેમ્બલ કરવાની વાર્તા. ભાગ 2

શુભ દિવસ, પ્રિય ખાબ્રોવસ્ક રહેવાસીઓ!

જેઓ તેને ચૂકી ગયા છે તેમના માટે વાર્તાના પહેલા ભાગની લિંક

હું “ગામડાના સુપર કોમ્પ્યુટર”ને એસેમ્બલ કરવા વિશેની મારી વાર્તા ચાલુ રાખવા માંગુ છું. અને હું સમજાવીશ કે શા માટે તેને આ રીતે કહેવામાં આવે છે - કારણ સરળ છે. હું પોતે એક ગામમાં રહું છું. અને નામ એ લોકોનું થોડું ટ્રોલિંગ છે જેઓ ઇન્ટરનેટ પર બૂમો પાડે છે "મોસ્કો રીંગ રોડથી આગળ કોઈ જીવન નથી!", "રશિયન ગામ એક શરાબી બની ગયું છે અને મરી રહ્યું છે!" તેથી, ક્યાંક આ સાચું હોઈ શકે છે, પરંતુ હું નિયમનો અપવાદ હોઈશ. હું પીતો નથી, હું ધૂમ્રપાન કરતો નથી, હું એવી વસ્તુઓ કરું છું જે દરેક "શહેરી ક્રેકર(ઓ)"ને પોષાય તેમ નથી. પરંતુ ચાલો આપણા ઘેટાં પર અથવા વધુ સ્પષ્ટ રીતે, સર્વર પર પાછા ફરીએ, જે લેખના પ્રથમ ભાગના અંતે પહેલેથી જ "જીવનના ચિહ્નો દર્શાવે છે."

બોર્ડ ટેબલ પર પડેલું હતું, હું BIOS દ્વારા ચઢી ગયો, તેને મારી રુચિ પ્રમાણે સેટ કર્યો, સરળતા માટે ઉબુન્ટુ 16.04 ડેસ્કટૉપને દૂર કર્યું અને "સુપર મશીન" સાથે વિડિયો કાર્ડને કનેક્ટ કરવાનું નક્કી કર્યું. પરંતુ હાથમાં માત્ર એક જ વસ્તુ હતી GTS 250 જેમાં ભારે બિન-ઓરિજિનલ પંખો જોડાયેલ હતો. જે મેં પાવર બટન પાસે PCI-E 16x સ્લોટમાં ઇન્સ્ટોલ કર્યું છે.





"મેં તે બેલોમોર (c) ના પેક સાથે લીધું છે" તેથી કૃપા કરીને ફોટાની ગુણવત્તા માટે મને દોષ ન આપો. તેમના પર શું કેપ્ચર થયું છે તેના પર હું ટિપ્પણી કરવાને બદલે.

સૌપ્રથમ, તે બહાર આવ્યું છે કે જ્યારે સ્લોટમાં ઇન્સ્ટોલ કરવામાં આવે છે, ત્યારે એક નાનું વિડિયો કાર્ડ પણ મેમરી સ્લોટ્સ સામે બોર્ડને આરામ આપે છે, જેમાં આ કિસ્સામાં તે ઇન્સ્ટોલ કરી શકાતું નથી અને લૅચ પણ નીચે કરવા પડે છે. બીજું, વિડિયો કાર્ડની આયર્ન માઉન્ટિંગ સ્ટ્રીપ પાવર બટનને આવરી લે છે, તેથી તેને દૂર કરવી પડી. બાય ધ વે, પાવર બટન પોતે જ બે રંગના એલઇડી દ્વારા પ્રકાશિત થાય છે, જે જ્યારે બધું વ્યવસ્થિત હોય ત્યારે લીલો રંગ આપે છે અને જો કોઈ સમસ્યા હોય, શોર્ટ સર્કિટ હોય અને પાવર સપ્લાય પ્રોટેક્શન ટ્રીપ થઈ ગયું હોય અથવા +12VSB પાવર હોય તો નારંગી ઝબકે છે. પુરવઠો ખૂબ વધારે અથવા ખૂબ ઓછો છે.

વાસ્તવમાં, આ મધરબોર્ડ તેના PCI-E 16x સ્લોટ્સમાં વિડિયો કાર્ડ્સને "સીધા" શામેલ કરવા માટે ડિઝાઇન કરવામાં આવ્યું નથી; તે બધા રાઇઝર્સ સાથે જોડાયેલા છે. પાવર બટનની નજીકના સ્લોટમાં વિસ્તરણ કાર્ડ ઇન્સ્ટોલ કરવા માટે, કોર્નર રાઇઝર છે, પ્રથમ પ્રોસેસર રેડિએટરની લંબાઈ સુધી ટૂંકા કાર્ડ્સ ઇન્સ્ટોલ કરવા માટે નીચું, અને ઇન્સ્ટોલ કરવા માટે વધારાના +12V પાવર કનેક્ટર સાથેનો ઊંચો ખૂણો છે. વિડિયો કાર્ડ "ઉપર" પ્રમાણભૂત લો 1U કૂલર. તેમાં GTX 780, GTX 980, GTX 1080 અથવા વિશિષ્ટ GPGPU કાર્ડ્સ Nvidia Tesla K10-K20-K40 અથવા "કમ્પ્યુટિંગ કાર્ડ્સ" Intel Xeon Phi 5110p અને તેના જેવા મોટા વિડિયો કાર્ડ્સનો સમાવેશ થઈ શકે છે.

પરંતુ GPGPU રાઈઝરમાં, એજસ્લોટમાં સમાવેલ કાર્ડ સીધું જ કનેક્ટ થઈ શકે છે, માત્ર હાઈ કોર્નર રાઈઝર પરના સમાન કનેક્ટર સાથે વધારાના પાવરને ફરીથી કનેક્ટ કરીને. રસ ધરાવતા લોકો માટે, eBay પર આ લવચીક રાઇઝરને "Dell PowerEdge C8220X PCI-E GPGPU DJC89" કહેવામાં આવે છે અને તેની કિંમત લગભગ 2.5-3 હજાર રુબેલ્સ છે. વધારાના પાવર સપ્લાય સાથે કોર્નર રાઇઝર્સ ખૂબ જ દુર્લભ છે અને મારે તેને વ્હિસ્પર દ્વારા વિશિષ્ટ સર્વર પાર્ટ્સ સ્ટોરમાંથી મેળવવા માટે વાટાઘાટો કરવી પડી હતી. તેમની કિંમત દરેક 7 હજાર છે.

હું તરત જ કહીશ, "જોખમી લોકો (tm)" પણ GTX 980 ની જોડીને ચાઈનીઝ ફ્લેક્સિબલ રાઈઝર 16x સાથે બોર્ડ સાથે જોડી શકે છે, જેમ કે એક વ્યક્તિએ "ધેટ સેમ ફોરમ" પર કર્યું હતું; જો કે, ચાઈનીઝ ખૂબ સારી હસ્તકલા જે PCI-E 16x 2.0 પર થર્મલટેક ફ્લેક્સિબલ રાઇઝર્સની શૈલીમાં કામ કરે છે, પરંતુ જો આ એક દિવસ તમને સર્વર બોર્ડ પરના પાવર સર્કિટને બાળી નાખવાનું કારણ બને છે, તો તમે ફક્ત તમારી જાતને દોષિત કરશો. મેં મોંઘા સાધનોનું જોખમ લીધું ન હતું અને વધારાના પાવર અને એક ચાઈનીઝ ફ્લેક્સિબલ સાથે અસલ રાઈઝરનો ઉપયોગ કર્યો હતો, એવું માની લીધું હતું કે એક કાર્ડને “સીધું” કનેક્ટ કરવાથી બોર્ડ બળી જશે નહીં.

પછી વધારાના પાવરને કનેક્ટ કરવા માટે લાંબા સમયથી રાહ જોવાતા કનેક્ટર્સ આવ્યા અને મેં એજસ્લોટમાં મારા રાઇઝર માટે પૂંછડી બનાવી. અને તે જ કનેક્ટર, પરંતુ એક અલગ પિનઆઉટ સાથે, મધરબોર્ડને વધારાની પાવર સપ્લાય કરવા માટે વપરાય છે. આ કનેક્ટર આ જ EdgeSlot કનેક્ટરની બાજુમાં છે, ત્યાં એક રસપ્રદ પિનઆઉટ છે. જો રાઈઝરમાં 2 વાયર +12 અને 2 કોમન હોય, તો બોર્ડમાં 3 વાયર +12 અને 1 કોમન હોય.

આ વાસ્તવમાં તે જ GTS 250 છે જે GPGPU રાઇઝરમાં શામેલ છે. માર્ગ દ્વારા, રાઇઝર્સ અને મધરબોર્ડને વધારાની પાવર સપ્લાય કરવામાં આવે છે - મારા પાવર સપ્લાયના CPU ના બીજા +12V પાવર કનેક્ટરમાંથી. મેં નક્કી કર્યું કે આ કરવું વધુ યોગ્ય રહેશે.

પરીકથા ઝડપથી પોતાને કહે છે, પરંતુ ધીમે ધીમે પાર્સલ ચીન અને વિશ્વભરના અન્ય સ્થળોએથી રશિયા પહોંચે છે. તેથી, "સુપર કોમ્પ્યુટર" ની એસેમ્બલીમાં મોટા ગાબડા હતા. પરંતુ અંતે નિષ્ક્રિય રેડિએટર સાથે Nvidia Tesla K20M સર્વર મારી પાસે આવ્યું. તદુપરાંત, તે સ્ટોરેજમાંથી એકદમ શૂન્ય છે, તેના મૂળ બોક્સમાં, તેના મૂળ પેકેજમાં, વોરંટી કાગળો સાથે સીલ કરેલું છે. અને વેદના શરૂ થઈ: તેને કેવી રીતે ઠંડુ કરવું?

પ્રથમ, બે નાના "ટર્બાઇન" સાથેનો કસ્ટમ કૂલર ઇંગ્લેન્ડથી ખરીદવામાં આવ્યો હતો, તે અહીં ફોટામાં છે, હોમમેઇડ કાર્ડબોર્ડ ડિફ્યુઝર સાથે.

અને તેઓ સંપૂર્ણ વાહિયાત હોવાનું બહાર આવ્યું. તેઓએ ઘણો અવાજ કર્યો, માઉન્ટ બિલકુલ ફિટ ન હતો, તેઓ નબળા રીતે ફૂંકાયા અને એવા કંપન આપ્યા કે મને ડર હતો કે ઘટકો ટેસ્લા બોર્ડમાંથી પડી જશે! શા માટે તેઓ લગભગ તરત જ કચરાપેટીમાં ફેંકી દેવામાં આવ્યા હતા?

માર્ગ દ્વારા, ટેસ્લા હેઠળના ફોટામાં તમે એલજીએ 2011 1U સર્વર કોપર રેડિએટર્સ જોઈ શકો છો જે એલીએક્સપ્રેસમાંથી ખરીદેલ કૂલસર્વરમાંથી ગોકળગાય સાથે પ્રોસેસર્સ પર ઇન્સ્ટોલ કરેલું છે. ખૂબ જ યોગ્ય કૂલર્સ, જોકે થોડો ઘોંઘાટીયા. તેઓ સંપૂર્ણપણે ફિટ.

પરંતુ વાસ્તવમાં, જ્યારે હું ટેસ્લા માટે નવા કૂલરની રાહ જોઈ રહ્યો હતો, ત્યારે આ વખતે ઑસ્ટ્રેલિયામાંથી 1012D પ્રિન્ટેડ માઉન્ટ સાથે મોટી BFB3EN ગોકળગાય મંગાવીને, તે સર્વર સ્ટોરેજ સિસ્ટમ પર આવી. સર્વર બોર્ડ પાસે મિની-એસએએસ કનેક્ટર છે જેના દ્વારા 4 SATA અને 2 વધુ SATA કનેક્ટર્સ આઉટપુટ છે. બધા SATA ધોરણ 2.0 પરંતુ તે મને અનુકૂળ છે.

ચિપસેટમાં સંકલિત ઇન્ટેલ C602 RAID ખરાબ નથી અને મુખ્ય બાબત એ છે કે તે SSDs માટે TRIM આદેશને છોડી દે છે, જે ઘણા સસ્તા બાહ્ય RAID નિયંત્રકો કરતા નથી.

eBay પર મેં મીટર-લાંબા મિની-SAS થી 4 SATA કેબલ ખરીદી, અને Avito પર મેં 5,25 x 4″ SAS-SATA માટે 2,5″ ખાડી સાથેનું હોટ-સ્વેપ કાર્ટ ખરીદ્યું. તેથી જ્યારે કેબલ અને બાસ્કેટ આવ્યા, ત્યારે તેમાં 4 ટેરાબાઈટ સીગેટ્સ ઇન્સ્ટોલ કરવામાં આવ્યા હતા, BIOS માં 5 ઉપકરણો માટે RAID4 બનાવવામાં આવ્યું હતું, મેં સર્વર ઉબુન્ટુ ઇન્સ્ટોલ કરવાનું શરૂ કર્યું... અને એ હકીકતમાં દોડી ગયો કે ડિસ્ક પાર્ટીશન પ્રોગ્રામ મને મંજૂરી આપતો નથી. રેઇડ પર સ્વેપ પાર્ટીશન બનાવવા માટે.

મેં સમસ્યાનું નિરાકરણ કર્યું - મેં DNS માંથી ASUS HYPER M.2 x 2 MINI અને M.4 SSD Samsung 2 EVO 960 Gb એડેપ્ટર ખરીદ્યું અને નક્કી કર્યું કે સ્વેપ માટે મહત્તમ ઝડપનું ઉપકરણ ફાળવવું જોઈએ, કારણ કે સિસ્ટમ કાર્ય કરશે ઉચ્ચ કોમ્પ્યુટેશનલ લોડ સાથે, અને મેમરી હજુ પણ દેખીતી રીતે ડેટાના કદ કરતા ઓછી છે. અને 250 GB મેમરી આ SSD કરતાં વધુ મોંઘી હતી.

નીચા ખૂણાના રાઇઝરમાં ઇન્સ્ટોલ કરેલ SSD સાથેનું આ જ એડેપ્ટર.

પ્રશ્નોની અપેક્ષા - "શા માટે સમગ્ર સિસ્ટમ M.2 પર ન બનાવવી અને SATA પરના દરોડા કરતા મહત્તમ એક્સેસ સ્પીડ વધારે છે?" - હું જવાબ આપીશ. પ્રથમ, 1 TB અથવા વધુ M2 SSD મારા માટે ખૂબ ખર્ચાળ છે. બીજું, BIOS ને નવીનતમ સંસ્કરણ 2.8.1 પર અપડેટ કર્યા પછી પણ, સર્વર હજી પણ M.2 NVE ઉપકરણોને લોડ કરવાનું સમર્થન કરતું નથી. મેં એક પ્રયોગ કર્યો જ્યાં સિસ્ટમ /boot USB FLASH 64 Gb અને બાકીનું બધું M.2 SSD પર સેટ કરેલું છે, પણ મને તે ગમ્યું નહીં. તેમ છતાં, સૈદ્ધાંતિક રીતે, આવા સંયોજન તદ્દન કાર્યક્ષમ છે. જો ઉચ્ચ-ક્ષમતા ધરાવતા M.2 NVE સસ્તા થઈ જાય, તો હું આ વિકલ્પ પર પાછા આવી શકું છું, પરંતુ હાલ માટે SATA RAID સ્ટોરેજ સિસ્ટમ તરીકે મને ખૂબ અનુકૂળ છે.
જ્યારે મેં ડિસ્ક સબસિસ્ટમ પર નિર્ણય કર્યો અને 2 x SSD કિંગ્સ્ટન 240 Gb RAID1 “/” + 4 x HDD Seagate 1 Tb RAID5 “/home” + M.2 SSD Samsung 960 EVO 250 Gb “સ્વેપ” નું સંયોજન લઈને આવ્યું ત્યારે તે GPU સાથે મારા પ્રયોગો ચાલુ રાખવાનો સમય મારી પાસે પહેલેથી જ ટેસ્લા હતું અને એક ઓસ્ટ્રેલિયન કૂલર હમણાં જ એક “દુષ્ટ” ગોકળગાય સાથે આવ્યું છે જે 2.94V પર 12A જેટલું ખાય છે, બીજો સ્લોટ M.2 દ્વારા કબજો કરવામાં આવ્યો હતો અને ત્રીજા માટે મેં “પ્રયોગો માટે” GT 610 ઉધાર લીધું હતું.

અહીં ફોટામાં તમામ 3 ઉપકરણો જોડાયેલા છે, અને M.2 SSD એ વિડિયો કાર્ડ્સ માટે લવચીક થર્મલટેક રાઇઝર દ્વારા છે જે 3.0 બસ પર ભૂલો વિના કામ કરે છે. તે આના જેવું છે, જેમાંથી SATA કેબલ બનાવવામાં આવે છે તેના જેવા ઘણા વ્યક્તિગત "રિબન" માંથી બનાવેલ છે. મોનોલિથિક ફ્લેટ કેબલમાંથી બનેલા PCI-E 16x રાઇઝર્સ, જૂના IDE-SCSI જેવા, એક આપત્તિ છે, તેઓ પરસ્પર હસ્તક્ષેપને કારણે ભૂલોથી પીડાશે. અને મેં પહેલેથી જ કહ્યું તેમ, ચાઇનીઝ હવે થર્મલટેકની જેમ રાઇઝર પણ બનાવે છે, પરંતુ ટૂંકા.

ટેસ્લા કે 20 + જીટી 610 સાથે સંયોજનમાં, મેં ઘણી બધી વસ્તુઓ અજમાવી, તે જ સમયે મને જાણવા મળ્યું કે જ્યારે બાહ્ય વિડિઓ કાર્ડને કનેક્ટ કરતી વખતે અને BIOS માં આઉટપુટને સ્વિચ કરતી વખતે, vKVM કામ કરતું નથી, જે ખરેખર ન હતું. મને અસ્વસ્થ. કોઈપણ રીતે, મેં આ સિસ્ટમ પર બાહ્ય વિડિયોનો ઉપયોગ કરવાની યોજના નહોતી કરી, ટેસ્લાસ પર કોઈ વિડિયો આઉટપુટ નથી, અને SSH મારફતે અને X-ઘુવડ વગર રિમોટ એડમિન પેનલ સરસ કામ કરે છે એકવાર તમને થોડું યાદ આવે કે GUI વિના કમાન્ડ લાઇન શું છે. . પરંતુ IPMI + vKVM રિમોટ સર્વર સાથે મેનેજમેન્ટ, પુનઃસ્થાપન અને અન્ય સમસ્યાઓને મોટા પ્રમાણમાં સરળ બનાવે છે.

સામાન્ય રીતે, આ બોર્ડનું IPMI મહાન છે. એક અલગ 100 Mbit પોર્ટ, 10 Gbit પોર્ટમાંથી એકમાં પેકેટ ઈન્જેક્શનને પુનઃરૂપરેખાંકિત કરવાની ક્ષમતા, પાવર મેનેજમેન્ટ અને સર્વર્સના નિયંત્રણ માટે બિલ્ટ-ઇન વેબ સર્વર, તેમાંથી સીધું જ vKVM Java ક્લાયંટ ડાઉનલોડ કરવું અને ડિસ્કના રિમોટ માઉન્ટિંગ માટે ક્લાયંટ. અથવા પુનઃસ્થાપન માટે ઈમેજીસ... માત્ર એટલું જ છે કે ક્લાઈન્ટો જૂના જાવા ઓરેકલ જેવા જ છે, જે હવે લિનક્સમાં સપોર્ટેડ નથી અને રિમોટ એડમિન પેનલ માટે મારે વિન એક્સપી એસપી3 સાથે લેપટોપ મેળવવું હતું. પ્રાચીન દેડકો. સારું, ક્લાયંટ ધીમું છે, એડમિન પેનલ અને તે બધા માટે પૂરતું છે, પરંતુ તમે દૂરથી રમતો રમી શકતા નથી, FPS નાનું છે. અને ASPEED વિડિયો જે IPMI સાથે સંકલિત છે તે નબળો છે, માત્ર VGA.

સર્વર સાથે કામ કરવાની પ્રક્રિયામાં, મેં ડેલ પાસેથી પ્રોફેશનલ સર્વર હાર્ડવેરના ક્ષેત્રમાં ઘણું શીખ્યું અને ઘણું શીખ્યું. જેનો મને જરાય અફસોસ નથી, તેમજ સમય અને નાણાંનો સારી રીતે ખર્ચ થયો છે. બધા સર્વર ઘટકો સાથે ફ્રેમને ખરેખર એસેમ્બલ કરવા વિશેની શૈક્ષણિક વાર્તા પછીથી ચાલુ રાખવામાં આવશે.

ભાગ 3 ની લિંક: habr.com/en/post/454480

સોર્સ: www.habr.com