Sugeng siang, warga Khabrovsk sing dikasihi!
Aku arep nerusake crita babagan ngrakit "superkomputer desa". Lan aku bakal nerangake kenapa diarani kaya ngono-alasane gampang. Aku dhewe manggon ing desa. Lan jeneng kasebut minangka trolling tipis saka wong-wong sing bengok-bengok ing Internet "Ora ana urip sing ngluwihi Jalan Lingkaran Moskow!", "Desa Rusia wis dadi mabuk lan mati!" Dadi, nang endi wae iki bisa uga bener, nanging aku bakal dadi pangecualian kanggo aturan kasebut. Aku ora ngombe, aku ora ngrokok, Aku nindakake samubarang sing ora saben "krupuk kutha" bisa saged. Nanging ayo bali menyang wedhus kita, utawa luwih tepat, menyang server, sing ing pungkasan bagean pisanan artikel kasebut wis "nuduhake tandha-tandha urip."
Papan kasebut ana ing meja, aku munggah ing BIOS, nyetel sesuai karo sing dikarepake, mlayu saka Ubuntu 16.04 Desktop kanggo kesederhanaan lan mutusake nyambungake kertu video menyang "mesin super". Nanging siji-sijine sing ana ing tangan yaiku GTS 250 kanthi penggemar non-asli sing akeh banget. Kang aku diinstal ing slot PCI-E 16x cedhak tombol daya.
"Aku njupuk karo Pack saka Belomor (c)" supaya please ora nyalahke kula kanggo kualitas foto. Aku luwih seneng menehi komentar babagan apa sing dicekel ing dheweke.
Kaping pisanan, ternyata nalika dipasang ing slot, sanajan kertu video cendhak dipasang ing papan ing slot memori, sing ing kasus iki ora bisa diinstal lan malah latches kudu diturunake. Kapindho, strip pemasangan wesi kertu video nutupi tombol daya, mula kudu dicopot. Miturut cara, tombol daya dhewe dipadhangi lampu LED loro-werna, sing madhangi ijo nalika kabeh wis rapi lan kedhip oranye yen ana masalah, sirkuit cendhak lan proteksi sumber daya wis tripped utawa daya +12VSB. pasokan dhuwur banget utawa kurang banget.
Nyatane, motherboard iki ora dirancang kanggo nyakup kertu video "langsung" menyang slot PCI-E 16x, kabeh disambungake menyang risers. Kanggo nginstal kertu expansion ing slot cedhak tombol daya, ana risers sudhut, siji kurang kanggo nginstal kertu cendhak nganti dawa radiator prosesor pisanan, lan sudhut dhuwur karo konektor daya +12V tambahan kanggo nginstal a kertu video "ndhuwur" cooler 1U standar kurang. Bisa kalebu kertu video gedhe kaya GTX 780, GTX 980, GTX 1080 utawa kertu GPGPU khusus Nvidia Tesla K10-K20-K40 utawa "kertu komputasi" Intel Xeon Phi 5110p lan liya-liyane.
Nanging ing GPGPU riser, kertu klebu ing EdgeSlot bisa disambungake langsung, mung dening maneh nyambungake daya tambahan karo konektor padha ing riser sudhut dhuwur. Kanggo sing kasengsem, ing eBay iki riser fleksibel disebut "Dell PowerEdge C8220X PCI-E GPGPU DJC89" lan biaya bab 2.5-3 ewu rubles. Corner risers karo sumber daya tambahan akeh rarer lan aku kudu rembugan kanggo njaluk saka toko bagean server specialized liwat Whisper. Regane 7 ewu.
Aku bakal langsung ngomong, "wong beboyo (tm)" bisa uga nyambungake pasangan GTX 980 menyang papan karo risers fleksibel Cina 16x, kaya sing ditindakake wong ing "Forum sing padha"; kanthi cara, wong Tionghoa nggawe cukup. Kerajinan apik sing bisa ing PCI-E 16x 2.0 ing gaya Thermaltek fleksibel risers, nanging yen siji dina iki nyebabake sampeyan ngobong sirkuit daya ing Papan server, sampeyan mung bakal nyalahke. Aku ora resiko peralatan larang lan nggunakake risers asli karo daya tambahan lan siji fleksibel Cina, sing nyambungake kertu siji "langsung" ora bakal ngobong Papan.
Banjur konektor dawa-ngenteni kanggo nyambungake daya tambahan teka lan aku nggawe buntut kanggo riser ing EdgeSlot. Lan konektor padha, nanging karo pinout beda, digunakake kanggo sumber daya tambahan kanggo motherboard. konektor iki tengen jejere konektor EdgeSlot padha, ana pinout menarik ana. Yen riser wis 2 kabel +12 lan 2 umum, banjur Papan wis 3 kabel +12 lan 1 umum.
Iki bener padha GTS 250 klebu ing riser GPGPU. Miturut cara, daya tambahan diwenehake menyang risers lan motherboard - saka kaloro + 12V konektor daya saka CPU saka sumber daya sandi. Aku mutusakΓ© sing bakal luwih bener kanggo nindakake iki.
Dongeng kasebut kanthi cepet, nanging alon-alon bingkisan kasebut teka menyang Rusia saka China lan papan liya ing ndonya. Mulane, ana kesenjangan gedhe ing perakitan "superkomputer". Nanging pungkasanipun server Nvidia Tesla K20M karo radiator pasif teka kanggo kula. Kajaba iku, pancen nol, saka panyimpenan, disegel ing kothak asli, ing paket asli, kanthi kertas garansi. Lan kasangsaran wiwit: carane kelangan?
Pisanan, cooler khusus kanthi rong "turbin" cilik dituku saka Inggris, ing kene ana ing foto, kanthi diffuser karton krasan.
Lan padha dadi omong kosong lengkap. Padha nggawe akeh gangguan, gunung ora pas, padha nyebul banget lan menehi geter kaya aku wedi yen komponen bakal tiba saka papan Tesla! Yagene dheweke langsung dibuwang menyang tong sampah?
Miturut cara, ing foto ing Tesla sampeyan bisa ndeleng radiator tembaga server LGA 2011 1U diinstal ing prosesor karo bekicot saka Coolerserver dituku saka Aliexpress. Coolers banget prayoga, sanajan rada rame. Padha pas sampurna.
Nanging bener, nalika aku iki nunggu cooler anyar kanggo Tesla, wektu iki wis dhawuh gedhe BFB1012EN bekicot saka Australia karo gunung dicithak 3D, teka menyang sistem panyimpenan server. Papan server wis konektor mini-SAS liwat kang 4 SATA lan 2 konektor SATA liyane sing output. Kabeh standar SATA 2.0 nanging sing cocog karo aku.
Intel C602 RAID terintegrasi menyang chipset ora ala lan sing utama yaiku ngliwati perintah TRIM kanggo SSD, sing ora ditindakake dening pengontrol RAID eksternal sing murah.
Ing eBay aku tuku kabel mini-SAS nganti 4 SATA meter-dawa, lan ing Avito aku tuku cart hot-swap kanthi teluk 5,25β³ kanggo 4 x 2,5β³ SAS-SATA. Dadi nalika kabel lan basket teka, 4 terabyte Seagate diinstal ing, RAID5 kanggo 4 piranti dibangun ing BIOS, aku miwiti nginstal server Ubuntu ... lan mlayu menyang kasunyatan sing program pemisahan disk ora ngidini kula. kanggo nggawe partisi swap ing gropyokan.
Aku ngrampungake masalah kasebut - Aku tuku ASUS HYPER M.2 x 2 MINI lan M.4 SSD Samsung 2 EVO 960 Gb adaptor saka DNS lan mutusake manawa piranti kacepetan maksimal kudu diparengake kanggo swap, amarga sistem bakal bisa digunakake. karo mbukak komputasi dhuwur, lan memori isih temenan kurang saka ukuran data. Lan 250 memori GB luwih larang tinimbang SSD iki.
Iki adaptor padha karo SSD diinstal ing riser sudhut kurang.
Antisipasi pitakonan - "Napa ora nggawe kabeh sistem ing M.2 lan duwe kecepatan akses maksimal sing luwih dhuwur tinimbang serangan ing SATA?" - Aku bakal mangsuli. Sepisanan, 1 TB utawa liyane M2 SSDs larang banget kanggo kula. Sareh, malah sawise nganyari BIOS kanggo versi paling anyar 2.8.1, server isih ora ndhukung loading piranti M.2 NVE. Aku eksprimen ngendi sistem nyetel / boot kanggo USB FLASH 64 Gb lan kabeh liyane kanggo M.2 SSD, nanging aku ora seneng. Sanajan, ing prinsip, kombinasi kasebut cukup bisa ditindakake. Yen kapasitas dhuwur M.2 NVEs dadi luwih murah, Aku bisa bali menyang pilihan iki, nanging saiki SATA RAID minangka sistem panyimpenan cocog kula cukup uga.
Nalika aku mutusakΓ© ing subsistem disk lan teka munggah karo kombinasi 2 x SSD Kingston 240 Gb RAID1 "/" + 4 x HDD Seagate 1 Tb RAID5 "/ ngarep" + M.2 SSD Samsung 960 EVO 250 Gb "swap" iku wektu kanggo nerusake eksperimen karo GPU Aku wis Tesla lan cooler Australia mung teka karo bekicot "ala" sing mangan minangka akeh minangka 2.94A ing 12V, slot kapindho dikuwasani dening M.2 lan katelu aku nyilih GT 610 "kanggo eksperimen."
Kene ing foto kabeh 3 piranti disambungake, lan M.2 SSD liwat riser Thermaltech fleksibel kanggo kertu video sing dianggo ing 3.0 bis tanpa kasalahan. Kaya iki, digawe saka akeh "pita" individu sing padha karo kabel SATA sing digawe. PCI-E 16x risers digawe saka kabel flat monolithic, jenis kaya IDE-SCSI lawas, iku bilai, padha bakal nandhang sangsara marga saka kasalahan amarga campur tangan. Lan kaya sing wis dakkandhakake, wong Tionghoa saiki uga nggawe risers padha karo Thermaltek, nanging luwih cendhek.
Ing kombinasi karo Tesla K20 + GT 610, aku nyoba akeh perkara, ing wektu sing padha aku ngerti yen nalika nyambungake kertu video eksternal lan ngalih output menyang BIOS, vKVM ora bisa digunakake, sing ora bener. ngganggu aku. Oalah, aku ora rencana kanggo nggunakake video external ing sistem iki, ora ana output video ing Teslas, lan panel admin remot liwat SSH lan tanpa X-owls dianggo gedhe yen sampeyan ngelingi sethitik apa baris printah tanpa GUI. . Nanging IPMI + vKVM nyederhanakake manajemen, instalasi maneh lan masalah liyane karo server remot.
UmumΓ©, IPMI papan iki apik banget. Port 100 Mbit sing kapisah, kemampuan kanggo ngonfigurasi ulang injeksi paket menyang salah siji saka 10 port Gbit, server Web sing dibangun kanggo manajemen daya lan kontrol server, ndownload klien vKVM Java langsung saka iku lan klien kanggo instalasi remot disk. utawa gambar kanggo reinstallation ... Mung bab iku klien padha karo sing lawas Java Oracle, kang ora didhukung maneh ing Linux lan kanggo panel admin remot aku kudu njaluk laptop karo Win XP SP3 karo iki banget. Toad kuno. Inggih, klien punika alon, ana cukup kanggo panel admin lan kabeh sing, nanging sampeyan ora bisa muter game mbatalake, FPS cilik. Lan video ASPEED sing terintegrasi karo IPMI lemah, mung VGA.
Ing proses nangani server, aku sinau akeh lan sinau akeh babagan hardware server profesional saka Dell. Sing ora tak getuni babar pisan, uga wektu lan dhuwit sing dienggo. Crita pendidikan babagan bener-bener ngrakit pigura karo kabeh komponen server bakal diterusake mengko.
Link menyang bagean 3:
Source: www.habr.com