Wilujeng siang, warga Khabrovsk anu dipikacinta!
Abdi hoyong neraskeun carita kuring ngeunaan ngarakit "superkomputer désa". Sareng kuring bakal ngajelaskeun naha éta disebut cara éta-alesanna saderhana. Kuring sorangan cicing di hiji kampung. Sareng nami mangrupikeun trolling sakedik jalma anu ngagorowok dina Internét "Teu aya kahirupan saluareun Jalan Ring Moscow!", "Desa Rusia parantos mabok sareng maot!" Janten, dimana waé ieu tiasa leres, tapi kuring bakal janten pengecualian kana aturan. Kuring henteu nginum, kuring henteu ngaroko, kuring ngalakukeun hal-hal anu henteu mampuh unggal "kurupuk kota". Tapi hayu urang uih deui ka domba urang, atanapi langkung tepatna, ka server, anu dina tungtung bagian mimiti tulisan éta parantos "némbongkeun tanda-tanda kahirupan."
dewan ieu bohong dina méja, Kuring naek ngaliwatan mios, nyetel eta nepi ka liking kuring, dashed kaluar Ubuntu 16.04 Desktop pikeun kesederhanaan jeung mutuskeun pikeun nyambungkeun kartu vidéo ka "mesin super". Tapi hiji-hijina hal di leungeun éta GTS 250 kalawan hefty kipas non-asli napel. Nu kuring dipasang dina slot PCI-E 16x deukeut tombol daya.
"Kuring nyandak éta kalayan bungkus Belomor (c)" janten punten ulah nyalahkeun kuring pikeun kualitas poto. Abdi langkung resep ngomentaran naon anu kawengku dina aranjeunna.
Anu mimiti, tétéla yén nalika dipasang dina slot, bahkan kartu vidéo pondok nahan papan dina slot mémori, dimana dina hal ieu éta henteu tiasa dipasang bahkan kancingna kedah diturunkeun. Bréh, beusi ningkatna strip tina kartu vidéo nyertakeun tombol daya, jadi kudu dipiceun. Ku jalan kitu, tombol daya sorangan dicaangan ku LED dua warna, anu hurung héjo nalika sadayana beres sareng kedip-kedip oranyeu upami aya masalah, sirkuit pondok sareng panyalindungan catu daya parantos tripped atanapi kakuatan +12VSB. suplai teuing tinggi atawa teuing low.
Kanyataanna, motherboard ieu teu dirancang pikeun ngawengku kartu vidéo "langsung" kana na liang PCI-E 16x; aranjeunna sadayana disambungkeun ka risers. Pikeun masang kartu ékspansi dina slot deukeut tombol kakuatan, aya risers sudut, hiji low pikeun masang kartu pondok nepi ka panjangna radiator processor munggaran, sarta sudut luhur hiji kalawan konektor kakuatan + 12V tambahan pikeun masang a. kartu vidéo "di luhur" a cooler 1U low baku. Bisa ngawengku kartu vidéo badag kawas GTX 780, GTX 980, GTX 1080 atawa kartu GPGPU husus Nvidia Tesla K10-K20-K40 atawa "kartu komputasi" Intel Xeon Phi 5110p jeung kawas.
Tapi dina riser GPGPU, kartu kaasup dina EdgeSlot bisa disambungkeun langsung, ngan ku deui nyambungkeun kakuatan tambahan jeung konektor sarua sakumaha dina riser sudut tinggi. Pikeun maranéhanana kabetot, dina eBay ieu riser fléksibel disebut "Dell PowerEdge C8220X PCI-E GPGPU DJC89" na waragad ngeunaan 2.5-3 sarébu rubles. Sudut risers kalawan catu daya tambahan loba rarer sarta kuring kungsi negotiate pikeun meunangkeun eta ti toko bagian server husus ngaliwatan Whisper. Hargana 7 rébu hiji.
Kuring bakal langsung nyarios, "lalaki picilakaeun (tm)" malah tiasa nyambungkeun sapasang GTX 980 ka papan sareng risers fléksibel Cina 16x, sapertos anu dilakukeun ku hiji jalma dina "Forum Sami Éta"; ku jalan kitu, urang Cina ngadamel lumayan. karajinan alus anu dianggo dina PCI-E 16x 2.0 dina gaya Thermaltek fléksibel risers, tapi lamun ieu hiji poé ngabalukarkeun anjeun ngaduruk kaluar sirkuit kakuatan dina dewan server, anjeun ngan bakal boga diri ngalepatkeun. Kuring teu risiko parabot mahal tur dipaké risers aslina kalawan kakuatan tambahan sarta hiji Cina fléksibel, figuring yén nyambungkeun hiji kartu "langsung" moal kaduruk dewan.
Lajeng panyambungna lila-tunggu pikeun nyambungkeun kakuatan tambahan anjog sarta kuring dijieun buntut pikeun riser kuring di EdgeSlot. Jeung konektor sarua, tapi ku pinout béda, dipaké pikeun suplai kakuatan tambahan pikeun motherboard nu. konektor ieu katuhu gigireun konektor EdgeSlot sarua ieu, aya hiji pinout metot aya. Mun riser ngabogaan 2 kawat +12 jeung 2 umum, lajeng dewan boga 3 kawat +12 jeung 1 umum.
Ieu sabenerna sarua GTS 250 kaasup dina riser GPGPU. Ngomong-ngomong, kakuatan tambahan disayogikeun ka risers sareng motherboard - tina konektor kakuatan kadua + 12V tina CPU catu daya kuring. Kuring mutuskeun yén éta bakal leuwih bener ngalakukeun ieu.
Dongeng nyarioskeun sorangan gancang, tapi lalaunan bungkusan dugi ka Rusia ti China sareng tempat-tempat sanés di sakumna dunya. Ku alatan éta, aya sela badag dina assembly of "supercomputer". Tapi tungtungna server Nvidia Tesla K20M sareng radiator pasip sumping ka kuring. Sumawona, éta leres pisan nol, ti gudang, disegel dina kotak aslina, dina pakét aslina, kalayan kertas jaminan. Sareng sangsara mimiti: kumaha niiskeunana?
Mimitina, cooler khusus sareng dua "turbin" leutik dipésér ti Inggris, ieu aya dina poto, kalayan diffuser kardus buatan bumi.
Jeung maranéhna tétéla crap lengkep. Éta dijieun loba noise, Gunung teu cocog pisan, aranjeunna blew lemah sareng masihan Geter misalna yén kuring sieun yén komponén bakal layu atawa gugur dewan Tesla! Naha aranjeunna langsung dialungkeun kana tong sampah?
Ngomong-ngomong, dina poto dina Tesla anjeun tiasa ningali radiator tambaga server LGA 2011 1U dipasang dina prosesor kalayan kéong ti Coolerserver anu dipésér ti Aliexpress. coolers pisan santun, sanajan rada ribut. Aranjeunna cocog sampurna.
Tapi sabenerna, bari kuring ngantosan hiji cooler anyar pikeun Tesla, waktos ieu maréntahkeun BFB1012EN snail badag ti Australia kalawan 3D dicitak Gunung, sumping ka sistem gudang server. Dewan server gaduh konektor mini-SAS dimana 4 SATA sareng 2 konektor SATA langkung kaluaran. Kabéh standar SATA 2.0 tapi nu cocog kuring.
Intel C602 RAID terpadu kana chipset teu goréng jeung hal utama anu skips paréntah TRIM pikeun SSDs, nu loba murah Controllers RAID éksternal teu ngalakukeun.
Di eBay, kuring ngagaleuh kabel mini-SAS dugi ka 4 SATA panjang meter, sareng dina Avito kuring ngagaleuh karanjang hot-swap sareng 5,25″ bay pikeun 4 x 2,5″ SAS-SATA. Janten nalika kabel sareng karanjang dugi, dipasang 4 terabyte Seagate, RAID5 pikeun 4 alat diwangun dina mios, kuring ngamimitian masang server Ubuntu ... sareng lumpat kana kanyataan yén program partisi disk henteu ngijinkeun kuring. pikeun nyieun partisi swap dina razia.
Kuring ngajawab masalah sirah-on - Kuring meuli ASUS HYPER M.2 x 2 MINI jeung M.4 SSD Samsung 2 EVO 960 Gb adaptor ti DNS sarta mutuskeun yén alat speed maksimum kudu disadiakeun pikeun swap, saprak sistem bakal jalan. kalawan beban komputasi tinggi, sarta mémori masih écés kirang ti ukuran data. Jeung 250 memori GB éta leuwih mahal batan SSD ieu.
Ieu adaptor sarua jeung SSD dipasang dina riser sudut low.
Antisipasi patarosan - "Naha teu nyieun sakabéh sistem on M.2 sarta boga speed aksés maksimum leuwih luhur ti éta tina razia on SATA?" - Kuring bakal ngajawab. Firstly, 1 TB atawa leuwih M2 SSDs teuing mahal pikeun kuring. Bréh, malah sanggeus ngamutahirkeun mios ka versi panganyarna 2.8.1, server masih teu ngarojong loading alat M.2 NVE. Atuh percobaan dimana sistem set / boot ka USB FLASH 64 Gb jeung sagalana sejenna mun M.2 SSD, tapi teu resep. Sanaos, prinsipna, kombinasi sapertos kitu tiasa dianggo. Lamun-kapasitas tinggi M.2 NVEs janten langkung mirah, Kuring bisa balik deui ka pilihan ieu, tapi pikeun ayeuna SATA razia salaku sistem gudang cocog kuring cukup ogé.
Nalika kuring mutuskeun dina subsistem disk jeung datang nepi ka kombinasi 2 x SSD Kingston 240 Gb RAID1 "/" + 4 x HDD Seagate 1 Tb RAID5 "/ imah" + M.2 SSD Samsung 960 EVO 250 Gb "swap" éta waktos neruskeun percobaan kuring jeung GPU Kuring geus kungsi Tesla sarta cooler Australia nembé sumping sareng kéong "jahat" anu tuang saloba 2.94A dina 12V, slot kadua dijajah ku M.2 sareng anu katilu kuring nginjeum GT 610 "pikeun ékspérimén."
Di dieu dina poto disambungkeun sakabeh 3 alat, sarta M.2 SSD via riser Thermaltech fléksibel pikeun kartu vidéo anu hade dina 3.0 beus tanpa kasalahan. Ieu kawas kieu, dijieun tina loba individu "pita" sarupa jeung nu kabel SATA dijieun. PCI-E 16x risers dijieunna tina kabel datar monolithic, jenis kawas IDE-SCSI heubeul, mangrupakeun musibah, aranjeunna bakal kakurangan tina kasalahan alatan gangguan silih. Sareng sakumaha anu kuring parantos nyarios, urang Cina ayeuna ogé ngadamel risers sami sareng Thermaltek, tapi langkung pondok.
Dina kombinasi sareng Tesla K20 + GT 610, kuring nyobian seueur hal, dina waktos anu sami kuring terang yén nalika nyambungkeun kartu vidéo éksternal sareng ngagentos kaluaran kana BIOS, vKVM henteu jalan, anu henteu leres-leres. ngaganggu kuring. Atoh, kuring henteu ngarencanakeun ngagunakeun pidéo éksternal dina sistem ieu, henteu aya kaluaran pidéo dina Teslas, sareng panel admin jauh via SSH sareng tanpa X-owls tiasa dianggo nalika anjeun émut sakedik naon garis paréntah tanpa GUI. . Tapi IPMI + vKVM greatly simplifies manajemén, reinstallation sarta masalah sejenna kalawan server jauh.
Sacara umum, IPMI dewan ieu hébat. Port 100 Mbit anu misah, kamampuan pikeun ngonpigurasikeun deui suntikan pakét ka salah sahiji palabuhan 10 Gbit, server Wéb anu diwangun pikeun manajemén kakuatan sareng kadali server, unduh klien vKVM Java langsung ti dinya sareng klien pikeun masang disk jarak jauh. atawa gambar pikeun reinstallation ... Hiji-hijina hal éta klien nu sarua jeung nu heubeul Java Oracle, nu geus euweuh dirojong dina Linux Ubuntu jeung panel admin jauh kuring kungsi meunang laptop kalawan Win XP SP3 kalawan ieu pisan. bangkong kuno. Nya, klienna lambat, cekap pikeun panel admin sareng sadayana, tapi anjeun henteu tiasa maén kaulinan jarak jauh, FPS leutik. Sareng video ASPEED anu terintegrasi sareng IPMI lemah, ngan ukur VGA.
Dina prosés nungkulan server, abdi diajar loba jeung diajar loba dina widang hardware server profésional ti Dell. Nu teu kaduhung pisan, kitu ogé waktu jeung duit ogé spent. Carita atikan ngeunaan sabenerna assembling pigura jeung sakabéh komponén server bakal dituluykeun engké.
Link ka bagian 3:
sumber: www.habr.com