Il-ġurnata t-tajba, għeżież residenti ta' Khabrovsk!
Nixtieq inkompli l-istorja tiegħi dwar l-assemblaġġ ta '"superkompjuter tar-raħal". U nispjega għaliex tissejjaħ hekk—ir-raġuni hija sempliċi. Jien stess noqgħod f’raħal. U l-isem huwa trolling żgħir ta 'dawk li jgħajtu fuq l-Internet "M'hemm l-ebda ħajja lil hinn mir-Ring Road ta' Moska!", "Il-villaġġ Russu sar sakra u qed imut!" Allura, x'imkien dan jista 'jkun minnu, imma jien se nkun l-eċċezzjoni għar-regola. Ma nixrobx, ma npejjipx, nagħmel affarijiet li mhux kull "cracker(s) urban(i)" jiflaħ. Imma ejja nerġgħu lura għan- nagħaġ tagħna, jew b’mod aktar preċiż, għas- server, li fl- aħħar tal- ewwel parti tal- artiklu kien diġà “juri sinjali taʼ ħajja.”
Il-bord kien mimdud fuq il-mejda, tlajt permezz tal-BIOS, waqqafha kif għoġobni, qabeż Ubuntu 16.04 Desktop għas-sempliċità u ddeċidejt li tqabbad karta tal-vidjo mas-"super machine". Iżda l-unika ħaġa f'idejna kienet GTS 250 b'fann kbir mhux oriġinali mehmuż. Li installajt fl-islot PCI-E 16x ħdejn il-buttuna tal-enerġija.
"Sparajt b'pakkett ta' Belomor (i)" għalhekk jekk jogħġbok twaħħalni għall-kwalità tar-ritratt. Nippreferi nikkummenta dwar dak li jinqabad fuqhom.
L-ewwelnett, irriżulta li meta installata fi slot, anke karta tal-vidjo qasira tistrieħ il-bord mal-islots tal-memorja, li f'dan il-każ ma tistax tiġi installata u anke l-lukketti għandhom jitbaxxew. It-tieni nett, l-istrixxa tal-immuntar tal-ħadid tal-kard tal-vidjo tkopri l-buttuna tal-qawwa, għalhekk kellha titneħħa. Mill-mod, il-buttuna tal-enerġija nnifisha hija mdawwal minn LED b'żewġ kuluri, li jixgħel aħdar meta kollox ikun fl-ordni u jteptep oranġjo jekk ikun hemm xi problemi, ċirkwit qasir u l-protezzjoni tal-provvista tal-enerġija tkun tfixkel jew il-qawwa + 12VSB il-provvista hija għolja wisq jew baxxa wisq.
Fil-fatt, din il-motherboard mhix iddisinjata biex tinkludi video cards "direttament" fis-slots PCI-E 16x tagħha; huma kollha konnessi ma 'risers. Biex tinstalla karta ta 'espansjoni fl-islots ħdejn il-buttuna ta' l-enerġija, hemm risers tal-kantuniera, waħda baxxa għall-installazzjoni ta 'karti qosra sat-tul ta' l-ewwel radjatur tal-proċessur, u kantuniera għolja waħda b'konnettur ta 'enerġija addizzjonali ta' + 12V għall-installazzjoni ta ' video card "fuq" apparat li jkessaħ 1U standard baxx. Jista 'jinkludi karti tal-vidjo kbar bħal GTX 780, GTX 980, GTX 1080 jew karti GPGPU speċjalizzati Nvidia Tesla K10-K20-K40 jew "karti tal-kompjuter" Intel Xeon Phi 5110p u simili.
Iżda fil-riser GPGPU, il-karta inkluża fl-EdgeSlot tista 'tiġi konnessa direttament, biss billi terġa' tgħaqqad qawwa addizzjonali bl-istess konnettur bħal fuq ir-riser tal-kantuniera għolja. Għal dawk interessati, fuq eBay dan ir-riser flessibbli jissejjaħ "Dell PowerEdge C8220X PCI-E GPGPU DJC89" u jiswa madwar 2.5-3 elf rublu. Risers tal-kantunieri b'provvista ta 'enerġija addizzjonali huma ħafna aktar rari u kelli ninnegozja biex niksebhom minn maħżen speċjalizzat tal-partijiet tas-server permezz ta' Whisper. Huma jiswew 7 elf kull biċċa.
Jien ngħid mill-ewwel, "guys riskjużi (tm)" jistgħu saħansitra jgħaqqdu par ta 'GTX 980 mal-bord b'risers flessibbli Ċiniżi 16x, kif għamlet persuna waħda fuq "Dak l-istess Forum"; mill-mod, iċ-Ċiniżi jagħmlu pjuttost snajja tajba li jaħdmu fuq PCI-E 16x 2.0 fl-istil ta 'Thermaltek dawk flessibbli risers, imma jekk din il-ġurnata waħda tikkawża li inti tirrekordja l-ċirkwiti tal-enerġija fuq il-bord tas-server, ser ikollok biss lilek innifsek biex tort. Ma rriskjajtx tagħmir għali u użajt risers oriġinali b'enerġija addizzjonali u waħda Ċiniża flessibbli, billi naħseb li l-konnessjoni ta 'karta waħda "direttament" ma taħraqx il-bord.
Imbagħad waslu l-konnetturi tant mistennija għall-konnessjoni ta 'enerġija addizzjonali u għamilt denb għall-riser tiegħi f'EdgeSlot. U l-istess konnettur, iżda b'pinout differenti, jintuża biex jipprovdi enerġija addizzjonali lill-motherboard. Dan il-konnettur huwa eżatt ħdejn dan l-istess konnettur EdgeSlot, hemm pinout interessanti hemmhekk. Jekk il-riser għandu 2 wajers +12 u 2 komuni, allura l-bord għandu 3 wajers +12 u 1 komuni.
Dan huwa fil-fatt l-istess GTS 250 inkluż fil-riser GPGPU. Mill-mod, enerġija addizzjonali hija fornuta lill-risers u lill-motherboard - mit-tieni konnettur tal-enerġija +12V tas-CPU tal-provvista tal-enerġija tiegħi. Iddeċidejt li jkun aktar korrett li tagħmel dan.
Il-fairy tale jirrakkonta lilu nnifsu malajr, iżda bil-mod il-pakketti jaslu lejn ir-Russja miċ-Ċina u postijiet oħra madwar id-dinja. Għalhekk, kien hemm lakuni kbar fl-assemblaġġ tas-"superkompjuter". Iżda fl-aħħar wasal għandi s-server Nvidia Tesla K20M b'radjatur passiv. Barra minn hekk, huwa assolutament żero, mill-ħażna, issiġillat fil-kaxxa oriġinali tiegħu, fil-pakkett oriġinali tiegħu, b'karti ta 'garanzija. U bdiet it-tbatija: kif tkessaħ?
L-ewwel, inxtara apparat li jkessaħ id-dwana b'żewġ "turbini" żgħar mill-Ingilterra, hawn huwa fir-ritratt, b'diffużur tal-kartun magħmul mid-dar.
U rriżultaw li kienu ħażin sħiħ. Huma għamlu ħafna storbju, il-muntatura ma jaqbel xejn, nefaħ dgħajjef u taw tali vibrazzjoni li bżajt li l-komponenti jaqgħu barra mill-bord Tesla! Għaliex kienu jintefgħu fil-żibel kważi immedjatament?
Mill-mod, fir-ritratt taħt Tesla tista 'tara radjaturi tar-ram server LGA 2011 1U installati fuq il-proċessuri bi bebbuxu minn Coolerserver mixtrija minn Aliexpress. Coolers deċenti ħafna, għalkemm ftit storbjużi. Huma jaqblu perfettament.
Imma fil-fatt, waqt li kont qed nistenna cooler ġdid għal Tesla, din id-darba wara li ordnat bebbux kbir BFB1012EN mill-Awstralja b'muntatura stampata 3D, waslet għas-sistema tal-ħażna tas-server. Il-bord tas-server għandu konnettur mini-SAS li permezz tiegħu joħorġu 4 konnetturi SATA u 2 SATA oħra. L-istandard SATA 2.0 kollu iżda li jixraqli.
L-intel C602 RAID integrat fiċ-chipset mhuwiex ħażin u l-ħaġa prinċipali hija li taqbeż il-kmand TRIM għal SSDs, li ħafna kontrolluri RAID esterni rħas ma jagħmlux.
Fuq eBay xtrajt kejbil mini-SAS għal 4 SATA twil metru, u fuq Avito xtrajt karrettun hot-swap b'bajja ta '5,25″ għal 4 x 2,5″ SAS-SATA. Allura meta waslu l-cable u l-basket, ġew installati 4 terabyte Seagates fiha, RAID5 għal 4 apparati nbnew fil-BIOS, bdejt ninstalla s-server Ubuntu... u sabt il-fatt li l-programm ta 'partitioning disk ma jippermettilix biex tinħoloq partizzjoni tpartit fuq ir-raid.
I solvut il-problema head-on - xtrajt ASUS HYPER M.2 x 2 MINI u M.4 SSD Samsung 2 EVO 960 Gb adapter mid-DNS u ddeċidejt li l-apparat tal-veloċità massima għandu jiġi allokat għal tpartit, peress li s-sistema se taħdem b'tagħbija komputazzjonali għolja, u l-memorja għadha ovvjament inqas mid-daqs tad-data. U l-memorja ta '250 GB kienet aktar għalja minn dan l-SSD.
Dan l-istess adapter b'SSD installat f'kantuniera baxxa.
Antiċipazzjoni tal-mistoqsijiet - "Għaliex ma tagħmilx is-sistema kollha fuq M.2 u jkollok veloċità massima ta 'aċċess ogħla minn dik ta' rejd fuq SATA?" - Se nwieġeb. L-ewwelnett, 1 TB jew aktar M2 SSDs huma għaljin wisq għalija. It-tieni nett, anke wara li aġġorna l-BIOS għall-aħħar verżjoni 2.8.1, is-server għadu ma jappoġġjax it-tagħbija ta 'apparati M.2 NVE. Għamilt esperiment fejn is-sistema ssettjat /boot għal USB FLASH 64 Gb u kull ħaġa oħra għal M.2 SSD, iżda ma għoġobnix. Għalkemm, fil-prinċipju, kombinazzjoni bħal din hija pjuttost operabbli. Jekk NVEs M.2 ta 'kapaċità għolja jsiru orħos, nista' nirritorna għal din l-għażla, iżda għalissa SATA RAID bħala sistema ta 'ħażna taqbelni pjuttost tajjeb.
Meta ddeċidejt fuq is-subsistema tad-diska u ħarġet b'kombinazzjoni ta '2 x SSD Kingston 240 Gb RAID1 “/” + 4 x HDD Seagate 1 Tb RAID5 “/home” + M.2 SSD Samsung 960 EVO 250 Gb “swap” huwa ħin biex inkompli l-esperimenti tiegħi bil-GPU Diġà kelli Tesla u apparat li jkessaħ Awstraljan għadu kif wasal bi bebbux "ħażin" li jiekol daqs 2.94A f'12V, it-tieni slot kien okkupat minn M.2 u għat-tielet ssellef GT 610 "għall-esperimenti."
Hawnhekk fir-ritratt it-3 apparati kollha huma konnessi, u l-M.2 SSD huwa permezz ta 'riser Thermaltech flessibbli għal karti tal-vidjo li jaħdem fuq il-bus 3.0 mingħajr żbalji. Huwa bħal dan, magħmul minn ħafna "żigarelli" individwali simili għal dawk li minnhom huma magħmula kejbils SATA. Risers PCI-E 16x magħmula minn kejbil ċatt monolitiku, tip bħal dawk qodma IDE-SCSI, huma diżastru, se jbatu minn żbalji minħabba interferenza reċiproka. U kif diġà għedt, iċ-Ċiniżi issa jagħmlu wkoll risers simili għal dawk ta’ Thermaltek, iżda iqsar.
Flimkien mat-Tesla K20 + GT 610, ippruvajt ħafna affarijiet, fl-istess ħin sibt li meta kkonnettja karta tal-vidjo esterna u taqleb l-output għaliha fil-BIOS, vKVM ma taħdimx, li ma kienx verament iddejjaqni. Xorta waħda, ma ppjanajtx li nuża vidjo estern fuq din is-sistema, m'hemm l-ebda output tal-vidjo fuq Teslas, u l-pannell tal-amministrazzjoni remot permezz ta 'SSH u mingħajr X-kokki jaħdem tajjeb ladarba tiftakar ftit x'inhi linja ta' kmand mingħajr GUI . Iżda IPMI + vKVM jissimplifika bil-kbir il-ġestjoni, l-installazzjoni mill-ġdid u kwistjonijiet oħra ma 'server remot.
B'mod ġenerali, l-IPMI ta 'dan il-bord huwa kbir. Port separat ta' 100 Mbit, il-kapaċità li terġa' tikkonfigura l-injezzjoni ta' pakketti għal wieħed mill-portijiet ta' 10 Gbit, server Web integrat għall-ġestjoni tal-enerġija u l-kontroll tas-servers, tniżżil ta' klijent Java vKVM direttament minnu u klijent għall-immuntar remot ta' diski jew immaġini għall-installazzjoni mill-ġdid... L-unika ħaġa hija li l-klijenti huma l-istess bħall-qadim Java Oracle, li m'għadux appoġġjat fil-Linux u għall-remote admin panel kelli nikseb laptop b'Win XP SP3 b'dan ħafna Toad tal-qedem. Ukoll, il-klijent huwa bil-mod, hemm biżżejjed għall-pannell tal-amministrazzjoni u dak kollu, iżda ma tistax tilgħab logħob mill-bogħod, l-FPS huwa żgħir. U l-vidjo ASPEED li huwa integrat ma 'IPMI huwa dgħajjef, VGA biss.
Fil-proċess li nittratta s-server, tgħallimt ħafna u tgħallimt ħafna fil-qasam tal-ħardwer tas-server professjonali mingħand Dell. Li xejn ma jiddispjaċini, kif ukoll il-ħin u l-flus minfuqa tajjeb. L-istorja edukattiva dwar l-assemblaġġ tal-qafas bil-komponenti kollha tas-server se titkompla aktar tard.
Link għall-parti 3:
Sors: www.habr.com