Góðan daginn, kæru Khabrovsk íbúar!
Mig langar að halda áfram sögu minni um að setja saman „þorpsofurtölvu“. Og ég skal útskýra hvers vegna það er kallað þannig - ástæðan er einföld. Sjálfur bý ég í þorpi. Og nafnið er örlítið trolling þeirra sem hrópa á netinu "Það er ekkert líf handan Moskvu hringvegarins!", "Rússneska þorpið er orðið handrukkari og er að deyja út!" Svo, einhvers staðar gæti þetta verið satt, en ég mun vera undantekning frá reglunni. Ég drekk ekki, ég reyki ekki, ég geri hluti sem ekki allir „þéttbýlisbraskarar“ hafa efni á. En snúum okkur aftur að kindunum okkar, eða nánar tiltekið, til netþjónsins, sem í lok fyrri hluta greinarinnar var þegar „að sýna lífsmerki“.
Spjaldið lá á borðinu, ég klifraði í gegnum BIOS, stillti það upp að vild, hljóp af Ubuntu 16.04 Desktop til einföldunar og ákvað að tengja skjákort við „ofurvélina“. En það eina sem var við höndina var GTS 250 með stæltum óupprunalegri viftu áföst. Sem ég setti upp í PCI-E 16x raufinni nálægt rofanum.
„Ég tók það með pakka af Belomor (c)“ svo vinsamlegast ekki kenna mér um gæði myndarinnar. Ég vil frekar tjá mig um það sem er tekið á þeim.
Í fyrsta lagi kom í ljós að þegar það er sett í rauf, hvílir jafnvel stutt skjákort borðið á móti minnisraufunum, þar sem í þessu tilviki er ekki hægt að setja það upp og jafnvel þarf að lækka læsingarnar. Í öðru lagi hylur járnfestingarrönd skjákortsins aflhnappinn, svo það þurfti að fjarlægja hann. Að vísu er rafhnappurinn sjálfur upplýstur af tveggja lita LED sem logar grænt þegar allt er í lagi og blikkar appelsínugult ef einhver vandamál koma upp, skammhlaup og aflgjafavörn hefur leyst út eða +12VSB afl. framboð er of mikið eða of lítið.
Reyndar er þetta móðurborð ekki hannað til að innihalda skjákort „beint“ í PCI-E 16x raufunum sínum; þau eru öll tengd við riser. Til að setja stækkunarkort í raufin nálægt aflhnappinum eru hornstigar, lágt til að setja upp stutt kort upp að lengd fyrsta örgjörva ofnsins, og hátt horn með auka +12V rafmagnstengi til að setja upp skjákort "fyrir ofan" venjulegan lágan 1U kælir. Það getur innihaldið stór skjákort eins og GTX 780, GTX 980, GTX 1080 eða sérhæfð GPGPU kort Nvidia Tesla K10-K20-K40 eða „tölvukort“ Intel Xeon Phi 5110p og þess háttar.
En í GPGPU riser er hægt að tengja kortið sem fylgir með EdgeSlot beint, aðeins með því að tengja aftur aukaafl með sama tengi og á háu horninu. Fyrir áhugasama, á eBay er þetta sveigjanlega riser kallað „Dell PowerEdge C8220X PCI-E GPGPU DJC89“ og kostar um 2.5-3 þúsund rúblur. Hornhlífar með viðbótaraflgjafa eru mun sjaldgæfari og ég þurfti að semja um að fá þau frá sérhæfðri miðlarahlutaverslun í gegnum Whisper. Þeir kosta 7 þúsund stykkið.
Ég segi strax, „áhættusamir krakkar (tm)“ geta jafnvel tengt par af GTX 980 við borðið með kínverskum sveigjanlegum riser 16x, eins og einn maður gerði á „That Same Forum“; við the vegur, Kínverjar gera alveg gott handverk sem virkar á PCI-E 16x 2.0 í stíl við Thermaltek sveigjanlegan riser, en ef þetta einn daginn veldur því að þú brennir út rafrásirnar á miðlaraborðinu, þá verður þú bara sjálfum þér að kenna. Ég hætti ekki á dýrum búnaði og notaði upprunalega riser með aukaafli og einn kínverskan sveigjanlegan, og fann að það að tengja eitt kort „beint“ myndi ekki brenna borðið.
Svo komu langþráðu tengin til að tengja aukaafl og ég gerði skott fyrir riserinn minn í EdgeSlot. Og sama tengið, en með öðru pinout, er notað til að veita viðbótarafli á móðurborðið. Þetta tengi er rétt við hliðina á þessu sama EdgeSlot tengi, það er áhugaverður pinout þarna. Ef riser er með 2 víra +12 og 2 sameiginlega, þá hefur borðið 3 víra +12 og 1 sameiginlegan.
Þetta er í raun sama GTS 250 innifalið í GPGPU riser. Við the vegur, auka afl er til staðar til stiga og móðurborðsins - frá öðru +12V rafmagnstengi á CPU aflgjafa mínum. Ég ákvað að það væri réttara að gera þetta.
Ævintýrið segir sig fljótt en hægt og rólega berast pakkarnir til Rússlands frá Kína og öðrum stöðum um allan heim. Þess vegna voru stórar eyður í samsetningu „ofurtölvunnar“. En loksins kom Nvidia Tesla K20M netþjónninn með óvirkan ofn til mín. Þar að auki er það algjörlega núll, frá geymslu, innsiglað í upprunalega kassanum, í upprunalegum umbúðum, með ábyrgðarskjölum. Og þjáningin hófst: hvernig á að kæla það?
Fyrst var keyptur sérsniðinn kælir með tveimur litlum „túrbínum“ frá Englandi, hér er hann á myndinni, með heimagerðum pappadreifara.
Og þeir reyndust vera algjör vitleysa. Þeir gerðu mikinn hávaða, festingin passaði alls ekki, þeir blésu veikt og gáfu slíkan titring að ég var hræddur um að íhlutirnir myndu detta af Tesla borðinu! Af hverju var þeim hent í ruslið nánast samstundis?
Við the vegur, á myndinni undir Tesla er hægt að sjá LGA 2011 1U kopar ofn miðlara uppsett á örgjörvunum með snigli frá Coolerserver keyptum frá Aliexpress. Mjög þokkalegir kælar, þó smá hávaði. Þeir passa fullkomlega.
En reyndar, á meðan ég beið eftir nýjum kælir fyrir Tesla, í þetta skiptið eftir að hafa pantað stóran BFB1012EN snigil frá Ástralíu með þrívíddarprentuðu festingu, kom hann að geymslukerfi netþjónsins. Miðlaraborðið er með mini-SAS tengi þar sem 3 SATA og 4 SATA tengi í viðbót eru send út. Allt SATA standard 2 en það hentar mér.
Intel C602 RAID sem er innbyggt í kubbasettið er ekki slæmt og aðalatriðið er að það sleppir TRIM skipuninni fyrir SSD, sem margir ódýrir ytri RAID stýringar gera ekki.
Á eBay keypti ég metra langa mini-SAS til 4 SATA snúru og á Avito keypti ég heita skiptingarkerru með 5,25 tommu hólf fyrir 4 x 2,5 tommu SAS-SATA. Svo þegar snúran og karfan komu voru settir 4 terabæta Seagates í hann, RAID5 fyrir 4 tæki var innbyggt í BIOS, ég byrjaði að setja upp serverinn Ubuntu... og lenti í því að diskskiptingarforritið leyfði mér ekki til að búa til swap partition á raidinu.
Ég leysti vandamálið beint - ég keypti ASUS HYPER M.2 x 2 MINI og M.4 SSD Samsung 2 EVO 960 Gb millistykki frá DNS og ákvað að úthluta ætti hámarkshraða tækinu fyrir skipti, þar sem kerfið mun virka með miklu reikniálagi og minnið er enn augljóslega minna en gagnastærðin. Og 250 GB minni var dýrara en þessi SSD.
Þessi sami millistykki með SSD uppsettum í lágu hornstokki.
Að spá fyrir spurningunum - "Af hverju ekki að búa allt kerfið til á M.2 og hafa hámarksaðgangshraða hærri en árás á SATA?" — Ég skal svara. Í fyrsta lagi eru 1 TB eða fleiri M2 SSD diskar of dýrir fyrir mig. Í öðru lagi, jafnvel eftir að hafa uppfært BIOS í nýjustu útgáfuna 2.8.1, styður þjónninn ekki hleðslu M.2 NVE tæki. Ég gerði tilraun þar sem kerfið setti /boot til USB FLASH 64 Gb og allt hitt á M.2 SSD, en mér líkaði það ekki. Þó að í grundvallaratriðum sé slík samsetning alveg framkvæmanleg. Ef afkastamikil M.2 NVE verður ódýrari gæti ég snúið aftur til þessa valmöguleika, en í bili hentar SATA RAID sem geymslukerfi mér nokkuð vel.
Þegar ég ákvað diska undirkerfið og kom með blöndu af 2 x SSD Kingston 240 Gb RAID1 “/” + 4 x HDD Seagate 1 Tb RAID5 “/home” + M.2 SSD Samsung 960 EVO 250 Gb “swap” þá er það kominn tími til að halda áfram tilraunum mínum með GPU Ég var þegar með Tesla og ástralskur kælir var nýkominn með „vondan“ snigil sem borðar allt að 2.94A við 12V, önnur raufin var upptekin af M.2 og í þeirri þriðju fékk ég lánaðan GT 610 „til tilrauna“.
Hér á myndinni eru öll 3 tækin tengd og M.2 SSD er í gegnum sveigjanlegt Thermaltech riser fyrir skjákort sem virkar á 3.0 rútunni án villna. Þetta er svona, búið til úr mörgum einstökum „borðum“ svipað þeim sem SATA snúrur eru gerðar úr. PCI-E 16x riser úr monolithic flat snúru, eins og gömlu IDE-SCSI sjálfur, eru hörmung, þeir munu þjást af villum vegna gagnkvæmra truflana. Og eins og ég sagði þegar, þá búa Kínverjar nú líka til riser svipað og Thermaltek, en styttri.
Í samsettri meðferð með Tesla K20 + GT 610, reyndi ég ýmislegt, á sama tíma komst ég að því að þegar þú tengdir utanaðkomandi skjákort og skiptir um úttak í það í BIOS, virkar vKVM ekki, sem virkaði ekki í raun. pirra mig. Allavega, ég ætlaði ekki að nota utanaðkomandi myndband á þessu kerfi, það eru engin myndbandsúttak á Teslas, og fjarstýringarborðið í gegnum SSH og án X-owls virkar frábærlega þegar þú manst aðeins hvað skipanalína án GUI er . En IPMI + vKVM einfaldar mjög stjórnun, enduruppsetningu og önnur vandamál með ytri netþjóni.
Almennt séð er IPMI þessa borðs frábært. Sérstakt 100 Mbit tengi, möguleiki á að endurstilla pakkainnspýtingu í eitt af 10 Gbit tenginum, innbyggður vefþjónn fyrir orkustýringu og stjórnun netþjóna, hlaða niður vKVM Java biðlara beint af honum og biðlari fyrir fjarfestingu á diskum eða myndir til að setja upp aftur... Málið er bara að clientarnir eru þeir sömu og sá gamli Java Oracle, sem er ekki lengur studdur í Linux og fyrir remote admin pallborðið þurfti ég að fá mér fartölvu með Win XP SP3 með þessu. forn Karta. Jæja, viðskiptavinurinn er hægur, það er nóg fyrir stjórnborðið og allt það, en þú getur ekki spilað leiki í fjarska, FPS er lítill. Og ASPEED myndbandið sem er samþætt við IPMI er veikt, aðeins VGA.
Í því ferli að takast á við netþjóninn lærði ég mikið og lærði mikið á sviði faglegra netþjónavélbúnaðar frá Dell. Sem ég sé alls ekki eftir, sem og tímanum og peningunum vel varið. Fræðslusögunni um að setja rammann saman með öllum miðlarahlutum verður haldið áfram síðar.
Tengill á hluta 3:
Heimild: www.habr.com