Hanes cydosod “uwchgyfrifiadur pentref” o ddarnau sbâr o eBay, Aliexpress a siop gyfrifiaduron. Rhan 2

Diwrnod da, annwyl drigolion Khabrovsk!

Linc i ran gyntaf y stori ar gyfer y rhai a'i collodd

Hoffwn barhau â’m stori am gydosod “uwchgyfrifiadur pentref”. A byddaf yn egluro pam y'i gelwir felly - mae'r rheswm yn syml. Rydw i fy hun yn byw mewn pentref. Ac mae'r enw yn drolio bach o'r rhai sy'n gweiddi ar y Rhyngrwyd “Does dim bywyd y tu hwnt i Gylchffordd Moscow!”, “Mae pentref Rwsia wedi dod yn feddwyn ac yn marw allan!” Felly, yn rhywle efallai bod hyn yn wir, ond byddaf yn eithriad i'r rheol. Dydw i ddim yn yfed, dydw i ddim yn ysmygu, dwi'n gwneud pethau na all pob “cracer(s)” eu fforddio. Ond gadewch i ni ddychwelyd at ein defaid, neu yn fwy manwl gywir, at y gweinydd, a oedd ar ddiwedd rhan gyntaf yr erthygl eisoes yn “dangos arwyddion bywyd.”

Roedd y bwrdd yn gorwedd ar y bwrdd, fe wnes i ddringo trwy'r BIOS, gan ei osod at fy hoffter, torri oddi ar Ubuntu 16.04 Desktop er mwyn symlrwydd a phenderfynu cysylltu cerdyn fideo i'r “super machine”. Ond yr unig beth wrth law oedd GTS 250 gyda ffan anwreiddiol hefty ynghlwm. A osodais yn y slot PCI-E 16x ger y botwm pŵer.

Hanes cydosod “uwchgyfrifiadur pentref” o ddarnau sbâr o eBay, Aliexpress a siop gyfrifiaduron. Rhan 2

Hanes cydosod “uwchgyfrifiadur pentref” o ddarnau sbâr o eBay, Aliexpress a siop gyfrifiaduron. Rhan 2

“Cymerais ef gyda phecyn o Belomor (c)” felly peidiwch â’m beio am ansawdd y llun. Byddai'n well gen i wneud sylwadau ar yr hyn sy'n cael ei ddal arnyn nhw.

Yn gyntaf, pan osodwyd mewn slot, mae hyd yn oed cerdyn fideo byr yn gorffwys y bwrdd yn erbyn y slotiau cof, ac yn yr achos hwn ni ellir ei osod a hyd yn oed y cliciedi rhaid eu gostwng. Yn ail, mae stribed mowntio haearn y cerdyn fideo yn gorchuddio'r botwm pŵer, felly bu'n rhaid ei dynnu. Gyda llaw, mae'r botwm pŵer ei hun yn cael ei oleuo gan LED dau-liw, sy'n goleuo'n wyrdd pan fydd popeth mewn trefn ac yn blincio'n oren os oes unrhyw broblemau, cylched byr a'r amddiffyniad cyflenwad pŵer wedi baglu neu'r pŵer +12VSB cyflenwad yn rhy uchel neu'n rhy isel.

Mewn gwirionedd, nid yw'r famfwrdd hwn wedi'i gynllunio i gynnwys cardiau fideo “yn uniongyrchol” yn ei slotiau PCI-E 16x; maent i gyd wedi'u cysylltu â chodwyr. I osod cerdyn ehangu yn y slotiau ger y botwm pŵer, mae codwyr cornel, un isel ar gyfer gosod cardiau byr hyd at hyd y rheiddiadur prosesydd cyntaf, ac un cornel uchel gyda chysylltydd pŵer +12V ychwanegol ar gyfer gosod a cerdyn fideo “uwchben” oerach 1U isel safonol. Gall gynnwys cardiau fideo mawr fel GTX 780, GTX 980, GTX 1080 neu gardiau GPPU arbenigol Nvidia Tesla K10-K20-K40 neu “gardiau cyfrifiadura” Intel Xeon Phi 5110p ac yn y blaen.

Ond yn y codwr GPGPU, gellir cysylltu'r cerdyn sydd wedi'i gynnwys yn yr EdgeSlot yn uniongyrchol, dim ond trwy gysylltu pŵer ychwanegol eto gyda'r un cysylltydd ag ar y codwr cornel uchel. I'r rhai sydd â diddordeb, ar eBay gelwir y codwr hyblyg hwn yn “Dell PowerEdge C8220X PCI-E GPGPU DJC89” ac mae'n costio tua 2.5-3 mil rubles. Mae codwyr cornel gyda chyflenwad pŵer ychwanegol yn llawer prinnach ac roedd yn rhaid i mi drafod i'w cael o storfa rhannau gweinydd arbenigol trwy Whisper. Maent yn costio 7 mil yr un.

Fe ddywedaf ar unwaith, gall “dynion peryglus (tm)” hyd yn oed gysylltu pâr o GTX 980 i'r bwrdd gyda chodwyr hyblyg Tsieineaidd 16x, fel y gwnaeth un person ar “That Same Forum”; gyda llaw, mae'r Tsieineaid yn gwneud yn eithaf crefftau da sy'n gweithio ar PCI-E 16x 2.0 yn arddull codwyr rhai hyblyg Thermaltek, ond os yw'r un diwrnod hwn yn achosi ichi losgi'r cylchedau pŵer ar fwrdd y gweinydd, dim ond eich hun fydd ar fai. Ni wnes i fentro offer drud a defnyddiais risers gwreiddiol gyda phŵer ychwanegol ac un hyblyg Tsieineaidd, gan ddangos na fyddai cysylltu un cerdyn yn “uniongyrchol” yn llosgi'r bwrdd.

Yna cyrhaeddodd y cysylltwyr hir-ddisgwyliedig ar gyfer cysylltu pŵer ychwanegol a gwnes gynffon ar gyfer fy riser yn EdgeSlot. Ac mae'r un cysylltydd, ond gyda phinout gwahanol, yn cael ei ddefnyddio i gyflenwi pŵer ychwanegol i'r famfwrdd. Mae'r cysylltydd hwn wrth ymyl yr un cysylltydd EdgeSlot hwn, mae pinout diddorol yno. Os oes gan y codwr 2 wifren +12 a 2 gyffredin, yna mae gan y bwrdd 3 gwifren +12 ac 1 cyffredin.

Hanes cydosod “uwchgyfrifiadur pentref” o ddarnau sbâr o eBay, Aliexpress a siop gyfrifiaduron. Rhan 2

Dyma'r un GTS 250 mewn gwirionedd sydd wedi'i gynnwys yn y codydd GPGPU. Gyda llaw, mae pŵer ychwanegol yn cael ei gyflenwi i'r codwyr a'r motherboard - o'r ail gysylltydd pŵer + 12V o CPU fy nghyflenwad pŵer. Penderfynais y byddai'n fwy cywir gwneud hyn.

Mae'r stori dylwyth teg yn dweud ei hun yn gyflym, ond yn araf bach mae'r parseli'n cyrraedd Rwsia o Tsieina a mannau eraill o amgylch y byd. Felly, roedd bylchau mawr yng nghynulliad yr “uwchgyfrifiadur”. Ond yn olaf cyrhaeddodd gweinydd Nvidia Tesla K20M gyda rheiddiadur goddefol ataf. Ar ben hynny, mae'n gwbl sero, o storio, wedi'i selio yn ei flwch gwreiddiol, yn ei becyn gwreiddiol, gyda phapurau gwarant. A dechreuodd y dioddefaint: sut i'w oeri?

Yn gyntaf, prynwyd peiriant oeri arferol gyda dau “dyrbin” bach o Loegr, dyma hi yn y llun, gyda thryledwr cardbord cartref.

Hanes cydosod “uwchgyfrifiadur pentref” o ddarnau sbâr o eBay, Aliexpress a siop gyfrifiaduron. Rhan 2

Hanes cydosod “uwchgyfrifiadur pentref” o ddarnau sbâr o eBay, Aliexpress a siop gyfrifiaduron. Rhan 2

Hanes cydosod “uwchgyfrifiadur pentref” o ddarnau sbâr o eBay, Aliexpress a siop gyfrifiaduron. Rhan 2

Ac maent yn troi allan i fod yn crap llwyr. Fe wnaethant lawer o sŵn, nid oedd y mownt yn ffitio o gwbl, fe wnaethant chwythu'n wan a rhoi cymaint o ddirgryniad fel fy mod yn ofni y byddai'r cydrannau'n disgyn oddi ar fwrdd Tesla! Pam y cawsant eu taflu i'r sbwriel bron ar unwaith?

Gyda llaw, yn y llun o dan Tesla gallwch weld rheiddiaduron copr gweinydd LGA 2011 1U wedi'u gosod ar y proseswyr gyda malwen o Coolerserver a brynwyd gan Aliexpress. Oeryddion gweddus iawn, er ychydig yn swnllyd. Maent yn ffitio'n berffaith.

Ond mewn gwirionedd, tra roeddwn i'n aros am oerach newydd i Tesla, y tro hwn ar ôl archebu malwen fawr BFB1012EN o Awstralia gyda mownt printiedig 3D, daeth i system storio'r gweinydd. Mae gan fwrdd y gweinydd gysylltydd mini-SAS lle mae 4 SATA a 2 gysylltydd SATA arall yn allbwn. Pob safon SATA 2.0 ond mae hynny'n addas i mi.

Nid yw'r intel C602 RAID sydd wedi'i integreiddio i'r chipset yn ddrwg a'r prif beth yw ei fod yn hepgor y gorchymyn TRIM ar gyfer SSDs, nad yw llawer o reolwyr RAID allanol rhad yn ei wneud.

Ar eBay prynais mini-SAS metr o hyd i 4 cebl SATA, ac ar Avito prynais drol cyfnewid poeth gyda bae 5,25″ ar gyfer 4 x 2,5″ SAS-SATA. Felly pan gyrhaeddodd y cebl a'r fasged, gosodwyd 4 terabyte Seagates ynddo, adeiladwyd RAID5 ar gyfer 4 dyfais yn y BIOS, dechreuais osod y gweinydd Ubuntu ... a rhedais i'r ffaith nad oedd y rhaglen rhaniad disg yn caniatáu i mi i greu rhaniad cyfnewid ar y cyrch.

Datrysais y broblem yn uniongyrchol - prynais addasydd ASUS HYPER M.2 x 2 MINI a M.4 SSD Samsung 2 EVO 960 Gb gan DNS a phenderfynais y dylid dyrannu'r ddyfais cyflymder uchaf ar gyfer cyfnewid, gan y bydd y system yn gweithio gyda llwyth cyfrifiannol uchel, ac mae'r cof yn dal yn amlwg yn llai na maint y data. Ac roedd y cof 250 GB yn ddrutach na'r SSD hwn.

Hanes cydosod “uwchgyfrifiadur pentref” o ddarnau sbâr o eBay, Aliexpress a siop gyfrifiaduron. Rhan 2

Mae'r un addasydd hwn gyda SSD wedi'i osod mewn codwr cornel isel.

Rhagweld y cwestiynau - “Beth am wneud y system gyfan ar M.2 a chael cyflymder mynediad uchaf yn uwch na chyrch ar SATA?” - Atebaf. Yn gyntaf, mae 1 TB neu fwy o SSDs M2 yn rhy ddrud i mi. Yn ail, hyd yn oed ar ôl diweddaru'r BIOS i'r fersiwn ddiweddaraf 2.8.1, nid yw'r gweinydd yn dal i gefnogi llwytho dyfeisiau M.2 NVE. Gwneuthum arbrawf lle gosododd y system / cist i USB FLASH 64 Gb a phopeth arall i M.2 SSD, ond nid oeddwn yn ei hoffi. Er, mewn egwyddor, mae cyfuniad o'r fath yn eithaf ymarferol. Os daw NVEs M.2 gallu uchel yn rhatach, efallai y byddaf yn dychwelyd i'r opsiwn hwn, ond am y tro mae SATA RAID fel system storio yn gweddu'n eithaf da i mi.
Pan benderfynais ar yr is-system ddisg a lluniwyd cyfuniad o 2 x SSD Kingston 240 Gb RAID1 “/” + 4 x HDD Seagate 1 Tb RAID5 “/home” + M.2 SSD Samsung 960 EVO 250 Gb “cyfnewid” mae'n amser i barhau â'm harbrofion gyda GPU Roedd gen i Tesla eisoes ac mae peiriant oeri Awstralia newydd gyrraedd gyda malwen “drwg” sy'n bwyta cymaint â 2.94A ar 12V, roedd yr ail slot yn cael ei feddiannu gan M.2 ac am y trydydd benthycais GT 610 “ar gyfer arbrofion.”

Hanes cydosod “uwchgyfrifiadur pentref” o ddarnau sbâr o eBay, Aliexpress a siop gyfrifiaduron. Rhan 2

Yma yn y llun mae pob un o'r 3 dyfais wedi'u cysylltu, ac mae'r M.2 SSD trwy riser Thermaltech hyblyg ar gyfer cardiau fideo sy'n gweithio ar y bws 3.0 heb wallau. Mae fel hyn, wedi'i wneud o lawer o “rhubanau” unigol tebyg i'r rhai y mae ceblau SATA yn cael eu gwneud ohonynt. Mae codwyr PCI-E 16x wedi'u gwneud o gebl fflat monolithig, tebyg i'r hen rai IDE-SCSI, yn drychineb, byddant yn dioddef o gamgymeriadau oherwydd ymyrraeth ar y cyd. Ac fel y dywedais eisoes, mae'r Tsieineaid bellach hefyd yn gwneud codwyr tebyg i rai Thermaltek, ond yn fyrrach.

Ar y cyd â'r Tesla K20 + GT 610, ceisiais lawer o bethau, ar yr un pryd darganfyddais, wrth gysylltu cerdyn fideo allanol a newid yr allbwn iddo yn y BIOS, nad yw vKVM yn gweithio, nad oedd yn gweithio mewn gwirionedd. cynhyrfu fi. Beth bynnag, doeddwn i ddim yn bwriadu defnyddio fideo allanol ar y system hon, nid oes unrhyw allbynnau fideo ar Teslas, ac mae'r panel gweinyddol o bell trwy SSH a heb X-tylluanod yn gweithio'n wych ar ôl i chi gofio ychydig beth yw llinell orchymyn heb GUI . Ond mae IPMI + vKVM yn symleiddio rheolaeth, ailosod a materion eraill gyda gweinydd pell yn fawr.

Yn gyffredinol, mae IPMI y bwrdd hwn yn wych. Porthladd 100 Mbit ar wahân, y gallu i ad-drefnu pigiad pecyn i un o'r porthladdoedd 10 Gbit, gweinydd Gwe adeiledig ar gyfer rheoli pŵer a rheoli gweinyddwyr, lawrlwytho cleient Java vKVM yn uniongyrchol ohono a chleient ar gyfer gosod disgiau o bell neu ddelweddau i'w hailosod... Yr unig beth yw bod y cleientiaid yr un fath a'r hen un Java Oracle, nad yw bellach yn cael ei gynnal yn Linux ac ar gyfer y panel gweinyddol pell roedd yn rhaid i mi gael gliniadur gyda Win XP SP3 gyda hyn Llyffant hynafol. Wel, mae'r cleient yn araf, mae digon ar gyfer y panel gweinyddol a hynny i gyd, ond ni allwch chwarae gemau o bell, mae'r FPS yn fach. Ac mae'r fideo ASPEED sydd wedi'i integreiddio ag IPMI yn wan, dim ond VGA.

Yn y broses o ddelio â'r gweinydd, dysgais lawer a dysgais lawer ym maes caledwedd gweinydd proffesiynol gan Dell. Ac nid wyf yn difaru o gwbl, yn ogystal â'r amser a'r arian a wariwyd yn dda. Bydd y stori addysgol am gydosod y ffrâm gyda holl gydrannau'r gweinydd yn parhau yn ddiweddarach.

Dolen i ran 3: habr.com/ru/post/454480

Ffynhonnell: hab.com

Ychwanegu sylw