Goeie dag, liewe Khabrovsk inwoners!
Ek wil graag my storie oor die samestelling van 'n "dorpsuperrekenaar" voortsit. En ek sal verduidelik hoekom dit so genoem word—die rede is eenvoudig. Ek bly self in 'n dorpie. En die naam is 'n effense trol van diegene wat op die internet skree "Daar is geen lewe anderkant die Moskou-ringpad nie!", "Die Russiese dorpie het 'n dronkaard geword en is besig om uit te sterf!" So, iewers kan dit waar wees, maar ek sal die uitsondering op die reël wees. Ek drink nie, ek rook nie, ek doen dinge wat nie elke “urban cracker(s)” kan bekostig nie. Maar kom ons keer terug na ons skape, of meer presies, na die bediener, wat aan die einde van die eerste deel van die artikel reeds “tekens van lewe getoon het”.
Die bord het op die tafel gelê, ek het deur die BIOS geklim, dit na my smaak opgestel, Ubuntu 16.04 Desktop vir eenvoud afgejaag en besluit om 'n videokaart aan die "supermasjien" te koppel. Maar die enigste ding byderhand was 'n GTS 250 met 'n stewige nie-oorspronklike waaier aangeheg. Wat ek in die PCI-E 16x-gleuf naby die kragknoppie geïnstalleer het.
"Ek het dit met 'n pak Belomor (c) geneem" so moet my asseblief nie kwalik neem vir die kwaliteit van die foto nie. Ek wil eerder kommentaar lewer op wat op hulle vasgevang is.
Eerstens het dit geblyk dat wanneer dit in 'n gleuf geïnstalleer word, selfs 'n kort videokaart die bord teen die geheuegleuwe laat rus, waarin dit in hierdie geval nie geïnstalleer kan word nie en selfs die grendels laat sak moet word. Tweedens bedek die ystermonteerstrook van die videokaart die kragknoppie, en dit moes dus verwyder word. Terloops, die kragknoppie self word verlig deur 'n tweekleur LED, wat groen brand wanneer alles in orde is en oranje flikker as daar enige probleme is, 'n kortsluiting en die kragtoevoerbeskerming het uitgeskakel of die +12VSB krag aanbod te hoog of te laag is.
Trouens, hierdie moederbord is nie ontwerp om videokaarte "direk" in sy PCI-E 16x-gleuwe in te sluit nie; hulle is almal aan risers gekoppel. Om 'n uitbreidingskaart in die gleuwe naby die kragknoppie te installeer, is daar hoekverhogings, 'n lae een vir die installering van kort kaarte tot die lengte van die eerste verwerker verkoeler, en 'n hoë hoek een met 'n bykomende +12V kragaansluiting vir die installering van 'n videokaart "bo" 'n standaard lae 1U-verkoeler. Dit kan groot videokaarte soos GTX 780, GTX 980, GTX 1080 of gespesialiseerde GPGPU-kaarte Nvidia Tesla K10-K20-K40 of "rekenaarkaarte" Intel Xeon Phi 5110p en dies meer insluit.
Maar in die GPGPU-versterker kan die kaart wat in die EdgeSlot ingesluit is direk gekoppel word, slegs deur weer bykomende krag aan te sluit met dieselfde koppelstuk as op die hoë hoekverhoging. Vir diegene wat belangstel, op eBay word hierdie buigsame styger genoem "Dell PowerEdge C8220X PCI-E GPGPU DJC89" en kos ongeveer 2.5-3 duisend roebels. Hoekverhogings met bykomende kragtoevoer is baie skaarser en ek moes onderhandel om dit by 'n gespesialiseerde bedieneronderdelewinkel deur Whisper te kry. Hulle kos 7 duisend stuk.
Ek sal dadelik sê, "riskantige ouens (tm)" kan selfs 'n paar GTX 980 aan die bord koppel met Chinese buigsame stygers 16x, soos een persoon op "That Same Forum" gedoen het; terloops, die Chinese maak nogal goeie kunsvlyt wat op PCI-E 16x 2.0 werk in die styl van Thermaltek buigsame stygers, maar as dit eendag veroorsaak dat jy die kragkringe op die bedienerbord uitbrand, sal jy net jouself moet blameer. Ek het nie duur toerusting gewaag nie en het oorspronklike stygers met bykomende krag en een Chinese buigsame een gebruik, met die idee dat die koppeling van een kaart "direk" nie die bord sou verbrand nie.
Toe kom die langverwagte konneksies om bykomende krag aan te sluit en ek het 'n stert vir my riser in EdgeSlot gemaak. En dieselfde aansluiting, maar met 'n ander pinout, word gebruik om bykomende krag aan die moederbord te verskaf. Hierdie aansluiting is reg langs dieselfde EdgeSlot-aansluiting, daar is 'n interessante pinout daar. As die riser 2 drade +12 en 2 gemeenskaplike drade het, dan het die bord 3 drade +12 en 1 gemeenskaplik.
Dit is eintlik dieselfde GTS 250 wat in die GPGPU-verhoging ingesluit is. Terloops, bykomende krag word aan die stygers en die moederbord verskaf - vanaf die tweede +12V-kragaansluiting van die SVE van my kragtoevoer. Ek het besluit dat dit meer korrek sou wees om dit te doen.
Die sprokie vertel homself vinnig, maar stadigaan kom die pakkies van China en ander plekke regoor die wêreld na Rusland. Daarom was daar groot leemtes in die samestelling van die "superrekenaar". Maar uiteindelik het die Nvidia Tesla K20M-bediener met 'n passiewe verkoeler by my aangekom. Boonop is dit absoluut nul, vanaf berging, verseël in sy oorspronklike boks, in sy oorspronklike verpakking, met waarborgpapiere. En die lyding het begin: hoe om dit af te koel?
Eerstens is 'n pasgemaakte koeler met twee klein "turbines" uit Engeland gekoop, hier is dit op die foto, met 'n tuisgemaakte kartonverspreider.
En hulle het uitgedraai om volslae kak te wees. Hulle het baie geraas, die montering het glad nie gepas nie, hulle het swak geblaas en so vibrasie gegee dat ek bang was dat die komponente van die Tesla-bord sou afval! Hoekom is hulle byna dadelik in die asblik gegooi?
Terloops, op die foto onder Tesla kan u LGA 2011 1U-bedienerkoperstralers sien wat op die verwerkers geïnstalleer is met 'n slak van Coolerserver wat by Aliexpress gekoop is. Baie ordentlike verkoelers, alhoewel 'n bietjie raserig. Hulle pas perfek.
Maar eintlik, terwyl ek gewag het vir 'n nuwe koeler vir Tesla, hierdie keer nadat ek 'n groot BFB1012EN slak van Australië bestel het met 'n 3D-gedrukte berg, het dit by die bedienerstoorstelsel gekom. Die bedienerbord het 'n mini-SAS-konneksie waardeur 4 SATA en nog 2 SATA-verbindings uitgevoer word. Alles SATA standaard 2.0, maar dit pas my.
Die intel C602 RAID wat in die skyfiestel geïntegreer is, is nie sleg nie en die belangrikste ding is dat dit die TRIM-opdrag vir SSD's oorslaan, wat baie goedkoop eksterne RAID-beheerders nie doen nie.
Op eBay het ek 'n meter lange mini-SAS na 4 SATA-kabel gekoop, en op Avito het ek 'n warmruilkarretjie met 'n 5,25"-baai vir 4 x 2,5" SAS-SATA gekoop. So toe die kabel en die mandjie aankom, is 4 teragrepe Seagates daarin geïnstalleer, RAID5 vir 4 toestelle is in die BIOS gebou, ek het begin om die bediener Ubuntu te installeer... en het vasgeloop dat die skyfpartisioneringsprogram my nie toegelaat het nie om 'n ruilpartisie op die aanval te skep.
Ek het die probleem reguit opgelos - ek het 'n ASUS HYPER M.2 x 2 MINI en M.4 SSD Samsung 2 EVO 960 Gb adapter van DNS gekoop en besluit dat die maksimum spoed toestel vir ruil toegeken moet word, aangesien die stelsel sal werk met 'n hoë berekeningslading, en die geheue is steeds duidelik minder as die datagrootte. En die 250 GB geheue was duurder as hierdie SSD.
Dieselfde adapter met 'n SSD geïnstalleer in 'n lae hoekverhoging.
Verwag die vrae - "Hoekom maak jy nie die hele stelsel op M.2 en het 'n maksimum toegangspoed hoër as dié van 'n klopjag op SATA nie?" - Ek sal antwoord. Eerstens is 1 TB of meer M2 SSD's vir my te duur. Tweedens, selfs nadat die BIOS na die nuutste weergawe 2.8.1 opgedateer is, ondersteun die bediener steeds nie die laai van M.2 NVE-toestelle nie. Ek het 'n eksperiment gedoen waar die stelsel /boot op USB FLASH 64 Gb en alles anders op M.2 SSD gestel het, maar ek het nie daarvan gehou nie. Alhoewel so 'n kombinasie in beginsel redelik werkbaar is. As hoëkapasiteit M.2 NVE's goedkoper word, kan ek na hierdie opsie terugkeer, maar vir eers pas SATA RAID as 'n stoorstelsel my redelik goed.
Toe ek op die skyfsubstelsel besluit en met 'n kombinasie vorendag gekom het van 2 x SSD Kingston 240 Gb RAID1 “/” + 4 x HDD Seagate 1 Tb RAID5 “/home” + M.2 SSD Samsung 960 EVO 250 Gb “swap” is dit tyd om my eksperimente met GPU voort te sit Ek het reeds 'n Tesla gehad en 'n Australiese koeler het pas aangekom met 'n "bose" slak wat soveel as 2.94A teen 12V eet, die tweede gleuf is deur M.2 beset en vir die derde het ek 'n GT 610 "vir eksperimente" geleen.
Hier op die foto is al 3 toestelle gekoppel, en die M.2 SSD is via 'n buigsame Thermaltech-verhoging vir videokaarte wat sonder foute op die 3.0-bus werk. Dit is so, gemaak van baie individuele "linte" soortgelyk aan dié waaruit SATA-kabels gemaak word. PCI-E 16x-verhogings gemaak van 'n monolitiese plat kabel, soort van soos die ou IDE-SCSI, is 'n ramp, hulle sal ly aan foute as gevolg van wedersydse inmenging. En soos ek reeds gesê het, die Chinese maak nou ook risers soortgelyk aan dié van Thermaltek, maar korter.
In kombinasie met die Tesla K20 + GT 610 het ek baie dinge probeer, terselfdertyd het ek uitgevind dat vKVM nie werk as ek 'n eksterne videokaart koppel en die uitset na die BIOS oorskakel nie, wat nie regtig werk nie. my ontstel. In elk geval, ek was nie van plan om eksterne video op hierdie stelsel te gebruik nie, daar is geen video-uitsette op Teslas nie, en die afgeleë administrasiepaneel via SSH en sonder X-uile werk wonderlik sodra jy 'n bietjie onthou wat 'n opdragreël sonder 'n GUI is . Maar IPMI + vKVM vereenvoudig die bestuur, herinstallasie en ander probleme met 'n afgeleë bediener aansienlik.
Oor die algemeen is hierdie raad se IPMI wonderlik. 'n Aparte 100 Mbit-poort, die vermoë om pakkie-inspuiting na een van die 10 Gbit-poorte te herkonfigureer, 'n ingeboude webbediener vir kragbestuur en beheer van bedieners, aflaai van 'n vKVM Java-kliënt direk daarvan en 'n kliënt vir afstandmontering van skywe of beelde vir herinstallasie... Die enigste ding is dat die kliente dieselfde is as die ou een Java Oracle, wat nie meer in Linux ondersteun word nie en vir die remote admin panel moes ek 'n skootrekenaar kry met Win XP SP3 met hierdie einste antieke Padda. Wel, die kliënt is stadig, daar is genoeg vir die administrasiepaneel en dit alles, maar jy kan nie speletjies op afstand speel nie, die FPS is klein. En die ASPEED-video wat met IPMI geïntegreer is, is swak, net VGA.
In die proses van die hantering van die bediener, het ek baie geleer en baie geleer op die gebied van professionele bediener hardeware van Dell. Waaroor ek glad nie spyt is nie, asook die tyd en geld goed bestee. Die opvoedkundige storie oor die werklike samestelling van die raam met al die bedienerkomponente sal later voortgesit word.
Skakel na deel 3:
Bron: will.com