Dobar dan, dragi stanovnici Khabrovsk!
Želim vam ispričati dugu i, nadam se, fascinantnu, a možda i korisnu priču o sastavljanju “seoskog superračunala” od Dell server node ploče, Nvidia Tesla K20 GPU-a i onoga što se tu i tamo kupilo u raznim online trgovinama ili u trgovine računalima u vašem gradu.
Priča je počela kada je moj prijatelj programer, koji je također astronom, počeo proučavati neuronske mreže. Njihov "stalni specijalist" dao je otkaz i problem je prikvačen "najbližem specijalistu". Ja osobno nisam programer, samo “radiomehaničar za popravak računalne opreme (s) diplomom,” pa mi je sklapanje raznoraznog zanimljivog računalnog hardvera zanimljiva i ugodna aktivnost. Nažalost, radim u drugom području.
Da bih jasnije formulirao problem, stvorio sam temu na forumu "Željezni duhovi prošlosti", gdje se o tome raspravljalo dosta dugo. U početku je postojala prilično naivna ideja "izgraditi 4-way SLI na GTX 580 3Gb", koja se postupno transformirala u razumijevanje - trebate izgraditi poslužitelj! Cijene matičnih ploča za poslužitelje bile su nečuveno visoke sve dok nisam naišao na zanimljiv video na Youtubeu o lansiranju kineske ploče za poslužitelje na 2 procesora nestandardnog formata.
Evo videa:
Posebno sam bio zadovoljan proračunskom cijenom sustava u ovom videu.
Međutim, konzultacija s upućenijim drugovima koji su se bavili kineskim serverima uvjerila me - "Ne treba nam kineska sreća!" Prema njihovim recenzijama, kineski poslužitelji bili su jednostavno čudovišno nepouzdani. I počeo sam tražiti na Avitu opcije s Dell poslužiteljskim pločama. Imam dva laptopa ove tvrtke i imam samo pozitivne dojmove o njima. Vrlo pouzdana tehnologija.
Na Avitu sam pronašao Dell PowerEdge C6220 server node ploču u procesu komunikacije s prodavačem - on mi je predložio izvrsnu stranicu na kojoj je bila publikacija o tome kako je jedan majstor lansirao takvu ploču, . A bio je i link na američki forum gdje su se na takvim pločama sklapale moćne radne stanice..
Pročitao sam cijelu temu od početka do kraja, odlučio sam o ciljevima, ciljevima i načinima kako ih postići. Zadatak je formuliran na sljedeći način: "Sastavite dvoprocesorski poslužitelj na Dell PowerEdge C8220 čvornoj ploči s Tesla K10 ili K20 GPU." Izbor za specijalizirane grafičke procesore pao je nakon razgovora s osobom za koju se sustav zapravo sastavljao - imajući "kartice" koje mogu provoditi dugoročne izračune s dvostrukom preciznošću i kontrolom ECC memorijskih pogrešaka, mogao ih je koristiti za svoje znanstvene aktivnosti, a ne samo za obuku neuronskih mreža. Što mu je zapravo bilo jako drago.
Kako bih raspravljao i zabilježio povijest procesa sklapanja na forumu "Željezni duhovi prošlosti", stvorio sam odgovarajuću temu, gdje sam zapravo pisao o procesu i objavio fotografije. .
Zadatak je postavljen i počeo sam tražiti komponente. U vrijeme kada je sve počelo još nisam imao registraciju na eBay-u i isprva su potrebne rezervne dijelove kupovali moji prijatelji, kojima sam plaćao troškove kupnje i dostave. Kasnije sam se i sam tamo registrirao i počeo kupovati direktno, iako ponekad moram tražiti pomoć od onih koji imaju račune na Shopotamu i sličnim servisima. Ne šalju se svi potrebni rezervni dijelovi izravno iz SAD-a u Rusiju.
Prva matična ploča koju sam kupio na eBayu bila je Dell PowerEdge C8220 0083N0. Prema Dellovoj dokumentaciji, pripadao je verziji ploče 1.2 i imao je 3 PCI-E 16x utora. Dva su obična blizu gumba za uključivanje, a treći s druge strane ploče je nestandardan, za tzv. GPGPU riser, koji je bio uključen u tzv. Edge Slot.
Fotografija ploče, ista 0083N0, fotografija s eBaya.
A ovo je moja fotografija, ravnalo je pričvršćeno na ploču da biste razumjeli mjerilo.
Do tada mi je stigao i riser za GPGPU u istom Edge Slotu.
Evo fotografije gdje je spojen na svoje redovno mjesto za testiranje.
Ujedno je na eBay-u kupljen strujni adapter, sa ATX-a na ovaj C6100 strujni konektor. Na eBayu ih se prodaju dvije vrste, 12 i 18 pinova. Trebamo potonje, kao i DC-DC pojačanje da pretvorimo +5VSB iz ATX PSU u +12VSB Dell poslužitelja. I naravno, ženski konektor u konektoru za ugradnju skakača potrebnog za pokretanje ploče i izlaz PS_ON signala s nje. Usput, ima nestandardni kontaktni korak od 2.0 mm. Naravno, očajnici mogu zabiti odvijač ili čavao direktno u konektor ploče, ali ja sam radije sve radio civilizirano.
Osim toga, da bismo testirali ploču, kupili smo najjeftiniji Xeon E5-2604 V1 s Aliexpressa i par DDR3 ECC REG memorijskih stikova s eBaya, koji su se prodavali kao kompatibilni s Dell PowerEdge C8220. Prije svega, koristio sam hladnjake Alpine 20 Plus C0 za LGA 2011, koje je trebalo modificirati - brusilicom su im brusili rubove koji su nalijegali na memorijske utore, skinuli opružne podloške s vijaka za pričvršćivanje i zategli par matica. zavrnuti na navoje - kako ne biste preduboko uvrnuli vijke i ne slomili ploču. LGA 2011 utičnice za poslužitelje dizajnirane su nešto drugačije od običnih, a navoji vijaka hladnjaka trebaju biti kratki. Usput, hladnjaci su radili dobro, unatoč činjenici da su bili čisto aluminijski.
I tako, došao je trenutak kada su procesori stigli, njihovu instalaciju sam uhvatio fotografijom za uspomenu.
I ovdje su instalirani isti Alpine aluminijski hladnjaci.
Sastavljen i pokrenut sustav.
Moje staro vjerno Chieftek napajanje od 550 W bilo je spojeno na sustav, USB hub za 4 uređaja, koji su uključivali tipkovnicu, miš i flash pogon s Ubuntuom, čitač kartica je bio spojen na USB konektor čitača kartica na ploči u na koji sam priključio kineski USB audio uređaj, spojio sam i VGA monitor i patch kabel na 100 Mbit IPMI port, koji se zove Delicated-NIC. Pored njega su dva 10Gbe porta koji rade preko obične bakrene parice i u potpunosti podržavaju običnu 100/1000 mrežu.
Sustav je pokrenut u ovom obliku i pokazalo se da je ploča tijekom pokretanja provjeravala memoriju jako dugo. A na početnom ekranu BIOS-a nazvao se Dell DCS 6220.
Ovdje ću završiti prvi dio svoje priče da ne dosađujem zahvalnim čitateljima.
Link na 2. dio:
Izvor: www.habr.com