God ettermiddag, kjære Khabrovsk-innbyggere!
Jeg vil fortelle deg en lang og, håper jeg, fascinerende, og kanskje nyttig, historie om å sette sammen en "landsbysuperdatamaskin" fra et Dell-servernodekort, Nvidia Tesla K20 GPU og hva som ble kjøpt her og der fra forskjellige nettbutikker eller i databutikker i byen din.
Historien begynte da en programmerervenn av meg, som også er astronom, begynte å studere nevrale nettverk. Deres "heltidsspesialist" sluttet og problemet ble festet til den "nærmeste spesialisten". Selv er jeg ingen programmerer, bare en "radiomekaniker for reparasjon av datautstyr (med) vitnemålet mitt," så å sette sammen all slags interessant datamaskinvare er en interessant og hyggelig aktivitet for meg. Dessverre jobber jeg i et annet område.
For å formulere oppgaven tydeligere, opprettet jeg et emne på forumet "Iron Ghosts of the Past", hvor det ble diskutert i ganske lang tid. Først var det en ganske naiv idé "å bygge en 4-veis SLI på en GTX 580 3Gb", som gradvis forvandlet seg til en forståelse - du må bygge en server! Prisene på serverhovedkort var uhyrlig høye helt til jeg kom over en interessant video på Youtube om lanseringen av et kinesisk serverkort på 2 prosessorer i ikke-standard format.
Her er videoen:
Jeg var spesielt fornøyd med budsjettprisen på systemet i denne videoen.
Men konsultasjon med mer kunnskapsrike kamerater som handlet med kinesiske servere overbeviste meg - "Vi trenger ikke kinesisk lykke!" I følge deres anmeldelser var kinesiske servere rett og slett uhyrlige upålitelige. Og jeg begynte å se på Avito for alternativer med Dell-serverkort. Jeg har to bærbare datamaskiner fra dette selskapet og har bare positive inntrykk fra dem. Veldig pålitelig teknologi.
På Avito fant jeg et Dell PowerEdge C6220 servernodekort i ferd med å kommunisere med selgeren som - han foreslo meg et utmerket nettsted der det var en publikasjon om hvordan en håndverker lanserte et slikt bord, . Og det var en link til et amerikansk forum hvor kraftige arbeidsstasjoner ble satt sammen på slike brett..
Jeg leste hele emnet fra begynnelse til slutt, jeg bestemte meg for mål, mål og måter å oppnå dem på. Oppgaven ble formulert som følger: "Sett sammen en dual-prosessor server på et Dell PowerEdge C8220 nodekort med en Tesla K10 eller K20 GPU." Valget for spesialiserte GPUer falt etter en diskusjon med personen som systemet faktisk ble satt sammen for - å ha "kort" som kunne utføre langsiktige beregninger med dobbel presisjon og kontroll av ECC-minnefeil, han kunne bruke dem til sine vitenskapelige aktiviteter, og ikke bare for å trene nevrale nettverk. Noe han faktisk var veldig glad for.
For å diskutere og registrere historien til monteringsprosessen på "Iron Ghosts of the Past"-forumet, opprettet jeg et tilsvarende emne, der jeg faktisk skrev om prosessen og la ut bilder. .
Oppgaven ble satt og jeg begynte å søke etter komponenter. På det tidspunktet da det hele startet, hadde jeg ennå ikke en registrering på eBay, og først ble de nødvendige reservedelene kjøpt av vennene mine, som jeg betalte kostnadene for kjøp og frakt til. Senere registrerte jeg meg der og begynte å kjøpe direkte, selv om jeg noen ganger må be om hjelp fra de som har kontoer på Shopotam og lignende tjenester. Ikke alle nødvendige reservedeler sendes direkte fra USA til Russland.
Det første hovedkortet jeg kjøpte fra eBay var Dell PowerEdge C8220 0083N0. I følge Dell-dokumentasjonen tilhørte den kortversjon 1.2 og hadde 3 PCI-E 16x-spor. Det er to vanlige i nærheten av strømknappen og en tredje på den andre siden av brettet er ikke-standard, for det såkalte GPGPU-stigerøret, som var inkludert i den såkalte Edge Slot.
Foto av styret, samme 0083N0, bilde fra eBay.
Og dette er bildet mitt, en linjal er festet til brettet for å forstå skalaen.
På det tidspunktet hadde jeg også kommet et stigerør for GPGPU i samme Edge Slot.
Her er et bilde der den er koblet til sitt vanlige sted for testing.
Samtidig ble det kjøpt en strømadapter på eBay, fra ATX til denne C6100 strømkontakten. Det er to typer av dem som selges på eBay, 12 og 18 pins. Vi trenger sistnevnte, og også en DC-DC-boost for å gjøre +5VSB fra ATX PSU til +12VSB på Dell-serveren. Og selvfølgelig, hunnkontakten i kontakten for å installere jumperen som trengs for å starte brettet og sende ut PS_ON-signalet fra det. Den har forresten en ikke-standard kontaktstigning på 2.0 mm. Selvfølgelig kan desperate gutter stikke en skrutrekker eller en spiker direkte inn i styrekontakten, men jeg foretrakk å gjøre alt sivilt.
I tillegg, for å prøvekjøre brettet, kjøpte vi den billigste Xeon E5-2604 V1 fra Aliexpress og et par DDR3 ECC REG-minnepinner fra eBay, som ble solgt som kompatible med Dell PowerEdge C8220. Først og fremst brukte jeg Alpine 20 Plus C0-kjølere til LGA 2011, som måtte modifiseres - kantene deres som hvilte på minnesporene ble arkivert med en kvern, fjærskiver ble fjernet fra festeskruene, og et par muttere ble skrus fast på gjengene - for ikke å skru inn skruene for dypt og ikke knekke brettet. LGA 2011-serversokler er utformet litt annerledes enn vanlige, og gjengene på kjøleribbeskruene skal være korte. Kjølerne fungerte forresten bra, til tross for at de var rent aluminium.
Og så, øyeblikket kom da prosessorene ankom, fanget jeg installasjonen deres på et bilde som et minne.
Og her er de samme Alpine aluminiumskjølerne installert.
Montert og kjørende system.
Min gamle trofaste Chieftek 550 W strømforsyning var koblet til systemet, en USB-hub for 4 enheter, som inkluderte et tastatur, en mus og en flash-stasjon med Ubuntu, en kortleser ble koblet til kontakten for en USB-kortleser på kortet som jeg koblet til en kinesisk USB-lydenhet, koblet jeg også en VGA-skjerm og en patchkabel til 100 Mbit IPMI-porten, som kalles Delicated-NIC. Ved siden av er det to 10 Gbe-porter som opererer over vanlig tvunnet kobberpar og fullt ut støtter et vanlig 100/1000-nettverk.
Systemet ble lansert i denne formen og det viste seg at styret sjekket minnet i svært lang tid under oppstart. Og i BIOS-startskjermen kalte den seg selv Dell DCS 6220.
Det er her jeg vil avslutte den første delen av historien min for ikke å kjede takknemlige lesere.
Link til del 2:
Kilde: www.habr.com