God eftermiddag, kære Khabrovsk-beboere!
Jeg vil gerne fortælle dig en lang og, forhåbentlig, fascinerende og måske brugbar historie om at samle en "landsbysupercomputer" fra et Dell-servernodekort, Nvidia Tesla K20 GPU og hvad der blev købt hist og her fra forskellige onlinebutikker eller i computerbutikker i din by.
Historien begyndte, da en af mine programmører, som også er astronom, begyndte at studere neurale netværk. Deres "fuldtidsspecialist" sagde op, og problemet blev sat på den "nærmeste specialist". Jeg er selv ikke programmør, bare "radiomekaniker til reparation af computerudstyr (med) mit eksamensbevis", så at samle alverdens interessant computerhardware er en interessant og fornøjelig aktivitet for mig. Desværre arbejder jeg i et andet område.
For mere tydeligt at formulere opgaven oprettede jeg et emne på "Fortidens Jernspøgelser", hvor det blev diskuteret i ret lang tid. Først var der en temmelig naiv idé "at bygge en 4-vejs SLI på en GTX 580 3Gb", som gradvist blev omdannet til en forståelse - du skal bygge en server! Priserne for serverbundkort var uhyrligt høje, indtil jeg stødte på en interessant video på Youtube om lanceringen af et kinesisk serverkort på 2 processorer i ikke-standardformat.
Her er videoen:
Jeg var især tilfreds med budgetprisen for systemet i denne video.
Men konsultation med mere kyndige kammerater, der beskæftigede sig med kinesiske servere, overbeviste mig - "Vi har ikke brug for kinesisk lykke!" Ifølge deres anmeldelser var kinesiske servere simpelthen monstrøst upålidelige. Og jeg begyndte at kigge på Avito efter muligheder med Dell-serverkort. Jeg har to bærbare computere fra dette firma og har kun positive indtryk fra dem. Meget pålidelig teknologi.
På Avito fandt jeg et Dell PowerEdge C6220-servernodekort i færd med at kommunikere med sælgeren - han foreslog mig et glimrende websted, hvor der var en publikation om, hvordan en håndværker lancerede et sådant bræt, . Og der var et link til et amerikansk forum, hvor kraftfulde arbejdsstationer blev samlet på sådanne tavler..
Jeg læste hele emnet fra start til slut, jeg besluttede mig for mål, mål og måder at nå dem på. Opgaven var formuleret som følger: "Saml en dual-processor server på et Dell PowerEdge C8220 nodekort med en Tesla K10 eller K20 GPU." Valget af specialiserede GPU'er faldt efter en diskussion med den person, som systemet faktisk blev samlet til - med "kort", der kunne udføre langtidsberegninger med dobbelt præcision og kontrol af ECC-hukommelsesfejl, han kunne bruge dem til sin videnskabelige aktiviteter, og ikke kun til træning af neurale netværk. Hvilket han faktisk var meget glad for.
For at diskutere og registrere historien om samlingsprocessen på forummet "Fortidens jernspøgelser" oprettede jeg et tilsvarende emne, hvor jeg faktisk skrev om processen og postede fotografier. .
Opgaven blev sat, og jeg begyndte at søge efter komponenter. På det tidspunkt, hvor det hele startede, havde jeg endnu ikke en registrering på eBay, og i første omgang blev de nødvendige reservedele købt af mine venner, som jeg betalte omkostningerne til køb og forsendelse til. Senere registrerede jeg mig der og begyndte at købe direkte, selvom jeg nogle gange er nødt til at bede om hjælp fra dem, der har konti på Shopotam og lignende tjenester. Ikke alle nødvendige reservedele sendes direkte fra USA til Rusland.
Det første bundkort, jeg købte fra eBay, var Dell PowerEdge C8220 0083N0. Ifølge Dell-dokumentationen tilhørte den kortversion 1.2 og havde 3 PCI-E 16x-slots. Der er to almindelige i nærheden af tænd/sluk-knappen og en tredje på den anden side af kortet er ikke-standard, for den såkaldte GPGPU-stigning, som var inkluderet i den såkaldte Edge Slot.
Foto af bestyrelsen, samme 0083N0, foto fra eBay.
Og dette er mit billede, en lineal er fastgjort til tavlen for at forstå skalaen.
På det tidspunkt var der også kommet et stigrør til GPGPU i den samme Edge Slot.
Her er et foto, hvor den er forbundet til sit almindelige sted for test.
Samtidig blev der købt en strømadapter på eBay, fra ATX til dette C6100 strømstik. Der er to typer af dem, der sælges på eBay, 12 og 18 ben. Vi har brug for sidstnævnte, og også et DC-DC-boost for at omdanne +5VSB fra ATX PSU til +12VSB på Dell-serveren. Og selvfølgelig, hunstikket i stikket til at installere jumperen, der er nødvendigt for at starte kortet og udsende PS_ON-signalet fra det. Den har i øvrigt en ikke-standard kontaktafstand på 2.0 mm. Selvfølgelig kan desperate fyre stikke en skruetrækker eller et søm direkte ind i kortets stik, men jeg foretrak at gøre alting civilt.
Derudover købte vi, for at teste boardet, den billigste Xeon E5-2604 V1 fra Aliexpress og et par DDR3 ECC REG memory sticks fra eBay, som blev solgt som kompatible med Dell PowerEdge C8220. Først og fremmest brugte jeg Alpine 20 Plus C0 kølere til LGA 2011, som skulle modificeres - deres kanter, der hvilede på hukommelsespladserne, blev filet med en kværn, fjederskiver blev fjernet fra fastgørelsesskruerne, og et par møtrikker blev skrues på gevindene - for ikke at skrue skruerne for dybt i og ikke knække brættet. LGA 2011-serversokler er designet lidt anderledes end almindelige, og gevindene på kølepladeskruerne skal være korte. Kølerne fungerede i øvrigt godt, på trods af at de var rent aluminium.
Og så det øjeblik kom, da processorerne ankom, fangede jeg deres installation på et billede som et minde.
Og her er de samme Alpine aluminiumskølere installeret.
Samlet og kørende system.
Min gamle trofaste Chieftek 550 W strømforsyning var tilsluttet systemet, en USB-hub til 4 enheder, som inkluderede et tastatur, en mus og et flashdrev med Ubuntu, en kortlæser var tilsluttet stikket til en USB-kortlæser på board, hvori jeg tilsluttede en kinesisk USB-lydenhed, tilsluttede jeg også en VGA-skærm og en patch-ledning til 100 Mbit IPMI-porten, som kaldes Delicated-NIC. Ved siden af er der to 10 Gbe-porte, der fungerer over almindeligt parsnoet kobber og fuldt ud understøtter et almindeligt 100/1000-netværk.
Systemet blev lanceret i denne form, og det viste sig, at kortet tjekkede hukommelsen i meget lang tid under opstart. Og i BIOS-startskærmen kaldte den sig selv Dell DCS 6220.
Det er her, jeg vil afslutte første del af min historie for ikke at kede taknemmelige læsere.
Link til del 2:
Kilde: www.habr.com