Goeie middei, leave ynwenners fan Khabrovsk!
Ik wol jo in lang en, ik hoopje, fassinearjend, en miskien nuttich, ferhaal fertelle oer it gearstallen fan in "doarpssuperkomputer" fan in Dell-tsjinner node board, Nvidia Tesla K20 GPU en wat hjir en dêr kocht waard fan ferskate online winkels as yn kompjûter winkels yn jo stêd.
It ferhaal begon doe't in programmeurfreon fan my, dy't ek in astronoom is, begon te studearjen fan neurale netwurken. Harren "folsleine spesjalist" stoppe en it probleem waard fêstmakke op 'e "nêste spesjalist". Ik sels bin gjin programmeur, gewoan in "radiomonteur foar reparaasje fan kompjûterapparatuer (mei) myn diploma", dus it gearstallen fan allerhanne nijsgjirrige kompjûterhardware is foar my in nijsgjirrige en noflike aktiviteit. Spitigernôch wurkje ik yn in oar gebiet.
Om de taak dúdliker te formulearjen, haw ik in ûnderwerp makke op it forum "Iron Ghosts of the Past", wêr't it in lange tiid besprutsen waard. Earst wie d'r in nochal naïve idee "om in 4-wei SLI te bouwen op in GTX 580 3Gb", dy't stadichoan feroare yn in begryp - jo moatte in tsjinner bouwe! Prizen foar server-motherboards wiene skandalich heech oant ik in nijsgjirrige fideo op Youtube tsjinkaam oer de lansearring fan in Sineeske serverboerd op 2 net-standertformaatprozessors.
Hjir is de fideo:
Ik wie foaral bliid mei de budzjetpriis fan it systeem yn dizze fideo.
Oerlis mei mear betûfte kameraden dy't mei Sineeske servers omgeane, oertsjûge my lykwols - "Wy hawwe gjin Sineesk lok nedich!" Neffens har beoardielingen wiene Sineeske servers gewoan monsterlik ûnbetrouber. En ik begûn te sykjen op Avito foar opsjes mei Dell tsjinner boards. Ik haw twa laptops fan dit bedriuw en haw allinich positive yndrukken fan har. Hiel betroubere technology.
Op Avito fûn ik in Dell PowerEdge C6220 tsjinner node board yn it proses fan kommunikaasje mei de ferkeaper wêrfan - hy stelde my in poerbêste side foar wêr't in publikaasje wie oer hoe't ien ambachtsman sa'n boerd lansearre, . En der wie in keppeling nei in Amerikaansk foarum dêr't machtige wurkstasjons waarden gearstald op sokke buorden..
Ik lês it heule ûnderwerp fan begjin oant ein, ik besleat doelen, doelen en manieren om se te berikken. De taak waard as folget formulearre: "In dual-processor server gearstalle op in Dell PowerEdge C8220 node board mei in Tesla K10 of K20 GPU." De kar foar spesjalisearre GPU's foel nei in diskusje mei de persoan foar wa't it systeem eins waard gearstald - mei "kaarten" dy't lange-termyn berekkeningen kinne útfiere mei dûbele presyzje en kontrôle fan ECC-ûnthâldfouten, hy koe se brûke foar syn wittenskiplike aktiviteiten, en net allinich foar training fan neurale netwurken. Dêr wie er eins tige bliid mei.
Om de skiednis fan it assemblageproses te besprekken en op te nimmen op it forum "Iron Ghosts of the Past", haw ik in oerienkommende ûnderwerp makke, wêr't ik eins oer it proses skreau en foto's pleatste. .
De taak wie ynsteld en ik begon te sykjen nei komponinten. Op it stuit dat it allegear begon, hie ik noch gjin registraasje op eBay en earst waarden de nedige reserveûnderdielen kocht troch myn freonen, oan wa't ik de kosten fan oankeap en ferstjoering betelle. Letter haw ik mysels dêr registrearre en begon direkt te keapjen, hoewol ik soms om help moat freegje fan dyjingen dy't akkounts hawwe op Shopotam en ferlykbere tsjinsten. Net alle nedige spare dielen wurde direkt stjoerd fan 'e FS nei Ruslân.
It earste moederbord dat ik kocht fan eBay wie de Dell PowerEdge C8220 0083N0. Neffens Dell dokumintaasje, it hearde ta board ferzje 1.2 en hie 3 PCI-E 16x slots. Der binne twa reguliere tichtby de macht knop en in tredde ien oan 'e oare kant fan it bestjoer is net-standert, foar de saneamde GPGPU riser, dat waard opnaam yn de saneamde Edge Slot.
Foto fan it bestjoer, deselde 0083N0, foto fan eBay.
En dit is myn foto, in liniaal is ferbûn oan it boerd om de skaal te begripen.
Tsjin dy tiid, in riser foar GPGPU yn deselde Edge Slot hie ek oankommen my.
Hjir is in foto wêr't it ferbûn is mei syn reguliere plak foar testen.
Tagelyk waard in stromadapter kocht op eBay, fan ATX nei dizze C6100-stromkontakt. Der binne twa soarten fan harren ferkocht op eBay, 12 en 18 pins. Wy hawwe de lêste nedich, en ek in DC-DC-boost om +5VSB fan 'e ATX PSU yn +12VSB fan' e Dell-tsjinner te feroarjen. En fansels, de froulike ferbining yn 'e ferbining om de jumper te ynstallearjen nedich om it bestjoer te begjinnen en it PS_ON-sinjaal út te fieren. Troch de wei, it hat in net-standert kontakt pitch fan 2.0 mm. Fansels kinne wanhopige jonges in schroevendraaier of in spiker direkt yn 'e boardconnector stekke, mar ik die leaver alles boargerlik.
Derneist, om it bestjoer te testen, kochten wy de goedkeapste Xeon E5-2604 V1 fan Aliexpress en in pear DDR3 ECC REG-ûnthâldstokken fan eBay, dy't waarden ferkocht as kompatibel mei de Dell PowerEdge C8220. Alderearst brûkte ik Alpine 20 Plus C0-koelers foar LGA 2011, dy't wizige wurde moasten - har rânen dy't op 'e ûnthâldslots rêsten waarden pleatst mei in grinder, springwaskers waarden fuortsmiten fan' e befestigingsskroeven, en in pear moeren wiene op 'e triedden geschroefd - om de skroeven net te djip yn te skroeven en it boerd net te brekken. LGA 2011 tsjinner sockets binne ûntwurpen wat oars as gewoane, en de triedden fan de heatsink screws moatte wêze koart. Troch de wei, de coolers wurke goed, nettsjinsteande it feit dat se wiene suver aluminium.
En sa, it momint kaam doe't de processors oankamen, haw ik har ynstallaasje yn in foto fêstlein as in oantinken.
En hjir binne deselde Alpine aluminium koelers ynstallearre.
Sammele en rinnende systeem.
Myn âlde trouwe Chieftek 550 W stroomfoarsjenning wie ferbûn oan it systeem, in USB-hub foar 4 apparaten, dy't in toetseboerd, in mûs en in flash drive mei Ubuntu omfette, in kaartlêzer waard ferbûn mei de ferbining foar in USB-kaartlêzer op 'e board dêr't ik plug in Sineesk USB audio apparaat, Ik ferbûn ek in VGA monitor en in patch cord oan de 100 Mbit IPMI haven, dat hjit Delicated-NIC. Njonken it binne twa 10Gbe havens dy't operearje oer gewoane twisted pear koper en folslein stypje in gewoane 100/1000 netwurk.
It systeem waard lansearre yn dizze foarm en it die bliken dat it bestjoer kontrolearre it ûnthâld foar in hiel lange tiid by it opstarten. En yn it BIOS-splash-skerm neamde it himsels Dell DCS 6220.
Hjir sil ik it earste diel fan myn ferhaal einigje om tankbere lêzers net te ferfelen.
Link nei diel 2:
Boarne: www.habr.com