Wara nofsinhar it-tajjeb, għeżież residenti ta' Khabrovsk!
Irrid ngħidilkom storja twila u, nittama, affaxxinanti, u forsi utli, tal-assemblaġġ ta’ “supercomputer tar-raħal” minn bord ta’ node tas-server Dell, GPU Nvidia Tesla K20 u dak li nxtara hawn u hemm minn diversi ħwienet onlajn jew f’ ħwienet tal-kompjuter fil-belt tiegħek.
L-istorja bdiet meta ħabib tiegħi programmatur, li huwa wkoll astronomu, beda jistudja n-netwerks newrali. L-"ispeċjalista full-time" tagħhom waqa' u l-kwistjoni ġiet ippinjata fuq "l-eqreb speċjalista". Jien stess m'iniex programmatur, biss "mekkanik tar-radju għat-tiswija ta' tagħmir tal-kompjuter (bil-) diploma tiegħi," għalhekk l-assemblaġġ ta 'kull xorta ta' hardware tal-kompjuter interessanti hija attività interessanti u pjaċevoli għalija. Sfortunatament, naħdem f'qasam differenti.
Biex nifformula l-kompitu b'mod aktar ċar, ħloqt suġġett fuq il-forum "Iron Ghosts of the Past", fejn ġie diskuss għal żmien pjuttost twil. Għall-ewwel kien hemm idea pjuttost naive "biex tinbena SLI 4-way fuq GTX 580 3Gb", li gradwalment ttrasformat f'fehim - għandek bżonn tibni server! Il-prezzijiet għall-motherboards tas-server kienu għoljin ħafna sakemm iltqajt ma 'video interessanti fuq Youtube dwar it-tnedija ta' bord tas-server Ċiniż fuq 2 proċessuri ta 'format mhux standard.
Hawn hu l-video:
Kont kuntent b'mod speċjali bil-prezz tal-baġit tas-sistema f'dan il-video.
Madankollu, konsultazzjoni ma' sħabi aktar infurmati li ttrattaw is-servers Ċiniżi kkonvinċietni - "M'għandniex bżonn il-kuntentizza Ċiniża!" Skont ir-reviżjonijiet tagħhom, is-servers Ċiniżi kienu sempliċement monstrously inaffidabbli. U bdejt infittex fuq Avito għal għażliet bil-bordijiet tas-server Dell. Għandi żewġ laptops minn din il-kumpanija u għandi biss impressjonijiet pożittivi minnhom. Teknoloġija affidabbli ħafna.
Fuq Avito sibt Dell PowerEdge C6220 server node board fil-proċess ta 'komunikazzjoni mal-bejjiegħ li tiegħu - huwa ssuġġerieli sit eċċellenti fejn kien hemm pubblikazzjoni dwar kif wieħed tas-sengħa nieda tali bord, . U kien hemm rabta ma 'forum Amerikan fejn stazzjonijiet tax-xogħol qawwija kienu mmuntati fuq bordijiet bħal dawn..
Qrajt is-suġġett kollu mill-bidu sat-tmiem, iddeċidejt dwar miri, għanijiet u modi kif nilħquhom. Il-kompitu ġie fformulat kif ġej: "Immonta server b'żewġ proċessuri fuq bord tal-node Dell PowerEdge C8220 b'GPU Tesla K10 jew K20." L-għażla għal GPUs speċjalizzati waqgħet wara diskussjoni mal-persuna li għaliha s-sistema kienet fil-fatt tiġi mmuntata - li jkollhom "karti" li jistgħu jwettqu kalkoli fit-tul bi preċiżjoni doppja u kontroll ta 'żbalji tal-memorja ECC, huwa seta' jużahom għax-xjenza xjentifika tiegħu. attivitajiet, u mhux biss għat-taħriġ tan-netwerks newrali. Li fil-fatt kien kuntent ħafna dwaru.
Biex niddiskuti u nirreġistra l-istorja tal-proċess tal-assemblaġġ fuq il-forum "Iron Ghosts of the Past", ħloqt suġġett korrispondenti, fejn fil-fatt ktibt dwar il-proċess u ppubblikajt ritratti. .
Il-kompitu ġie stabbilit u bdejt infittex komponenti. Fiż-żmien meta beda kollox, għad ma kellix reġistrazzjoni fuq eBay u għall-ewwel l-ispare parts meħtieġa nxtraw minn sħabi, li lilhom ħallast l-ispejjeż tax-xiri u t-tbaħħir. Aktar tard, jien stess irreġistrajt hemm u bdejt nixtri direttament, għalkemm xi drabi jkolli nitlob għall-għajnuna minn dawk li għandhom kontijiet fuq Shopotam u servizzi simili. Mhux l-ispare parts kollha meħtieġa jintbagħtu direttament mill-Istati Uniti lejn ir-Russja.
L-ewwel motherboard li xtrajt minn eBay kienet id-Dell PowerEdge C8220 0083N0. Skont id-dokumentazzjoni Dell, kien jappartjeni għall-verżjoni tal-bord 1.2 u kellu 3 slots PCI-E 16x. Hemm żewġ regolari ħdejn il-buttuna tal-qawwa u t-tielet waħda fuq in-naħa l-oħra tal-bord mhix standard, għall-hekk imsejjaħ riser GPGPU, li kien inkluż fl-hekk imsejjaħ Edge Slot.
Ritratt tal-bord, l-istess 0083N0, ritratt minn eBay.
U dan huwa r-ritratt tiegħi, ħakkiem huwa mwaħħal mal-bord biex tifhem l-iskala.
Sa dak iż-żmien, riser għal GPGPU fl-istess Edge Slot kien wasal għandi wkoll.
Hawn ritratt fejn huwa konness mal-post regolari tiegħu għall-ittestjar.
Fl-istess ħin, inxtara adapter tal-enerġija fuq eBay, minn ATX għal dan il-konnettur tal-enerġija C6100. Hemm żewġ tipi minnhom mibjugħa fuq eBay, 12 u 18-il pin. Għandna bżonn ta 'l-aħħar, u wkoll spinta DC-DC biex inbiddlu + 5VSB mill-PSU ATX fi + 12VSB tas-server Dell. U ovvjament, il-konnettur femminili fil-konnettur biex tinstalla l-jumper meħtieġ biex tibda l-bord u toħroġ is-sinjal PS_ON minnha. Mill-mod, għandu pitch ta 'kuntatt mhux standard ta' 2.0 mm. Naturalment, guys ddisprati jistgħu jwaħħlu tornavit jew dwiefer direttament fil-konnettur tal-bord, imma jien ipprefera nagħmel kollox b'mod ċivili.
Barra minn hekk, biex tittestja tmexxi l-bord, xtrajna l-orħos Xeon E5-2604 V1 minn Aliexpress u par ta 'stikek tal-memorja DDR3 ECC REG minn eBay, li nbiegħu bħala kompatibbli mad-Dell PowerEdge C8220. L-ewwelnett, użajt coolers Alpine 20 Plus C0 għal LGA 2011, li kellhom jiġu modifikati - it-truf tagħhom li kienu jistrieħu fuq l-islots tal-memorja ġew ippreżentati bi grinder, il-washers tar-rebbiegħa tneħħew mill-viti tal-irbit, u ġew par ġewż. invitat fuq il-ħjut - sabiex ma jkissux il-viti wisq fil-fond u ma tkisserx il-bord. Is-sokits tas-server LGA 2011 huma ddisinjati b'mod kemmxejn differenti minn dawk regolari, u l-ħjut tal-viti tas-sink tas-sħana għandhom ikunu qosra. Mill-mod, il-coolers ħadmu tajjeb, minkejja l-fatt li kienu purament aluminju.
U għalhekk, wasal il-mument meta waslu l-proċessuri, qbadt l-installazzjoni tagħhom f'ritratt bħala tifkira.
U hawn huma installati l-istess coolers tal-aluminju Alpini.
Sistema immuntata u taħdem.
Il-provvista tal-enerġija qadima fidila tiegħi Chieftek 550 W kienet konnessa mas-sistema, hub USB għal 4 apparati, li kien jinkludi tastiera, maws u flash drive b'Ubuntu, qarrej tal-karti kien imqabbad mal-konnettur għal qarrej tal-kards USB fuq il- bord li fih daħħalt apparat awdjo USB Ċiniż, qabbad ukoll monitor VGA u patch cord mal-port IPMI ta '100 Mbit, li jissejjaħ Delikat-NIC. Maġenbu hemm żewġ portijiet 10Gbe li joperaw fuq ram ta 'par mibrum regolari u jappoġġjaw bis-sħiħ netwerk 100/1000 regolari.
Is-sistema ġiet imnedija f'din il-forma u rriżulta li l-bord iċċekkja l-memorja għal żmien twil ħafna waqt l-istartjar. U fil-BIOS splash screen sejjaħ lilu nnifsu Dell DCS 6220.
Hawnhekk se nagħlaq l-ewwel parti tal-istorja tiegħi biex ma niddejjaqx lill-qarrejja grati.
Link għall-parti 2:
Sors: www.habr.com