Dobrý deň, obyvatelia Chabrovska! Vo svojom príbehu budem pokračovať zostavením „superpočítača v dedine“.
Tretiu časť začnem úprimným poďakovaním kamarátom, ktorí ma v ťažkých chvíľach podporovali, motivovali, pomáhali peniazmi dlhodobým sponzorovaním tohto dosť drahého biznisu a dokonca pomáhali s nákupom komponentov zo zahraničia v prípadoch, keď Nemohol som ich kúpiť na mieste. Nasmerujte sa sám. Napríklad, ak spoločnosť predávajúca časti servera v USA alebo Kanade jednoducho neposlala do Ruska. Bez ich dlhodobej a pravidelnej pomoci by boli moje úspechy oveľa skromnejšie.
Aj vďaka ich prosbám som sa odhodlal a otvoril si účet na Youtube, kúpil si starý smartfón Lumia 640, ktorý používam výhradne ako videokameru, a začal som natáčať náučné videá o zostavovaní „dedinského superpočítača“ a o iné aspekty a projekty môjho dedinského života.
Playlist „Village Supercomputer“:
Tí, ktorí chcú spoilery, si ich môžu prečítať, aj keď je samozrejme lepšie to urobiť pri čítaní môjho príbehu alebo dokonca po ňom.
Druhá časť môjho príbehu bola prerušená pripojením Tesla K20M, GT 610 a M.2 NVE SSD + diskového poľa do systému. Mimochodom, čo je ešte dobré na tejto doske Dell - má vstavanú „poličku na disk“, aj keď len pre 6 zariadení, a RAID nie je „najsofistikovanejší na svete“, ale na rozdiel od svojich profesionálnejších externých náprotivkov , preskočí príkaz TRIM na SSD. Čo je tiež dôležité, ak intenzívne používate neprofesionálne serverové SSD.
Mimochodom, na tejto doske je aj jeden zaujímavý a dôležitý bod. Radiátory na čipsetoch sú nízke s malými rebrami. Toto funguje dobre, keď je doska v pôvodnom stojane, kde ju poháňajú výkonné turbíny. Ale pri samostatnom použití dosky je potrebné odstrániť plastovú nálepku z chladiča najbližšie k rozširujúcim slotom a tú vzdialenejšiu je vhodné nahradiť akýmkoľvek vhodným chladičom z čipsetu starej základnej dosky s veľkými rebrami, pretože čip umiestnený pod ním sa na doske zohrieva najviac.
Po odstránení grafickej karty zo systému som začal zostavovať rám pre môj server; v testovacej verzii bolo všetko na elektrickej páske, zápalkových škatuľkách a iných plastových podperách, ale pre plné využitie 24/7/365 sa táto možnosť nezdala pre mňa prijateľné. Bolo potrebné vyrobiť normálny rám z hliníkového uholníka. Použil som hliníkové rohy od Leroy Merlin, ktoré mi poslal kamarát z Moskovskej oblasti, v mojom blízkom meste sa jednoducho nikde nepredávali!
Okrem rohov boli v dizajne použité skrutky a matice so zápustnou hlavou M5, skrutky a matice M3, rohy pre malý nábytok, hliníkové nity pre otvory 5 mm, nitovacia pištoľ, pílka na kov, skrutkovač, vrták do kovu 5.0 mm, pilník, krížový skrutkovač, káblové zipsy a ramená, ktoré nevyrastajú zo zadku.
Na pripevnenie dosky k rámu a niektorých ďalších prvkov boli použité rohy. To samozrejme celému systému pridalo na výške, pretože doska bola zdvihnutá dosť vysoko nad spodnú rovinu rámu, ale rozhodol som sa, že je to pre mňa prijateľné. Nebojoval som o každý gram váhy a milimeter výšky, toto predsa nie je palubný počítač lietadla, kde je štandard „15 G v 3 osiach, otrasy do 1000 G a vibrácie“.
Doska je osadená, stúpačky zaskrutkované, adaptér s SSD M.2 zaskrutkovaný.
Doska, SSD, stúpačky a Tesla sú nainštalované na svojich miestach. DC-DC ešte nie je priskrutkované a v zákulisí visí na drôtoch. Toto je server verzie 1.0, stále na jednom Tesla K20M.
Tu je DC-DC už pripevnený k rámu, na boku za základnou doskou pod napájacími „chvosty“ je malý šál.
A toto je už zostavený systém, pohľad zhora. Nad Teslou je ďalší roh, v ktorom je vedľa seba priskrutkovaná dvojica SSD, nad nimi je klietka na HDD a na vrchu rámu, ktorý rám uzatvára, visí 850 W modulárny zdroj Thermaltek. Zdroj je módny, herný, s RGB podsvietením, ktoré som vypol, aby neblikal ako vianočný stromček. Jediný výkonný modulárny zdroj v tom čase v obchodoch v blízkom meste.
Bočný pohľad na server verzie 1.0.
Pohľad spredu na server. Konektory a mechaniky pre mechaniky som vyrobil na jednej strane ako v serverových systémoch, aby som pri všetkých manipuláciách nemusel otáčať celý systém tam a späť. Na „lištu s výrezmi“ je priskrutkovaný driek s dvomi USB 2.0 portami, ktorý som pripojil namiesto čítačky kariet a na jeho spodnú časť je priskrutkovaná doska adaptéra pre M.2.
Tu vidíte, ako je zaistený DC-DC a doska, práve tie rohy, o ktorých som hovoril.
Pohľad z druhej strany, ako je pripevnená stúpačka GPGPU, čo je EdgeSlot.
Rovnaký vysoký rohový stúpač s dodatočným výkonom pre GPGPU, ktorý mi bol kúpený cez Whispers z Ameriky.
Stroj bol zostavený, nainštalovaný operačný systém a ovládače, nakonfigurovaný CUDA Toolkit...
Tu je o nej krátke video.
V tejto podobe systém s jednou Teslou K20M 5 GB fungoval pol roka, kým môj kamarát astronóm počítal úlohy. Potom odišiel na dovolenku a zrazu sa na eBay našli použité servery Tesla K20X 6 GB za 6000 3 rubľov v predaji z dátového centra v Anglicku. A rozhodli sme sa zostaviť druhú verziu „superpočítača“ pomocou 20 Tesla KXNUMXX.
Tesly boli zakúpené, druhá základná doska bola kúpená úplne rovnaká, len sa rozhodli ušetriť na doručení a zvolili doručenie cez eBay. Kto ju zobral DO ŠPANIELKA a odovzdal nejakému úplne ľavicovému chlapovi. Na eBay bol otvorený spor, predajca z USA ma podporil a peniaze mi vrátili a už tretia platba mi prišla v obyčajnom drahom, ale spoľahlivom USPS. Dorazili aj ďalšie náhradné diely a tu je video o začiatku montáže “dedinského superpočítača” 2.0.
Video o náhradných dieloch pre tento „stroj“.
Spustenie dosky a niektorých funkcií.
Tu som začal zostavovať framework druhej verzie servera.
Tesla K20X dorazila, prvé video.
Vzdelávacie video o Tesle K20X, o dizajne karty a jej chladiacom systéme a trapas s vodným blokom z GTX 780 Ti.
Pokračovanie videa o Tesle K20X, naskenoval som jej dosku na skeneri, keby ju niekto zrazu potreboval.
Predná strana s čipom GPU.
Zadná strana.
Ako vidíme, Tesla K20, hoci je „vo všeobecnosti“ podobná GTX 780 GTX 780 ti GTX TITAN na GPU GK110 Kepler, nie je s nimi kompatibilná z hľadiska dosky a chladiaceho systému. Ak mám Quadro K5200 K6000 GK110 Kepler, tak jeho dosku porovnám s doskou Tesla K20, ale zatiaľ nemám vyššie spomínaný Quadros.
A tu je pokračovanie zostavenia servera 2.0
Opäť 1U chladiče so slimákmi a ďalšími vecami, ktoré sú potrebné pre server s väčším výkonom ako ten prvý. Mimochodom, musel som rozobrať prvý server, aby som zostavil druhý, zatiaľ čo môj priateľ nemal nutkavú potrebu počítať.
Trochu správy káblov...
A na jej mieste je nainštalovaná druhá Tesla.
Ale tu som narazil na urážlivý problém. Ukázalo sa, že systém nezvládne 3 kusy Tesly K20. Pri spustení systému BIOS sa objaví táto chyba a to je všetko, tretia Tesla vôbec nefunguje. Nepomohla ani aktualizácia BIOSu na verziu 2.8.1, po ktorej sa doska zmenila z Dell DCS 6220 na Dell C6220 2.8.1.V BIOSe som zapínal a vypínal rôzne možnosti, dokonca som skúšal prekryť niektoré kontakty na Tesle s páskou, aby boli 8x - nič nepomohlo. Musel som sa zmieriť s konfiguráciou 2 Tesla K20X + NVE SSD. Mimochodom, vo verzii 2.0 servera sú všetky disky SATA uložené v jednom čínskom koši so 6 priehradkami. Teraz je tu dvojica Samsung 860 EVO 500 Gb + 4 terabajt Seagate. Samsungy som kupoval na Ali za 3600 za kus. OEM kolesá, ale mne vyhovujú.
Teraz je „superpočítač 2.0“ kompletne zostavený a pripravený na použitie.
V ostatnom prisli kupene nahradne diely na druhy system a prvy som zmontoval spat, tu je video o tom.
A vyzývam čitateľov, aby hlasovali o tom, čo robiť s prvou tabuľou? Aké zaujímavé veci sa na jej základe dajú zozbierať? Alebo ak si to chce niekto kúpiť ako Tesla K20M a K20X s chladičmi slimákov alebo bez nich - som pripravený, napíšte.
Tu je taký príbeh, dúfam, že sa ukáže byť zaujímavý a užitočný pre drahých čitateľov.
PS: Pre tých, ktorí mali trpezlivosť čítať až do konca - odoberajte môj kanál na YouTube, komentujte, páči sa mi/nepáči sa mi - to ma bude motivovať do ďalších publikácií a natáčania nových vzdelávacích videí.
Zdroj: hab.com