Dobré odpoledne, obyvatelé Chabrovska! Ve svém příběhu budu pokračovat sestavením „superpočítače ve vesnici“.
Třetí část začnu vyjádřením upřímného poděkování mým přátelům, kteří mě v těžkých chvílích podporovali, motivovali, pomáhali mi s penězi tím, že dlouhodobě sponzorovali tento poměrně nákladný podnik a dokonce pomáhali s nákupem komponent ze zahraničí v případech, kdy Nemohl jsem je koupit na místě, přímo sám. Například, pokud společnost prodávající části serverů v USA nebo Kanadě jednoduše neposlala do Ruska. Bez jejich dlouhodobé a pravidelné pomoci by byly mé úspěchy mnohem skromnější.
Také jsem se díky jejich prosbám odhodlal a otevřel si účet na Youtube, koupil si starý smartphone Lumia 640, který používám výhradně jako videokameru, a začal natáčet výuková videa, jak o sestavení „vesnického superpočítače“, tak o další aspekty a projekty mého vesnického života.
Playlist „Village Supercomputer“:
Ti, kteří chtějí spoilery, si je mohou přečíst, i když je samozřejmě lepší to udělat při čtení mého příběhu nebo dokonce po něm.
Druhá část mého vyprávění byla přerušena připojením Tesla K20M, GT 610 a M.2 NVE SSD + diskového pole k systému. Mimochodem, co dalšího je na této desce Dell dobrého - má vestavěnou „diskovou poličku“, i když pouze pro 6 zařízení, a RAID není „nejsofistikovanější na světě“, ale na rozdíl od svých profesionálnějších externích protějšků , přeskočí příkaz TRIM na SSD. Což je také důležité, pokud intenzivně používáte neprofesionální serverové SSD.
Mimochodem, na této desce je také jeden zajímavý a důležitý bod. Radiátory na čipsetech jsou nízké s malými žebry. To funguje dobře, když je deska v původním stojanu, kde ji foukají výkonné turbíny. Při samostatném použití desky je ale nutné odstranit plastovou nálepku z chladiče nejblíže rozšiřujícím slotům a tu vzdálenější je vhodné nahradit jakýmkoliv vhodným chladičem z čipsetu staré základní desky s velkými žebry, protože čip umístěný pod ním se na desce nejvíce zahřívá.
Po vyjmutí grafické karty ze systému jsem začal sestavovat rám pro svůj server; v testovací verzi bylo vše na elektrické pásce, krabičkách zápalek a dalších plastových podpěrách, ale pro plné využití 24/7/365 se tato možnost nezdála pro mě přijatelné. Bylo potřeba vyrobit normální rám z hliníkového úhelníku. Použil jsem hliníkové rohy od Leroy Merlin, které mi poslal kamarád z moskevské oblasti, v mém blízkém městě se prostě vůbec nikde neprodávaly!
Kromě rohů byly v návrhu použity šrouby a matice se zápustnou hlavou M5, šrouby a matice M3, malé rohy nábytku, hliníkové nýty pro otvory 5 mm, nýtovací pistole, pilka na kov, šroubovák, vrták 5.0 mm na kov, pilník, křížový šroubovák, kabelové stahovací pásky a paže, které nerostou ze zadku.
Rohy byly použity pro připevnění desky k rámu a některých dalších prvků. To samozřejmě přidalo celému systému nějakou výšku, protože deska byla zvednutá dost vysoko nad spodní rovinu rámu, ale usoudil jsem, že je to pro mě přijatelné. Nebojoval jsem o každý gram váhy a milimetr výšky, přeci jen to není palubní počítač letadla, kde je standardem „15 G ve 3 osách, rázy do 1000 G a vibrace“.
Deska je osazena, stoupačky přišroubovány, adaptér s SSD M.2 přišroubován.
Na svých místech je instalována deska, SSD, stoupačky a Tesla. DC-DC ještě není přišroubováno a visí na drátech v zákulisí. Toto je server verze 1.0, stále na jednom Tesla K20M.
Zde je DC-DC již připevněn k rámu, na straně za základní deskou je pod napájecími „ocásky“ malý šátek.
A toto je již sestavený systém, pohled shora. Nad Teslou je další roh, ve kterém je vedle sebe přišroubována dvojice SSD, nad nimi je klec na HDD a nahoře na rámu, který rám uzavírá, visí 850W modulární zdroj Thermaltek. Zdroj je módní, herní, s RGB podsvícením, které jsem vypnul, aby neblikal jako vánoční stromeček. Jediný výkonný modulární zdroj v té době v obchodech v nedalekém městě.
Boční pohled na server verze 1.0.
Čelní pohled na server. Konektory a mechaniky pro mechaniky jsem vyrobil na jedné straně, jako u serverových systémů, takže při všech manipulacích jsem nemusel celý systém otáčet tam a zpět. Na „lištu s výřezy“ je přišroubován stonek se dvěma USB 2.0 porty, který jsem připojil místo čtečky karet a na jeho spodní část je přišroubována adaptérová deska pro M.2.
Zde vidíte, jak je zajištěno DC-DC a deska, přesně ty rohy, o kterých jsem mluvil.
Pohled z druhé strany, jak je připevněna stoupačka GPGPU, což je EdgeSlot.
Stejný vysoký rohový nástavec s přídavným výkonem pro GPGPU, který mi byl zakoupen přes Whispers z Ameriky.
Stroj byl sestaven, nainstalován operační systém a ovladače, nakonfigurován CUDA Toolkit...
Tady je o ní krátké video.
V této podobě systém s jednou Teslou K20M 5 GB fungoval půl roku, zatímco můj kamarád astronom počítal úkoly. Pak odjel na dovolenou a najednou byly na eBay nalezeny použité servery Tesla K20X 6 GB za 6000 3 rublů v prodeji z datového centra v Anglii. A rozhodli jsme se sestavit druhou verzi „superpočítače“ pomocí 20 Tesla KXNUMXX.
Byly zakoupeny Tesly, byla zakoupena druhá základní deska úplně stejná, jen se rozhodli ušetřit na doručení a zvolili doručení přes eBay. Kdo ji odvezl DO ŠPANĚLSKO a předal nějakému úplně levicovému chlapíkovi. Na eBay byl zahájen spor, prodejce z USA mě podpořil a peníze byly vráceny a již třetí platba mi přišla v obvyklém drahém, ale spolehlivém USPS. Dorazily i další náhradní díly a zde je video o začátku montáže „vesnického superpočítače“ 2.0.
Video o náhradních dílech právě pro tento „stroj“.
Spuštění desky a některých funkcí.
Zde jsem začal sestavovat framework druhé verze serveru.
Tesla K20X dorazila, první video.
Vzdělávací video o Tesle K20X, o designu karty a jejím chladicím systému a průšvihu s vodním blokem z GTX 780 Ti.
Pokračování videa o Tesle K20X, naskenoval jsem její desku na skeneru, kdyby ji někdo najednou potřeboval.
Přední strana s čipem GPU.
Zadní strana.
Jak vidíme, Tesla K20, ačkoliv je „obecně“ podobná GTX 780 GTX 780 ti GTX TITAN na GPU GK110 Kepler, s nimi není kompatibilní z hlediska desky a chladicího systému. Pokud mám Quadro K5200 K6000 GK110 Kepler, tak jeho desku porovnám s deskou Tesla K20, ale výše zmíněný Quadros zatím nemám.
A zde je pokračování sestavení serveru 2.0
Opět 1U chladiče se šneky a další věci, které jsou vyžadovány pro server s větším výkonem než ten první. Mimochodem, musel jsem rozebrat první server, abych sestavil druhý, zatímco můj přítel neměl naléhavou potřebu počítat.
Trochu správy kabelů...
A na jeho místo je instalována druhá Tesla.
Ale tady jsem narazil na urážlivý průšvih. Ukázalo se, že systém nezvládne 3 jednotky Tesla K20. Při spuštění BIOSu se objeví tato chyba a je to, třetí Tesla nefunguje vůbec. Nepomohla ani aktualizace BIOSu na verzi 2.8.1, po které se deska změnila z Dell DCS 6220 na Dell C6220 2.8.1.V BIOSu jsem zapínal a vypínal různé možnosti, zkoušel jsem i překrýt některé kontakty na Tesle s páskou, aby je udělali 8x - nic nepomohlo. Musel jsem se smířit s konfigurací 2 Tesla K20X + NVE SSD. Mimochodem, ve verzi 2.0 serveru jsou všechny disky SATA umístěny v jednom čínském koši se 6 přihrádkami. Nyní je tu dvojice Samsung 860 EVO 500 Gb + 4 terabajt Seagate. Samsungy jsem koupil na Ali za 3600 za kus. OEM kola, ale vyhovují mi.
Nyní je „superpočítač 2.0“ kompletně sestaven a připraven k použití.
V ostatních věcech dorazily náhradní díly zakoupené na druhý systém a první jsem složil zpět, tady je o tom video.
A vyzývám čtenáře, aby hlasovali o tom, co dělat s první deskou? Co zajímavého se na jeho základě dá sbírat? Nebo pokud to někdo chce koupit jako Tesla K20M a K20X s chladiči šneků nebo bez nich - jsem připraven, napište.
Zde je takový příběh, doufám, že se ukáže jako zajímavý a užitečný pro milé čtenáře.
PS: Pro ty, kteří měli trpělivost dočíst až do konce - odebírejte můj kanál na YouTube, komentujte, lajkujte/nelíbí se mi - to mě bude motivovat k dalším publikacím a natáčení nových vzdělávacích videí.
Zdroj: www.habr.com