Buona giornata, residenti di Khabrovsk! Continuerò la mia storia assemblando un "supercomputer nel villaggio".
Inizierò la terza parte esprimendo sincera gratitudine ai miei amici che mi hanno sostenuto nei momenti difficili, mi hanno motivato, mi hanno aiutato con i soldi sponsorizzando per lungo tempo questa attività piuttosto costosa e mi hanno anche aiutato con l'acquisto di componenti dall'estero nei casi in cui Non potevo comprarli localmente, dirigerli da solo. Ad esempio, se un'azienda che vende parti di server negli Stati Uniti o in Canada semplicemente non le invia in Russia. Senza il loro lungo e regolare aiuto i miei successi sarebbero stati molto più modesti.
Inoltre, grazie alle loro richieste, ho fatto il grande passo e ho aperto un account su Youtube, ho acquistato un vecchio smartphone Lumia 640, che utilizzo esclusivamente come videocamera, e ho iniziato a realizzare video didattici, sia sull'assemblaggio di un "supercomputer da villaggio" che su altri aspetti e progetti della vita del mio villaggio.
Playlist “Villaggio Supercomputer”:
Chi vuole spoiler può leggerli, anche se ovviamente è meglio farlo mentre si legge la mia storia o anche dopo.
La seconda parte della mia storia è stata interrotta collegando l'array di dischi Tesla K20M, GT 610 e M.2 NVE SSD + al sistema. A proposito, cos'altro c'è di buono in questa scheda Dell: ha uno "scaffale per dischi" integrato, anche se per soli 6 dispositivi, e il RAID non è "il più sofisticato al mondo", ma a differenza delle sue controparti esterne più professionali , salta il comando TRIM sull'SSD. Ciò è importante anche se utilizzi in modo intensivo SSD per server non professionali.
A proposito, c'è anche un punto interessante e importante su questo forum. I radiatori sui chipset sono bassi con alette piccole. Funziona bene quando la tavola è nel suo rack originale, dove potenti turbine la soffiano via. Ma quando si utilizza la scheda separatamente, è necessario rimuovere l'adesivo in plastica dal radiatore più vicino agli slot di espansione, ed è consigliabile sostituire quello più lontano con un qualsiasi radiatore adatto proveniente dal chipset di una vecchia scheda madre con alette grandi, perché il chip situato sotto si riscalda maggiormente sulla scheda.
Dopo aver rimosso la scheda video dal sistema, ho iniziato ad assemblare un telaio per il mio server; nella versione di prova tutto era su nastro isolante, scatole di fiammiferi e altri supporti in plastica, ma per il pieno utilizzo 24 ore su 7, 365 giorni su XNUMX, XNUMX giorni all'anno questa opzione non sembrava accettabile per me. Era necessario realizzare un telaio normale da un angolo di alluminio. Ho utilizzato gli angoli in alluminio di Leroy Merlin, che mi sono stati inviati da un amico della regione di Mosca; nella mia città vicina semplicemente non venivano venduti da nessuna parte!
Oltre agli angoli, il progetto ha utilizzato viti e dadi a testa svasata M5, viti e dadi M3, piccoli angoli di mobili, rivetti in alluminio per fori da 5 mm, una pistola per rivetti, un seghetto per metallo, un cacciavite, un trapano per metallo da 5.0 mm, una lima, un cacciavite Phillips, fascette per cavi e braccia che non escono dal culo.
Gli angoli venivano utilizzati per fissare la tavola al telaio e ad alcuni altri elementi. Questo, ovviamente, ha aggiunto una certa altezza all'intero sistema, perché la tavola era sollevata piuttosto in alto rispetto al piano inferiore del telaio, ma ho deciso che questo era accettabile per me. Non ho lottato per ogni grammo di peso e ogni millimetro di altezza; dopo tutto, questo non è un computer di bordo di un aereo dove lo standard è "15 G su 3 assi, urti fino a 1000 G e vibrazioni".
La scheda è installata, i riser sono avvitati, l'adattatore con SSD M.2 è avvitato.
La scheda, l'SSD, i montanti e il Tesla sono installati al loro posto. Il DC-DC non è ancora stato avvitato ed è appeso ai cavi dietro le quinte. Questa è la versione server 1.0, ancora su una Tesla K20M.
Qui il DC-DC è già fissato al telaio, sul lato dietro la scheda madre sotto le “code” di alimentazione c'è una piccola sciarpa.
E questo è il sistema già assemblato, vista dall'alto. Sopra la Tesla c'è un altro angolo in cui una coppia di SSD sono avvitati fianco a fianco, sopra di loro c'è una gabbia per HDD, e sopra il telaio che chiude il telaio è appeso un alimentatore modulare Thermaltek da 850 W. L’alimentatore è alla moda, da gaming, con retroilluminazione RGB, che ho spento perché non lampeggiasse come un albero di Natale. L'unico potente alimentatore modulare a quel tempo nei negozi di una città vicina.
Vista laterale della versione server 1.0.
Vista frontale del server. Ho realizzato i connettori e le unità per le unità su un lato, come nei sistemi server, in modo che per tutte le manipolazioni non dovessi girare avanti e indietro l'intero sistema. Sulla “barra con ritagli” è avvitato uno stelo con due porte USB 2.0, che ho collegato al posto del lettore di schede, e nella parte inferiore è avvitata una scheda adattatore per M.2.
Qui puoi vedere come sono fissati il DC-DC e la scheda, proprio gli angoli di cui parlavo.
Vista dall'altro lato, come è collegato il riser GPGPU, che è EdgeSlot.
Lo stesso rialzo ad angolo alto con potenza aggiuntiva per la GPGPU che mi è stato acquistato tramite Whispers from America.
La macchina è stata assemblata, il sistema operativo e i driver sono stati installati, il CUDA Toolkit è stato configurato...
Ecco un breve video su di lei.
In questa forma, il sistema con un Tesla K20M 5 GB ha funzionato per sei mesi, mentre il mio amico astronomo contava i suoi compiti. Poi è andato in vacanza e all'improvviso ha utilizzato dei server Tesla K20X da 6 GB per 6000 rubli su eBay, in vendita da un data center in Inghilterra. E abbiamo deciso di assemblare la seconda versione del "supercomputer" utilizzando 3 Tesla K20X.
Sono state acquistate delle Tesla, è stata acquistata una seconda scheda madre esattamente la stessa cosa, solo che hanno deciso di risparmiare sulla consegna e hanno scelto la consegna tramite eBay. Che l'ha portata IN SPAGNA e l'ha consegnata a un ragazzo completamente di sinistra. È stata aperta una controversia su eBay, il venditore dagli Stati Uniti mi ha supportato e il denaro è stato restituito, e già il terzo pagamento mi è arrivato con il solito USPS costoso ma affidabile. Sono arrivati anche altri pezzi di ricambio ed ecco un video sull'inizio dell'assemblaggio del “supercomputer del villaggio” 2.0.
Video sui pezzi di ricambio per questa stessa "macchina".
Lancio della scheda e alcune funzionalità.
Qui ho iniziato ad assemblare il framework della seconda versione del server.
È arrivata la Tesla K20X, primo video.
Un video didattico sulla Tesla K20X, sul design della scheda e sul suo sistema di raffreddamento, e sulla delusione del waterblock della GTX 780 Ti.
Continuazione del video su Tesla K20X, ho scansionato la sua scheda su uno scanner, se qualcuno ne ha improvvisamente bisogno.
Lato anteriore con chip GPU.
Didietro.
Come possiamo vedere, la Tesla K20, sebbene simile “in termini generali” alla GTX 780 GTX 780 ti GTX TITAN sulla GPU GK110 Kepler, non è tuttavia compatibile con loro in termini di scheda e sistema di raffreddamento. Se ho una Quadro K5200 K6000 GK110 Kepler, confronterò la sua scheda con la scheda Tesla K20, ma finora non ho le Quadro sopra menzionate.
Ed ecco la continuazione della build del server 2.0
Ancora una volta dissipatori 1U con chiocciole e altre cose necessarie per un server con più potenza del primo. A proposito, ho dovuto smontare il primo server per montare il secondo, mentre il mio amico non aveva urgente bisogno di contare.
Un po' di gestione dei cavi...
E al suo posto viene installata la seconda Tesla.
Ma qui ho riscontrato un peccato offensivo. Si è scoperto che il sistema non può gestire 3 unità Tesla K20. All'avvio del BIOS appare questo errore e basta, la terza Tesla non funziona affatto. Anche l'aggiornamento del BIOS alla versione 2.8.1 non ha aiutato, dopodiché la scheda si è trasformata da una Dell DCS 6220 in una Dell C6220 2.8.1. Ho attivato e disattivato varie opzioni nel BIOS, ho anche provato a coprire alcuni contatti sulla Tesla con nastro adesivo per renderli 8x: niente ha aiutato. Ho dovuto fare i conti con la configurazione di 2 Tesla K20X + NVE SSD. A proposito, nella versione 2.0 del server, tutte le unità SATA risiedono in un cestino cinese con 6 scomparti. Adesso c'è una coppia di Samsung 860 EVO da 500 Gb + 4 terabyte Seagate. Ho comprato Samsung su Ali per 3600 ciascuno. Ruote OEM, ma mi vanno bene.
Ora il “supercomputer 2.0” è completamente assemblato e pronto per l’uso.
Tra l'altro sono arrivati i ricambi acquistati per il secondo sistema e ho rimontato il primo, ecco un video a riguardo.
E invito i lettori a votare cosa fare con la prima tavola? Quali cose interessanti possono essere raccolte in base ad esso? Oppure se qualcuno vuole acquistarlo come Tesla K20M e K20X con o senza refrigeratori a lumaca, sono pronto, scrivi.
Ecco una storia del genere, spero che risulti interessante e utile ai cari lettori.
PS: Per coloro che hanno avuto la pazienza di leggere fino alla fine - iscrivetevi al mio canale su YouTube, commentate, mettete mi piace/non mi piace - questo mi motiverà per ulteriori pubblicazioni e per girare nuovi video educativi.
Fonte: habr.com