Bon jounen, chè rezidan Khabrovsk!
Mwen ta renmen kontinye istwa mwen sou rasanble yon "supercomputer vilaj". Apre sa, mwen pral eksplike poukisa li te rele konsa-rezon ki fè la se senp. Mwen menm mwen ap viv nan yon vilaj. Ak non an se yon ti trolling nan moun ki rele sou Entènèt la "Pa gen okenn lavi pi lwen pase Moskou Ring Road la!", "Vik la Ris te vin tounen yon tafyatè ak ap mouri!" Se konsa, yon kote sa a ka vre, men mwen pral eksepsyon nan règ la. Mwen pa bwè, mwen pa fimen, mwen fè bagay ke se pa tout "cracker iben (yo)" kapab peye. Men, ann retounen nan mouton nou yo, oswa pi presizeman, nan sèvè a, ki nan fen premye pati nan atik la te deja "montre siy lavi."
Komisyon Konsèy la te kouche sou tab la, mwen te monte nan BIOS la, mete li jiska gou mwen, tise sou Ubuntu 16.04 Desktop pou senplisite epi deside konekte yon kat videyo ak "super machin nan". Men, sèl bagay nan men se yon GTS 250 ak yon gwo fanatik ki pa orijinal tache. Ki mwen enstale nan plas PCI-E 16x toupre bouton pouvwa a.
"Mwen te pran li ak yon pake Belomor (c)" kidonk tanpri pa blame m 'pou bon jan kalite a nan foto a. Mwen ta pito fè kòmantè sou sa ki kaptire sou yo.
Premyèman, li te tounen soti ke lè enstale nan yon plas, menm yon kat videyo kout repoze tablo a kont fant memwa yo, nan ki nan ka sa a li pa ka enstale e menm seri yo dwe bese. Dezyèmman, teren an fè aliye nan kat videyo a kouvri bouton pouvwa a, kidonk li te dwe retire. By wout la, bouton pouvwa a tèt li eklere pa yon ki ap dirije de koulè, ki limen vèt lè tout bagay an lòd epi li clignote zoranj si gen nenpòt pwoblèm, yon kous kout ak pwoteksyon ekipman pou pouvwa a te tonbe oswa + 12VSB pouvwa a. rezèv la twò wo oswa twò ba.
An reyalite, plak mèr sa a pa fèt pou mete kat videyo "dirèkteman" nan fant PCI-E 16x li yo; yo tout konekte ak rize. Pou enstale yon kat ekspansyon nan fant yo ki toupre bouton pouvwa a, gen kwen monte, yon sèl ki ba pou enstale kat kout jiska longè radyatè a premye processeur, ak yon kwen segondè youn ak yon konektè plis + 12V pouvwa pou enstale yon. kat videyo "pi wo a" yon estanda ki ba 1U pi fre. Li ka gen ladan gwo kat videyo tankou GTX 780, GTX 980, GTX 1080 oswa espesyalize GPGPU kat Nvidia Tesla K10-K20-K40 oswa "kat informatique" Intel Xeon Phi 5110p ak renmen an.
Men, nan rize GPGPU a, kat ki enkli nan EdgeSlot la ka konekte dirèkteman, sèlman pa konekte plis pouvwa ankò ak konektè a menm jan ak sou rize nan kwen segondè. Pou moun ki enterese, sou eBay sa a rize fleksib yo rele "Dell PowerEdge C8220X PCI-E GPGPU DJC89" ak koute apeprè 2.5-3 mil rubles. Rizèt kwen ak ekipman pou pouvwa adisyonèl yo pi ra anpil e mwen te oblije negosye jwenn yo nan yon magazen espesyalize pati sèvè atravè Whisper. Yo koute 7 mil chak.
Mwen pral di touswit, "nèg ki riske (tm)" ka menm konekte yon pè GTX 980 nan tablo a ak Chinwa fleksib rize 16x, tankou yon moun te fè sou "Sa menm fowòm"; nan chemen an, Chinwa yo fè byen. bon atizana ki travay sou PCI-E 16x 2.0 nan style Thermaltek fleksib yo, men si yon jou sa a lakòz ou boule sikui yo pouvwa sou tablo sèvè a, ou pral sèlman gen tèt ou blame. Mwen pa t riske ekipman chè epi mwen te itilize monte orijinal ki gen plis pouvwa ak yon sèl Chinwa fleksib, mwen panse ke konekte yon kat "dirèkteman" pa ta boule tablo a.
Lè sa a, konektè yo long dire pou konekte plis pouvwa te rive epi mwen te fè yon ke pou rize mwen an nan EdgeSlot. Epi yo itilize menm konektè a, men ak yon pinout diferan, pou bay plis pouvwa sou plak mèr la. Konektè sa a se tou pre menm konektè EdgeSlot sa a, gen yon pinout enteresan la. Si rize a gen 2 fil +12 ak 2 komen, Lè sa a, tablo a gen 3 fil +12 ak 1 komen.
Sa a se aktyèlman menm GTS 250 ki enkli nan rize GPGPU la. By wout la, pouvwa adisyonèl apwovizyone nan monte yo ak mèr la - soti nan dezyèm konektè a + 12V pouvwa nan CPU a nan ekipman pou pouvwa mwen an. Mwen te deside ke li ta pi kòrèk pou fè sa.
Istwa a rakonte tèt li byen vit, men tou dousman pasèl yo rive nan Larisi soti nan Lachin ak lòt kote atravè glòb la. Se poutèt sa, te gen gwo twou vid ki genyen nan asanble a nan "supercomputer la". Men, finalman sèvè Nvidia Tesla K20M ak yon radyatè pasif te rive jwenn mwen. Anplis, li se absoliman zewo, soti nan depo, sele nan bwat orijinal li, nan pake orijinal li, ak papye garanti. Ak soufrans la te kòmanse: ki jan yo refwadi li?
Premyèman, yo te achte yon pi fre koutim ak de ti "turbin" nan Angletè, isit la li se nan foto a, ak yon difize katon endijèn.
Apre sa, yo te tounen soti yo te krap konplè. Yo te fè anpil bri, mòn lan pa t 'anfòm ditou, yo te kònen fèb epi yo te bay tankou Vibration ke mwen te pè ke eleman yo ta tonbe sou tablo a Tesla! Poukisa yo te jete yo nan fatra a prèske imedyatman?
By wout la, nan foto a anba Tesla ou ka wè radyatè kwiv sèvè LGA 2011 1U enstale sou processeurs yo ak yon kalmason ki soti nan Coolerserver achte nan Aliexpress. Trè desan glasyè, byenke yon ti kras fè bwi. Yo anfòm parfe.
Men, aktyèlman, pandan m t ap tann yon nouvo glasyè pou Tesla, fwa sa a lè m te kòmande yon gwo kalmason BFB1012EN soti nan Ostrali ak yon monn enprime 3D, li te vin nan sistèm depo sèvè a. Tablo sèvè a gen yon konektè mini-SAS kote 4 SATA ak 2 plis konektè SATA yo soti. Tout SATA estanda 2.0 men sa kostim mwen.
Intel C602 RAID entegre nan chipset la pa move e bagay prensipal la se ke li sote kòmand TRIM pou SSD yo, ki pa chè anpil kontwolè RAID ekstèn pa fè.
Sou eBay mwen te achte yon mèt long mini-SAS a 4 SATA kab, ak sou Avito mwen te achte yon charyo cho-swap ak yon 5,25″ Bay pou 4 x 2,5″ SAS-SATA. Se konsa, lè kab la ak panyen an te rive, 4 terabyte Seagates yo te enstale nan li, RAID5 pou 4 aparèy yo te bati nan BIOS la, mwen te kòmanse enstale sèvè Ubuntu a ... epi li te kouri nan lefèt ke pwogram nan patisyon disk pa t 'pèmèt mwen. yo kreye yon patisyon swap sou atak la.
Mwen rezoud pwoblèm nan tèt-sou - mwen te achte yon ASUS HYPER M.2 x 2 MINI ak M.4 SSD Samsung 2 EVO 960 Gb adaptè soti nan DNS epi mwen deside ke aparèy la vitès maksimòm yo ta dwe resevwa lajan pou swap, depi sistèm nan ap travay. ak gwo chaj enfòmatik, ak memwa a toujou evidamman mwens pase gwosè a done. Ak memwa 250 GB la te pi chè pase SSD sa a.
Sa a menm adaptè ak yon SSD enstale nan yon rize kwen ki ba.
Antisipe kesyon yo - "Poukisa ou pa fè tout sistèm lan sou M.2 epi ou gen yon vitès maksimòm aksè ki pi wo pase yon atak sou SATA?" - Mwen pral reponn. Premyèman, 1 TB oswa plis SSD M2 yo twò chè pou mwen. Dezyèmman, menm apre mete ajou BIOS la nan dènye vèsyon an 2.8.1, sèvè a toujou pa sipòte chaje aparèy M.2 NVE. Mwen te fè yon eksperyans kote sistèm lan mete / bòt nan USB FLASH 64 Gb ak tout lòt bagay sou M.2 SSD, men mwen pa t 'renmen li. Malgre ke, nan prensip, tankou yon konbinezon se byen travayabl. Si gwo kapasite M.2 NVE vin pi bon mache, mwen ka retounen nan opsyon sa a, men pou kounye a SATA RAID kòm yon sistèm depo kostim mwen byen.
Lè mwen te deside sou subsistèm ki gen kapasite a epi mwen te vini ak yon konbinezon de 2 x SSD Kingston 240 Gb RAID1 "/" + 4 x HDD Seagate 1 Tb RAID5 "/lakay" + M.2 SSD Samsung 960 EVO 250 Gb "chanje" li nan tan pou m kontinye eksperyans mwen ak GPU Mwen te deja gen yon Tesla ak yon glasyè Ostralyen jis rive ak yon kalmason "sa ki mal" ki manje otan ke 2.94A nan 12V, dezyèm plas la te okipe pa M.2 epi pou twazyèm lan mwen te prete yon GT 610 "pou eksperyans."
Isit la nan foto a tout 3 aparèy yo konekte, ak M.2 SSD la se atravè yon fleksib Thermaltech rize pou kat videyo ki travay sou otobis la 3.0 san erè. Se tankou sa a, te fè soti nan anpil "riban" endividyèl ki sanble ak sa yo ki soti nan ki câbles SATA yo te fè. PCI-E 16x monte soti nan yon kab plat monolitik, tankou ansyen IDE-SCSI yo, se yon dezas, yo pral soufri nan erè akòz entèferans mityèl. Ak jan mwen te deja di, Chinwa yo kounye a tou fè monte ki sanble ak sa yo ki nan Thermaltek, men pi kout.
Nan konbinezon ak Tesla K20 + GT 610, mwen te eseye anpil bagay, an menm tan an mwen te jwenn ke lè konekte yon kat videyo ekstèn ak chanje pwodiksyon an nan li nan BIOS la, vKVM pa travay, ki pa t 'reyèlman. fache m. De tout fason, mwen pa t gen plan pou itilize videyo ekstèn sou sistèm sa a, pa gen okenn rezilta videyo sou Teslas, ak panèl admin aleka atravè SSH ak san X-chwèt travay anpil yon fwa ou sonje yon ti kras ki sa yon liy lòd san yon entèfas se. . Men, IPMI + vKVM anpil senplifye jesyon, reenstalasyon ak lòt pwoblèm ak yon sèvè aleka.
An jeneral, IPMI tablo sa a se gwo. Yon pò separe 100 Mbit, kapasite pou rekonfigire piki pake nan youn nan pò yo 10 Gbit, yon sèvè Web entegre pou jesyon pouvwa ak kontwòl sou sèvè, telechaje yon kliyan Java vKVM dirèkteman nan li ak yon kliyan pou aliye disk. oswa imaj pou re-enstalasyon... Bagay la sèlman se ke kliyan yo se menm jan ak ansyen Java Oracle la, ki pa sipòte ankò nan Linux ak pou panèl la admin aleka mwen te oblije jwenn yon laptop ak Win XP SP3 ak sa a trè. ansyen krapo. Oke, kliyan an se ralanti, gen ase pou panèl la admin ak tout sa, men ou pa ka jwe jwèt adistans, FPS la piti. Ak videyo ASPEED ki entegre ak IPMI fèb, sèlman VGA.
Nan pwosesis pou fè fas ak sèvè a, mwen te aprann anpil ak aprann anpil nan domèn pyès ki nan konpitè sèvè pwofesyonèl nan men Dell. Ki mwen pa regrèt ditou, osi byen ke tan ak lajan byen depanse. Istwa a edikasyon sou aktyèlman rasanble ankadreman an ak tout eleman sèvè yo pral kontinye pita.
Link nan pati 3:
Sous: www.habr.com