Բարի օր, սիրելի խաբրովսկցիներ:
Ես կցանկանայի շարունակել իմ պատմությունը «գյուղական սուպերհամակարգիչ» հավաքելու մասին: Եվ ես կբացատրեմ, թե ինչու է այդպես կոչվում, պատճառը պարզ է. Ես ինքս ապրում եմ գյուղում։ Եվ անունը մի փոքր տրոլինգ է նրանց, ովքեր համացանցում գոռում են «Մոսկվայի օղակաձև ճանապարհից այն կողմ կյանք չկա», «Ռուսական գյուղը հարբեցող է դարձել և մեռնում է»: Այսպիսով, ինչ-որ տեղ դա կարող է ճիշտ լինել, բայց ես կլինեմ բացառություն կանոնից: Ես չեմ խմում, չեմ ծխում, անում եմ այնպիսի բաներ, որոնք ամեն «քաղաքային կոտրիչ(ներ)» չեն կարող իրեն թույլ տալ: Բայց վերադառնանք մեր ոչխարներին, ավելի ճիշտ՝ սերվերին, որը հոդվածի առաջին մասի վերջում արդեն «կյանքի նշաններ էր ցույց տալիս»։
Տախտակը դրված էր սեղանի վրա, ես մագլցեցի BIOS-ի միջով, կարգավորեցի այն իմ ցանկությամբ, պարզության համար ցատկեցի Ubuntu 16.04 Desktop-ից և որոշեցի միացնել վիդեո քարտը «սուպեր մեքենային»: Սակայն ձեռքի տակ եղած միակ բանը GTS 250-ն էր, որի վրա ամրացված էր ոչ օրիգինալ օդափոխիչ: Որը ես տեղադրեցի PCI-E 16x բնիկում միացման կոճակի մոտ:
«Ես վերցրել եմ այն Բելոմորի (գ) տուփով», այնպես որ խնդրում եմ ինձ մի մեղադրեք լուսանկարի որակի համար: Ես կնախընտրեի մեկնաբանել այն, ինչ կա նրանց վրա:
Նախ, պարզվեց, որ բնիկում տեղադրվելիս նույնիսկ կարճ վիդեո քարտը հենվում է տախտակը հիշողության անցքերի վրա, որոնց դեպքում այն չի կարող տեղադրվել, և նույնիսկ սողնակները պետք է իջեցնել: Երկրորդ, վիդեո քարտի երկաթե մոնտաժային ժապավենը ծածկում է միացման կոճակը, ուստի այն պետք է հեռացվեր: Ի դեպ, հոսանքի կոճակն ինքնին լուսավորված է երկգույն LED-ով, որը վառվում է կանաչ, երբ ամեն ինչ կարգին է, և թարթում է նարնջագույն, եթե խնդիրներ կան, կարճ միացում և սնուցման պաշտպանությունը անջատվել է կամ +12VSB հոսանք: մատակարարումը չափազանց բարձր է կամ շատ ցածր:
Իրականում, այս մայր տախտակը նախատեսված չէ վիդեո քարտերը «ուղղակիորեն» ներառելու իր PCI-E 16x բնիկների մեջ, դրանք բոլորը միացված են բարձրացնողներին: Էլեկտրաէներգիայի կոճակի մոտ գտնվող անցքերում ընդլայնման քարտ տեղադրելու համար կան անկյունային վերելակներ, ցածրը՝ մինչև առաջին պրոցեսորային ռադիատորի երկարությունը կարճ քարտեր տեղադրելու համար, իսկ բարձր անկյունը՝ լրացուցիչ +12 Վ հոսանքի միակցիչով՝ տեղադրելու համար։ վիդեո քարտ «վերևում» ստանդարտ ցածր 1U հովացուցիչից: Այն կարող է ներառել խոշոր վիդեո քարտեր, ինչպիսիք են GTX 780, GTX 980, GTX 1080 կամ մասնագիտացված GPGPU քարտեր Nvidia Tesla K10-K20-K40 կամ «հաշվողական քարտեր» Intel Xeon Phi 5110p և այլն:
Բայց GPGPU բարձրացնողում EdgeSlot-ում ընդգրկված քարտը կարող է ուղղակիորեն միանալ, միայն նորից միացնելով լրացուցիչ էներգիա նույն միակցիչով, ինչ բարձր անկյունային բարձրացնողի վրա: Հետաքրքրվողների համար eBay-ում այս ճկուն բարձրացնողը կոչվում է «Dell PowerEdge C8220X PCI-E GPGPU DJC89» և արժե մոտ 2.5-3 հազար ռուբլի: Լրացուցիչ էլեկտրամատակարարմամբ անկյունային բարձրացնող սարքերը շատ ավելի հազվադեպ են, և ես ստիպված էի բանակցություններ վարել՝ դրանք Whisper-ի միջոցով սերվերի մասերի մասնագիտացված խանութից ստանալու համար: Դրանք արժեն 7 հազար հատ։
Անմիջապես կասեմ, որ «ռիսկային տղաները (tm)» կարող են նույնիսկ մի զույգ GTX 980 տախտակին միացնել չինական ճկուն վերելակներ 16x, ինչպես մեկ հոգի արեց «Այդ նույն ֆորումում», ի դեպ, չինացիները բավականին պատրաստում են: լավ արհեստներ, որոնք աշխատում են PCI-E 16x 2.0-ի վրա Thermaltek ճկուն բարձրացողների ոճով, բայց եթե դա մի օր պատճառ դառնա, որ դուք այրեք սերվերի տախտակի հոսանքի սխեմաները, դուք միայն ինքներդ ձեզ կմեղադրեք: Ես ռիսկի չեմ ենթարկել թանկարժեք սարքավորումները և օգտագործել եմ օրիգինալ բարձրացնող սարքեր՝ լրացուցիչ հզորությամբ և մեկ չինական ճկուն, մտածելով, որ մեկ քարտը «ուղղակիորեն» միացնելով չի այրվի տախտակը:
Այնուհետև եկան երկար սպասված միակցիչները՝ լրացուցիչ հոսանքի միացման համար, և ես EdgeSlot-ում պոչ պատրաստեցի իմ բարձրացման համար: Եվ նույն միակցիչը, բայց այլ պինութով, օգտագործվում է մայր տախտակին լրացուցիչ էներգիա մատակարարելու համար: Այս միակցիչը գտնվում է հենց այս նույն EdgeSlot միակցիչի կողքին, այնտեղ կա մի հետաքրքիր կետ: Եթե բարձրացնողն ունի 2 լար +12 և 2 ընդհանուր, ապա տախտակն ունի 3 լար +12 և 1 ընդհանուր:
Սա իրականում նույն GTS 250-ն է, որը ներառված է GPGPU բարձրացման մեջ: Ի դեպ, հավելյալ հոսանք է մատակարարվում վերելակներին և մայր տախտակին՝ իմ էլեկտրասնուցման պրոցեսորի երկրորդ +12 Վ հոսանքի միակցիչից։ Ես որոշեցի, որ ավելի ճիշտ կլինի այսպես անել։
Հեքիաթն ինքն իրեն արագ է պատմում, բայց կամաց-կամաց ծանրոցները Չինաստանից և աշխարհի այլ վայրերից հասնում են Ռուսաստան: Հետևաբար, «գերհամակարգչի» հավաքման մեջ մեծ բացեր կային։ Բայց վերջապես ինձ մոտ եկավ Nvidia Tesla K20M սերվերը պասիվ ռադիատորով: Ընդ որում բացարձակ զրոյական է, պահեստից, կնքված իր օրիգինալ տուփի մեջ, օրիգինալ փաթեթով, երաշխիքային թղթերով։ Եվ սկսվեց տառապանքը. ինչպե՞ս զովացնել այն:
Նախ, Անգլիայից գնվել է հատուկ հովացուցիչ՝ երկու փոքր «տուրբիններով», ահա այն լուսանկարում, տնական ստվարաթղթե դիֆուզորով։
Եվ դրանք կատարյալ հիմարություն ստացվեցին։ Նրանք շատ աղմուկ բարձրացրին, լեռնաշղթան ընդհանրապես չէր տեղավորվում, նրանք թույլ փչեցին և այնպիսի թրթռում տվեցին, որ ես վախենում էի, որ բաղադրիչները կընկնեն Tesla-ի տախտակից: Ինչո՞ւ դրանք գրեթե անմիջապես նետվեցին աղբարկղը։
Ի դեպ, Tesla-ի տակ գտնվող լուսանկարում կարող եք տեսնել LGA 2011 1U սերվերի պղնձե ռադիատորներ, որոնք տեղադրված են Aliexpress-ից գնված Coolerserver-ից խխունջով պրոցեսորների վրա: Շատ պարկեշտ հովացուցիչներ, թեև մի փոքր աղմկոտ: Նրանք հիանալի տեղավորվում են:
Բայց իրականում, մինչ ես սպասում էի Tesla-ի համար նոր հովացուցիչի, այս անգամ Ավստրալիայից 1012D տպագրված ամրակով մեծ BFB3EN խխունջ պատվիրելով, այն հասավ սերվերի պահպանման համակարգին: Սերվերի տախտակն ունի մինի-SAS միակցիչ, որի միջոցով դուրս են գալիս 4 SATA և ևս 2 SATA միակցիչներ: Բոլորը SATA ստանդարտ 2.0, բայց դա ինձ հարմար է:
Չիպսեթի մեջ ինտեգրված intel C602 RAID-ը վատ չէ, և գլխավորն այն է, որ այն բաց է թողնում SSD-ների համար նախատեսված TRIM հրամանը, ինչը շատ էժան արտաքին RAID կարգավորիչներ չեն անում:
eBay-ում ես գնել եմ մի մետր երկարությամբ մինի-SAS դեպի 4 SATA մալուխ, իսկ Avito-ում ես գնել եմ տաք փոխանակման սայլակ 5,25 դյույմ բեյով 4 x 2,5 դյույմ SAS-SATA-ով: Այսպիսով, երբ մալուխը և զամբյուղը հասան, մեջը տեղադրվեց 4 տերաբայթ Seagates, BIOS-ում կառուցվեց RAID5 4 սարքերի համար, ես սկսեցի տեղադրել Ubuntu սերվերը... և բախվեցի այն փաստին, որ սկավառակի բաժանման ծրագիրը թույլ չի տալիս ինձ: ռեյդի վրա փոխանակման միջնորմ ստեղծելու համար:
Ես խնդիրը լուծեցի առհասարակ. DNS-ից գնեցի ASUS HYPER M.2 x 2 MINI և M.4 SSD Samsung 2 EVO 960 Գբ ադապտեր և որոշեցի, որ առավելագույն արագության սարքը պետք է հատկացվի փոխանակման համար, քանի որ համակարգը կաշխատի: բարձր հաշվողական ծանրաբեռնվածությամբ, և հիշողությունը դեռ ակնհայտորեն պակաս է տվյալների չափից: Իսկ 250 ԳԲ հիշողությունը այս SSD-ից ավելի թանկ էր։
Այս նույն ադապտերը SSD-ով, որը տեղադրված է ցածր անկյունում:
Կանխատեսելով հարցերը. «Ինչու՞ չդարձնել ամբողջ համակարգը M.2-ում և ունենալ մուտքի առավելագույն արագություն SATA-ի վրա հարձակման արագությունից»: -Պատասխանեմ. Նախ, 1 TB կամ ավելի M2 SSD-ներ ինձ համար չափազանց թանկ են: Երկրորդ, նույնիսկ BIOS-ը 2.8.1 վերջին տարբերակին թարմացնելուց հետո, սերվերը դեռ չի աջակցում M.2 NVE սարքերի բեռնմանը: Ես մի փորձ արեցի, որտեղ համակարգը դրեց /boot USB FLASH 64 Gb-ի, իսկ մնացածը M.2 SSD-ի վրա, բայց դա ինձ դուր չեկավ: Չնայած, սկզբունքորեն, նման համադրությունը բավականին գործունակ է։ Եթե բարձր հզորության M.2 NVE-ներն ավելի էժանանան, ես կարող եմ վերադառնալ այս տարբերակին, բայց առայժմ SATA RAID-ը որպես պահեստավորման համակարգ ինձ բավականին սազում է:
Երբ ես որոշեցի սկավառակի ենթահամակարգը և ստացա 2 x SSD Kingston 240 Gb RAID1 «/» + 4 x HDD Seagate 1 Tb RAID5 «/home» + M.2 SSD Samsung 960 EVO 250 Գբ «փոխանակում» համադրություն, դա ժամանակն է շարունակել իմ փորձերը GPU-ով Ես արդեն ունեի Tesla և ավստրալիական հովացուցիչ, որը նոր է եկել «չար» խխունջով, որն ուտում է մինչև 2.94 Ա լարումը 12 Վ-ում, երկրորդ բնիկը զբաղեցնում էր M.2-ը, իսկ երրորդի համար ես վերցրեցի GT 610 «փորձերի համար»:
Այստեղ լուսանկարում բոլոր 3 սարքերը միացված են, իսկ M.2 SSD-ը ճկուն Thermaltech բարձրացնողի միջոցով է վիդեո քարտերի համար, որն աշխատում է 3.0 ավտոբուսում առանց սխալների: Դա այսպիսին է՝ պատրաստված բազմաթիվ անհատական «ժապավեններից», որոնք նման են նրանց, որոնցից պատրաստված են SATA մալուխները: Միաձույլ հարթ մալուխից պատրաստված PCI-E 16x բարձրացնող սարքերը, որոնք նման են հին IDE-SCSI-ին, աղետ են, դրանք կտուժեն սխալներից՝ փոխադարձ միջամտության պատճառով: Եվ ինչպես արդեն ասացի, չինացիներն այժմ նույնպես պատրաստում են Thermaltek-ի նման բարձրացուցիչներ, բայց ավելի կարճ:
Tesla K20 + GT 610-ի հետ միասին ես փորձեցի շատ բաներ, միևնույն ժամանակ պարզեցի, որ արտաքին վիդեո քարտը միացնելիս և ելքը դրան BIOS-ում միացնելիս vKVM-ն չի աշխատում, ինչը իրականում չի ստացվել: վրդովեցրեց ինձ. Համենայն դեպս, ես չէի նախատեսում այս համակարգում օգտագործել արտաքին տեսանյութեր, Teslas-ում վիդեո ելքեր չկան, իսկ հեռակառավարման վահանակը SSH-ի միջոցով և առանց X-owls-ի հիանալի է աշխատում, երբ մի փոքր հիշեք, թե ինչ է հրամանի տողը առանց GUI-ի: . Բայց IPMI + vKVM-ն մեծապես հեշտացնում է կառավարումը, վերատեղադրումը և հեռավոր սերվերի հետ կապված այլ խնդիրները:
Ընդհանուր առմամբ, այս տախտակի IPMI-ն հիանալի է: Առանձին 100 Մբիթ նավահանգիստ, փաթեթի ներարկումը 10 Գբիթ նավահանգիստներից մեկին վերակազմավորելու հնարավորություն, ներկառուցված վեբ սերվեր՝ սերվերների էներգիայի կառավարման և վերահսկման համար, անմիջապես դրանից vKVM Java-հաճախորդ ներբեռնելու և սկավառակների հեռահար տեղադրման համար հաճախորդ։ կամ նկարներ՝ վերատեղադրման համար... Միակ բանը, որ կլիենտները նույնն են, ինչ հին Java Oracle-ը, որն այլևս չի աջակցվում Linux-ում և հեռակառավարվող ադմինիստրատորի վահանակի համար ես ստիպված էի Win XP SP3-ով նոութբուք ստանայի հենց այս միջոցով: հին դոդոշ. Դե, հաճախորդը դանդաղ է, բավական է ադմինիստրատորի վահանակի և այդ ամենի համար, բայց դուք չեք կարող խաղեր խաղալ հեռակա կարգով, FPS-ը փոքր է: Իսկ IPMI-ի հետ ինտեգրված ASPEED տեսանյութը թույլ է, միայն VGA է:
Սերվերի հետ առնչվելու ընթացքում ես շատ բան սովորեցի և շատ բան սովորեցի պրոֆեսիոնալ սերվերի ապարատային ոլորտում Dell-ից: Ինչի համար ես ընդհանրապես չեմ ափսոսում, ինչպես նաև լավ ծախսած ժամանակի և գումարի համար: Սերվերի բոլոր բաղադրիչներով շրջանակն իրականում հավաքելու մասին ուսումնական պատմությունը կշարունակվի ավելի ուշ։
Հղում դեպի 3-րդ մաս.
Source: www.habr.com