Jeftini server napravljen od kineskih rezervnih dijelova. 1. dio, željezo
Mutna mačka pozira na pozadini prilagođenog poslužitelja. U pozadini je miš na poslužitelju
Hej Habr!
U životu svake osobe ponekad se pojavi potreba za nadogradnjom računala. Ponekad je to kupnja novog telefona kako bi se zamijenio pokvareni ili potraga za novim Androidom ili kamerom. Ponekad - zamjena video kartice tako da igra može raditi na minimalnim postavkama. Ponekad - instaliranje SSD-a u prijenosno računalo na kojem ste instalirali Windows 2, ali on baš i ne voli živjeti na Core2.5Duo i 32 gigabajta adresabilne memorije, te stalno izbacuje neiskorištene stranice u swap datoteku, uništavajući ionako ne veliku brzinu razmjene sa diskom od XNUMX giga.
Moja priča je nadogradnja servera koji je sastavljen tijekom moje prve godine na institutu. Moje su potrebe porasle u proteklih šest godina, a on je, naravno, dobio povećanje i RAM-a i prostora na disku. Problem je u tome što su se s novim znanjem stekle nove ambicije - želja da to znanje primijeni u praksi - s kojima se možda više ne bi mogao nositi.
Prvo će biti dosadan uvodni tekst, a onda će biti slike.
Samo da bude jasno koji poslužitelj sada postoji:
CPU: 4 toka, 3.4 GHz
RAM: DDR3 8 GiB
SSD: 250 GB
Dalje, ovaj server jedva da ću spominjati, ove glavne karakteristike su samo zato da se ima s čime usporediti i da je jasno zašto sam odlučio prevladati svoju lijenost i potrošiti vrijeme i novac.
Još nisam siguran što će točno raditi na novom poslužitelju, ali neke me apstraktne misli navode da preuzmem sljedeće zadatke:
- Hosting nekoliko statičnih stranica. Sada nginx to radi, ali s ne najboljim konfiguracijama. Trebat će i njih ispraviti, ali o tome više u drugom dijelu.
- Hosting samo statičkih datoteka. Na primjer, slike iz ovog članka. Idu i preko nginxa, ali se učitavaju preko WinSCP-a, što je nezgodno. Moramo iskopati nešto poput myOwnCloud kako bismo mogli jednostavno i prirodno postavljati slike na poslužitelj.
- Izgradite poslužitelj za projekte ljubimaca. Sada je Jenkins.
- Različiti stalci za ove projekte: razvoj, integracijski testovi itd. Još nije došao na prodajno mjesto, ali postoji samo jedan stalak, doduše na doku.
- Neki serveri za igre, ako vaši prijatelji žele igrati nešto što zahtijeva server: Starbound, Minecraft, Squad (iako im treba najmanje četrdeset ljudi). Da, barem CS 1.6.
- Virtualni strojevi za prijatelje, ako iznenada hitno moraju negdje smjestiti nešto. Ili za sebe, da imate neku vrstu VDI. Ima se čime napuniti, samo da postoji hardver.
Politički daleki planovi:
- Downloader torrenta: za podršku rijetkih distribucija na root tracker-u. Istina, moramo smisliti kako ih automatski preuzeti, gdje ih pohraniti, hoće li se pružatelj suprotstaviti stalnoj pozadinskoj distribuciji i, što je najvažnije, hoće li tipove u uniformama zanimati terabajti namjenski distribuirane glazbe s knjigama.
- Izlaz iz nekog TOR-a: lijepo, ali ne. Iz istog razloga.
Međutim, moguće je dodijeliti dio kapaciteta analognom sada zatvorenom SETI@Home. Možda mi pretraživač koji je upoznat s ovim može reći gdje da stavim grijanje?
Odabir platforme
Da. Riješili smo motivacijski dio: želim hardver, ali nije jasno zašto. Morate odlučiti kakvu vrstu hardvera želite.
Jeftina rabljena oprema redovito se spominje na Habréu: bilo da se radi o distribuciji poslužitelja od strane narančastog čovjeka ili o korištenim akceleratorima bljeskalica za uši. Profesionalna oprema je skupa. Za programere u Moskvi to je podnošljivo, ali skupo.
No, profesionalna oprema je skupa jer korporacije imaju puno novca, tehničku podršku i jamstvo kvalitete veće od onoga kod široke potrošnje. Ne uvijek, ali očekivanja su očito pomaknuta na bolje.
Dakle, cilj je sastaviti server od rabljenih (čitaj: jeftinih) rezervnih dijelova i ostaviti prostora za manju nadogradnju u sljedećih pet godina. Takvi su rezervni dijelovi jeftiniji od novih, a još uvijek mogu imati dovoljno resursa za redovitu kućnu upotrebu. (Ovaj sam cilj sastavio nakon što sam sklopio server. Sve je u najboljim tradicijama pisanja diplomskog rada)
Kao posljedica cilja, oprema bi trebala imati jedan od najboljih omjera "papiga/rublja", gdje bitni kapacitet papige ovisi o vrsti opreme: RAM - volumen (ne brzina, ne), disk - volumen ( i brzina), procesor - ovo je teško. Neka ovo budu benchmark sintetičke papige.
Preporučljivo je da poslužitelj teži bešumnosti. Ne obećavam egzotiku u vidu prilagođenih toplinskih cijevi i hladnjaka bez ventilatora, ali serveru je suđeno da stoji u spavaćoj sobi ili udaljenom uredu ili mojoj sobi, pa bih volio da ne tutnji u idle modu kao mlazni avion pri polijetanju.
Polazna točka su jeftini kineski xeoni za koje sam saznao u davna vremena, možda i s Habra. U jednoj od prolaznih vijesti pala je žeravica holivara “Intel protiv AMD-a”. Nemoguće je ne usporediti, možda su novi Ryzeni stvarno bolji od Intelovih procesora - nisam ih pratio pet godina, pa čak i više.
Dakle, usporedba uključuje dvije strane s približno istim pokazateljem papiga prema : , , , , i trenutni . Naravno, uspoređivao sam i druge procesore, na primjer, novi Core i7, novi Ryzen 7 i Ryzen 7 2600, ali glavni interes je upravo ovaj odjeljak: otprilike su isti po procesorskoj snazi. Na kraju, ovo nije pokušaj rješavanja holivara, već odabir procesora koji mi najviše odgovara. E5-2696v2 i i3-2130 prikazani su samo radi usporedbe s drugim korištenim procesorima i trenutnim poslužiteljem.
AM4
LGA2011
7 2700x
7 2700
e5-2689
2x e5-2689
e5-2690
2x e5-2690
2x e5-2696v2
i3-2100
Rank, papagaji
17898
16021
10036
17945
10207
18967
23518
1839
Cijena, rubalja
15200
12500
5000
10000
5500
11000
18000
1000
Toplinska snaga, W
105
65
115
230
135
270
260
65
Jezgre, kom.
16
16
16
32
16
32
24
4
Frekvencija, GHz
3,7
3,2
2,6
2,6
2,9
2,9
2,5
3,1
Papige/rubalji
1,18
1,28
2,01
1,79
1,86
1,72
1,31
1,84
Papige/W
170,46
246,48
87,27
78,02
75,61
70,25
90,45
28,29
Dosadno je gledati tablicu, pogledajmo grafikon apsolutnih papiga:
Razmišljao sam o izostavljanju ovog grafikona, ali tada bih morao gledati u tablicu svojim očima, a ne vole svi ovo raditi. Dakle, ovo je tabela učenja. S lijeve strane je ljestvica čega god da je, u ovom slučaju apstraktnih sintetičkih papiga. Potpisi ispod su procesori. S lijeve strane je par Ryzena, u sredini je par jednostrukih i dvostrukih Xeona. Zbunjen, da, ali to je činjenica. Desno su dva Xeona druge generacije i procesor trenutnog poslužitelja.
Nakon što ste se upoznali s mjestom procesora, vrijedi pogledati grafikon troška jedne papige:
Pokazuje da je najisplativije uzeti jedan Xeon prve generacije. Dvostruki kseoni nešto su lošiji od pojedinačnih: trošak se udvostručio, a učinkovitost se povećala 1.7 puta, odnosno omjer se smanjio. Ali Xeon druge generacije više nije isplativ: cijena po papigi već se približava Ryzenu.
A Ryzeni su prokleto energetski učinkoviti po papigi:
Moram priznati da sam u tom trenutku bio ponosan na napredak čovječanstva i AMD-a. Ovo više nije ekstenzivan razvojni put, to je pokušaj da se iz komada silicija iscijedi maksimum. E5-2690 izašao je 2012., a Ryzen 7 2700 2018. Trostruko povećanje energetske učinkovitosti u šest godina nije doba za tehnologiju. Oh, i Core i3-2100 je negdje potpuno nevidljiv u kutu. Nemojmo o njemu.
Međusobno povlačenje: Ryzens ruše omjer performansi i potrošnje energije. Ili je to epski drugačiji način mjerenja TDP-a između AMD-a i Intela. A rabljeni ušni xeon prve generacije impresivni su u smislu omjera performansi i cijene.
Dakle, uzet ću xeone. Niste zaboravili cilj koji sam postavio na samom početku ovog odjeljka, zar ne?
Ostalo srodno željezo
Zapravo, izbor između AMD-a i Intela nije ograničen samo korištenim procesorom. Zen+ procesori koriste DDR4 memoriju (), a Sandy Bridge je DDR3 (). DDR4-2933 je teoretski 1.87 puta brži od DDR3-1600, ako ja išta razumijem u to. Ne, sjećam se s tečaja instituta kako radi DDR, sa svim tim ¬CS, RAS, CAS i drugima. I Burst Mode. Samo ne želim ulaziti dublje u ovo, jer se toga sjećam vrlo nejasno, a DDR3 je već implicitno odabran od strane procesora, nema smisla brinuti o tome.
Osim toga košta isto kao ...
*Nije 1866, nego 1778. Nemam pojma zašto sumorni kineski genije nije mogao savladati 1866, ali se nije spustio na standardnih 1600 MHz...
Ograničenja utičnice i vrste memorije također utječu na izbor matične ploče: za istih 7 tisuća rubalja možete dobiti s maksimalno 256 gigabajta RAM-a i ima najviše 4 utora za RAM, odnosno ograničeno na 64 gigabajta.
Odabir matične ploče s dva utičnica podrazumijeva posebne zahtjeve za napajanje: mora imati dva osmopinska kontakta za napajanje procesora. Možda će video kartica raditi, ali pinovi su malo drugačijeg oblika, odlučio sam ne riskirati i ne čitati dokumentaciju, budući da napajanja imaju potrebne zahtjeve .
Utičnice na ovoj matičnoj ploči također su loše raspoređene: razmak između njih je nešto manji od 10 centimetara, što otežava paralelnu ugradnju dva hladnjaka. U početku sam htio ugraditi hladnjake tako da dovod zraka dolazi iz međuprostora, ali o tome u nastavku.
Za pohranu podataka sam u početku htio uzeti SSD koji je već bio u starom serveru za sustav, ali sam odlučio uzeti 2TB Crucial P1 s M1 konektorom. Matična ploča ima šest SATA konektora i planirao sam na njih spojiti šest WD Red 2TB tvrdih diskova, ali dok sam se pitao isplati li se potrošiti još 12 tisuća rubalja na njih, oni su već bili kupljeni. Dakle, postavljanje ZFS raida nije uključeno u drugi dio članka. Ali to je kasnije, priča se vraća na SSD. Možete pročitati mnogo profesionalniju recenziju o tome . Njegov trik je u tome što je jeftin. Pogledajte sami ovu tablicu snimanja:
Na njega možete upisati 75 gigabajta odjednom, a onda postane gori od tvrdog diska. Hvala ti što barem nisi počeo vrtjeti. Oh, i također se može prepisati samo 200 puta. Od čega je uopće napravljen?!
Zapravo, to i nije tako strašno za način na koji ga planiram koristiti: uglavnom čitanje podataka i pisanje podataka koji nisu kritični za brzinu pisanja. Pa, volio bih se nadati.
Resurs prepisivanja 200x odgovara otprilike 109 gigabajta dnevno tijekom pet godina. 109 gigabajta dnevno nije isto što i 75 gigabajta odjednom. A s čitanjem je sve u redu. Nije najbolja izvedba među M2 pogonima, ali je u skladu s razinom pisanja koju pokazuje unutar predmemorije.
zbor
Ako je prije toga postojao pretežno pseudotehnički tekst prošaran grafikonima, sada će biti i slika razrijeđenih umjetničkom naracijom.
Iznenada u utorak ujutro nazvao je kurir Ruske pošte i rekao da će danas stići s pošiljkom. Obično sama preuzimam pakete, ali tijekom karantene su očito odlučili pooštriti dostavu.
Izgled paketa
Lukavi Kinezi sve su spakirali u jedan paket, iako sam ja preko Aliexpressa naručio četiri različite narudžbe, da me ne plaćaju carine od dvjestotinjak eura.
Sadržaj kutije
Matična ploča dolazi s cijelim uputama! O signalima zvučnika morate sami pogoditi. Web stranica kaže da su narančasti RAM utori glavni i da ih treba ugraditi u njih. Upute su malo manje nego potpuno beskorisne. Spojio sam gumb za napajanje na njega. Usput, jedini natpis na kutiji je MATIČNA PLOČA. Nije zaslužila vlastitu fotografiju, ali je svakako zaslužila spomen.
Izvadimo kućište i usisavamo ga. Zapravo, nije ga se isplatilo dobiti, on je bio samo muka. Ali izgleda estetski ugodno. pogledao...
Trup, pogled naopako
U tijelu su vilinski tobogani. (I planiram 3.5" diskove. Morat ću ukloniti ploču)
Prostor za diskove
Na prednjoj ploči nalaze se i brzo zamjenjivi ventilatori. Vjerojatno su bučni.
Njima upravlja nešto složenije od same matične ploče izravno
Uklonite gornji poklopac i pogledajte što je unutra. Ako odvrnete nekoliko vijaka, možete pomaknuti prostor na disku i napraviti prostor za manipulaciju. A matična ploča je E-ATX formata, zauzima skoro sav prostor u serveru.
Izvorno napajanje
Nisam mogao jednostavno izvaditi napajanje, morao sam odvrnuti sve vijke na stražnjoj strani i gotovo rastaviti cijelo kućište. Ispostavilo se da ga drže dva vijka i komad trake. Bilo je zločesto, ali sada i sam mogu koristiti takvu taktiku.
Evo je s lijeve strane, zlosretna crna pruga!
Već sam umoran od biranja najuspjelijih fotografija, izdvajanja onih nepotrebnih za priču, rezanja slika i postavljanja na stranicu. U međuvremenu, dođe sljedeći dan, a na mom stolu samo kineski rezervni dijelovi. Morate brzo naručiti i odjuriti u trgovinu na drugom kraju Moskve.
Na ulazu u trgovinu
Prodajni prostor je zatvoren, radi samo preuzimanje narudžbi. Dobro je da je vrijeme bilo sunčano, ne znam kako bi bilo po kiši. Narudžbe se moraju pozivati putem video portafona, šteta što se to malo objašnjava. Bilo bi lijepo ispisati barem neke upute osim "držati udaljenost od 2 metra." Čeka se ne duže od deset minuta, super. Vratimo se.
Dva hladnjaka, jedno napajanje i mali SSD
Budući da su hladnjaci koji odgovaraju dimenzijama kućišta bili skupi i bučni, morali smo odabrati preveliku opciju. To me spasilo od agonije odabira napajanja: tihog ATX formata, ali morat ćete ukloniti poklopac, ili jednostrukog, ali bučnog i dvije tisuće rubalja skupljeg. Počinjemo isprobavati kupnje. Prvotna ideja dvaju hladnjaka bila je uzimati zrak iz središta, ali je klizni kapacitet za diskove napravio prilagodbe i ventilatori su morali biti prebačeni na sekvencijalno puhanje. Bit će zanimljivo promatrati temperaturu na jednom kristalu nekoliko stupnjeva više nego na drugom.
Još nema termalne paste
Obrišite bazu hladnjaka i procesor alkoholom. pijenje. Ali to je tehnički već par godina, bolje ga je ne koristiti oralno. Termalnu pastu ravnomjerno nanesite nečim ravnim. Zapravo, slabo se razumijem u proces nanošenja termalne paste, ali rezultati mog rada uvijek su donosili pozitivne rezultate. Očigledno, ovdje je teško zeznuti, čak i ako Moment ljepilo može raditi godinama, sudeći po pričama. Obično koristim komad nepotrebne plastične kartice, ali nisam je imao pri ruci. Na njegovom je mjestu bio novoizgrađeni četvrti panj bez noge. Ne brinite, nakon postupka sam ga prebrisala alkoholom i vratila na policu.
Nešto čudno i uznemirujuće
Aplikacija nije idealna i nisam potpuno pritisnuo hladnjak: možete vidjeti pomak "ćelavog" mjesta u odnosu na središte.
Nuliranje
Dodatni sloj toplinskog sučelja dodajemo na mjesta gdje očito nedostaje i na malo drugačija mjesta.
Da, zadovoljavajuće
Počnimo instalirati matičnu ploču. Očito je bilo nešto drugačijeg formata u poslužitelju, a ti... uh... spojevi u koje se uvrću vijci za učvršćivanje matične ploče nisu bili smješteni na pravom mjestu za E-ATX ploču. Nažalost, komadu metala u koji se ušrafljuju spojnice nedostajale su tri rupe nasuprot onima na matičnoj ploči. Srećom, i samim okovima nedostajala su tri komada.
Zbog toga matična ploča popušta na mjestima gdje su spojeni 24-pinski konektor i PCI-E konektori. S jedne strane, to je tekstolit. S druge strane, ovo je kineski tekstolit, nikad ne znate što očekivati od njega. Ali u svakom slučaju morate pažljivo pritisnuti, čak i ako je PCB certificiran po vojnim standardima. Ne, u ovom slučaju morate pritisnuti još pažljivije - također je proizveden u Kini, ali certificiranje i prihvaćanje po komadu povećalo je trošak uređaja nekoliko desetaka puta.
Puno rupa i svega nema
Sjećate li se napajanja na traci? Povijest je ciklična, evo ponavljanja:
I da, ne sviđa mi se
Montaža je gotova, računalo selimo u bratovu sobu, s live servera oduzimamo tipkovnicu i monitor i pokušavamo ga upaliti. Prvi put ne mogu ni ući u BIOS. Budući da xeoni obično nemaju ugrađen grafički koprocesor, a BIOS treba prikazati na ekranu, ugrađujemo nekakvu jednostavnu video karticu. Bože, kako je bučna!
Ni drugi put ne mogu ući u BIOS. Razvrstavanjem po krivcima dolazimo do rješenja: zamjenom RAM traka i uklanjanjem SSD-a možete pristupiti BIOS-u. Umetnemo SSD na mjesto i ponovno uključimo računalo - BIOS se učitava i disk se otkriva. Očigledno je nešto resetirano zbog nedostatka CR2032 baterije.
Usput, vidite li da jedinica tvrdog diska strši naprijed više nego što bi trebala? Naslonjen je na hladnjak. Ovo nije idealno kućište za računala klasičnog oblika, što možete učiniti?
Mjesto za početno postavljanje
Mala digresija što se tiče buke: kod video kartice je buka bila na razini 27-30 decibela, a nakon instalacije operativnog sustava buka servera je pala na negdje oko 8-14 decibela. Bilo je teško preciznije izmjeriti, jer je i razina pozadinske buke bila negdje u tom rasponu: izgradnja podzemne željeznice na ulici, kotrljanje lopti od susjeda odozgo, gaženje mačke i tako dalje. Poslužitelj će se nalaziti u Ikea ormariću bez vrata, tako da će ova razina buke biti odgovarajuća.
bonus
Tehnički gledano, ovo se poglavlje ne odnosi na odabir i sastavljanje hardvera, ali instaliranje operativnog sustava ne predstavlja zasebno poglavlje. Mnogi izvori već su opisali instalaciju bilo čega na različite uređaje, a ono što će se ovdje dogoditi sasvim je običan fenomen. Ne želim proizvesti dodatni tutorial, i to možda netočan.
Ipak, opisat ću grablje na koje sam stao tijekom procesa instalacije OS-a.
Nisam instalirao Windows Server zbog nedostatka licence, a više sam navikao na interakciju s Linux poslužiteljima. Stari poslužitelj pokreće Ubuntu, ali nekoliko malo korištenih VPS-ova pokreće CentOS i radi RHEL. Stoga ćemo pobliže pogledati CentOS 8.
Idemo , preuzimamo .torrent datoteku - i za nekoliko desetaka minuta preuzimamo sliku od sedam gigabajta.
Umetnemo flash pogon, pronađemo ga i kopiramo sliku na njega.
frog@server:~$ lsblk
NAME MAJ:MIN RM SIZE RO TYPE MOUNTPOINT
sdb 8:16 1 14,6G 0 disk
└─sdb4 8:20 1 14,6G 0 part /media/localadmin/ANACONDA
sda 8:0 0 223,6G 0 disk
├─sda2 8:2 0 24G 0 part [SWAP]
├─sda3 8:3 0 128G 0 part /
└─sda1 8:1 0 243M 0 part /boot/efi
frog@server:~$ dd if=/home/frog/CentOS-8.1.1911-x86_64-dvd1.iso of=/dev/sdb
dd: failed to open '/dev/sdb': Permission denied
frog@server:~$ sudo !!
sudo dd if=/home/frog/CentOS-8.1.1911-x86_64-dvd1.iso of=/dev/sdbI odlazimo piti čaj. Sat vremena kasnije uvjereni smo da je sve već davno kopirano - ali se upit za unos nije pojavio. Dakle, još uvijek se kopira. Dobro, novi terminal, pitamo dd, koliko je ostalo.
PID TTY TIME CMD
1075 tty5 00:00:00 bash
1105 tty5 00:00:00 sudo
1106 tty5 00:00:00 su
1112 tty5 00:00:00 bash
1825 pts/18 00:00:00 sudo
1826 pts/18 00:01:08 dd
2846 pts/0 1-23:03:42 java
5956 pts/19 00:00:00 bash
6070 pts/19 00:42:15 java
6652 pts/20 00:00:00 ps
7477 tty4 00:00:00 bash
7494 tty4 00:00:00 sudo
7495 tty4 00:00:00 su
7497 tty4 00:00:00 bash
frog@server:~$ kill -USR1 1826
-bash: kill: (1826) - Operation not permitted
frog@server:~$ sudo !!
sudo kill -USR1 1826Odgovor na starom terminalu:
9025993+0 records in
9025993+0 records out
4621308416 bytes (4,6 GB, 4,3 GiB) copied, 13428,4 s, 344 kB/sI nakon još nekoliko desetaka minuta:
14755840+0 records in
14755840+0 records out
7554990080 bytes (7,6 GB, 7,0 GiB) copied, 14971,5 s, 505 kB/sŠto je to bilo? Je li kopirao bajt po bajt? Loš resurs flash pogona. Ili provjerio ispravnost snimke. U svakom slučaju, bilo je potrebno man dd i koristiti velike blokove za kopiranje, i još nešto što je bilo korisno jednom prilikom kopiranja 64 GB HDD na 5400 okretaja u minuti. Ali čak je i kopirao brzinom većom od trećine USB 1.0.
A zatim standardni izbor flash pogona kao Boot Device, Next, Next, Next, Finish. Nema manipulacija particioniranjem diska ili Ethernet postavkama. Najčešća instalacija OS-a u 2020.
Zaključak
Ovaj prvi dio priče odnosi se na postavljanje novog poslužitelja. Objavio bih ga u cijelosti odjednom, ali imam još dva nedovršena članka u svojim nacrtima koji su, čini mi se, zanimljiviji od "još jedne izgradnje servera", a drugi dio o postavljanju softvera prijeti neće biti gotovo uskoro.
Ukupni trošak iznosio je 57973 XNUMX rubalja. Ovdje je detaljnija raščlamba, međutim, veze na Aliexpress prikazuju nešto drugačije proizvode.
ram memorija – 4 kom
19078 rubalja
procesor – 2 kom
10300 rubalja
matična ploča – 1 kom
9422 rublje
Napajanje – 1 kom
4852 rublje
Hladnjak – 2 kom
3722 rublje
SSD
10599 rubalja
Case Noname
Besplatno
Približni trošak vlasništva je 3.89 rubalja/kWh * 0.8 kW * 24 sata * 31 dan = 2315 rubalja/mjesec. Ali to je ako mlati koliko god može bez prestanka mjesec dana, u što čisto sumnjam zbog nedostatka takvih zadataka i preživljivosti željeza. Za usporedbu, visokokvalitetnih dijelova je oko 25 tisuća rubalja mjesečno.
Mislim da je ovo prilično dobar server za taj novac.
Izvor: www.habr.com