Прайшло больш за два гады, пасля таго, як мы пачалі прадастаўляць платформы (у 2 разы ніжэй среднерыночной), бо ў закупцы, нават цяпер, калі працэсары апошняга пакалення E5-2650 v4 абвешчаныя вытворцам end of life, яны каштуюць 8500 эўра + 21% VAT = 10285 эўра (тэрмін акупляльнасці 5.7 гадоў, калі ўлічваць кошт colocation і трафіку і зусім не ўлічваць кошт затрат на падтрымку):
Мы паспяхова рэалізавалі на гэтых платформах мноства кластарных рашэнняў для нашых бізнес-абанентаў, а таксама індывідуальных карыстальнікаў. Распрацавалі і паспяхова запусцілі ў продаж дадатковы прадукт - віртуальныя серверы з выдзеленымі назапашвальнікамі, які дазволіў замяніць пачатковую лінейку выдзеленых сервераў і забяспечыць VPS-серверы c рэсурсамі 10-40GB DDR4 RAM, 6-24 ядрамі E5-2650 v4, і самае галоўнае - 1 4 цалкам выдзеленымі 4TB HDD або 240-480GB SSD назапашвальнікамі. Падрабязна аб перавагах і недахопах гэтага прадукта мы распавялі тут: (даступныя варыянты з RAID1 і RAID10).
І быццам бы ўсё добра, мы выканалі план продажаў, прадалі нават больш, чым планавалася, тысячы карыстальнікаў раскупілі нашы віртуальныя рашэнні, дзякуючы чаму мы пазбавіліся амаль поўнасцю ад састарэлых сервераў з працэсарамі Е3-1230 і Е5620, якія заказвалі сабе тыя абаненты, што не маглі сабе дазволіць Dell R730xd, хоць мы і зрабілі яго максімальна танным. Бо зараз яны змаглі дазволіць сабе скажам вось такую VPS (KVM) – E5-2650 v4 (24 Cores) 40GB DDR4 з 4×240GB RAID10 SSD або 4×4TB RAID10 HDD 1Gbps 40TB па кошце таго ж Е3-1230. Чым не добрая замена састарэламу Е3-1230 з тым жа наборам дыскаў? Ці нават выбіралі варыянт з рэсурсамі ў 2 разы менш (калі так шмат рэсурсаў не патрабавалася), і эканомілі больш за палову бюджэту. У выніку мы не толькі знізілі выдаткі на электраэнергію і суправаджэнне, бо новае жалеза радзей выходзіць са строю і амаль не глючыць, больш энергаэфектыўна, больш абанентаў атрымоўваецца размясціць на меншай колькасці юнітаў, але самае галоўнае, падвысілі ступень задаволенасці кліентаў нашым сэрвісам.
Аднак патрэбнасці невялікай часткі абанентаў мы не маглі задаволіць. Бо немагчыма было стварыць паўнавартаснае віртуальнае асяроддзе ва ўжо наяўным віртуальным асяроддзі (хоць і ўжываліся вызначаныя хітрыкі для гэтага ў выглядзе Докераў і іншага) + RAM «толькі» да 40GB (часткова гэтая праблема была выпраўлена NVMе прадуктам), няма магчымасці выбіраць сабе патрэбны ўзровень RAID ці павялічыць аб'ём SSD-квоты, пры гэтым на 2-х юнітах мы размяшчалі фактычна толькі 3 кліента. Увогуле недахопы былі, рашэнне не для ўсіх.
Магчыма для кагосьці адкрыю вочы, але ў Нідэрландах, большасць буйных дата-цэнтраў не мае ўласнага жалеза, з-за вялізных падаткаў, якія ўзнікаюць пры валоданні ім і куплі. Усё знаходзіцца ў доўгатэрміновай (дзесяцігадовы дагавор і больш) арэндзе ад вытворцы (Dell, HP, Supermicro). Што вельмі абмяжоўвае магчымасці. Бо для таго, каб забяспечыць вельмі нізкі кошт, нам прыйшлося адмовіцца ад цэлага заапарка канфігурацый і падпісаць адну, найболей эфектыўную платформу для ўсіх. І мы выкарыстоўвалі магчымасці платформы па максімуме, забяспечылі патрэбнасці больш за 95% абанентаў.
Але вырашыць праблему поўнасцю не змаглі. Ды і бягучыя "больш за 95%" кліентаў, не супраць паляпшэнняў. Вядома, паставіць яшчэ адну канфігурацыю не складана, але ўсё пытанне ў кошце. Як нам канкураваць з прапановамі буйных low-coster'аў, пры гэтым прапаноўваючы вышэйшую якасць і жалеза класа high-end у тую ж, альбо ніжэйшую цану?
У студзені гэтага года мы адкрылі сваё еўрапейскае прадстаўніцтва SIA UA-Hosting у Латвіі для гэтага. Гэта не толькі павялічыла зручнасць працы з намі для бізнес-абанентаў, але і дазволіла пачаць вяртаць VAT пры закупках, што таксама істотна знізіла кошт. Праз нейкі час мы абавязкова падзелімся досведам. Будзе падрабязны асобны артыкул аб тым, як проста зарэгістравацца сягоння ў Еўропе, замест Беліза, і як няпроста адкрыць банк рахунак у краіне рэгістрацыі, нават валодаючы ўсімі патрэбнымі дакументамі для гэтага. Ні адна з фірмаў-дапамог Вам сёння не прапануе рахунак у банку Латвіі для латвійскай кампаніі, усе будуць прапаноўваць Швейцарыю і будуць хацець 4000 еўра толькі за дапамогу з адкрыццём рахунку, які, не асабліва будзе зручны пасля, калі Вы прымаеце напрамую той жа PayPal ( прывядзе да дадатковых камісій і сумы выльюцца па выніках у дзесяткі тысяч еўра ў год, у залежнасці ад Вашых абаротаў, так як дадатковыя камісіі прымяняюцца, калі Ваш рахунак не краіне рэгістрацыі).
Але сёння працягнем аб жалезе. Мы доўга думалі, якое рашэнне 1U прапанаваць. Які ж сервер можа паўнавартасна задаволіць патрэбнасці 5% кліентаў і пашырыць істотна магчымасці бягучых?
Некалькі месяцаў мы думалі, выбіралі, ацэньвалі. Параўноўвалі паказчык cost-effective для вас. Зразумела, што нічога лепшага Dell R730xd пакуль быць не можа 🙂 Інакш мы б не працягвалі прапаноўваць гэтыя рашэнні, і дарэчы, мы пачалі гэта рабіць з абноўленымі працэсарамі, якія Tetradeca Core, а не Dodeca, гэта значыць 14 паўнавартасных ядраў у кожным працэсары, 28 з улікам гіпертрэйдзінгу, ды яшчэ і з частотамі па 2.6 GHz, замест 2.2 і вырашылі нават знізіць кошт, размясціўшы абсталяванне пры гэтым , але базава прапаноўваючы толькі 64GB DDR4 RAM, а не 128, бо не ўсім столькі трэба:
Dell R730xd – 2x E5-2697v3 2.6GHz 14С 64GB DDR4 4x960GB SSD 1Gbps 100TB – $ 199/месяц, праўда пры аплаце на 2 гады, памесячна і пры аплаце на год будзе даражэй, аднак, паглядзіце якая прыгажосць
Мы выкарыстоўваем Fortigate для арганізацыі бяспечнага доступу кожнага кліента да iDrac які арандуецца сервера. Дзякуючы Forticlient Вы маеце доступ да ўнутранай сеткі, прычым увесь астатні Ваш трафік будзе праходзіць не праз VPN-тунэль, толькі трафік да ўнутранай сеткі пройдзе праз яго, што вельмі зручна, у адрозненні ад звычайнага VPN. Усе серверы мы ўключаем да двух незалежных PDU (мы не эканомім на разетках):
Кожны стойкавы світч падлучаны оптавалакновымі лінкамі 2х10G да distribution-світчоў, трафік з якіх маршрутызуецца двума незалежнымі ядрамі дата-цэнтра. Гэта значыць, мы не проста далі цану ў 2 разы ніжэй за рынкавую, але і далі прэміум-сетку ў тую ж цану. Трафік у Інтэрнэт дастаўляецца такімі Tier I транзітнымі правайдэрамі, як GTT і NTT, таму канектыўнасць без рэзервавання каштуе каля 7000 еўра за 10G у дата-цэнтры напрамую, мы ж забяспечваем 2N па цане больш, чым у 2 разы танней, кожны дадатковы гігабіт - $450 . Так, безумоўна, у гэты кошт закладзена, што не кожны кліент запатрабуе свой ліміт паўнавартасна, менавіта таму мы "рызыкнулі" даць такі кошт. Статыстыка - шматгадовы рэальны вопыт. 500 сервераў з гігабітным падключэннем і лімітам трафіку 100 ТБ спажываюць у сярэднім каля 20 Гбіт / с (а не 160-200 Гбіт / с, як можна было б падумаць), такія рэальныя дадзеныя. Зразумела ў разлік не бяруцца абаненты, якія першапачаткова спажываюць шмат, заказваючы Unmetered. Проста рэальна не кожны спажывае свае 100 ТБ, менавіта таму мы не баімся прадаваць людзям трафік па коштах ніжэй за тую, па якой адпускае канектыўнасць транзітны правайдэр.
Акрамя ўсяго іншага для нашых абанентаў мы даем 1G або 10G LAN, а таксама IP-адрасы з RU GEO або NL сетак і магчымасць выкарыстання апаратных firewall, прыватных свіцей. Тым не менш, нягледзячы на тое, што мы прапанавалі серверы па цане больш, чым у 2 ніжэй за рынкавую, а з улікам premium-сеткі — у 3-4 разы ніжэй за рынкавую, усё ж засталася вышэйапісаная частка кліентаў, якія не могуць дазволіць сабе такі сервер, а VPS (траціна фізічнага сервера) не задавальняе па розных прычынах.
Мы доўга падбіралі лепшую канфігурацыю, бо ўсё ж хацелі прапанаваць "самае новае", але пры гэтым эканамічна эфектыўнае і прыйшлі да высновы, што лепш мы дамо 128GB DDR3 RAM, чым 64GB DDR4. Чаму?
- працуючы пры аднолькавай частаце 2400 Мгц планкі памяці DDR3 і DDR4 паказваюць супастаўныя вынікі;
- latency для DDR4 у гэтым выпадку складае 15 нанасекунд, а для DDR3 - 11 нанасекунд, гэта значыць пры такіх частотах памяць DDR3 аказваецца яшчэ і "хутчэй", у плане затрымкі;
- якія або перавагі DDR4 пачынаюць быць прыкметныя толькі пры частотах звыш 3000 Мгц, што трэба далёка не кожнаму карыстачу, часам latency важнейшая.
Розніца паміж DDR3-2133 і DDR4-2133 аказваецца практычна нязначнай для цэлага шэраг прыкладанняў, у тым ліку для выпадкаў канвертавання відэа. DDR3 аказваецца хутчэй больш, чым у палове выпадкаў.
І паколькі наша мэта была ў тым, каб прапанаваць мінімальную па кошце платформу, але пры гэтым эканамічна эфектыўную, мы вырашылі паспрабаваць падаваць наступны варыянт у Нідэрландах па кошце ад $99 / месяц (па кошце VPS):
Dell R420 2x E5-2430 2.2Ghz 6С 128GB DDR3 2x960GB SSD 1Gbps 100TB – замовіць
Для пачатку жадаем вывучыць попыт, спытаць у Вас, ці не памыліліся мы? Ужо зараз мы ўсталявалі для Вас некалькі такіх платформаў у стойку для 1U сервераў (а ў нас па-ранейшаму дзейнічае стандартызацыя, каб не міксаваць розныя платформы ў адной стойцы на ўвазе эфектыўнага выкарыстання сеткавага абсталявання і харчавання) і заканчваем яе будаўніцтва:
Канфігурацыі падтрымліваюць да 8 назапашвальнікаў SSD і да 2-х PCIe NVMe (калі патрабуецца 10G сетка, то адзін назапашвальнік, бо двухпартовая 10G картка зойме адзін з партоў). Мы вырашылі не падаваць з гэтай канфігурацыяй энергаспажывальныя і павольныя HDD, а падаць два Samsung 960GB (MZ7LH960HAJR) па добрым кошце. Пры аплаце сервера на тэрмін ад года - дадатковыя назапашвальнікі ў 2 разы танней, усяго толькі па + $ 25 / месяц за назапашвальнік. Так, за $249 / месяц Вы можаце атрымаць амаль 8 ТБ SSD-квоты і добры сервер Dell R420 2x E5-2430 2.2Ghz 6С 128GB DDR3 8x960GB SSD 1Gbps 100TB.
Дадатковы назапашвальнік 1×3.2TB PCI-E Samsung PM1725b SSD будзе каштаваць дорага - + $ 250 / месяц (павінны ж мы хоць на чымсьці зарабляць не 5.7/2 гадоў), але пры доўгатэрміновай арэндзе магчымыя зніжкі. Чаму мы ставім і прапануем толькі такія назапашвальнікі, а не NVMe hot-swap M2? Гэтыя назапашвальнікі ўсё ж лепш, latency ў шмат разоў менш за кошт падлучэння PCI-E. Менавіта такія назапашвальнікі выкарыстоўваюць, скажам, банкі, або кліенты, якія прымяняюць нейкі працэсінг. М1.6 значна менш эфектыўныя для гэтых задач. І хоць на рынку існуюць назапашвальнікі 6.4/1.6 TB і 6.4/3.2 TB аб'ёму, прычына іх невыкарыстання ў нас простая. У выпадку XNUMX TB – занадта малы аб'ём, слоты PCI-E слотаў могуць быць вычарпаныя хутка, а ў выпадку XNUMX TB – працэс аднаўленне зойме занадта шмат часу, таму XNUMX TB заслужана быў абраны, як «залатая сярэдзіна».
Важную ўвагу мы надаем таксама такой штуцы, як cabeling. Бо ад прыгажосці кладкі кабеляў залежыць тое, як будуць астуджацца поўначы і энергаспажыванне, якое адбываецца ў выніку гэтага працэсу. Збіраючы кабелі ў групы, мы памяншаем «блакавальны» пляц на шляхі гарачага паветра і ён больш эфектыўна рассейваецца са стоек, бо памяншаюцца завіхрэнні, якія перашкаджаюць эфектыўнаму цеплаадводу.
У цэлым я мяркую, што канфігурацыя ўдалася. Тым не менш, мы гатовыя выслухаць крытыку наконт гэтай прапановы ад чытачоў Хабра, бо вельмі часта, выказваючы меркаванні, Вы накіроўвалі нас на дакладны шлях, А мы зацікаўлены ў тым, каб даваць Вам і ў далейшым найбольш эфектыўныя рашэнні. Загадзя вялікі Вам за гэта дзякуй! Прапанова абмежавана ў колькасці і на дадзены момант мы маем у наяўнасці 16 сервераў у Нідэрландах. Не выключаю, што ў будучыні, цана на новыя замовы можа стаць вышэй, але зараз у Вас ёсць выдатны шанец аформіць сервер па неверагодна нізкай цане (фактычна, па кошце colocation, на ўвазе ўсіх апісаных пераваг).
Само сабой, што для карыстальнікаў Habr прыемны бонус - +1 месяц бясплатна, пры аплаце Dell R420 на тэрмін ад 3 месяцаў (для атрымання бонуса дастаткова пакінуць нумар замовы тут, у каментары і быць зарэгістраваным карыстальнікам Habr). Такім чынам у Вас ёсць магчымасць першыя 4 месяцы папрацаваць па кошце 119 даляраў, ацаніць якасць, а затым перайсці на двухгадовы цыкл аплаты, аплаціўшы паслугу на 2 гады і атрымаўшы ўнікальны кошт у $99 / месяц за сервер!
Мы працуем з фіз. асобамі і юр. асобамі з РФ, Украіны і ўсяго астатняга свету па дамове, дамовы заключаюцца паміж намі (SIA UA-Hosting, Латвія) і Вашай кампаніяй. Звяртайцеся, будзем рады супрацоўнічаць!
Крыніца: habr.com