Пройшло понад два роки, після того, як ми почали надавати платформи (у 2 рази нижче середньоринкової), адже у закупівлі, навіть зараз, коли процесори останнього покоління E5-2650 v4 оголошені виробником end of life, вони коштують 8500 євро + 21% VAT = 10285 євро (термін окупності 5.7 років, якщо враховувати вартість colocation та трафіку і зовсім не враховувати вартість витрат на підтримку):
Ми успішно реалізували на цих платформах багато кластерних рішень для наших бізнес-абонентів, а також індивідуальних користувачів. Розробили та успішно запустили до продажу додатковий продукт — віртуальні сервери з виділеними накопичувачами, який дозволив замінити початкову лінійку виділених серверів та забезпечити VPS-сервери з ресурсами 10-40GB DDR4 RAM, 6-24 ядрами E5-2650 v4, та найголовніше — 1 4 повністю виділеними 4TB HDD або 240-480GB SSD-накопичувачами. Детально про переваги та недоліки цього продукту ми розповіли тут: (Доступні варіанти з RAID1 і RAID10).
І начебто все добре, ми виконали план продажу, продали навіть більше, ніж планувалося, тисячі користувачів розкупили наші віртуальні рішення, завдяки чому ми позбулися майже повністю застарілих серверів з процесорами Е3-1230 та Е5620, які замовляли собі ті абоненти, що не могли собі дозволити Dell R730xd, хоч ми і зробили його максимально дешевим. Адже тепер вони змогли дозволити собі скажемо ось таку VPS (KVM) - E5-2650 v4 (24 Cores) 40GB DDR4 з 4x240GB RAID10 SSD або 4x4TB RAID10 HDD 1Gbps 40TB за ціною того ж Е3-1230. Чим не гарна заміна застарілому Е3-1230 з тим самим набором дисків? Або навіть обирали варіант із ресурсами в 2 рази меншим (коли так багато ресурсів не потрібно), і економили більше половини бюджету. В результаті ми не тільки знизили витрати на електроенергію та супровід, адже нове залізо рідше виходить з ладу і майже не глючить, енергоефективніше, більше абонентів вдається розмістити на меншій кількості юнітів, але найголовніше, підвищили ступінь задоволеності клієнтів нашим сервісом.
Однак, потреби невеликої частини абонентів ми не могли задовольнити. Адже неможливо було створити повноцінне віртуальне середовище у вже наявному віртуальному середовищі (хоча і застосовувалися певні хитрощі для цього у вигляді Докерів та іншого) + RAM «тільки» до 40GB (частково ця проблема була виправлена NVM продуктом), немає можливості вибирати собі потрібний рівень RAID або збільшити обсяг SSD-квоти, при цьому на 2-х юнітах ми розміщували фактично лише 3 клієнти. Загалом недоліки були, рішення не для всіх.
Можливо для когось розплющу очі, але в Нідерландах, більшість великих дата-центрів не має власного заліза, через величезні податки, які виникають при володінні ним і купівлі. Все знаходиться в довгостроковій (десятирічний договір і більше) оренді від виробника (Dell, HP, Supermicro). Що дуже обмежує можливості. Адже для того, щоб забезпечити вкрай низьку вартість, нам довелося відмовитися від цілого зоопарку конфігурацій та підписати одну, найефективнішу платформу для всіх. І ми використовували можливості платформи максимум, забезпечили потреби більш ніж 95% абонентів.
Але вирішити проблему не змогли. Та й поточні «понад 95%» клієнтів не проти покращень. Звичайно, поставити ще одну конфігурацію не складно, але питання в ціні. Як нам конкурувати з пропозиціями великих low-coster'ів, при цьому пропонуючи найвищу якість і залізо класу high-end в ту ж чи нижче ціну?
У січні цього року ми відкрили своє європейське представництво SIA UA-Hosting у Латвії для цього. Це не тільки збільшило зручність роботи з нами для бізнес-абонентів, а й дозволило почати повертати VAT при закупівлі, що також суттєво знизило ціну. Через якийсь час ми обов'язково поділимося досвідом. Буде докладна окрема стаття про те, як просто зареєструватись нині в Європі, замість Беліза, і як непросто відкрити банк рахунок у країні реєстрації, навіть маючи всі необхідні документи для цього. Жодна з фірм-допомог Вам нині не запропонує рахунок у банку Латвії для латвійської компанії, всі пропонуватимуть Швейцарію і хотітимуть 4000 євро тільки за допомогу з відкриттям рахунку, який, не особливо буде зручний згодом, якщо Ви приймаєте безпосередньо той же PayPal ( призведе до додаткових комісіям і суми виллються за підсумками в десятки тисяч євро на рік, залежно від Ваших оборотів, оскільки додаткові комісії застосовуються, якщо Ваш рахунок не в країні реєстрації).
Але сьогодні продовжимо про залізо. Ми довго думали, яке рішення 1U запропонувати. Який сервер може повноцінно задовольнити потреби 5% клієнтів і розширити суттєво можливості поточних?
Кілька місяців ми думали, вибирали, оцінювали. Порівнювали показник cost-effective для Вас. Зрозуміло, що нічого кращого Dell R730xd поки бути не може 🙂 Інакше ми б не продовжували пропонувати ці рішення, і, до речі, ми почали це робити з оновленими процесорами, які Tetradeca Core, а не Dodeca, тобто 14 повноцінних ядер у кожному процесорі, 28 з урахуванням гіпертрейдингу, та ще й із частотами по 2.6 GHz, замість 2.2 і вирішили навіть знизити ціну, розмістивши обладнання при цьому , Але базово пропонуючи лише 64GB DDR4 RAM, а не 128, адже не всім стільки потрібно:
Dell R730xd - 2x E5-2697v3 2.6GHz 14С 64GB DDR4 4x960GB SSD 1Gbps 100TB - $199 / місяць, правда при оплаті на 2 роки, щомісячно і при оплаті на рік буде дорожче, проте, подивіться яка краса
Ми використовуємо Fortigate для організації безпечного доступу кожного клієнта до iDrac сервера, що орендується. Завдяки Forticlient Ви маєте доступ до внутрішньої мережі, причому весь решта Вашого трафіку буде проходити не через VPN-тунель, тільки трафік до внутрішньої мережі пройде через нього, що дуже зручно, на відміну від звичайного VPN. Усі сервери ми включаємо до двох незалежних PDU (ми не заощаджуємо на розетках):
Кожен стійковий свитч підключений оптоволоконними лінками 2х10G до distribution-свитків, трафік з яких маршрутизується двома незалежними ядрами дата-центру. Тобто, ми не просто дали ціну в 2 рази нижчу за ринкову, а й дали преміум-мережу в ту саму ціну. Трафік до Інтернету доставляється такими Tier I транзитними провайдерами, як GTT і NTT, тому коннективність без резервування коштує близько 7000 євро за 10G у дата-центрі безпосередньо, ми ж забезпечуємо 2N за ціною більшою, ніж у 2 рази дешевше, кожен додатковий гігабіт — $450. . Так, безумовно, в цю ціну закладено, що не кожен клієнт потребує свій ліміт повноцінно, саме тому ми ризикнули дати таку ціну. Статистика – багаторічний реальний досвід. 500 серверів з гігабітним підключенням та лімітом трафіку 100 ТБ споживають у середньому близько 20 Гбіт/с (а не 160-200 Гбіт/с, як можна було б подумати), такі реальні дані. Зрозуміло, в розрахунок не беруться абоненти, які спочатку споживають багато, замовляючи Unmetered. Просто реально не кожен споживає свої 100 ТБ, саме тому ми не боїмося продавати людям трафік за цінами нижчими за ту, за якою відпускає коннективність транзитний провайдер.
Крім іншого для наших абонентів ми надаємо 1G або 10G LAN, а також IP-адреси з RU GEO або NL мереж та можливість використання апаратних firewall, приватних світчів. Проте, незважаючи на те, що ми запропонували сервери за ціною більшою, ніж у 2 нижче за ринкову, а з урахуванням premium-мережі — в 3-4 рази нижче за ринкову, все ж таки залишилася вищеописана частина клієнтів, які не можуть дозволити собі такої сервер, а VPS (третина фізичного сервера) не влаштовує з різних причин.
Ми довго підбирали кращу конфігурацію, тому що все ж таки хотіли запропонувати «найновіше», але при цьому економічно ефективне і дійшли висновку, що краще ми дамо 128GB DDR3 RAM, ніж 64GB DDR4. Чому?
- Працюючи при однаковій частоті 2400 МГц планки пам'яті DDR3 і DDR4 показують порівняні результати;
— latency для DDR4 у разі становить 15 наносекунд, а для DDR3 — 11 наносекунд, тобто за таких частотах пам'ять DDR3 виявляється ще й «швидше», у плані затримки;
- якісь переваги DDR4 починають бути помітні тільки при частотах понад 3000 МГц, що потрібно далеко не кожному користувачеві, часом latency більш важлива.
Різниця між DDR3-2133 і DDR4-2133 виявляється практично незначною для цілого ряду програм, у тому числі для випадків конвертації відео. DDR3 виявляється швидше більш ніж у половині випадків.
І оскільки наша мета була в тому, щоб запропонувати мінімальну за вартістю платформу, але при цьому економічно ефективну, ми вирішили спробувати надавати наступний варіант у Нідерландах за ціною від $99/місяць (за ціною VPS):
Dell R420 2x E5-2430 2.2Ghz 6С 128GB DDR3 2x960GB SSD 1Gbps 100TB
Спочатку хочемо вивчити попит, запитати у Вас, чи не помилилися ми? Вже зараз ми встановили для Вас кілька таких платформ у стійку для 1U серверів (а у нас, як і раніше, діє стандартизація, щоб не міксувати різні платформи в одній стійці через ефективне використання мережного обладнання та живлення) і закінчуємо її будівництво:
Конфігурації підтримують до 8 накопичувачів SSD і до 2-х PCIe NVMe (якщо потрібна мережа 10G, то один накопичувач, оскільки двопортова 10G картка займе один з портів). Ми вирішили не надавати з цією конфігурацією енергоспоживаючі та повільні HDD, а надати два Samsung 960GB (MZ7LH960HAJR) за чудовою ціною. При оплаті сервера на термін від року - додаткові накопичувачі в 2 рази дешевше, всього лише +25 / місяць за накопичувач. Так, за $249 / місяць Ви можете отримати майже 8 ТБ SSD-квоти та хороший сервер Dell R420 2x E5-2430 2.2Ghz 6С 128GB DDR3 8x960GB SSD 1Gbps 100TB.
Додатковий накопичувач 1×3.2TB PCI-E Samsung PM1725b SSD буде коштувати дорого ≈ +$250 / місяць (маємо ж хоч на чомусь заробляти не 5.7 років), але при довгостроковій оренді можливі знижки. Чому ми ставимо та пропонуємо тільки такі накопичувачі, а не NVMe hot-swap M2? Ці накопичувачі все ж таки краще, latency в багато разів менше за рахунок підключення PCI-E. Саме такі накопичувачі використовують, скажімо, банки, або клієнти, які застосовують якийсь процесинг. М2 набагато менш ефективні для цих завдань. І хоча на ринку існують накопичувачі 1.6 TB і 6.4 TB обсягу, причина їхнього невикористання у нас проста. У випадку 1.6 TB - занадто малий об'єм, слоти PCI-E слотів можуть бути вичерпані швидко, а у випадку 6.4 TB - процес відновлення займе занадто багато часу, тому 3.2 TB заслужено було обрано, як "золота середина".
Важливу увагу ми приділяємо такій штуці, як cabeling. Адже від краси укладання кабелів залежить те, як охолоджуватимуться півночі та енергоспоживання, яке відбувається в результаті цього процесу. Збираючи кабелі в групи, ми зменшуємо «блокуючу» площу на шляху гарячого повітря і вона більш ефективно розсіюється зі стійок, оскільки зменшуються завихрення, які перешкоджають ефективному тепловідводу.
Загалом я вважаю, що конфігурація вдалася. Тим не менш, ми готові вислухати критику з приводу цієї пропозиції від читачів Хабра, адже дуже часто, висловлюючи думки, Ви спрямовували нас на вірний шлях, А ми зацікавлені в тому, щоб надавати Вам і надалі найбільш ефективні рішення. Заздалегідь велике Вам за це спасибі! Пропозиція обмежена в кількості та на даний момент ми маємо в наявності 16 серверів у Нідерландах. Не виключаю, що в майбутньому ціна на нові замовлення може стати вищою, але зараз у Вас є чудовий шанс оформити сервер за неймовірно низькою ціною (фактично, за вартістю colocation, через всі описані переваги).
Само собою, що для користувачів Habr приємний бонус - +1 місяць безкоштовно, при оплаті Dell R420 терміном від 3 місяців (Для отримання бонусу достатньо залишити номер замовлення тут, у коментарі та бути зареєстрованим користувачем Habr). Таким чином, у Вас є можливість перші 4 місяці попрацювати за ціною 119 доларів, оцінити якість, а потім перейти на дворічний цикл оплати, сплативши послугу на 2 роки і отримавши унікальну ціну в $99/місяць за сервер!
Ми працюємо з фіз. особами та юр. особами з РФ, України та решти світу за договором, договором укладаються між нами (SIA UA-Hosting, Латвія) та Вашою компанією. Звертайтесь, будемо раді співпрацювати!
Джерело: habr.com