Будь ласка, не поспішайте з висновками через заголовок! У нас є важкі аргументи на його підтвердження, і ми запакували їх, наскільки могли компактно. Пропонуємо до вашої уваги пост про концепцію та принципи роботи нашої нової системи зберігання даних, реліз якої відбувся у січні 2020 року.
На нашу думку, головна конкурентна перевага сімейству СХД Dorado V6 забезпечують саме згадані в заголовку продуктивність і надійність. Так-так, ось так просто, ну а за рахунок якихось хитрих і не дуже хитрих рішень цього «просто» нам вдалося домогтися, ми сьогодні і поговоримо.
Для того, щоб краще розкрити потенціал систем нового покоління, ми розповімо про старших представників модельного ряду (моделі 8000, 18000). Якщо не зазначено інше, маються на увазі саме вони.
Пари слів про ринок
Щоб краще зрозуміти місце рішень Huawei на ринку, звернемося до перевіреного мірилу.» Gartner. Два роки тому у секторі дискових масивів загального призначення наша компанія впевнено входила до групи лідерів, поступаючись лише NetApp та Hewlett Packard Enterprise. Положення Huawei на ринку твердотільних СГД у 2018 році характеризувалося статусом «претендент», однак для досягнення лідерських позицій чогось не вистачало.
У 2019 році Gartner у своєму дослідженні об'єднав обидва вищезгадані сектори в один — «Основне сховище». У результаті Huawei знову опинився у квадранті лідерів, поряд з такими постачальниками, як IBM, Hitachi Vantara та Infinidat.
Для повноти картини зазначимо, що 80% даних для аналізу Gartner збирає на американському ринку, а це призводить до перекосу на користь тих компаній, які добре представлені саме в США. Тим часом постачальники, які орієнтовані на європейські та азіатські ринки, опиняються у явно менш виграшному становищі. І навіть незважаючи на це, торік продукція Huawei зайняла гідне місце у верхньому правому квадранті і, згідно з вердиктом Gartner, «може бути рекомендована до використання».
Що нового в Dorado V6
Лінійка продуктів Dorado V6, зокрема, представлена системами початкового рівня серії 3000. Вихідно забезпечені двома контролерами, вони можуть бути горизонтально розширені до 16 контролерів, 1200 дисків та 192 Гбайт кешу. Також система оснащуватиметься зовнішніми портами Fibre Channel (8/16/32 Гбіт/с) та Ethernet (1/10/25/40/100 Гбіт/с).
Зазначимо, що зараз згортається використання протоколів, які не мають комерційної успішності, тому на старті ми вирішили відмовитися від підтримки Fibre Channel over Ethernet (FCoE) та Infiniband (IB). Вони будуть додані у пізніших версіях прошивки. Підтримка NVMe over Fabric (NVMe-oF) доступна "з коробки" поверх Fibre Channel. У наступній прошивці, випуск якої заплановано на червень, заплановано підтримку режиму NVMe over Ethernet. На наш погляд, перерахований вище набір з лишком покриє потреби більшості клієнтів Huawei.
Файловий доступ у поточній версії прошивки відсутній і з'явиться в одному з наступних апдейтів ближче до кінця року. Реалізація передбачається на рівні, самими контролерами з портами Ethernet, без застосування додаткового устаткування.
Основна відмінність моделі Dorado V6 серії 3000 від старших у тому, що на бекенді вона підтримує один протокол - SAS 3.0. Відповідно і накопичувачі там можуть використовуватися тільки з названим інтерфейсом. З нашої точки зору, продуктивності, що забезпечується при цьому, цілком достатньо для пристрою такого типу.
Системи Dorado серій V6 5000 та 6000 відносяться до рішень середнього класу. Вони також виконані у форм-факторі 2U та оснащені двома контролерами. Один від одного вони відрізняються продуктивністю, кількістю процесорів, максимальним числом дисків та об'ємом кешу. Разом з тим в архітектурному та інженерному плані Dorado V6 5000 та 6000 ідентичні та виглядають однаково.
До класу hi-end відносяться системи Dorado V6 серій 8000 та 18000. Виконані в типорозмірі 4U, вони за замовчуванням мають роздільну архітектуру, в якій контролери та накопичувачі рознесені порізно. У мінімальній комплектації вони можуть комплектуватися лише двома контролерами, хоча замовники, зазвичай, просять встановити чотири і більше.
Dorado V6 8000 горизонтально масштабується до 16 контролерів, а Dorado V6 18000 – до 32. У цих системах встановлені різні процесори з різною кількістю ядер та об'ємом кешу. Ідентичність інженерних рішень при всьому цьому зберігається, як і в моделях класу mid-end.
Полиці 2U з накопичувачами підключаються за допомогою RDMA з пропускною здатністю 100 Гбіт/с. Бекенд Dorado V6 старших серій також підтримує SAS 3.0, але скоріше на випадок, якщо SSD-накопичувачі з таким інтерфейсом сильно впадуть у ціні. Тоді виникне економічна доцільність їх використання навіть з урахуванням нижчої продуктивності. На даний момент різниця в вартості між SSD з інтерфейсами SAS і NVMe настільки мала, що рекомендувати подібне рішення ми не готові.
Усередині контролера
Контролери Dorado V6 виконані на нашій елементній базі. Жодних процесорів від Intel, жодних ASICs від Broadcom. Таким чином, всі до єдиного компоненти материнської плати, як і вона сама, повністю виведені з-під впливу ризиків, пов'язаних із тиском санкцій з боку американських компаній. Ті, хто на власні очі бачив будь-яке наше обладнання, напевно, помічали шилди з червоною смугою під логотипом. Вона означає, що у виробі відсутні американські компоненти. Такий офіційний курс Huawei — перехід на компоненти власного виробництва або, принаймні, що випускаються в країнах, що не йдуть у руслі політики США.
Ось що можна побачити на контролерній платі.
- Універсальний мережний інтерфейс (чіп Hisilicon 1822), який відповідає за підключення до Fibre Channel або Ethernet.
- Забезпечує віддалену доступність системи BMC-чіп, а саме Hisilicon 1710, для повнофункціонального дистанційного керування та моніторингу системи. Подібні застосовуються також у наших серверах та інших рішеннях.
- Центральний процесор, як якого виступає побудований на архітектурі ARM чіп Kunpeng 920 виробництва Huawei. Саме він показаний на схемі вище, хоча в інших контролерах можуть бути відмінні від нього моделі з іншим числом ядер, іншою тактовою частотою і т. д. Від моделі до моделі змінюється і кількість процесорів в одному контролері. Наприклад, у старших серіях Dorado V6 на одній платі їх чотири.
- Контролер SSD (чіп Hisilicon 1812e), який підтримує підключення як SAS-, так і NVMe-накопичувачів. Додамо, Huawei самостійно випускає SSD, проте не виготовляє самі осередки NAND, воліючи закуповувати їх у чотирьох найбільших світових виробників у вигляді кремнієвих пластин, що не розрізають. Розпил, тестування та упаковку в чіпи Huawei робить самостійно, після чого випускає їх під власною торговою маркою.
- Чіп штучного інтелекту - Ascend 310. За замовчуванням на контролері він відсутній і монтується через окрему карту, яка займає один із слотів, відведених під мережні адаптери. Чіп застосовується для забезпечення інтелектуальної поведінки кешу, управління продуктивністю чи процесами дедуплікації та компресії. Всі ці завдання можуть бути вирішені і силами центрального процесора, але чіп ІІ дозволяє робити це набагато ефективніше.
Окремо про процесори Kunpeng
Процесор Kunpeng є системою на чіпі (SoC), де крім обчислювального блоку присутні апаратні модулі, що прискорюють різні процеси, наприклад розрахунок контрольних сум або виконання «стираючого коду» (erasure coding). У ньому ж реалізована апаратна підтримка SAS, Ethernet, DDR4 (від шести до восьми каналів) та ін. Все це дозволяє Huawei створювати контролери СГД, що не поступаються продуктивності класичним рішенням Intel.
Крім того, власні рішення на базі архітектури ARM дають Huawei можливість створювати повноцінні серверні рішення та пропонувати їх своїм замовникам як альтернативу x86.
Нова архітектура Dorado V6…
Внутрішня архітектура СГД Dorado V6 старшої серії представлена чотирма основними субдоменами (фабриками).
Перша фабрика є загальним фронтендом (мережевими інтерфейсами, що відповідають за зв'язок із SAN-фабрикою чи хостами).
Друга — набір контролерів, кожен з яких може за протоколом RDMA «достукатися» як до будь-якої мережевої карти фронтенду, так і до сусіднього «движка» (engine), що є коробкою з чотирма контролерами, а також загальними для них блоками живлення та охолодження. Зараз моделі Dorado V6 класу hi-end можуть комплектуватися двома такими двигунами (відповідно, вісьмома контролерами).
Третя фабрика відповідає за бекенд та складається з мережевих карток RDMA 100G.
Нарешті, четверта фабрика «в залізі» представлена інтелектуальними полицями, що підключаються, з накопичувачами.
Подібна симетрична структура розкриває весь потенціал технології NVMe та гарантує високу продуктивність та надійність. Процес введення-виводу максимально розпаралелюється по процесорах і ядрах, забезпечуючи одночасні читання та запис у безліч потоків.
…і що вона нам дала
Максимальна продуктивність рішень Dorado V6 приблизно втричі перевищує показники систем попереднього покоління (того ж класу) і може сягати 20 млн IOPS.
Це пов'язано з тим, що в минулому поколінні пристроїв підтримка NVMe поширювалася тільки на пристібні полиці з накопичувачами. Тепер вона присутня на всіх етапах, від хоста до SSD. Мережа бекенда також зазнала змін: SAS/PCIe поступилися місцем RoCEv2 з пропускною здатністю 100 Гбіт/с.
Змінився і сам форм-фактор SSD. Якщо раніше на полицю 2U припадало 25 накопичувачів, тепер вона доведена до 36 дисків фізичного формату palm-sized. Крім того, полиці «розумнішали». У кожній з них є відмовостійка система з двох контролерів на базі чіпів ARM, аналогічних тим, які встановлені в центральних контролерах.
Поки що вони займаються лише реорганізацією даних, але з виходом нових прошивок до неї додадуться компресія та erasure coding, що дозволить знизити навантаження на основні контролери з 15 до 5%. Перенесення частини завдань на полицю заразом вивільняє і пропускну здатність внутрішньої мережі. І все це суттєво збільшує потенціал масштабованості системи.
Компресія та дедуплікація у СГД попереднього покоління виконувалася з блоками фіксованої довжини. Тепер додався режим роботи з блоками змінної довжини, який поки потрібно включати примусово. Наступні прошивки, можливо, змінять цю обставину.
Також коротко про толерантність до відмов. Dorado V3 зберігала працездатність, якщо відмовляв один контролер із двох. Dorado V6 забезпечить доступність даних навіть у тому випадку, якщо з ладу послідовно вийдуть сім контролерів із восьми або одночасно чотири зі складу одного «движка».
Надійність з погляду економіки
Нещодавно серед замовників Huawei було проведено опитування про те, який простий окремих елементів IT-інфраструктури компанія вважає за прийнятне. У своїй респонденти терпимо поставилися до гіпотетичної ситуації, у якій додаток не відповідає протягом кількох сотень секунд. Для операційної системи або хост-адаптера шини критичним часом простою виявились десятки секунд (по суті, час перезавантаження). Ще більші вимоги замовники пред'являють до мережі: її пропускна спроможність не повинна пропадати більш ніж на 10-20 секунд. Як неважко здогадатися, найбільш критично важливими опитані визнали відмови систем зберігання. З погляду представників бізнесу, простий СГД не повинен перевищувати... кількох секунд на рік!
Іншими словами, якщо клієнтська програма банку не відповідає 100 секунд, катастрофічних наслідків це, швидше за все, не викличе. А от якщо стільки ж не працює СГД, можливі зупинка бізнесу та значні фінансові втрати.
На діаграмі вище наведено вартість години роботи для десяти найбільших банків (дані Forbes на 2017 рік). Погодьтеся, якщо ваша компанія наближається за розмірами до китайських банків, обґрунтувати необхідність придбання СГД за кілька мільйонів доларів буде не так уже й складно. Правильно і зворотне твердження: якщо бізнес не зазнає суттєвих втрат при простої, то й купувати СГД класу hi-end він навряд чи стане. У будь-якому випадку важливо мати уявлення про те, якого розміру діра загрожує утворитися у вас в гаманці, поки сисадмін розбирається з системою зберігання даних, що відмовилася працювати.
Секунда на аварійне перемикання
У Solution A на ілюстрації вище можна дізнатися про нашу систему попереднього покоління Dorado V3. Чотири її контролери працюють попарно, а копії кешу містяться лише у двох контролерах. Контролери всередині пари можуть перерозподіляти навантаження. У той же час, як бачите, тут немає «фабрик» фронтенду та бекенду, так що кожна полиця з накопичувачами підключається до конкретної контролерної пари.
На схемі Solution В показано присутнє зараз на ринку рішення від іншого вендора (дізналися?). Тут уже є і фронтенд-, і бекенд-фабрики, а накопичувачі підключаються одразу до чотирьох контролерів. Щоправда, у роботі внутрішніх алгоритмів системи є очевидні у першому наближенні нюанси.
Справа представлена наша поточна архітектура СГД Dorado V6 з усім набором внутрішніх елементів. Розглянемо, як ці системи переживають типову ситуацію - вихід одного контролера з ладу.
У класичних системах, до яких належить і Dorado V3, період, що потрібний на перерозподіл навантаження при відмові, досягає чотирьох секунд. На цей час введення-виведення повністю зупиняється. У рішенні Solution В від наших колег, незважаючи на сучаснішу архітектуру, час простою при відмові навіть вищий — шість секунд.
СГД Dorado V6 відновлює свою роботу лише через одну секунду після відмови. Такий результат досягається завдяки однорідному внутрішньому RDMA-середовищу, що дозволяє контролеру звертатися до «чужої» пам'яті. Друга важлива обставина — наявність фронтенд-фабрики, завдяки якій шлях для хоста не змінюється. Порт залишається незмінним, а навантаження просто вирушає на справні контролери драйверами мультипасингу (multipassing).
Вихід з ладу другого контролера Dorado V6 відпрацьовується за одну секунду за тією ж схемою. У Dorado V3 це займає близько шести секунд, а рішення іншого вендора — дев'ять. Багатьом СУБД подібні інтервали не можна вважати прийнятними, оскільки у цей час система перетворюється на режим standby і перестає працювати. Це насамперед стосується СУБД, які з безлічі розділів.
Вихід з ладу третього контролера Solution A пережити неспроможна. Просто через те, що зникає доступ до частини дисків з даними. У свою чергу, Solution В у такій ситуації відновлює працездатність, на що потрібно, як і в попередньому випадку, XNUMX секунд.
Що має Dorado V6? Одна секунда.
Що можна встигнути за секунду
Майже нічого, але нам цього не треба. Ще раз повторимо, що в Dorado V6 класу hi-end фабрика фронтенду відв'язана від фабрики контролерів. Отже, немає і жорстко виділених портів, які належать конкретному контролеру. Перебудова при відмові не має на увазі пошуку альтернативних шляхів або переініціалізації мультипасингу. Система продовжує працювати як працювала.
Стійкість до численних відмов
Старші моделі Dorado V6 без проблем переживають одночасний вихід з ладу двох будь-яких (!) Контролерів зі складу будь-яких «движків». Це стало можливим завдяки тому, що рішення зберігає три копії кешу. Тому навіть за подвійної відмови завжди знайдеться одна цілісна копія.
Синхронна відмова всіх чотирьох контролерів в одному з двигунів також не викличе фатальних наслідків, так як всі три копії кешу в кожен момент часу розподілені між двигунами. За дотриманням такої логіки роботи слідкує сама система.
Нарешті, дуже малоймовірним сценарієм є послідовний вихід із ладу семи контролерів із восьми. Причому мінімальний допустимий підтримки працездатності інтервал між окремими відмовими становить 15 хвилин. За цей час СГД встигає виконати операції, необхідні для міграції кешу.
Останній вцілілий контролер забезпечуватиме роботу сховища даних і підтримуватиме кеш протягом п'яти днів (за замовчуванням, яке легко змінити в налаштуваннях). Після цього кеш буде відключено, але робота СГД продовжиться.
Не турбують апдейти
Нова ОС Dorado V6 дозволяє оновлювати прошивку СГД без перезавантаження контролерів.
Операційка, як і у випадку з колишніми рішеннями, виконана на базі Linux, проте багато операційних процесів перенесені з ядра в режим користувача. Більшість функцій, наприклад відповідальних за дедуплікацію і компресію, тепер є звичайними демонами, що працюють у фоновому режимі. Завдяки цьому для оновлення окремих модулів немає потреби змінювати всю операційну систему. Допустимо, для додавання підтримки нового протоколу потрібно буде лише вимкнути відповідний програмний модуль та запустити новий.
Зрозуміло, що питання оновлення системи цілком все одно залишаються, адже і в ядрі можуть бути елементи, які потребують апдейту. Але таких, за нашими спостереженнями, менше ніж 6% від загальної кількості. Це дозволяє перезавантажувати контролери в десятки разів рідше ніж раніше.
Катастрофостійкі рішення та рішення високої доступності (HA/DR)
Dorado V6 «з коробки» готова до інтеграції в георозподілені рішення, кластери міського рівня (metro) та «потрійні» дата-центри.
Ліворуч на ілюстрації вище - вже знайомий багатьом metro-кластер. Дві СГД працюють у режимі active/active на відстані до 100 км один від одного. Подібна інфраструктура з наявністю одного або кількох кворумних серверів може підтримуватись рішеннями різних компаній, включаючи нашу хмарну операційну систему FusionSphere. Особливої важливості в таких проектах набувають характеристики каналу між майданчиками, решта завдань у нашому випадку бере на себе функція HyperMetro, доступна, знову ж таки, «з коробки». Можлива інтеграція Fibre Channel, а також iSCSI в IP-мережах, якщо виникає така потреба. Необхідності в обов'язковому наявності виділеної «темної» оптики більше немає, оскільки система може зв'язуватися через наявні канали.
При побудові таких систем єдиною апаратною вимогою до СГД є виділення портів під реплікацію. Достатньо придбати ліцензію, запустити кворумні сервери – фізичні чи віртуальні – та забезпечити IP-зв'язок до контролерів (10 Мбіт/с, 50 мс).
Цю архітектуру легко перенести на систему із трьома ЦОДами (див. праву частину ілюстрації). Наприклад, коли два ЦОД працюють в режимі metro-кластера, а третій майданчик, розташований на відстані понад 100 км, використовує асинхронну реплікацію.
Система технологічно підтримує різні бізнес-сценарії, які будуть реалізовані у разі масштабного ексцесу.
Виживання metro-кластера при кількох відмових
На вище і нижче показаний класичний metro-кластер, що складається з двох СХД і кворумного сервера. Як бачите, у шести із дев'яти можливих сценаріїв численних відмов наша інфраструктура збереже працездатність.
Наприклад, у другому сценарії, при відмові кворумного сервера та синхронізації між майданчиками, система залишається продуктивною, оскільки другий майданчик припиняє роботу. Подібна поведінка вже закладена у вбудовані алгоритми.
Навіть після трьох відмов доступ до інформації може бути збережений, якщо інтервал між ними становив хоча б 15 секунд.
Звичний козир із рукава
Нагадаємо, що Huawei виробляє не лише СГД, а й повний спектр мережного обладнання. Якого постачальника СГД ви не вибрали б, якщо між майданчиками використовується мережа WDM, у 90% випадків вона буде побудована на рішеннях нашої компанії. Виникає закономірне питання: навіщо збирати зоопарк систем, коли все гарантовано сумісне між собою «залізо» можна отримати в одного вендора?
До питання про продуктивність
Напевно, нікого вже не треба переконувати в тому, що перехід на All-Flash СГД дозволяє значно скоротити витрати на підтримку інфраструктури, оскільки всі рутинні операції виконуються значно швидше. Про це свідчать усі постачальники такого обладнання. Тим часом багато вендоров починають лукавити, коли мова заходить про спад продуктивності при включенні різних режимів роботи СГД.
У нашій галузі широко практикується видача СГД у тестову експлуатацію на один-два дні. Постачальник запускає 20-хвилинний тест на порожній системі, отримуючи космічні показники продуктивності. А в реальній експлуатації швидко вилазять підводні граблі. Вже за добу красиві значення IOPS знижуються вдвічі-втричі, а якщо СГД заповнити на 80%, виявляються ще менше. При включенні RAID 5 замість RAID 10 втрачається ще 10-15%, а режимі metro-кластера продуктивність додатково уполовинивается.
Все, що перераховано вище, – не про Dorado V6. Наші замовники мають можливість запустити тест продуктивності на вихідні або хоч би на ніч. Тоді поводиться складання сміття, а також стає зрозуміло, як активація різних опцій — на кшталт снепшотів і реплікації — впливає на величину IOPS, що досягаються.
У Dorado V6 снепшоти та RAID з парністю практично не впливають на продуктивність (3-5% замість 10-15%). Складання сміття (заповнення осередків накопичувача нулями), компресія, дедуплікація на СГД, заповненому на 80%, завжди позначатимуться на загальній швидкості обробки запитів. Але саме Dorado V6 цікава тим, що, хоч би яку комбінацію функцій та захисних механізмів ви активували, підсумкова продуктивність СГД не впаде нижче 80% від показника, отриманого без навантаження.
Балансування навантаження
Висока продуктивність Dorado V6 досягається за рахунок балансування на кожному етапі, а саме:
- мультипасингу;
- використання кількох підключень від одного хоста;
- наявності фронтенд-фабрики;
- розпаралелювання роботи контролерів СГД;
- розподіл навантаження по всіх накопичувачах на рівні RAID 2.0+.
У принципі це загальна практика. У наші дні мало хто тримає всі дані на одному LUN: усі намагаються, щоб їх було хай вісім, хай сорок, а то й ще більше. Це очевидний та правильний підхід, який ми поділяємо. Але якщо ваше завдання вимагає наявності лише одного LUN, який простіше обслуговувати, наші архітектурні рішення дозволяють досягти на ньому продуктивності 80% доступної при використанні декількох LUN.
Динамічне планування завантаження процесорів
Розподіл навантаження на процесори при використанні одного LUN у нас реалізовано наступним чином: завдання ще на рівні LUN дробляться на окремі невеликі «шарди», кожен з яких жорстко закріплюється за конкретним контролером у двигуні. Це зроблено для того, щоб система не втрачала продуктивності, поки «скаче» з цим шматком даних з різних контролерів.
Ще один механізм збереження високої продуктивності — динамічний шедулінг, у якому ті чи інші процесорні ядра можуть виділятися під різні пули завдань. Наприклад, якщо зараз система простоює на рівні дедуплікації та компресії, то частина ядер може включитися у процес обслуговування введення-виведення. Або навпаки. Все це виконується автоматично та прозоро для користувача.
Дані про поточне завантаження кожного з ядер Dorado V6 не виводяться у графічний інтерфейс, але через командний рядок можна звернутися до ОС контролера та скористатися звичайною лінуксовою командою топ.
Підтримка NVMe та RoCE
Як уже згадувалося, на даний момент Dorado V6 повністю підтримує NVMe over Fibre Channel "з коробки" і не вимагає жодних ліцензій. У середині року з'явиться підтримка NVMe over Ethernet. Для її повноцінного використання знадобиться підтримка Ethernet з прямим доступом у пам'ять (DMA) версії v2.0 як з боку СХД, так і з боку комутаторів і мережевих адаптерів. Наприклад, таких як Mellanox ConnectX-4 або ConnectX-5. Можна скористатися і мережевими картами, виконаними з урахуванням наших мікросхем. Також підтримка RoCE має бути реалізована на рівні операційної системи.
Загалом ми вважаємо Dorado V6 NVMe-орієнтованою системою. Незважаючи на наявну підтримку Fibre Channel та iSCSI, надалі планується перехід на швидкісний Ethernet із RDMA.
Дрібка маркетингу
Завдяки тому, що система Dorado V6 має високу стійкість до збоїв, добре горизонтально масштабується, підтримує різні технології міграції тощо, економічний ефект від її придбання проявляється з початком інтенсивної експлуатації СГД. Ми й надалі намагатимемося зробити володіння системою максимально вигідним, навіть якщо на першому етапі це не впадає у вічі.
Зокрема, ми сформували програму FLASH EVER, пов'язану з продовженням життєвого циклу СГД та призначену для того, щоб наскільки можна розвантажити замовника під час проведення апгрейдів.
Ця програма включає ряд заходів:
- можливість поступової заміни контролерів та полиць з дисками на нові версії без заміни обладнання повністю (для систем Dorado V6 класу hi-end);
- можливість федеративного зберігання (об'єднання різних версій Dorado у складі одного гібридного кластера СГД);
- розумну віртуалізацію (можливість використовувати обладнання третьої сторони як частину рішення Dorado).
Залишилося відзначити, що непроста ситуація у світі позначилася на комерційних перспективах нової системи. Незважаючи на те, що офіційний реліз Dorado V6 відбувся лише в січні, ми бачимо значний попит на неї в Китаї, а також великий інтерес до неї з боку російських та міжнародних партнерів зі сфери фінансів та урядових структур.
Крім іншого, у зв'язку з пандемією, скільки б вони не тривали, особливо гостро постає питання забезпечення видалених співробітників віртуальними робочими столами. У цьому процесі Dorado V6 теж міг би зняти багато питань. Для цього ми докладаємо всіх зусиль, у тому числі практично домовилися про включення нової системи в лист сумісності VMware.
***
До речі, не забувайте про наші численні вебінари, що проводяться не лише в російськомовному сегменті, а й на глобальному рівні. Список вебінарів на квітень доступний .
Джерело: habr.com