我的名字是 Leonid，我是一名网站开发人员 因此，由于我的活动，我对托管服务领域各个公司的形成和发展的故事很感兴趣。 今天我想接受对主持创始人 Danil 和 Dmitry 的采访 。 他们将讨论基础设施的结构、工作组织以及他们在俄罗斯开发虚拟服务器提供商的经验。
请向我们介绍一下您自己。 您是如何进入托管行业的？ 在此之前你在做什么？
直到 2016 年，Dmitry 和我都在企业部门工作，包括戴尔、惠普、EMC 等公司。 通过分析俄罗斯的云市场，我们意识到它正在积极增长，并决定我们可以向市场提供有趣的产品。 一个已经在其他项目上合作过的团队聚集在一起，开始开发自己的虚拟化平台，以满足大型企业的特定需求。 自2018年起，我们同步推出“适合所有人”的云托管，并分配给项目 一个五人团队。
发射前储存和准备站
这个商业项目已经开始运作还是仍在开发中？
是的，它是并行工作的——已经有一个更大的团队，我们更多地谈论 IT 基础设施的软件和硬件解决方案，而不是托管。
您现在拥有很多不同的服务。 当您开始时，列表是更小还是相同？ 而且，所有这些服务实际上都是一个常规的虚拟服务器，只是存在一定的分离性。
我们从经典的IaaS开始：我们为它们提供带有封闭端口和虚拟网络的“裸”虚拟服务器，以便用户可以为自己创建一个成熟的基础设施。 但推出后，发现大多数用户并不明白为什么他们需要这样的机会，我们决定为自己推出一款新产品——标准的VDS/VPS，市场已经熟悉了它。 对我们来说，它本质上是产品的精简版，但用户立即明白它是什么，我们开始接待第一批客户。 显然，我们与大公司合作的经验迫使我们立即开发更复杂和定制的解决方案，而大众市场需要简单性。 然后，基于VPS，我们开始根据客户最常要求的内容开发新的服务。 我们仍在开发它。
你把设备放在哪里？ 您拥有它还是租用它？ 您是如何选择 DC 进行安置的？ 有没有搬迁的案例？
所有设备都是我们的，我们只租用两个数据中心的空间。 我们从三个数据中心开始：我们想实现三路容错，但当时需求太小，无法投资，所以我们放弃了第三个数据中心。 我们有一个举措：我们刚刚从第三个数据中心搬到剩下两个数据中心之一。 它们是根据以下原则选择的：数据中心应该在市场上知名、可靠（第三级），因此两者的地理位置都位于莫斯科，彼此相距较远的地区。
您目前位于哪些 DC，您已放弃哪一个 DC？
现在我们位于DataSpace 和3Data。 我们放弃了 3Data 数据中心之一。
离开第三数据中心
您租用或购买 IP 地址吗？
我们出租。
您选择这种方式而不是购买的原因是什么？
总的来说，成长很快。 我们为客户提供虚拟基础设施，他们不必立即支付资本投资，而且成本可以按月细分。 我们自己坚持与客户相同的理念 - 我们努力扩张和快速扩展。
您对 IPv6 有何看法？
到目前为止，我们还没有注意到任何重大需求，所以我们没有添加更多，但输出架构已经制定出来，我们准备在短时间内“推出”，一旦我们了解到有请求。
您正在使用 KVM 虚拟化。 你为什么选择她？ 她在工作中如何展现自己？
没错，但我们使用的不是“裸”KVM，而是我们的“老大哥”开发的成熟的、经过修改的基于KVM的虚拟化系统，包括数据存储系统（SDS）和软件定义网络（SDN） 。 我们选择它是基于构建最具容错性、无单点故障的产品。 它表现得很好，到目前为止，生产中没有出现全球性问题。 在市场alpha测试阶段，当我们为第一批客户提供积分服务时，我们测试了技术，遇到了一些不愉快的时刻，但在过去的两年里我们已经理解并解决了很多。
你使用超卖吗？ 如何控制服务器的负载？
我们仅对处理器使用超卖，但对 RAM 不使用超卖。 即使对于物理处理器，我们也不允许其负载超过 75%。 通过磁盘：我们采用“精简”容量分配。 我们对整个环境进行集中监控，这使我们能够控制负载。 两名工程师负责支持整个基础设施，因此我们正在尝试尽可能自动化并收集系统上所有可能的信息。 与正常操作的任何偏差都会立即可见，我们会定期评估和重新平衡基础设施内的负载。 重新平衡总是在线进行，客户不会注意到。
您目前有多少台物理服务器？ 您多久添加一次新内容？ 您使用什么服务器？
目前有 76 台服务器，我们大约每四到五个月添加新服务器。 我们使用QCT、英特尔、超微。
是否有过这样的情况：客户端来了，占用了所有剩余的免费资源，而你不得不紧急添加服务器？
资源方面不存在这样的事情。 到目前为止，我们的增长或多或少是均匀的。 但有一种情况是，一个用户想要 50 个 IP，每个 IP 位于一个单独的块中。 当然，我们还没有这样的东西:)
您最受欢迎的付款方式是什么？ 最少用的是什么？
最受欢迎的是银行卡和 QIWI。 最不常见的是根据法人实体的要约通过银行转账付款，但此类转账的金额最大（通常，公司会支付几个月的固定资源费用）。 PayPal也落后了：一开始我们并没有指望外国用户，但他们开始出现。
Boodet.online 有自己编写的帐单。 您为什么决定使用这个解决方案？ 优缺点都有什么？ 开发起来困难吗？
我们的整个系统都是我们自己设计的。 就用户体验而言，现有平台对我们来说似乎不太方便，因此我们决定创建和开发自己的平台。 计费只是系统中的微服务之一。 事实证明，开发比我们一开始想象的要困难。 甚至在某些时候，我们不得不推迟项目的启动，以便有时间准备一个不会让 alpha 测试尴尬的工作产品。 随后，他们获得了长期开发方法和产品管理的能力。 现在可以更轻松地向系统添加新功能和新产品。
有多少人开发了这一切？ 你写了什么？
整个项目我们有五个人，其中两个是开发人员（前端和后端）。 Back是用RoR/Python编写的。 前面是JS。
用户支持是如何组织的？ 是 XNUMX/XNUMX 营业还是仅在营业时间内营业？ 有多少条支撑线？ 你最常被问到什么？
我们有三个入口点：聊天、电话和您个人帐户的申请系统。 两条线支持：如果值班工程师无法解决问题，则技术总监或开发团队介入。 如果问题出在主平台上，而这种情况发生的频率要低得多，那么技术总监就会转向“老大哥”的支持。 晚上，我们只回复购买单独技术服务的客户的电话，或通过 Telegram 中专门编写的机器人报告的平台故障。
最常见的问题：
- 我们的 IP 在土库曼斯坦可用吗（这是第一个流行的 - 显然，该国有严格的封锁政策）。
- 如何安装这个或那个软件。
- 如何获得root访问权限（创建机器时界面中甚至有特别提醒，但这并不总是有帮助）。
你们验证客户吗？ 垃圾邮件发送者和其他不良人物是否经常出现？
通过邮件和电话验证（如果用户激活 2FA）。 垃圾邮件发送者和其他滥用者会定期出现。 我们被迫通过暂时阻止受感染的服务器来做出响应，因为我们不希望 IP 被列入黑名单。 但我们总是提前写信给用户，表示已收到针对他的投诉，并要求他与他联系并讨论问题。 如果用户没有回应，或者重复出现投诉，我们将封锁整个帐户并删除服务器。
针对客户的 DDoS 攻击是否经常发生？ 在这种情况下你会怎么做？ 是否有专门针对您、您的网站或您的基础设施的攻击？
客户端很少受到攻击。 但我们自己经常有一个网站、一个个人帐户。 有时他们将网络连接到不同的 IP 地址。 我们不承诺判断是谁以及为什么，可能有多种选择。 甚至有人试图从内部攻击我们。 此前，在通过电话验证时，我们赠送了一百卢布的奖金，以便普通用户可以测试任何配置。 但有一天，一名用户带来了“一包 SIM 卡”，并在一个 IP 下开始创建数十个帐户，并通过这些帐户获得奖金。 因此，我们必须取消考试成绩的自动累积。 现在您需要向技术支持提交测试请求，我们会单独考虑每种情况。
工作是如何组织的，是否有办公室，或者每个人都远程工作吗？
有一个办公室，但随着冠状病毒的限制开始，每个人都从家里/别墅/家乡去上班。
我们的办公室
您目前公司的发展方向是什么？
我们正在努力增加新的服务。 我们有一个广泛的路线图，我们不会中断开发，并且每两周发布一个新版本的个人帐户。 我们添加同事需要的功能和服务，并且添加客户要求的功能和服务。
你如何寻找客户？ 每年是否有大量客户流入和流出？ 客户的平均“寿命”是多少？
在我们这个领域，如果有一个好的产品，吸引客户的渠道就是整个业务的基础。 因此，我们不准备分享。
流失率、LTV 和生命周期也是相当重要的指标，我们仅将其用于内部分析，但不用于披露。
您能为读者提供有关选择托管服务的建议吗？ 购买前需要注意什么？
最重要的是选择名称以字母“B”开头的主机。
但说实话，有几个因素需要注意：
- 要了解质量，您可以采用平均配置并尝试在其上解决您的应用程序问题。 选择按小时收费的托管 - 如果质量不满意，您可以测试服务器，而不会损失很多钱。
- 查看托管主机拥有物理服务器的数据中心。 它们可以用来粗略地判断服务质量。
- 我们不建议关注价格：既有性能良好的超便宜解决方案，也有没什么特别的超贵解决方案。
告诉我们您最难忘的工作时刻。
项目开始。 在第一个半月里，我们全天候（24/7）工作：我们查看注册进展情况、个人帐户界面是否有任何问题、用户行为如何、他们订购服务是否方便。 许多事情必须即时做出决定，甚至需要用其他产品替换某些产品。 绕过测试环境，立即在生产中进行更改。 那是一段紧张的时期，但我们设法生存下来，没有放弃这项业务。
前来寻找逻辑漏洞的用户。 抓住它们并消除漏洞是很有趣的。 例如，当我们工作不是为了钱，而是奖励奖金以便用户可以订购服务器时，一个黑客论坛上会发布一个指向我们的链接，并附有评论：“他们提供价值 500 卢布的免费服务器。” 当然，我们立刻就挤满了渴望免费赠品的矿工。
您能否简要介绍一下公司的历史？
- 2017年上半年——我们开始开发Boodet.online平台、网站和个人账户。
- 2018 - 进入 alpha 测试，免费向客户提供容量，并收到广泛的反馈和测试结果作为回报。
- 2018 年中 - 推出测试版并付费。 首先对数百个客户进行技术支持测试。
- 2019 年 - 我们开始吸引法人实体作为客户并致力于定制解决方案。
- 2020年——每个人都进入自我隔离状态，虚拟化的需求不断增长。 我们自己也感受到了这一点——客户数量增加，这使得我们可以开展大量附加服务。
来源： habr.com