Meu nome é Leonid, sou desenvolvedor de sites , portanto, devido às minhas atividades, tenho interesse nas histórias de formação e desenvolvimento de diversas empresas na área de serviços de hospedagem. Hoje gostaria de apresentar uma entrevista com Danil e Dmitry, os criadores do hosting . Eles falarão sobre a estrutura da infraestrutura, a organização do trabalho e sua experiência no desenvolvimento de um provedor de servidores virtuais na Rússia.
Por favor, conte-nos algumas palavras sobre você. Como você começou a hospedar? O que você estava fazendo antes disso?
Até 2016, Dmitry e eu trabalhamos no setor empresarial, inclusive em empresas como Dell, HP, EMC. Analisando o mercado de nuvem na Rússia, percebemos que ele estava crescendo ativamente e decidimos que poderíamos fazer uma oferta interessante ao mercado. Uma equipe de pessoas que já haviam trabalhado juntas em outros projetos se reuniu e começou a desenvolver sua própria plataforma de virtualização voltada para grandes empresas com suas necessidades específicas. Desde 2018, lançamos simultaneamente hospedagem em nuvem “para todos” e alocamos para o projeto uma equipe de cinco pessoas.
Estação de armazenamento e preparação pré-lançamento
Este projeto empresarial já está funcionando ou ainda está em desenvolvimento?
Sim, funciona em paralelo - já existe uma equipe maior e estamos falando mais de soluções de software e hardware para infraestrutura de TI, não de hospedagem.
Agora você tem muitos serviços diferentes. Quando você começou, a lista era menor ou igual? Além disso, todos esses serviços são, na verdade, um servidor virtual normal, mas há uma certa separação.
Começamos com o IaaS clássico: fornecemos servidores virtuais “vazios” com portas fechadas e redes virtuais para eles, para que o usuário pudesse criar uma infraestrutura completa para si mesmo. Mas após o lançamento, descobriu-se que a maioria dos usuários não entendia por que precisavam de tais oportunidades, e decidimos apresentar um novo produto para nós mesmos - um VDS/VPS padrão, com o qual o mercado já está familiarizado. Para nós, era essencialmente uma versão simplificada do produto, mas os usuários entenderam imediatamente o que era e começamos a receber nossos primeiros clientes. Aparentemente, a nossa experiência com grandes empresas obrigou-nos a desenvolver imediatamente uma solução mais complexa e personalizada, enquanto o mercado de massa quer simplicidade. E então, com base no VPS, começamos a desenvolver novos serviços com base no que os clientes mais solicitam. E ainda estamos desenvolvendo isso.
Onde você coloca o equipamento? Você é proprietário ou aluga? Como você escolheu um DC para colocação? Houve algum caso de realocação?
Todos os equipamentos são nossos, só alugamos espaço em dois data centers. Começamos com três data centers: queríamos implementar tolerância a falhas tripartida, mas a demanda naquele momento era muito pequena para investir nisso, então abandonamos o terceiro data center. Tivemos uma mudança: estávamos mudando do terceiro data center para um dos dois restantes. Eles foram escolhidos de acordo com o seguinte princípio: os CDs deveriam ser conhecidos no mercado, confiáveis (Tier III), para que ambos estivessem geograficamente localizados em Moscou, em áreas distantes um do outro.
Em quais CDs você está atualmente e qual você abandonou?
Agora estamos localizados em DataSpace e 3Data. Abandonamos um dos data centers da 3Data.
Saindo do terceiro data center
Você aluga ou compra endereços IP?
Nós alugamos.
E por que motivo você escolheu essa abordagem em vez de comprar?
Em geral, para crescer rapidamente. Fornecemos aos clientes infraestrutura virtual, pela qual eles não precisam pagar investimentos de capital imediatamente e os custos podem ser discriminados mensalmente. Nós próprios aderimos à mesma filosofia dos nossos clientes - esforçamo-nos pela expansão e expansão rápida.
O que você acha do IPv6?
Até o momento não notamos nenhuma demanda significativa, então não adicionamos mais, mas a arquitetura de saída foi elaborada, estamos prontos para “lançar” em pouco tempo, assim que entendermos que há solicitações .
Você está usando a virtualização KVM. Por que você a escolheu? Como ela se mostra no trabalho?
É isso mesmo, mas não usamos KVM “nu”, mas um sistema de virtualização completo e modificado baseado em KVM que nosso “irmão mais velho” desenvolveu, incluindo um sistema de armazenamento de dados (SDS) e uma rede definida por software (SDN) . Nós o escolhemos com base na construção do produto mais tolerante a falhas, sem pontos únicos de falha. Mostra-se bem, até agora não surgiram problemas globais na produção. Na fase de testes alfa de mercado, quando prestamos serviços aos primeiros clientes em troca de pontos de bônus, testamos a tecnologia e encontramos vários momentos desagradáveis, mas nos últimos dois anos conseguimos entender e resolver muita coisa.
Você usa vendas exageradas? Como você controla a carga no servidor?
Usamos overselling apenas para processadores, mas em nenhum caso para RAM. Mesmo no caso de processadores físicos, não permitimos que sua carga ultrapasse 75%. Por disco: trabalhamos com alocação de capacidade “thin”. Temos monitoramento centralizado de todo o ambiente, o que nos permite controlar a carga. Dois engenheiros são responsáveis por dar suporte a toda a infraestrutura, por isso estamos tentando automatizar ao máximo e coletar todas as informações possíveis sobre o sistema. Quaisquer desvios da operação normal são imediatamente visíveis e avaliamos e reequilibramos periodicamente a carga dentro da infraestrutura. O reequilíbrio sempre ocorre online, despercebido pelos clientes.
Quantos servidores físicos você possui atualmente? Com que frequência você adiciona novos? Quais servidores você usa?
No momento existem 76 servidores, adicionamos novos aproximadamente a cada quatro ou cinco meses. Usamos QCT, Intel, Supermicro.
Houve casos em que um cliente chegou e ocupou todos os recursos livres restantes e você teve que adicionar servidores com urgência?
Não existia tal coisa com recursos. Até agora estamos crescendo de forma mais ou menos uniforme. Mas houve um caso em que um usuário veio e queria 50 IPs, cada um em um bloco separado. Claro, ainda não temos nada parecido :)
Quais são seus métodos de pagamento mais populares? Qual é o menos usado?
Os mais populares são o cartão bancário e o QIWI. O menos comum é o pagamento por transferência bancária na oferta para pessoas jurídicas, mas essas transferências são as mais volumosas (as empresas, via de regra, pagam por recursos sólidos durante vários meses). O PayPal também está atrasado: no início não contávamos com usuários estrangeiros, mas eles começaram a aparecer.
Boodet.online possui cobrança por escrito. Por que você decidiu usar esta solução? Quais são os prós e contras? Foi difícil desenvolver?
Todo o nosso sistema é projetado por nós mesmos. As plataformas existentes não nos pareciam muito convenientes em termos de UX, por isso decidimos criar e desenvolver a nossa própria. O faturamento é apenas um dos microsserviços que fazem parte do sistema. O desenvolvimento acabou sendo mais difícil do que pensávamos no início. Mesmo em algum momento tivemos que adiar o lançamento do projeto para ter tempo de preparar um produto funcional que não fosse constrangedor para o teste alfa. Posteriormente, adquiriram competências em métodos de desenvolvimento de longo prazo e gestão de produtos. Agora é mais fácil adicionar novas funcionalidades e novos produtos ao sistema.
Quantas pessoas desenvolveram tudo isso? Sobre o que você escreveu?
Contamos com cinco pessoas para todo o projeto, sendo dois desenvolvedores (frontend e backend). Voltar está escrito em RoR/Python. A frente é JS.
Como é organizado o suporte ao usuário? Está aberto XNUMX horas por dia, XNUMX dias por semana ou apenas em horário comercial? Quantas linhas de apoio existem? O que você pergunta com mais frequência?
Temos três pontos de entrada: chat, telefone e sistema de aplicação a partir da sua conta pessoal. Duas linhas de apoio: caso o engenheiro de plantão não consiga resolver o problema, o diretor técnico ou equipe de desenvolvimento se envolve. Se o problema estiver na plataforma principal, o que acontece com muito menos frequência, então o diretor técnico recorre ao apoio do “irmão mais velho”. À noite, respondemos apenas a ligações de clientes que adquirem serviços técnicos separados ou a falhas de plataforma relatadas por meio de um bot especialmente escrito no Telegram.
Perguntas mais populares:
- Nossos IPs estão disponíveis no Turcomenistão (este é o primeiro em popularidade - aparentemente, o país tem uma política de bloqueio rígida).
- Como instalar este ou aquele software.
- Como obter acesso root (há até um lembrete especial na interface ao criar máquinas, mas nem sempre ajuda).
Você verifica clientes? Spammers e outros personagens ruins aparecem com frequência?
Verificação por correio e telefone (se o usuário ativar 2FA). Spammers e outros abusadores aparecem periodicamente. Somos forçados a responder bloqueando temporariamente os servidores comprometidos, pois não queremos que os IPs sejam colocados na lista negra. Mas sempre escrevemos ao usuário com antecedência informando que foi recebida uma reclamação contra ele e pedimos que entre em contato e discuta o problema. Caso o usuário não responda ou apareçam reclamações repetidas, bloqueamos toda a conta e excluímos os servidores.
Os ataques DDoS aos clientes acontecem com frequência? O que você faz nesses casos? Houve ataques especificamente contra você, seu site ou sua infraestrutura?
Os clientes raramente são atacados. Mas muitas vezes nós próprios temos um site, uma conta pessoal. Às vezes eles conectam a rede a diferentes endereços IP. Não nos comprometemos a julgar quem é e por quê, pode haver várias opções. Existem até tentativas de nos atacar por dentro. Anteriormente, ao verificar por telefone, distribuíamos um bônus de cem rublos para que usuários normais pudessem testar qualquer configuração. Mas um dia um usuário veio com um “pacote de cartões SIM” e a partir de um mesmo IP começou a criar dezenas de contas, recebendo bônus por elas. Portanto, tivemos que remover o acúmulo automático de notas de testes. Agora você precisa enviar uma solicitação de teste ao suporte técnico, e consideraremos cada caso separadamente.
Como é organizado o trabalho, existe escritório ou todos trabalham remotamente?
Há escritório, mas com o início das restrições por conta do coronavírus, todos passaram a trabalhar em casa/dacha/cidade natal.
Nosso escritório
Qual é o seu atual curso de desenvolvimento da empresa?
Estamos caminhando para adicionar novos serviços. Temos um roadmap extenso, não interrompemos o desenvolvimento e a cada duas semanas é liberado um novo lançamento da conta pessoal. Adicionamos funcionalidades e serviços que são procurados pelos colegas e adicionamos o que os clientes solicitam.
Como você encontra clientes? Existe uma grande entrada e saída de clientes por ano? Qual é a “vida útil” média de um cliente?
Os canais de atração de clientes em nossa área são a base de todo o negócio, se houver um produto funcionando bem. Portanto, não estamos prontos para compartilhar.
A taxa de rotatividade, o LTV e o ciclo de vida também são indicadores bastante importantes que usamos apenas para análises internas, mas não para divulgação.
Você pode dar algum conselho aos leitores sobre como escolher um serviço de hospedagem? O que você deve prestar atenção antes de comprar?
O mais importante é escolher uma hospedagem com a letra “B” no início do nome.
Mas, falando sério, existem vários fatores aos quais você precisa prestar atenção:
- Para entender a qualidade, você pode pegar uma configuração média e tentar resolver os problemas do seu aplicativo nela. Escolha uma hospedagem que tenha taxa horária – você pode testar servidores sem perder muito dinheiro se a qualidade não for satisfatória.
- Observe os data centers onde o hoster possui servidores físicos. Eles podem ser usados para avaliar aproximadamente a qualidade dos serviços.
- Não recomendamos prestar atenção aos preços: existem soluções super baratas que funcionam bem e soluções super caras que não têm nada de especial.
Conte-nos sobre seus momentos de trabalho mais memoráveis.
Início do projeto. Durante o primeiro mês e meio trabalhamos 24 horas por dia, 7 dias por semana: analisamos como estavam os registros, se alguma coisa estava quebrada na interface da conta pessoal, como os usuários se comportavam, se era conveniente para eles solicitar serviços. Muita coisa teve que ser decidida na hora, até o ponto de substituir alguns produtos por outros. As alterações foram feitas imediatamente na produção, ignorando os ambientes de teste. Foi um período tenso, mas conseguimos sobreviver e não desistir desse negócio.
Usuários que vieram em busca de vulnerabilidades na lógica. Foi interessante capturá-los e eliminar vulnerabilidades. Por exemplo, quando não estávamos trabalhando por dinheiro, mas concedendo bônus para que os usuários pudessem solicitar servidores, um link para nós foi postado em um dos fóruns de hackers com o comentário: “eles oferecem servidores gratuitos no valor de 500 rublos”. Claro, fomos imediatamente inundados com mineradores famintos por brindes.
Você poderia fornecer uma breve linha do tempo da história da empresa?
- Primeiro semestre de 2017 - iniciamos o desenvolvimento da plataforma Boodet.online, site e conta pessoal.
- 2018 - entrou em testes alfa, forneceu capacidade aos clientes gratuitamente e recebeu amplo feedback e resultados de testes em troca.
- Meados de 2018 - versão beta lançada com dinheiro. Primeiras centenas de clientes, testes de suporte técnico.
- 2019 - começamos a atrair pessoas jurídicas como clientes e a trabalhar em soluções customizadas.
- 2020 - todos se isolam, a demanda por virtualização está crescendo. Nós próprios sentimos isso - há um aumento de clientes, o que permite trabalhar num grande número de serviços adicionais.
Fonte: habr.com