Chámome Leonid, son un programador de sitios web , polo tanto, polas miñas actividades, interésanme as historias de formación e desenvolvemento de diversas empresas no ámbito dos servizos de hospedaxe. Hoxe gustaríame presentar unha entrevista a Danil e Dmitry, os creadores do hosting . Falarán sobre a estrutura da infraestrutura, a organización do traballo e a súa experiencia no desenvolvemento dun provedor de servidores virtuais en Rusia.
Por favor, dinos algunhas palabras sobre ti. Como chegaches ao hospedaxe? Que estabas facendo antes disto?
Ata 2016, tanto Dmitry como eu traballamos no sector empresarial, incluso en empresas como Dell, HP, EMC. Analizando o mercado da nube en Rusia, decatámonos de que estaba crecendo activamente e decidimos que podíamos facer unha oferta interesante para o mercado. Reuníronse un equipo de persoas que xa traballaran entre si noutros proxectos e xuntos comezaron a desenvolver a súa propia plataforma de virtualización dirixida a grandes empresas coas súas necesidades específicas. Desde 2018, simultáneamente lanzamos hospedaxe en nube "para todos" e asignámolo para o proxecto un equipo de cinco persoas.
Estación de almacenamento e preparación previa ao lanzamento
Este proxecto empresarial xa está funcionando ou aínda está en desenvolvemento?
Si, funciona en paralelo: xa hai un equipo máis grande, e estamos a falar máis de solucións de software e hardware para infraestrutura de TI, non de hospedaxe.
Agora tes moitos servizos diferentes. Cando comezaches, a lista era máis pequena ou igual? Ademais, todos estes servizos son en realidade un servidor virtual normal, pero hai unha certa separación.
Comezamos co IaaS clásico: proporcionamos servidores virtuais "desnudos" con portos pechados e redes virtuais para eles, para que o usuario puidese crear unha infraestrutura completa por si mesmo. Pero despois do lanzamento, resultou que a maioría dos usuarios non entendían por que necesitaban tales oportunidades, e decidimos presentar un novo produto para nós: un VDS/VPS estándar, co que o mercado xa está familiarizado. Para nós, era esencialmente unha versión reducida do produto, pero os usuarios inmediatamente entenderon o que era e comezamos a recibir os nosos primeiros clientes. Ao parecer, a nosa experiencia con grandes empresas obrigounos a desenvolver inmediatamente unha solución máis complexa e personalizada, mentres que o mercado masivo quere sinxeleza. E despois, baseándonos en VPS, comezamos a desenvolver novos servizos baseados no que os clientes solicitan con máis frecuencia. E aínda o estamos desenvolvendo.
Onde colocas o equipo? Tes o seu propietario ou alugalo? Como escolleches un DC para a colocación? Houbo algún caso de traslado?
Todo o equipo é noso, só alugamos espazo en dous centros de datos. Comezamos con tres centros de datos: queriamos implementar tolerancia a fallos de tres vías, pero a demanda nese momento era demasiado pequena para investir nisto, polo que abandonamos o terceiro centro de datos. Tivemos un movemento: só estabamos pasando do terceiro centro de datos a un dos dous restantes. Elixíronse segundo o seguinte principio: os DC deberían ser coñecidos no mercado, fiables (Tier III), de xeito que ambos se situasen xeograficamente en Moscova, en zonas afastadas entre si.
En que DC te atopas actualmente e cal abandonaches?
Agora estamos situados en DataSpace e 3Data. Abandonamos un dos centros de datos de 3Data.
Saíndo do terceiro centro de datos
Alugas ou compras enderezos IP?
Alugamos.
E por que escolleches este enfoque en lugar de comprar?
En xeral, para crecer rapidamente. Ofrecemos aos clientes infraestrutura virtual, para a que non teñen que pagar investimentos de capital de inmediato, e os custos pódense desglosar mensualmente. Nós mesmos adherimos á mesma filosofía que os nosos clientes: esforzámonos pola expansión e unha escalada rápida.
Que opinas de IPv6?
Ata o momento non percibimos ningunha demanda importante, polo que non engadimos máis, pero a arquitectura de saída está elaborada, estamos preparados para “despegar” en pouco tempo, en canto entendamos que hai solicitudes .
Está a usar a virtualización KVM. Por que a escolleches? Como se mostra no traballo?
É certo, pero non usamos KVM "naked", senón un sistema de virtualización baseado en KVM modificado e completo que desenvolveu o noso "irmán maior", incluíndo un sistema de almacenamento de datos (SDS) e unha rede definida por software (SDN). . Escollemos a base de construír o produto máis tolerante a fallos sen puntos únicos de fallo. Móstrase ben, ata agora non xurdiron problemas globais na produción. Na fase de probas alfa no mercado, cando prestamos servizos aos primeiros clientes por puntos de bonificación, probamos a tecnoloxía e atopamos unha serie de momentos desagradables, pero nos últimos dous anos conseguimos entender e resolver moitas cousas.
Usas a sobreventa? Como controlas a carga no servidor?
Usamos overselling só para procesadores, pero en ningún caso para RAM. Incluso no caso dos procesadores físicos, non permitimos que a súa carga supere o 75%. Por disco: traballamos con asignación de capacidade "delgada". Temos un seguimento centralizado de todo o entorno, o que nos permite controlar a carga. Dous enxeñeiros son os encargados de dar soporte a toda a infraestrutura, polo que estamos tentando automatizar o máximo posible e recoller toda a información posible sobre o sistema. Calquera desvío do funcionamento normal é inmediatamente visible, e periódicamente avaliamos e reequilibramos a carga dentro da infraestrutura. O reequilibrio sempre ten lugar en liña, desapercibido para os clientes.
Cantos servidores físicos tes actualmente? Cantas veces engades novos? Que servidores usas?
Neste momento hai 76 servidores, engadimos outros novos aproximadamente cada catro ou cinco meses. Usamos QCT, Intel, Supermicro.
Houbo casos nos que chegou un cliente e tomou todos os recursos gratuítos restantes e tivese que engadir servidores con urxencia?
Non había tal cousa cos recursos. Ata agora estamos medrando máis ou menos igual. Pero houbo un caso no que un usuario chegou e quería 50 IPs, cada un nun bloque separado. Por suposto, aínda non temos nada parecido :)
Cales son os teus métodos de pago máis populares? Cal é o que menos se usa?
Os máis populares son unha tarxeta bancaria e QIWI. A opción menos común é o pago mediante transferencia bancaria baixo a oferta para persoas xurídicas, pero estas transferencias son as máis voluminosas (as empresas, por regra xeral, pagan recursos sólidos durante varios meses). PayPal tamén está atrasado: ao principio non contabamos con usuarios estranxeiros, pero comezaron a aparecer.
Boodet.online ten facturación autoescrita. Por que decidiches utilizar esta solución? Cales son os pros e os contras? Foi difícil de desenvolver?
Todo o noso sistema é de deseño propio. As plataformas existentes non nos parecían moi cómodas en canto a UX, polo que decidimos crear e desenvolver as nosas propias. A facturación é só un dos microservizos que forman parte do sistema. O desenvolvemento resultou máis difícil do que pensabamos ao principio. Incluso nalgún momento tivemos que aprazar o lanzamento do proxecto para ter tempo para preparar un produto que funcione que non fose vergonzoso para as probas alfa. Posteriormente, adquiriron competencias en métodos de desenvolvemento a longo prazo e xestión de produtos. Agora é máis fácil engadir novas funcións e novos produtos ao sistema.
Cantas persoas desenvolveron todo isto? En que escribiches?
Contamos con cinco persoas para todo o proxecto, das cales dúas son desenvolvedores (frontend e backend). Back está escrito en RoR/Python. Fronte é JS.
Como se organiza o apoio ao usuario? Está aberto XNUMX/XNUMX ou só en horario comercial? Cantas liñas de apoio hai? Que che preguntan máis a miúdo?
Temos tres puntos de entrada: chat, teléfono e un sistema de aplicación desde a túa conta persoal. Dúas liñas de apoio: se o enxeñeiro de garda non puido resolver o problema, intervén o director técnico ou o equipo de desenvolvemento. Se o problema está na plataforma principal, o que ocorre con moita menos frecuencia, entón o director técnico recorre ao apoio do "irmán maior". Pola noite, só respondemos ás chamadas de clientes que adquiren servizos técnicos separados ou aos fallos da plataforma informados a través dun bot especialmente escrito en Telegram.
Preguntas máis populares:
- As nosas IP están dispoñibles en Turkmenistán (este é o primeiro en popularidade? Ao parecer, o país ten unha estrita política de bloqueo).
- Como instalar este ou aquel software.
- Como obter acceso root (incluso hai un recordatorio especial na interface ao crear máquinas, pero isto non sempre axuda).
Verificas clientes? Aparecen a miúdo os spammers e outros malos personaxes?
Verificación por correo e teléfono (se o usuario activa 2FA). Os spammers e outros abusadores aparecen periodicamente. Obrigámonos a responder bloqueando temporalmente os servidores comprometidos, xa que non queremos que as IP sexan incluídas na lista negra. Pero sempre escribimos ao usuario con antelación que se recibiu unha queixa contra el e pedímoslle que se poña en contacto con el e discuta o problema. Se o usuario non responde, ou aparecen queixas reiteradas, bloqueamos toda a conta e eliminamos os servidores.
Os ataques DDoS aos clientes ocorren a miúdo? Que fas nestes casos? Houbo ataques específicamente contra ti, o teu sitio ou a túa infraestrutura?
Os clientes son atacados moi poucas veces. Pero nós mesmos moitas veces temos un sitio web, unha conta persoal. Ás veces conectan a rede a diferentes enderezos IP. Non nos comprometemos a xulgar quen é e por que, pode haber varias opcións. Incluso hai intentos de atacarnos desde dentro. Anteriormente, ao verificar por teléfono, distribuímos un bono de cen rublos para que os usuarios normais puidesen probar calquera configuración. Pero un día chegou un usuario cun "paquete de tarxetas SIM" e desde menos dunha IP comezou a crear ducias de contas, recibindo bonificacións nelas. Polo tanto, tivemos que eliminar a acumulación automática das puntuacións das probas. Agora cómpre enviar unha solicitude ao soporte técnico para realizar probas e consideramos cada caso por separado.
Como se organiza o traballo, hai unha oficina ou todos traballan a distancia?
Hai unha oficina, pero co inicio das restricións polo coronavirus, todos foron traballar desde casa/dacha/cidade natal.
A nosa oficina
Cal é o seu curso de desenvolvemento actual para a empresa?
Estamos avanzando para engadir novos servizos. Temos unha folla de ruta extensa, non interrompemos o desenvolvemento e cada dúas semanas lánzase unha nova versión da conta persoal. Engadimos funcionalidades e servizos que son demandados entre os compañeiros e engadimos o que piden os clientes.
Como atopas clientes? Hai unha gran afluencia e saída de clientes ao ano? Cal é a "vida útil" media dun cliente?
As canles para atraer clientes no noso campo son as que se basea todo o negocio, se hai un produto que funcione ben. Polo tanto, non estamos preparados para compartir.
A taxa de abandono, o LTV e o ciclo de vida tamén son indicadores bastante importantes que usamos só para a análise interna, pero non para a divulgación.
Podes darlles consellos aos lectores sobre a elección dun servizo de hospedaxe? A que debes prestar atención antes de comprar?
O máis importante é escoller un hosting coa letra "B" ao comezo do nome.
Pero en serio, hai varios factores aos que debes prestar atención:
- Para comprender a calidade, pode tomar unha configuración media e tentar resolver os problemas da súa aplicación nela. Escolla un hospedaxe que teña unha tarifa por hora: pode probar os servidores sen perder moito diñeiro se a calidade non é satisfactoria.
- Mira os centros de datos onde o host ten servidores físicos. Pódense usar para xulgar de forma groseira a calidade dos servizos.
- Non recomendamos prestar atención aos prezos: hai solucións súper baratas que funcionan ben e outras súper caras que non teñen nada de especial.
Fálanos dos teus momentos laborais máis memorables.
Inicio do proxecto. Durante o primeiro mes e medio traballamos 24 horas ao día, 7 días ao día: observamos como ían os rexistros, se se rompeu algo na interface da conta persoal, como se comportaban os usuarios, se lles era conveniente pedir servizos. Moito había que decidir sobre a marcha, ata o punto de substituír uns produtos por outros. Realizáronse cambios inmediatamente na produción, evitando os ambientes de proba. Foi un período tenso, pero conseguimos sobrevivir e non renunciar a este negocio.
Usuarios que viñeron buscando vulnerabilidades na lóxica. Foi interesante atrapalos e pechar vulnerabilidades. Por exemplo, cando non traballabamos por diñeiro, pero estabamos outorgando bonos para que os usuarios puidesen pedir servidores, publicouse unha ligazón para nós nun dos foros de hackers co comentario: "Dan servidores gratuítos por valor de 500 rublos". Por suposto, inmediatamente fomos inundados de rapaces mineiros con fame de regalos.
Poderías ofrecer unha breve cronoloxía da historia da empresa?
- O primeiro semestre de 2017 - comezamos a desenvolver a plataforma Boodet.online, sitio web e conta persoal.
- 2018: accedeu ás probas alfa, proporcionou capacidade aos clientes de forma gratuíta e recibiu a cambio unha ampla retroalimentación e resultados das probas.
- Mediados de 2018: lanzouse a versión beta con diñeiro. Primeiros centos de clientes, probas de soporte técnico.
- 2019 - comezamos a atraer persoas xurídicas como clientes e a traballar en solucións personalizadas.
- 2020: todos entran en autoillamento, a demanda de virtualización está crecendo. Nós mesmos sentimos isto: hai un aumento de clientes, o que fai posible traballar nun gran número de servizos adicionais.
Fonte: www.habr.com