Je m'appelle Leonid, je suis développeur web , c'est pourquoi, dans le cadre de mon activité, je m'intéresse aux histoires de création et de développement de différentes entreprises dans le domaine de l'hébergement. Aujourd'hui, je souhaite présenter une interview avec Danil et Dmitri — les créateurs de l'hébergement . Ils parleront de la structure de l'infrastructure, de l'organisation du travail et de leur expérience dans le développement d'un fournisseur de serveurs virtuels en Russie.
Parlez-nous un peu de vous. Comment êtes-vous arrivé dans le secteur de l'hébergement ? Que faisiez-vous avant cela ?
Avant 2016, Dmitri et moi travaillions dans le secteur des entreprises, notamment dans des sociétés telles que Dell, HP, EMC. En analysant le marché du cloud en Russie, nous avons compris qu'il connaît une croissance active, et nous avons décidé que nous pourrions proposer quelque chose d'intéressant au marché. Une équipe de personnes qui avaient déjà travaillé ensemble sur d'autres projets s'est réunie et nous avons commencé à développer notre propre plateforme de virtualisation, destinée aux grandes entreprises avec des demandes spécifiques. Depuis 2018, nous avons parallèlement lancé un hébergement cloud « pour tous », en constituant une équipe de cinq personnes.
Infrastructure de stockage et préparation avant le lancement
Ce projet pour les entreprises fonctionne-t-il déjà ou est-il encore en cours de développement ?
Oui, il fonctionne parallèlement — il y a déjà une équipe plus importante et il s'agit davantage de solutions logicielles et matérielles pour l'infrastructure IT, et non pas simplement d'hébergement.
Vous avez déjà pas mal de services différents. Lorsque vous avez commencé, la liste était-elle plus petite ou identique ? De plus, tous ces services représentent en réalité un serveur virtuel classique, mais il y a une certaine distinction.
Nous avons commencé avec l'IaaS classique : nous fournissions des serveurs virtuels « nus » avec des ports fermés et des réseaux virtuels, permettant à l'utilisateur de créer une infrastructure complète sur mesure. Mais après le lancement, il s'est avéré que la plupart des utilisateurs ne comprenaient pas l'utilité de ces options, alors nous avons décidé d'introduire un nouveau produit — le VDS/VPS standard, déjà connu sur le marché. Pour nous, c'était en fait une version simplifiée du produit, mais les utilisateurs ont immédiatement compris de quoi il s'agissait, et nous avons commencé à recevoir nos premiers clients. Il semble que notre expérience avec les grandes entreprises nous ait poussés à développer d'emblée une solution plus complexe et personnalisée, tandis que le marché de masse recherche la simplicité. Par la suite, sur la base de VPS, nous avons commencé à développer de nouveaux services, en nous basant sur les demandes les plus fréquentes des clients. Et nous continuons à évoluer.
Où hébergez-vous votre équipement ? Est-il à vous ou est-il loué ? Comment avez-vous choisi votre centre de données pour l'hébergement ? Avez-vous déjà déménagé ?
Tout notre équipement est le nôtre, nous louons simplement de l'espace dans deux centres de données. Nous avons commencé avec trois centres : nous voulions réaliser une redondance tripartite, mais à ce moment-là la demande était trop faible pour justifier cet investissement, donc nous avons abandonné le troisième centre de données. Nous avons eu un déménagement : nous avons déménagé du troisième centre de données vers l'un des deux restants. Nous avons choisi selon ce principe : les centres de données doivent être réputés sur le marché, fiables (Tier III) et devront être situés tous les deux à Moscou, dans des zones éloignées l'une de l'autre.
Dans quels centres de données êtes-vous actuellement hébergé et de quel centre vous êtes-vous séparé ?
Nous sommes actuellement hébergés chez DataSpace et 3Data. Nous avons abandonné l'un des centres de données de 3Data.
Nous quittons le troisième centre de données.
Louez-vous les adresses IP ou les achetez-vous ?
Nous les louons.
Pour quelle raison avez-vous choisi cette approche plutôt que l'achat ?
Fondamentalement, pour croître rapidement. Nous fournissons aux clients une infrastructure virtuelle sans qu'ils aient à investir immédiatement des capitaux, avec la possibilité de répartir les coûts mensuellement. Nous adhérons à la même philosophie que nos clients : nous visons l'expansion et une rapide mise à l'échelle.
Que pensez-vous d'IPv6 ?
Pour l'instant, nous n'avons pas remarqué de demande significative, donc nous ne l'avons pas ajouté pour le moment, mais l'architecture pour le déploiement est en place, nous sommes prêts à la mettre en œuvre rapidement dès que nous constaterons des demandes.
Vous utilisez la virtualisation KVM. Pourquoi l'avoir choisie ? Comment fonctionne-t-elle en pratique ?
C'est exact, mais nous n'utilisons pas le KVM « brut », mais un système de virtualisation complet et amélioré basé sur KVM, développé par notre « grand frère », y compris le système de stockage de données (SDS) et le réseau défini par logiciel (SDN). Nous avons choisi cette approche pour construire un produit aussi résilient que possible, sans points de défaillance uniques. Il se comporte bien, car nous n'avons rencontré aucun problème majeur en production. Lors de la phase de test alpha sur le marché, lorsque nous avons fourni des services aux premiers clients en échange de points bonus, nous avons mis à l'épreuve la technologie et rencontré quelques problèmes, mais au cours des deux dernières années, nous avons beaucoup appris et résolu ces problèmes.
Utilisez-vous le survente ? Comment contrôlez-vous la charge sur le serveur ?
Nous utilisons le survente uniquement pour les processeurs, mais en aucun cas pour la mémoire vive. Même pour les processeurs physiques, nous ne permettons pas une utilisation supérieure à 75 %. Pour les disques : nous travaillons avec une allocation d'espace « fine ». Nous avons une surveillance centralisée de tout l'environnement, ce qui permet de contrôler la charge. Deux ingénieurs sont responsables du support de toute l'infrastructure, donc nous essayons de nous automatiser au maximum et de collecter toutes sortes d'informations sur le système. Toute déviation par rapport à l'état normal est immédiatement visible, et nous évaluons et rééquilibrons périodiquement la charge au sein de l'infrastructure. Le rééquilibrage se fait toujours en ligne, sans que les clients ne s'en aperçoivent.
Combien de serveurs physiques avez-vous actuellement ? À quelle fréquence ajoutez-vous de nouveaux serveurs ? Quels serveurs utilisez-vous ?
Nous avons actuellement 76 serveurs, et nous en ajoutons environ tous les quatre à cinq mois. Nous utilisons des serveurs QCT, Intel, Supermicro.
Y a-t-il eu des cas où un client a pris toutes les ressources restantes, vous obligeant à ajouter des serveurs d'urgence ?
Cela ne s'est pas produit en ce qui concerne les ressources. Nous croissons de manière relativement uniforme pour le moment. Mais il y a eu un cas où un utilisateur a demandé 50 IP, chacune dans un bloc séparé. Évidemment, cela n'est pas encore possible chez nous 🙂.
Quels sont vos moyens de paiement les plus populaires ? Quels sont les moins utilisés ?
Les moyens de paiement les plus populaires sont la carte bancaire et QIWI. Les paiements les moins utilisés sont les virements sans espèces selon l'offre pour les entreprises, bien que ces virements soient les plus volumineux (les entreprises paient généralement pour des ressources substantielles sur plusieurs mois). PayPal est également en retard : au départ, nous ne comptions pas sur des utilisateurs étrangers, mais ils ont commencé à apparaître.
Chez Boodet.online, nous avons un système de facturation sur mesure. Pourquoi avez-vous choisi une telle solution ? Quels en sont les avantages et les inconvénients ? Était-il difficile de développer cela ?
Nous avons entièrement développé notre propre système. Les plateformes existantes ne nous ont pas semblé très pratiques en termes d'expérience utilisateur, c'est pourquoi nous avons décidé de créer et de développer le nôtre. La facturation n'est qu'un des microservices qui composent le système. Le développement s'est avéré plus complexe que prévu au départ. À un moment donné, nous avons même dû retarder le lancement du projet pour préparer un produit fonctionnel dont nous ne serions pas honteux lors des tests alpha. Par la suite, nous avons acquis des compétences en matière de méthodologie de développement à long terme et de gestion de produit. Maintenant, il est déjà plus facile d'ajouter de nouvelles fonctionnalités et de nouveaux produits au système.
Combien de personnes ont contribué au développement ? Sur quelle technologie avez-vous travaillé ?
Pour tout le projet, nous sommes cinq personnes, dont deux développeurs (frontend et backend). Le backend est écrit en RoR/Python. Le frontend est en JavaScript.
Comment le support utilisateur est-il organisé ? Est-il disponible 24h/24 ou seulement pendant les heures de bureau ? Combien de lignes de support y a-t-il ? Quelles sont les questions les plus fréquentes ?
Nous avons trois points d'entrée : chat, téléphone et système de tickets depuis le compte personnel. Deux lignes de support : si l'ingénieur de garde ne peut pas résoudre le problème, le directeur technique ou l'équipe de développement intervient. Si le problème concerne la plateforme principale, ce qui est beaucoup plus rare, le directeur technique contacte le support du « grand frère ». La nuit, nous ne réagissons qu'aux appels des clients qui achètent un service technique distinct, ou aux pannes de la plateforme, signalées via un bot spécialement développé sur Telegram.
Les questions les plus fréquentes :
- Nos IP sont-elles disponibles au Turkménistan ? (C'est la question la plus populaire - apparemment, le pays a une politique de blocage stricte).
- Comment installer tel ou tel logiciel.
- Comment obtenir l'accès root (une note spéciale a même été créée dans l'interface lors de la création de machines, mais même cela n'est pas toujours utile).
Vérifiez-vous l'identité de vos clients ? Des spammeurs et autres personnes indésirables apparaissent-ils souvent ?
Vérification par e-mail et par téléphone (si l'utilisateur active la 2FA). Les spammeurs et autres abus se présentent périodiquement. Nous sommes contraints de réagir par un blocage temporaire des serveurs compromis, car nous ne voulons pas que nos IP soient ajoutées à des listes noires. Mais nous prévenons toujours l'utilisateur qu'une plainte a été déposée à son encontre et nous lui demandons de nous contacter pour discuter du problème. Si l'utilisateur ne réagit pas ou en cas de nouvelles plaintes, nous bloquons entièrement le compte et supprimons les serveurs.
Y a-t-il souvent des attaques DDoS contre vos clients ? Que faites-vous dans ces cas ? Avez-vous été attaqués spécifiquement, votre site ou votre infrastructure ?
Les clients sont assez rarement attaqués. Mais nous, nous subissons souvent des attaques — le site, l'espace client. Parfois, le réseau est ciblé à partir de différentes IP. Nous ne jugeons pas qui c'est et pourquoi, il peut y avoir plusieurs raisons. Il y a même eu des tentatives d'attaques de l'intérieur. Auparavant, lors de la vérification par téléphone, nous offrons 100 roubles bonus pour que les utilisateurs normaux puissent tester toutes les configurations. Mais un jour, un utilisateur est arrivé avec une 'paquet de cartes SIM' et a commencé à créer des dizaines de comptes à partir d'une seule IP, obtenant ainsi des bonus. Nous avons donc dû supprimer l'attribution automatique de points de test. Désormais, il faut faire une demande au support technique pour tester, et chaque cas est examiné séparément.
Comment est organisée le travail, y a-t-il un bureau, ou tout le monde travaille à distance ?
Il y a un bureau, mais avec le début des restrictions dues au coronavirus, tout le monde a commencé à travailler depuis chez lui / sa maison de campagne / sa ville natale.
Notre bureau
Quelle est votre stratégie actuelle de développement de l'entreprise ?
Nous nous dirigeons vers l'ajout de nouveaux services. Nous avons une feuille de route étendue, nous ne cessons pas le développement et nous sortons une nouvelle version de l'espace client toutes les deux semaines. Nous ajoutons des fonctionnalités et des services qui sont demandés par nos collègues, nous ajoutons ce que les clients demandent.
Comment trouvez-vous des clients ? Y a-t-il un grand afflux ou un grand départ de clients par an ? Quelle est la durée de vie moyenne d'un client ?
Les canaux d'acquisition de clients dans notre domaine sont ce sur quoi repose toute l'entreprise, s'il y a un bon produit fonctionnel. Nous ne sommes donc pas prêts à partager.
Le taux de désabonnement, LTV et le cycle de vie sont également des indicateurs assez importants que nous n'utilisons que pour l'analyse interne, mais pas pour la divulgation.
Pourriez-vous donner aux lecteurs des conseils sur le choix d'un hébergement ? Quels points doivent être pris en compte avant l'achat ?
Le plus important est de choisir un hébergement dont le nom commence par la lettre « B ».
Plus sérieusement, il y a plusieurs facteurs à considérer :
- Pour évaluer la qualité, vous pouvez prendre une configuration moyenne et essayer de résoudre vos tâches applicatives dessus. Choisissez des hébergeurs qui proposent des tarifs à l'heure — vous pourrez tester les serveurs sans perdre beaucoup d'argent si la qualité ne vous convient pas.
- Regardez les data centers où se trouvent les serveurs physiques de l'hébergeur. Cela permet de se faire une idée de la qualité des services.
- Nous déconseillons de se focaliser sur les prix : il existe des solutions super bon marché qui fonctionnent bien, tout comme des options très chères qui ne se distinguent pas vraiment.
Parlez-nous des moments de travail qui vous ont le plus marqué.
Lancement du projet. Les premières six semaines, nous avons travaillé en continu, 24/7 : nous surveillons comment les inscriptions avancent, s'il n'y a pas de problèmes dans l'interface du compte personnel, comment se comportent les utilisateurs, si la commande des services est conviviale. Nous avons dû résoudre beaucoup de choses sur le tas, y compris remplacer certains produits par d'autres. Les changements ont été appliqués directement en production, en évitant les environnements de test. Ce fut une période intense, mais nous avons réussi à survivre et à ne pas abandonner.
Des utilisateurs qui cherchaient des vulnérabilités logiques. C'était intéressant de les attraper et de corriger les failles. Par exemple, lorsque nous ne travaillions pas encore pour de l'argent et que nous créditons des bonus pour que les utilisateurs puissent commander des serveurs, un lien vers nous a été partagé sur un forum de hackers avec le commentaire : « offrent des serveurs gratuitement pour 500 roubles ». Bien sûr, nous avons été immédiatement envahis par des mineurs à la recherche de cadeaux.
Pourriez-vous établir une brève chronologie de l'histoire de l'entreprise ?
- La première moitié de 2017 — nous avons commencé à développer la plateforme, le site et le compte personnel Boodet.online.
- 2018 — nous avons lancé l'alpha test, offrant des ressources gratuites aux clients en échange de retours détaillés et de résultats de tests.
- Mi-2018 — lancement de la version bêta avec monétisation. Les centaines de premiers clients, test de l'assistance technique.
- 2019 — nous avons commencé à attirer des entités juridiques en tant que clients, travaillant sur des solutions personnalisées.
- 2020 — tout le monde se met en auto-isolement, la demande en virtualisation augmente. Nous le ressentons — il y a un afflux de clients, ce qui nous permet de développer un plus grand nombre de services supplémentaires.
Source : habr.com
