Mein Name ist Leonid, ich bin Website-Entwickler Aufgrund meiner Tätigkeit interessiere ich mich daher für die Geschichten über die Gründung und Entwicklung verschiedener Unternehmen im Bereich Hosting-Dienste. Heute möchte ich ein Interview mit Danil und Dmitry, den Machern des Hostings, präsentieren . Sie sprechen über den Aufbau der Infrastruktur, die Arbeitsorganisation und ihre Erfahrungen beim Aufbau eines virtuellen Serveranbieters in Russland.
Bitte erzählen Sie uns ein paar Worte über sich. Wie sind Sie zum Hosting gekommen? Was hast du vorher gemacht?
Bis 2016 waren sowohl Dmitry als auch ich im Unternehmenssektor tätig, unter anderem in Unternehmen wie Dell, HP und EMC. Bei der Analyse des Cloud-Marktes in Russland stellten wir fest, dass dieser aktiv wächst, und kamen zu dem Schluss, dass wir dem Markt ein interessantes Angebot unterbreiten könnten. Ein Team aus Menschen, die bereits an anderen Projekten zusammengearbeitet hatten, kam zusammen und begann gemeinsam mit der Entwicklung einer eigenen Virtualisierungsplattform, die sich an große Unternehmen mit ihren spezifischen Anforderungen richtete. Seit 2018 haben wir gleichzeitig Cloud-Hosting „für alle“ eingeführt und für das Projekt bereitgestellt ein Team von fünf Leuten.
Lager- und Vorbereitungsstation vor dem Start
Funktioniert dieses Projekt für Unternehmen bereits oder befindet es sich noch in der Entwicklung?
Ja, es funktioniert parallel – es gibt bereits ein größeres Team, und wir sprechen mehr über Software- und Hardwarelösungen für die IT-Infrastruktur, nicht über Hosting.
Mittlerweile stehen Ihnen viele verschiedene Dienste zur Verfügung. War die Liste zu Beginn kleiner oder gleich? Darüber hinaus handelt es sich bei all diesen Diensten tatsächlich um reguläre virtuelle Server, es gibt jedoch eine gewisse Trennung.
Wir haben mit klassischem IaaS begonnen: Wir haben „nackte“ virtuelle Server mit geschlossenen Ports und virtuellen Netzwerken für sie bereitgestellt, damit der Benutzer eine vollwertige Infrastruktur für sich selbst erstellen kann. Doch nach der Einführung stellte sich heraus, dass die meisten Benutzer nicht verstanden, warum sie solche Möglichkeiten brauchten, und wir beschlossen, ein neues Produkt für uns einzuführen – ein Standard-VDS/VPS, mit dem der Markt bereits vertraut ist. Für uns war es im Wesentlichen eine abgespeckte Version des Produkts, aber die Benutzer verstanden sofort, was es war, und wir begannen, unsere ersten Kunden zu empfangen. Anscheinend waren wir aufgrund unserer Erfahrung mit großen Unternehmen gezwungen, sofort eine komplexere und individuellere Lösung zu entwickeln, während der Massenmarkt nach Einfachheit verlangt. Und dann begannen wir, basierend auf VPS, neue Dienste zu entwickeln, die auf den häufigsten Kundenwünschen basieren. Und wir entwickeln es immer noch weiter.
Wo platzieren Sie die Ausrüstung? Besitzen Sie es oder mieten Sie es? Wie haben Sie einen DC für die Platzierung ausgewählt? Gab es Fälle von Umzügen?
Die gesamte Ausrüstung gehört uns, wir vermieten lediglich Flächen in zwei Rechenzentren. Wir begannen mit drei Rechenzentren: Wir wollten eine Drei-Wege-Fehlertoleranz implementieren, aber die Nachfrage danach war zu diesem Zeitpunkt zu gering, um in diese zu investieren, also haben wir das dritte Rechenzentrum aufgegeben. Wir hatten einen Umzug: Wir zogen gerade vom dritten Rechenzentrum in eines der verbleibenden zwei um. Sie wurden nach folgendem Prinzip ausgewählt: DCs sollten auf dem Markt bekannt und zuverlässig (Tier III) sein, sodass sich beide geografisch in Moskau in voneinander entfernten Gebieten befinden würden.
In welchen DCs befinden Sie sich derzeit und welches haben Sie verlassen?
Jetzt befinden wir uns im DataSpace und 3Data. Wir haben eines der 3Data-Rechenzentren aufgegeben.
Verlassen des dritten Rechenzentrums
Mieten oder kaufen Sie IP-Adressen?
Wir vermieten.
Und aus welchem Grund haben Sie sich für diesen Ansatz statt für den Kauf entschieden?
Im Großen und Ganzen schnell wachsen. Wir stellen unseren Kunden eine virtuelle Infrastruktur zur Verfügung, für die sie nicht sofort Kapitalinvestitionen tätigen müssen und deren Kosten monatlich aufgeschlüsselt werden können. Wir selbst verfolgen die gleiche Philosophie wie unsere Kunden – wir streben nach Expansion und schneller Skalierung.
Was halten Sie von IPv6?
Bisher haben wir keine nennenswerte Nachfrage festgestellt, also haben wir keine weiteren hinzugefügt, aber die Ausgabearchitektur ist ausgearbeitet, wir sind bereit, in kurzer Zeit „einzuführen“, sobald wir verstehen, dass es Anfragen gibt .
Sie verwenden KVM-Virtualisierung. Warum hast du dich für sie entschieden? Wie zeigt sie sich bei der Arbeit?
Das ist richtig, aber wir verwenden kein „nacktes“ KVM, sondern ein vollwertiges, modifiziertes KVM-basiertes Virtualisierungssystem, das unser „großer Bruder“ entwickelt hat, einschließlich eines Datenspeichersystems (SDS) und eines softwaredefinierten Netzwerks (SDN). . Wir haben uns dafür entschieden, weil wir das fehlertoleranteste Produkt ohne Single Points of Failure entwickeln wollten. Es zeigt sich gut, bisher sind bei der Produktion keine globalen Probleme aufgetreten. In der Alpha-Testphase auf dem Markt, als wir den ersten Kunden Dienstleistungen für Bonuspunkte zur Verfügung stellten, testeten wir die Technologie und erlebten eine Reihe unangenehmer Momente, aber in den letzten zwei Jahren ist es uns gelungen, vieles zu verstehen und zu lösen.
Nutzen Sie Overselling? Wie steuern Sie die Auslastung des Servers?
Wir verwenden Overselling nur für Prozessoren, auf keinen Fall jedoch für RAM. Auch bei physischen Prozessoren dürfen wir eine Auslastung von 75 % nicht überschreiten. Nach Festplatte: Wir arbeiten mit „dünner“ Kapazitätszuweisung. Wir verfügen über eine zentralisierte Überwachung der gesamten Umgebung, die es uns ermöglicht, die Last zu kontrollieren. Zwei Ingenieure sind für die Betreuung der gesamten Infrastruktur verantwortlich, daher versuchen wir, so viel wie möglich zu automatisieren und alle möglichen Informationen über das System zu sammeln. Eventuelle Abweichungen vom Normalbetrieb sind sofort sichtbar und wir bewerten die Belastung innerhalb der Infrastruktur regelmäßig und gleichen sie neu aus. Die Neuausrichtung erfolgt immer online, unbemerkt vom Kunden.
Wie viele physische Server haben Sie derzeit? Wie oft fügen Sie neue hinzu? Welche Server nutzen Sie?
Derzeit gibt es 76 Server, etwa alle vier bis fünf Monate kommen neue hinzu. Wir verwenden QCT, Intel, Supermicro.
Gab es Fälle, in denen ein Client kam und alle verbleibenden freien Ressourcen beanspruchte und Sie dringend Server hinzufügen mussten?
Mit Ressourcen gab es so etwas nicht. Bisher wachsen wir mehr oder weniger gleichmäßig. Es gab jedoch einen Fall, in dem ein Benutzer 50 IPs wollte, jede in einem separaten Block. Natürlich haben wir so etwas noch nicht :)
Was sind Ihre beliebtesten Zahlungsmethoden? Was wird am wenigsten genutzt?
Am beliebtesten sind eine Bankkarte und QIWI. Am seltensten ist die Zahlung per Banküberweisung im Rahmen des Angebots für juristische Personen, aber solche Überweisungen sind am umfangreichsten (Unternehmen zahlen in der Regel mehrere Monate lang für solide Ressourcen). Auch PayPal hinkt hinterher: Am Anfang rechneten wir nicht mit ausländischen Nutzern, aber sie tauchten auf.
Boodet.online verfügt über eine selbst verfasste Abrechnung. Warum haben Sie sich für diese Lösung entschieden? Was sind die Vor- und Nachteile? War die Entwicklung schwierig?
Unser gesamtes System ist von uns selbst entworfen. Die bestehenden Plattformen schienen uns in Bezug auf UX nicht sehr praktisch zu sein, also beschlossen wir, unsere eigenen zu erstellen und zu entwickeln. Die Abrechnung ist nur einer der Microservices, die Teil des Systems sind. Die Entwicklung gestaltete sich schwieriger als wir zu Beginn dachten. Irgendwann mussten wir sogar den Start des Projekts verschieben, um Zeit zu haben, ein funktionierendes Produkt vorzubereiten, das für den Alpha-Test nicht peinlich wäre. Anschließend erwarben sie Kompetenzen in langfristigen Entwicklungsmethoden und im Produktmanagement. Jetzt ist es einfacher, dem System neue Funktionen und neue Produkte hinzuzufügen.
Wie viele Menschen haben das alles entwickelt? Worüber hast du geschrieben?
Für das gesamte Projekt haben wir fünf Leute, davon zwei Entwickler (Frontend und Backend). Back ist in RoR/Python geschrieben. Vorne ist JS.
Wie ist der Benutzersupport organisiert? Ist es rund um die Uhr oder nur während der Geschäftszeiten geöffnet? Wie viele Support-Hotlines gibt es? Was wird Ihnen am häufigsten gefragt?
Wir verfügen über drei Einstiegspunkte: Chat, Telefon und ein Bewerbungssystem über Ihr persönliches Konto. Zwei Unterstützungslinien: Konnte der diensthabende Ingenieur das Problem nicht lösen, schaltet sich der technische Leiter oder das Entwicklungsteam ein. Liegt das Problem bei der Hauptplattform, was deutlich seltener vorkommt, greift der technische Leiter auf die Unterstützung des „großen Bruders“ zurück. Nachts reagieren wir nur auf Anrufe von Kunden, die separate technische Dienste erwerben, oder auf Plattformausfälle, die über einen speziell geschriebenen Bot in Telegram gemeldet werden.
Die beliebtesten Fragen:
- Sind unsere IPs in Turkmenistan verfügbar (dies ist das allererste in der Beliebtheit – anscheinend hat das Land eine strikte Sperrpolitik).
- So installieren Sie diese oder jene Software.
- So erhalten Sie Root-Zugriff (es gibt sogar eine spezielle Erinnerung in der Benutzeroberfläche beim Erstellen von Maschinen, aber das hilft nicht immer).
Verifizieren Sie Kunden? Treten häufig Spammer und andere böswillige Charaktere auf?
Verifizierung per E-Mail und Telefon (sofern der Nutzer 2FA aktiviert). Spammer und andere Missbraucher tauchen regelmäßig auf. Wir sind gezwungen, darauf zu reagieren, indem wir gefährdete Server vorübergehend sperren, da wir nicht möchten, dass IPs auf die schwarze Liste gesetzt werden. Wir schreiben dem Nutzer aber immer vorab, dass eine Beschwerde gegen ihn eingegangen ist, und bitten ihn, sich mit ihm in Verbindung zu setzen und das Problem zu besprechen. Wenn der Benutzer nicht reagiert oder wiederholt Beschwerden auftreten, sperren wir den gesamten Account und löschen die Server.
Kommt es häufig zu DDoS-Angriffen auf Kunden? Was tun Sie in solchen Fällen? Gab es Angriffe speziell auf Sie, Ihre Website oder Ihre Infrastruktur?
Clients werden recht selten angegriffen. Aber wir selbst haben oft eine Website, einen persönlichen Account. Manchmal verbinden sie das Netzwerk mit unterschiedlichen IP-Adressen. Wir verpflichten uns nicht zu beurteilen, wer es ist und warum, es kann mehrere Möglichkeiten geben. Es gibt sogar Versuche, uns von innen heraus anzugreifen. Zuvor haben wir bei der telefonischen Verifizierung einen Bonus von hundert Rubel ausgegeben, damit normale Benutzer jede Konfiguration testen konnten. Aber eines Tages kam ein Benutzer mit einem „Paket SIM-Karten“ und begann unter einer IP, Dutzende Konten zu erstellen und dafür Boni zu erhalten. Daher mussten wir die automatische Ansammlung von Testergebnissen entfernen. Jetzt müssen Sie eine Anfrage zum Testen an den technischen Support senden, und wir prüfen jeden Fall separat.
Wie ist die Arbeit organisiert, gibt es ein Büro oder arbeiten alle remote?
Es gibt ein Büro, aber mit Beginn der Einschränkungen aufgrund des Coronavirus gingen alle von zu Hause/von der Datscha/von der Heimatstadt aus zur Arbeit.
Unser Büro
Wie sieht Ihr aktueller Entwicklungskurs für das Unternehmen aus?
Wir sind dabei, neue Dienste hinzuzufügen. Wir haben eine umfangreiche Roadmap, wir unterbrechen die Entwicklung nicht und alle zwei Wochen erscheint eine neue Version des persönlichen Kontos. Wir fügen Funktionalitäten und Dienste hinzu, die bei Kollegen gefragt sind, und wir fügen hinzu, was Kunden verlangen.
Wie findet man Kunden? Gibt es einen großen Zu- und Abfluss von Kunden pro Jahr? Wie hoch ist die durchschnittliche „Lebensdauer“ eines Kunden?
Kanäle zur Kundengewinnung in unserem Bereich sind die Grundlage des gesamten Unternehmens, wenn es ein funktionierendes Produkt gibt. Daher sind wir nicht bereit, etwas zu teilen.
Abwanderungsrate, LTV und Lebenszyklus sind ebenfalls recht wichtige Indikatoren, die wir nur für interne Analysen, nicht aber für die Offenlegung verwenden.
Können Sie den Lesern Ratschläge zur Auswahl eines Hosting-Dienstes geben? Worauf sollte man vor dem Kauf achten?
Das Wichtigste ist, ein Hosting mit dem Buchstaben „B“ am Anfang des Namens zu wählen.
Aber im Ernst, es gibt mehrere Faktoren, auf die Sie achten müssen:
- Um die Qualität zu verstehen, können Sie eine durchschnittliche Konfiguration nehmen und versuchen, Ihre Anwendungsprobleme darauf zu lösen. Wählen Sie ein Hosting mit Stundensatz – Sie können Server testen, ohne viel Geld zu verlieren, wenn die Qualität nicht zufriedenstellend ist.
- Schauen Sie sich die Rechenzentren an, in denen der Hoster über physische Server verfügt. Sie können zur groben Beurteilung der Qualität von Dienstleistungen herangezogen werden.
- Wir raten davon ab, auf die Preise zu achten: Es gibt sowohl supergünstige Lösungen, die gut funktionieren, als auch superteure, die nichts Besonderes sind.
Erzählen Sie uns von Ihren unvergesslichsten Arbeitsmomenten.
Beginn des Projekts. In den ersten anderthalb Monaten arbeiteten wir rund um die Uhr: Wir schauten uns an, wie die Registrierungen liefen, ob in der Benutzeroberfläche des persönlichen Kontos etwas kaputt war, wie sich die Benutzer verhielten und ob es für sie bequem war, Dienste zu bestellen. Vieles musste spontan entschieden werden, bis hin zum Austausch einiger Produkte durch andere. Änderungen wurden sofort in der Produktion vorgenommen und Testumgebungen umgangen. Es war eine angespannte Zeit, aber wir haben es geschafft, zu überleben und dieses Geschäft nicht aufzugeben.
Benutzer, die nach Schwachstellen in der Logik gesucht haben. Es war interessant, sie zu erkennen und Schwachstellen zu schließen. Als wir beispielsweise nicht für Geld arbeiteten, sondern Boni vergaben, damit Benutzer Server bestellen konnten, wurde in einem der Hacker-Foren ein Link zu uns mit dem Kommentar gepostet: „Sie geben kostenlose Server im Wert von 500 Rubel.“ Natürlich wurden wir sofort von Bergbauleuten überschwemmt, die nach Gratisgeschenken hungerten.
Könnten Sie einen kurzen Überblick über die Geschichte des Unternehmens geben?
- Im ersten Halbjahr 2017 begannen wir mit der Entwicklung der Boodet.online-Plattform, der Website und des persönlichen Kontos.
- 2018 – in die Alpha-Testphase eingetreten, den Kunden kostenlos Kapazität zur Verfügung gestellt und im Gegenzug umfangreiches Feedback und Testergebnisse erhalten.
- Mitte 2018 – Beta-Version mit Geld gestartet. Erste Hunderte von Kunden, Testen des technischen Supports.
- 2019 – wir begannen, juristische Personen als Kunden zu gewinnen und an maßgeschneiderten Lösungen zu arbeiten.
- 2020 – alle begeben sich in Selbstisolation, die Nachfrage nach Virtualisierung wächst. Das spüren wir selbst – es gibt einen Zuwachs an Kunden, der die Erarbeitung einer Vielzahl zusätzlicher Dienstleistungen ermöglicht.
Source: habr.com