Em dic Leonid, sóc desenvolupador de llocs web , per tant, per les meves activitats, m'interessen les històries de formació i desenvolupament de diverses empreses en l'àmbit dels serveis d'allotjament. Avui m'agradaria presentar una entrevista a Danil i Dmitry, els creadors de l'allotjament . Parlaran sobre l'estructura de la infraestructura, l'organització del treball i la seva experiència en el desenvolupament d'un proveïdor de servidors virtuals a Rússia.
Si us plau, digueu-nos unes paraules sobre vosaltres mateixos. Com vas arribar a l'allotjament? Què feies abans d'això?
Fins al 2016, tant Dmitry com jo vam treballar al sector empresarial, fins i tot en empreses com Dell, HP, EMC. Analitzant el mercat del núvol a Rússia, ens vam adonar que estava creixent activament i vam decidir que podríem fer una oferta interessant al mercat. Un equip de persones que ja havien treballat entre ells en altres projectes es van reunir i junts van començar a desenvolupar la seva pròpia plataforma de virtualització dirigida a grans empreses amb les seves necessitats específiques. Des del 2018, hem llançat simultàniament allotjament en núvol "per a tothom" i l'hem destinat al projecte. un equip de cinc persones.
Estació d'emmagatzematge i preparació abans del llançament
Aquest projecte empresarial ja funciona o encara està en desenvolupament?
Sí, funciona en paral·lel: ja hi ha un equip més gran, i estem parlant més de solucions de programari i maquinari per a la infraestructura informàtica, no d'allotjament.
Ara teniu molts serveis diferents. Quan vas començar, la llista era més petita o igual? A més, tots aquests serveis són en realitat un servidor virtual normal, però hi ha una certa separació.
Vam començar amb IaaS clàssic: vam proporcionar servidors virtuals "nus" amb ports tancats i xarxes virtuals per a ells, de manera que l'usuari pogués crear una infraestructura completa per a ell mateix. Però després del llançament, va resultar que la majoria dels usuaris no entenien per què necessitaven aquestes oportunitats, i vam decidir introduir un nou producte per a nosaltres mateixos: un VDS/VPS estàndard, amb el qual el mercat ja està familiaritzat. Per a nosaltres, era essencialment una versió reduïda del producte, però els usuaris de seguida van entendre què era i vam començar a rebre els nostres primers clients. Pel que sembla, la nostra experiència amb grans empreses ens va obligar a desenvolupar immediatament una solució més complexa i personalitzada, mentre que el mercat massiu vol simplicitat. I després, basant-nos en VPS, vam començar a desenvolupar nous serveis basats en allò que més demanen els clients. I encara ho estem desenvolupant.
On col·loca l'equip? En tens el propietari o el llogas? Com vas triar un DC per a la col·locació? Hi ha hagut casos de trasllat?
Tot l'equipament és nostre, només lloguem espai en dos centres de dades. Vam començar amb tres centres de dades: volíem implementar una tolerància a fallades de tres direccions, però la demanda en aquell moment era massa petita per invertir-hi, així que vam abandonar el tercer centre de dades. Vam tenir un moviment: només estàvem passant del tercer centre de dades a un dels dos restants. Es van triar segons el principi següent: els DC haurien de ser coneguts al mercat, fiables (Tier III), de manera que tots dos estarien geogràficament situats a Moscou, en zones allunyades entre si.
A quins DC us trobeu actualment i quin heu abandonat?
Ara ens trobem a DataSpace i 3Data. Vam abandonar un dels centres de dades de 3Data.
Sortint del tercer centre de dades
Llogueu o compreu adreces IP?
Lloguem.
I per quin motiu vas triar aquest enfocament en lloc de comprar?
En general, per créixer ràpidament. Oferim als clients una infraestructura virtual, per a la qual no han de pagar inversions de capital immediatament, i els costos es poden desglossar mensualment. Nosaltres mateixos ens adherim a la mateixa filosofia que els nostres clients: ens esforcem per l'expansió i l'escalada ràpida.
Què en penses de l'IPv6?
Fins ara no hem notat cap demanda important, així que no n'hem afegit més, però l'arquitectura de sortida s'ha treballat, estem preparats per “desplegar” en poc temps, tan bon punt entenem que hi ha peticions. .
Esteu utilitzant la virtualització KVM. Per què la vas triar? Com es mostra a la feina?
És cert, però no fem servir KVM "nu", sinó un sistema de virtualització basat en KVM modificat i complet que va desenvolupar el nostre "germà gran", que inclou un sistema d'emmagatzematge de dades (SDS) i una xarxa definida per programari (SDN). . L'hem escollit basant-nos en construir el producte més tolerant a errors sense punts únics de fallada. Es mostra bé, fins ara no han sorgit problemes globals en la producció. En l'etapa de proves alfa al mercat, quan vam oferir serveis als primers clients per obtenir punts de bonificació, vam provar la tecnologia i vam trobar una sèrie de moments desagradables, però durant els últims dos anys hem aconseguit entendre i resoldre moltes coses.
Fas servir la sobrevenda? Com controleu la càrrega al servidor?
Utilitzem la sobrevenda només per als processadors, però en cap cas per a la memòria RAM. Fins i tot en el cas dels processadors físics, no permetem que la seva càrrega superi el 75%. Per disc: treballem amb assignació de capacitat "fina". Tenim un seguiment centralitzat de tot l'entorn, que ens permet controlar la càrrega. Dos enginyers s'encarreguen de donar suport a tota la infraestructura, per la qual cosa estem intentant automatitzar el màxim possible i recollir tota la informació possible del sistema. Qualsevol desviació del funcionament normal és immediatament visible, i periòdicament avaluem i reequilibrem la càrrega dins de la infraestructura. El reequilibri sempre es fa en línia, sense que els clients s'adonin.
Quants servidors físics teniu actualment? Amb quina freqüència n'afegeixes de nous? Quins servidors fas servir?
Actualment hi ha 76 servidors, n'afegim de nous aproximadament cada quatre o cinc mesos. Utilitzem QCT, Intel, Supermicro.
Hi ha hagut casos en què un client va venir i va ocupar tots els recursos gratuïts restants i heu hagut d'afegir servidors urgentment?
No hi havia tal cosa amb els recursos. Fins ara estem creixent de manera més o menys uniforme. Però hi va haver un cas en què un usuari va venir i volia 50 IP, cadascuna en un bloc independent. Per descomptat, encara no tenim res semblant :)
Quins són els vostres mètodes de pagament més populars? Quin és el menys utilitzat?
Els més populars són una targeta bancària i QIWI. El menys comú és el pagament per transferència bancària en virtut de l'oferta per a persones jurídiques, però aquestes transferències són les més voluminoses (les empreses, per regla general, paguen recursos sòlids durant diversos mesos). PayPal també es queda enrere: al principi no comptàvem amb usuaris estrangers, però van començar a aparèixer.
Boodet.online té facturació escrita per si mateix. Per què vas decidir utilitzar aquesta solució? Quins són els avantatges i els contres? Va ser difícil desenvolupar-se?
Tot el nostre sistema és de disseny propi. Les plataformes existents no ens van semblar molt convenients pel que fa a la UX, així que vam decidir crear i desenvolupar la nostra. La facturació és només un dels microserveis que formen part del sistema. El desenvolupament va resultar ser més difícil del que pensàvem al principi. Fins i tot en algun moment vam haver d'ajornar el llançament del projecte per tenir temps per preparar un producte de treball que no fos vergonyós per a les proves alfa. Posteriorment, van adquirir competències en mètodes de desenvolupament a llarg termini i gestió de productes. Ara és més fàcil afegir noves funcionalitats i nous productes al sistema.
Quantes persones han desenvolupat tot això? En què vas escriure?
Tenim cinc persones per a tot el projecte, de les quals dues són desenvolupadors (frontend i backend). Tornar està escrit en RoR/Python. El davant és JS.
Com s'organitza l'assistència als usuaris? Està obert les 24 hores del dia o només en horari comercial? Quantes línies de suport hi ha? Què et demanen més sovint?
Tenim tres punts d'entrada: xat, telèfon i un sistema d'aplicacions des del teu compte personal. Dues línies de suport: si l'enginyer de guàrdia no ha pogut resoldre el problema, s'hi implica el director tècnic o l'equip de desenvolupament. Si el problema es troba a la plataforma principal, cosa que passa molt menys sovint, el director tècnic recorre al suport del "germà gran". A la nit, només responem a les trucades de clients que adquireixen serveis tècnics separats, o als errors de la plataforma notificats mitjançant un bot especialment escrit a Telegram.
Preguntes més populars:
- Les nostres IP estan disponibles a Turkmenistan (aquesta és la primera en popularitat; pel que sembla, el país té una política de bloqueig estricta).
- Com instal·lar aquest o aquell programari.
- Com obtenir accés root (fins i tot hi ha un recordatori especial a la interfície quan es creen màquines, però això no sempre ajuda).
Verifiqueu els clients? Apareixen sovint els spammers i altres personatges dolents?
Verificació per correu i telèfon (si l'usuari activa 2FA). Els spammers i altres abusors apareixen periòdicament. Ens veiem obligats a respondre bloquejant temporalment els servidors compromesos, ja que no volem que les IP siguin a la llista negra. Però sempre escrivim a l'usuari amb antelació que s'ha rebut una queixa contra ell, i li demanem que es posi en contacte amb ell i discuteixi el problema. Si l'usuari no respon, o apareixen queixes repetides, bloquegem tot el compte i suprimim els servidors.
Els atacs DDoS als clients es produeixen sovint? Què feu en aquests casos? Hi ha hagut atacs específicament contra vostè, el seu lloc o la seva infraestructura?
Els clients són atacats molt poques vegades. Però nosaltres mateixos sovint tenim un lloc web, un compte personal. De vegades connecten la xarxa a diferents adreces IP. No ens comprometem a jutjar qui és i per què, hi pot haver diverses opcions. Fins i tot hi ha intents d'atacar-nos des de dins. Anteriorment, en verificar per telèfon, vam repartir cent rubles de bonificació perquè els usuaris normals poguessin provar qualsevol configuració. Però un dia va venir un usuari amb un "paquet de targetes SIM" i des de menys d'una IP va començar a crear desenes de comptes, rebent-hi bonificacions. Per tant, vam haver d'eliminar l'acumulació automàtica de les puntuacions de les proves. Ara heu d'enviar una sol·licitud a l'assistència tècnica per fer proves, i considerem cada cas per separat.
Com s'organitza la feina, hi ha una oficina o tothom treballa a distància?
Hi ha una oficina, però amb l'inici de les restriccions pel coronavirus, tothom va anar a treballar des de casa/datxa/ciutat natal.
La nostra oficina
Quin és el vostre curs de desenvolupament actual per a l'empresa?
Estem avançant cap a la incorporació de nous serveis. Tenim un ampli full de ruta, no interrompem el desenvolupament i cada dues setmanes es publica una nova versió del compte personal. Afegim funcionalitats i serveis que es demanen entre els companys, i afegim el que demanen els clients.
Com trobes clients? Hi ha una gran afluència i sortida de clients per any? Quina és la "vida útil" mitjana d'un client?
Els canals per atreure clients en el nostre àmbit són en què descansa tot el negoci, si hi ha un bon producte. Per tant, no estem preparats per compartir.
La taxa de rotació, el LTV i el cicle de vida també són indicadors força importants que utilitzem només per a l'anàlisi interna, però no per a la divulgació.
Pots donar consells als lectors per triar un servei d'allotjament? A què cal parar atenció abans de comprar?
El més important és triar un hosting amb la lletra “B” al començament del nom.
Però seriosament, hi ha diversos factors als quals cal prestar atenció:
- Per entendre la qualitat, podeu prendre una configuració mitjana i intentar resoldre els problemes de l'aplicació. Trieu un allotjament que tingui una tarifa horària: podeu provar servidors sense perdre molts diners si la qualitat no és satisfactòria.
- Mireu els centres de dades on l'hoste té servidors físics. Es poden utilitzar per valorar aproximadament la qualitat dels serveis.
- No recomanem fer cas als preus: hi ha solucions súper econòmiques que funcionen bé i súper cares que no tenen res especial.
Parla'ns dels teus moments laborals més memorables.
Inici del projecte. Durant el primer mes i mig vam treballar les 24 hores del dia, els 7 dies de la setmana: vam mirar com anaven els registres, si s'havia trencat alguna cosa a la interfície del compte personal, com es comportaven els usuaris, si els era convenient demanar serveis. S'havia de decidir molt sobre la marxa, fins al punt de substituir alguns productes per d'altres. Els canvis es van fer immediatament a la producció, obviant els entorns de prova. Va ser un període de tensió, però vam aconseguir sobreviure i no renunciar a aquest negoci.
Usuaris que van venir buscant vulnerabilitats a la lògica. Va ser interessant atrapar-los i tancar vulnerabilitats. Per exemple, quan no treballàvem per diners, sinó que donàvem bonificacions perquè els usuaris poguessin demanar servidors, es va publicar un enllaç a nosaltres en un dels fòrums de pirates informàtics amb el comentari: "Donen servidors gratuïts per valor de 500 rubles". Per descomptat, de seguida ens vam inundar de nois miners amb fam de regals.
Podries donar una breu cronologia de la història de l'empresa?
- El primer semestre de 2017 - vam començar a desenvolupar la plataforma Boodet.online, lloc web i compte personal.
- 2018: va entrar a les proves alfa, va oferir capacitat als clients de forma gratuïta i va rebre a canvi un ampli comentari i resultats de les proves.
- Mitjans de 2018: versió beta llançada amb diners. Primers centenars de clients, proves de suport tècnic.
- 2019: vam començar a atraure persones jurídiques com a clients i a treballar en solucions personalitzades.
- 2020: tothom s'autoaïlla, la demanda de virtualització està creixent. Ho sentim nosaltres mateixos: hi ha un augment de clients, cosa que fa possible treballar en un gran nombre de serveis addicionals.
Font: www.habr.com