Mi chjamu Leonid, sò un sviluppatore di siti web , dunque, per via di e mo attività, sò interessatu à i storii di a furmazione è u sviluppu di diverse cumpagnie in u campu di i servizii di hosting. Oghje vogliu presentà una entrevista cù Danil è Dmitry, i creatori di hosting . Parlaranu di a struttura di l'infrastruttura, l'urganizazione di u travagliu è a so sperienza in u sviluppu di un servitore virtuale in Russia.
Per piacè diteci uni pochi di parolle nantu à voi stessu. Cumu hè ghjuntu in hosting? Chì facia prima di questu?
Finu à 2016, tramindui Dmitry è aghju travagliatu in u settore di l'impresa, ancu in cumpagnie cum'è Dell, HP, EMC. Analizendu u mercatu di nuvola in Russia, avemu capitu chì era attivamente crescente, è decisu chì pudemu fà una offerta interessante à u mercatu. Una squadra di persone chì avianu digià travagliatu cù l'altri in altri prughjetti si sò riuniti è inseme cuminciaru à sviluppà a so propria piattaforma di virtualizazione destinata à e grande imprese cù i so bisogni specifichi. Dapoi u 2018, avemu lanciatu simultaneamente u cloud hosting "per tutti" è l'assignemu à u prugettu. una squadra di cinque persone.
Stazione di almacenamiento è preparazione di pre-lanciamentu
Stu prughjettu per l'affari hè digià travagliatu o hè sempre in sviluppu?
Iè, funziona in parallelu - ci hè digià una squadra più grande, è parlemu più di suluzioni software è hardware per l'infrastruttura IT, micca di hosting.
Avà avete assai servizii diffirenti. Quandu avete principiatu, a lista era più chjuca o listessa? Inoltre, tutti questi servizii sò in realtà un servitore virtuale regulare, ma ci hè una certa separazione.
Avemu principiatu cù IaaS classicu: avemu furnitu servitori virtuali "nudi" cù porti chjusi è rete virtuale per elli, in modu chì l'utilizatore puderia creà una infrastruttura cumpleta per ellu stessu. Ma dopu à u lanciamentu, hè risultatu chì a maiò parte di l'utilizatori ùn anu micca capitu perchè avianu bisognu di tali opportunità, è avemu decisu di presentà un novu pruduttu per noi - un VDS / VPS standard, cù quale u mercatu hè digià familiarizatu. Per noi, era essenzialmente una versione spogliata di u pruduttu, ma l'utilizatori anu capitu immediatamente ciò chì era, è avemu cuminciatu à riceve i nostri primi clienti. Apparentemente, a nostra sperienza cù e grande cumpagnie ci hà furzatu à sviluppà immediatamente una soluzione più cumplessa è persunalizata, mentre chì u mercatu di massa vole simplicità. È dopu, basatu annantu à VPS, avemu cuminciatu à sviluppà novi servizii basati nantu à ciò chì i clienti più spessu dumandanu. È avemu sempre u sviluppu.
Induve si mette l'equipaggiu? Ne possedete o ne affittate? Cumu hà sceltu un DC per u piazzamentu? Ci sò stati casi di trasferimentu ?
Tuttu l'equipaggiu hè u nostru, affittamu solu spaziu in dui centri di dati. Avemu principiatu cù trè centri di dati: avemu vulutu implementà a toleranza di i difetti tri-way, ma a dumanda per questu in quellu mumentu era troppu chjuca per invistisce in questu, cusì avemu abbandunatu u terzu centru di dati. Avemu avutu una mossa: eramu ghjustu da u terzu centru di dati à unu di i dui restanti. Sò stati scelti secondu u principiu seguente: DC deve esse cunnisciutu in u mercatu, affidabile (Tier III), cusì chì i dui seranu situati geograficamente in Mosca, in i zoni remoti l'una di l'altru.
In quale DC si trova attualmente è quale avete abbandunatu?
Avà simu situatu in DataSpace è 3Data. Avemu abbandunatu unu di i centri di dati 3Data.
Lascià u terzu centru di dati
Affittu o cumprà indirizzi IP?
Affittemu.
E per quale mutivu avete sceltu stu approcciu invece di cumprà?
In generale, per cresce rapidamente. Fornemu à i clienti una infrastruttura virtuale, per quale ùn anu micca da pagà subitu investimenti di capitale, è i costi ponu esse ripartiti mensili. Noi stessi aderemu à a listessa filusufìa cum'è i nostri clienti - strivemu per espansione è scala rapida.
Chì ne pensate di l'IPv6?
Finu a ora ùn avemu micca nutatu nisuna dumanda significativa, per quessa ùn avemu micca aghjustatu più, ma l'architettura di output hè stata elaborata, simu pronti à "rollà" in pocu tempu, appena capiscenu chì ci sò richieste. .
Aduprate a virtualizazione KVM. Perchè l'avete sceltu ? Cumu si mostra à u travagliu?
Hè propiu, ma ùn usemu micca KVM "nudu", ma un sistema di virtualizazione cumpletu è mudificatu basatu in KVM chì u nostru "fratellu maiò" hà sviluppatu, cumprese un sistema di almacenamiento di dati (SDS) è una rete definita da software (SDN). . Avemu sceltu nantu à a basa di custruisce u pruduttu più tollerante à i difetti senza punti unichi di fallimentu. Si mostra bè, finu à quì ùn sò micca stati prublemi mundiali in a produzzione. In u stadiu di test alfa nantu à u mercatu, quandu avemu furnitu servizii à i primi clienti per punti bonus, avemu pruvatu a tecnulugia è scontru una quantità di mumenti dispiaciti, ma in l'ultimi dui anni avemu sappiutu capisce è risolve assai.
Aduprate l'overselling? Cumu cuntrullà a carica nantu à u servitore?
Avemu aduprà overselling solu per i prucessori, ma in nisun casu per RAM. Ancu in u casu di prucessori fisichi, ùn permettenu micca a so carica di più di 75%. Per discu: avemu travagliatu cù l'attribuzione di capacità "magre". Avemu un surviglianza centralizata di tuttu l'ambiente, chì ci permette di cuntrullà a carica. Dui ingegneri sò rispunsevuli di sustene l'infrastruttura sana, per quessa, pruvemu d'automatizà quant'è pussibule è raccoglie tutte l'infurmazioni pussibuli nantu à u sistema. Ogni deviazioni da u funziunamentu normale sò immediatamente visibili, è valutemu periodicamente è riequilibremu a carica in l'infrastruttura. U riequilibriu hè sempre fattu in linea, inosservatu da i clienti.
Quanti servitori fisici avete attualmente? Quantu spessu aghjunghje novi? Chì servitori utilizate?
À u mumentu ci sò 76 servitori, aghjustemu novi circa ogni quattru à cinque mesi. Avemu aduprà QCT, Intel, Supermicro.
Ci sò stati casi quandu un cliente hè ghjuntu è hà pigliatu tutte e risorse libere rimanenti, è avete bisognu di aghjunghje servitori urgente?
Ùn ci era micca cusì cù risorse. Finu a ora crescemu più o menu uniformi. Ma ci era un casu quandu un utilizatore hè vinutu è vulia 50 IP, ognunu in un bloccu separatu. Di sicuru, ùn avemu micca nunda cusì :)
Chì sò i vostri metudi di pagamentu più populari? Chì hè u menu usatu?
I più populari sò una carta bancaria è QIWI. L'opzione menu cumuna hè u pagamentu per trasferimentu bancariu sottu l'offerta per e persone giuridiche, ma tali trasferimenti sò i più voluminosi (l'imprese, in regula, paganu risorse solidi per parechji mesi). PayPal hè ancu in ritardu: à u principiu ùn avemu micca cuntatu cù l'utilizatori stranieri, ma cuminciaru à apparisce.
Boodet.online hà fattura auto-scritta. Perchè avete decisu di utilizà sta suluzione? Chì sò i pro è i contra? Era difficiule di sviluppà?
U nostru sistema tutale hè di u nostru propiu disignu. I plataformi esistenti ùn parevanu assai cunvenuti per noi in termini di UX, cusì avemu decisu di creà è sviluppà u nostru propiu. A fatturazione hè solu unu di i microservizi chì facenu parte di u sistema. U sviluppu hè diventatu più difficiule di ciò chì pensavamu à u principiu. Ancu à un certu puntu avemu avutu a posponà u lanciamentu di u prugettu per avè u tempu di preparà un pruduttu di travagliu chì ùn saria micca vergogna per a prova alfa. In seguitu, anu acquistatu cumpetenze in metudi di sviluppu à longu andà è gestione di produttu. Avà hè più faciule per aghjunghje novi funziunalità è novi prudutti à u sistema.
Quante persone anu sviluppatu tuttu questu? Chì avete scrittu?
Avemu cinque persone per tuttu u prughjettu, di quale dui sò sviluppatori (frontend è backend). Back hè scrittu in RoR/Python. Fronte hè JS.
Cumu hè urganizatu u supportu di l'utilizatori? Hè apertu XNUMX/XNUMX o solu durante l'ore di travagliu? Quante linee di supportu ci sò? Chì avete dumandatu più spessu?
Avemu trè punti d'entrata: chat, telefonu è un sistema di applicazione da u vostru contu persunale. Dui linii di supportu: se l'ingegnere di turnu ùn era micca capaci di risolve u prublema, u direttore tecnicu o a squadra di sviluppu hè implicatu. Se u prublema hè in a piattaforma principale, chì succede assai menu spessu, u direttore tecnicu torna à u sustegnu di u "fratellu maiò". A notte, rispundiamu solu à e chjama di i clienti chì acquistanu servizii tecnichi separati, o à i fallimenti di a piattaforma signalati per mezu di un bot apposta scrittu in Telegram.
E dumande più populari:
- Sò i nostri IP dispunibuli in Turkmenistan (questu hè u primu in pupularità - apparentemente, u paese hà una stretta pulitica di bloccu).
- Cumu installà questu o quellu software.
- Cumu uttene l'accessu radicali (ci hè ancu un ricordu speciale in l'interfaccia quandu creanu macchine, ma questu ùn hè micca sempre aiutu).
Verificate i clienti? I spammers è altri caratteri cattivi appariscenu spessu ?
Verificazione per mail è telefonu (se l'utilizatore attiva 2FA). Spammers è altri abusers appariscenu periodicamente. Semu furzati à risponde bluccà temporaneamente i servitori cumprumessi, postu chì ùn vulemu micca chì l'IP sia in lista negra. Ma avemu sempre scrivite à l'utilizatore in anticipu chì una lagnanza hè stata ricivuta contru à ellu, è li dumandate di cuntattà cù ellu è discute u prublema. Se l'utilizatore ùn risponde micca, o lagnanza ripetuta appare, bluccà u contu sanu è sguassà i servitori.
L'attacchi DDoS à i clienti sò spessu? Chì fate in tali casi? Ci sò stati attacchi specificamente à voi, u vostru situ o a vostra infrastruttura?
I clienti sò attaccati abbastanza raramente. Ma noi stessi avemu spessu un situ web, un contu persunale. Calchì volta si culliganu a reta à diversi indirizzi IP. Ùn avemu micca impegnatu à ghjudicà quale hè è perchè, ci ponu esse parechje scelte. Ci sò ancu tentativi di attaccà ci da l'internu. Prima, quandu verificate per u telefunu, avemu datu un bonus di centu rubli per chì l'utilizatori normali puderanu pruvà ogni cunfigurazione. Ma un ghjornu un utilizatore hè ghjuntu cù un "pacchettu di carte SIM" è da sottu à una IP hà cuminciatu à creà decine di cunti, ricevendu bonus nantu à elli. Per quessa, avemu avutu à caccià l'accurazione automatica di i risultati di teste. Avà avete bisognu di mandà una dumanda à l'assistenza tecnica per a prova, è cunsideremu ogni casu separatamente.
Cumu hè u travagliu urganizatu, ci hè un uffiziu, o tutti travaglianu remotamente?
Ci hè un uffiziu, ma cù l'iniziu di restrizioni per coronavirus, tutti sò andati à travaglià da a casa / dacha / cità nativa.
U nostru uffiziu
Chì ghjè u vostru cursu attuale di sviluppu per a cumpagnia?
Avanzamu versu aghjunghje novi servizii. Avemu una strada larga, ùn interrompemu micca u sviluppu, è ogni duie simane una nova liberazione di u contu persunale hè liberata. Aghjunghjemu funziunalità è servizii chì sò in dumanda trà i culleghi, è aghjunghje ciò chì i clienti dumandanu.
Cumu truvà i clienti? Ci hè un grande afflussu è u flussu di clienti annu? Chì ghjè a "durata di vita" media di un cliente?
I canali per attruverà i clienti in u nostru campu sò ciò chì tuttu l'affari si basa, s'ellu ci hè un bonu pruduttu chì funziona. Dunque, ùn simu pronti à sparte.
Churn rate, LTV è u ciclu di vita sò ancu indicatori abbastanza impurtanti chì usemu solu per l'analitiche internu, ma micca per a divulgazione.
Pudete dà à i lettori un cunsigliu per sceglie un serviziu di hosting? Chì duvete prestu attenzione prima di cumprà?
A più impurtante hè di sceglie un hosting cù a lettera "B" à u principiu di u nome.
Ma seriu, ci sò parechji fatturi chì avete bisognu di attentu à:
- Per capiscenu a qualità, pudete piglià una cunfigurazione media è pruvate à risolve i vostri prublemi di l'applicazione. Sceglite un hosting chì hà una tarifa oraria - pudete pruvà i servitori senza perde assai soldi se a qualità ùn hè micca satisfactoria.
- Fighjate à i centri di dati induve l'hoster hà servitori fisichi. Puderanu esse usatu per ghjudicà approssimativamente a qualità di i servizii.
- Ùn ricumandemu micca attentu à i prezzi: ci sò solu suluzioni super-ecunumia chì facenu bè, è super-costu chì ùn sò nunda di speciale.
Parlaci di i vostri mumenti di travagliu più memorabili.
U principiu di u prugettu. Per u primu mese è mezu avemu travagliatu 24/7: avemu vistu cumu si passavanu i registrazioni, s'ellu qualcosa era rottu in l'interfaccia di u contu persunale, cumu si cumportanu l'utilizatori, s'ellu era cunvenutu per urdinà servizii. Molti avianu da esse decisu nantu à a mosca, ancu à u puntu di rimpiazzà certi prudutti cù altri. I cambiamenti sò stati fatti immediatamente in a produzzione, sguassendu l'ambienti di prova. Era un periodu tensu, ma avemu riesciutu à sopravvive è ùn rinunzià micca à questu affare.
L'utilizatori chì venenu à circà vulnerabili in a logica. Era interessante per catturà elli è chjude vulnerabili. Per esempiu, quandu ùn avemu micca travagliatu per soldi, ma stavamu cuncede bonus per chì l'utilizatori puderanu urdinà i servitori, un ligame per noi hè statu publicatu in unu di i fori di pirate cù u cummentariu: "Danu servitori gratuiti per 500 rubli". Di sicuru, eramu subitu inundati di ragazzi minieri affamati di freebies.
Puderia furnisce una breve cronologia di a storia di a cumpagnia?
- A prima mità di 2017 - avemu cuminciatu à sviluppà a piattaforma Boodet.online, u situ web è u contu persunale.
- 2018 - hà intrutu in teste alfa, hà furnitu capacità à i clienti gratuitamente è hà ricevutu un feedback estensivu è risultati di teste in ritornu.
- Mid-2018 - lanciata versione beta cù soldi. Primi centu di clienti, teste di supportu tecnicu.
- 2019 - avemu cuminciatu à attruverà e persone giuridiche cum'è clienti è à travaglià solu suluzioni persunalizati.
- 2020 - tutti passanu in l'autoisolamentu, a dumanda di virtualizazione hè in crescita. Sentemu questu stessu - ci hè un aumentu di i clienti, chì permette di travaglià in un gran numaru di servizii supplementari.
Source: www.habr.com