Moje ime je Leonid, ja sam programer web stranica , stoga me zbog mojih aktivnosti zanimaju priče o nastanku i razvoju raznih tvrtki iz područja hosting usluga. Danas bih želio predstaviti intervju s Danilom i Dmitrijem, kreatorima hostinga . Govorit će o strukturi infrastrukture, organizaciji rada i iskustvu u razvoju pružatelja virtualnih poslužitelja u Rusiji.
Recite nam nekoliko riječi o sebi. Kako ste se počeli baviti hostingom? Što ste radili prije ovoga?
Do 2016. i Dmitry i ja radili smo u Enterprise sektoru, uključujući tvrtke kao što su Dell, HP, EMC. Analizirajući tržište oblaka u Rusiji, shvatili smo da ono aktivno raste i odlučili da bismo tržištu mogli ponuditi zanimljivu ponudu. Tim ljudi koji su već radili jedni s drugima na drugim projektima okupio se i zajedno počeo razvijati vlastitu virtualizacijsku platformu namijenjenu velikim tvrtkama s njihovim specifičnim potrebama. Od 2018. istovremeno smo pokrenuli cloud hosting “za sve” i dodijelili ga projektu tim od pet ljudi.
Stanica za skladištenje i pripremu prije lansiranja
Radi li ovaj poslovni projekt već ili je još u razvoju?
Da, radi se paralelno - već postoji veći tim, a više govorimo o softverskim i hardverskim rješenjima za IT infrastrukturu, a ne o hostingu.
Sada imate dosta različitih usluga. Kad ste počinjali, je li popis bio manji ili isti? Štoviše, sve ove usluge zapravo su obični virtualni poslužitelj, ali postoji određeno odvajanje.
Počeli smo s klasičnim IaaS-om: osigurali smo “gole” virtualne poslužitelje sa zatvorenim portovima i virtualnim mrežama za njih, kako bi korisnik mogao sam sebi stvoriti potpunu infrastrukturu. Ali nakon lansiranja, pokazalo se da većina korisnika ne razumije zašto su im potrebne takve mogućnosti, pa smo odlučili uvesti novi proizvod za sebe - standardni VDS/VPS, s kojim je tržište već upoznato. Za nas je to u biti bila skraćena verzija proizvoda, no korisnici su odmah shvatili o čemu se radi i počeli smo primati prve kupce. Očito nas je iskustvo s velikim tvrtkama natjeralo da odmah razvijemo složenije i prilagođenije rješenje, dok masovno tržište želi jednostavnost. A onda smo na temelju VPS-a počeli razvijati nove usluge na temelju onoga što klijenti najčešće traže. I još ga razvijamo.
Gdje postavljate opremu? Jeste li vlasnik ili ga iznajmljujete? Kako ste odabrali DC za smještaj? Je li bilo slučajeva preseljenja?
Sva oprema je naša, iznajmljujemo samo prostor u dva podatkovna centra. Krenuli smo s tri podatkovna centra: htjeli smo implementirati tri-way fault tolerance, ali je potražnja za njom u tom trenutku bila premala da bismo uložili u to, pa smo odustali od trećeg podatkovnog centra. Imali smo jedan potez: upravo smo se selili iz trećeg podatkovnog centra u jedan od preostala dva. Odabrani su prema ovom principu: DC-ovi bi trebali biti poznati na tržištu, pouzdani (Tier III), tako da su oba geografski smještena u Moskvi, u područjima udaljenim jedno od drugog.
U kojim se DC-ima trenutno nalazite, a koji ste napustili?
Sada se nalazimo u DataSpaceu i 3Data. Napustili smo jedan od podatkovnih centara 3Data.
Napuštanje trećeg podatkovnog centra
Iznajmljujete li ili kupujete IP adrese?
Iznajmljujemo.
I iz kojeg ste razloga odabrali ovaj pristup, a ne kupnju?
Uglavnom, brzo rasti. Klijentima pružamo virtualnu infrastrukturu za koju ne moraju odmah platiti kapitalna ulaganja, a troškove je moguće raščlaniti mjesečno. I sami se držimo iste filozofije kao i naši klijenti - težimo širenju i brzom skaliranju.
Što mislite o IPv6?
Do sada nismo primijetili neku značajniju potražnju, tako da nismo dodali više, ali izlazna arhitektura je razrađena, spremni smo za “roll out” u kratkom vremenu, čim shvatimo da ima zahtjeva .
Koristite KVM virtualizaciju. Zašto ste je odabrali? Kako se pokazuje na poslu?
Tako je, ali mi ne koristimo "goli" KVM, već potpuni, modificirani virtualizacijski sustav temeljen na KVM-u koji je razvio naš "veliki brat", uključujući sustav za pohranu podataka (SDS) i softverski definiranu mrežu (SDN) . Odabrali smo ga na temelju izrade proizvoda koji je najtolerantniji na pogreške bez pojedinačnih točaka kvara. Dobro se pokazuje, do sada se u proizvodnji nisu pojavili globalni problemi. U fazi alfa testiranja na tržištu, kada smo pružali usluge prvim klijentima za bonus bodove, testirali smo tehnologiju i naišli na niz neugodnih trenutaka, ali u protekle dvije godine uspjeli smo puno toga razumjeti i riješiti.
Koristite li overseling? Kako kontrolirate opterećenje poslužitelja?
Overselling koristimo samo za procesore, ali ni u kojem slučaju za RAM. Čak ni u slučaju fizičkih procesora, ne dopuštamo da njihovo opterećenje prelazi 75%. Po disku: radimo s "tankom" dodjelom kapaciteta. Imamo centralizirani nadzor cjelokupnog okruženja, što nam omogućuje kontrolu opterećenja. Za podršku cjelokupnoj infrastrukturi zadužena su dva inženjera, tako da se trudimo što više automatizirati i prikupiti sve moguće podatke o sustavu. Svako odstupanje od normalnog rada je odmah vidljivo, a povremeno vršimo procjenu i rebalans opterećenja unutar infrastrukture. Rebalansiranje se uvijek odvija online, neopaženo od strane klijenata.
Koliko fizičkih poslužitelja trenutno imate? Koliko često dodajete nove? Koje poslužitelje koristite?
Trenutačno postoji 76 poslužitelja, dodajemo nove otprilike svakih četiri do pet mjeseci. Koristimo QCT, Intel, Supermicro.
Je li bilo slučajeva da dođe klijent i zauzme sve preostale slobodne resurse, a vi morate hitno dodavati servere?
S resursima toga nije bilo. Zasad rastemo više-manje ravnomjerno. No, bio je slučaj kada je korisnik došao i htio 50 IP-ova, svaki u zasebnom bloku. Naravno, ovako nešto još nemamo :)
Koji su vaši najpopularniji načini plaćanja? Što se najmanje koristi?
Najpopularnije su bankovna kartica i QIWI. Najrjeđe je plaćanje bankovnom doznakom u ponudi za pravne osobe, ali su takvi transferi najobimniji (tvrtke u pravilu solidna sredstva plaćaju nekoliko mjeseci). Kaska i PayPal: u startu nismo računali na strane korisnike, ali počeli su se javljati.
Boodet.online ima naplatu koju sam piše. Zašto ste se odlučili za ovo rješenje? Koje su prednosti i mane? Je li bilo teško razvijati se?
Cijeli naš sustav je vlastitog dizajna. Postojeće platforme nisu nam se činile baš zgodnima u smislu UX-a pa smo odlučili kreirati i razviti vlastitu. Billing je samo jedan od mikroservisa koji su dio sustava. Razvoj se pokazao težim nego što smo mislili u startu. Čak smo u nekom trenutku morali odgoditi pokretanje projekta kako bismo imali vremena pripremiti radni proizvod koji ne bi bio neugodan za alfa testiranje. Potom su stekli kompetencije u metodama dugoročnog razvoja i upravljanja proizvodima. Sada je lakše dodati nove funkcije i nove proizvode u sustav.
Koliko je ljudi sve ovo razvilo? Na čemu ste pisali?
Za cijeli projekt imamo pet ljudi od kojih su dva developera (frontend i backend). Natrag je napisano u RoR/Python. Prednja strana je JS.
Kako je organizirana korisnička podrška? Je li otvoren XNUMX/XNUMX ili samo tijekom radnog vremena? Koliko linija podrške postoji? Što vas najčešće pitaju?
Imamo tri ulazne točke: chat, telefon i sustav za prijavu s vašeg osobnog računa. Dvije linije podrške: ako dežurni inženjer nije uspio riješiti problem, uključuje se tehnički direktor ili razvojni tim. Ako je problem u glavnoj platformi, što se događa puno rjeđe, tada se tehnički direktor obraća podršci "velikog brata". Noću odgovaramo samo na pozive korisnika koji kupuju zasebne tehničke usluge ili na kvarove platforme prijavljene putem posebno napisanog bota u Telegramu.
Najpopularnija pitanja:
- Jesu li naši IP-ovi dostupni u Turkmenistanu (ovo je prvi po popularnosti - očito, zemlja ima strogu politiku blokiranja).
- Kako instalirati ovaj ili onaj softver.
- Kako dobiti root pristup (postoji čak i poseban podsjetnik u sučelju prilikom stvaranja strojeva, ali to ne pomaže uvijek).
Provjeravate li klijente? Pojavljuju li se često spameri i drugi loši likovi?
Verifikacija mailom i telefonom (ako korisnik aktivira 2FA). Povremeno se pojavljuju spameri i drugi zlostavljači. Prisiljeni smo odgovoriti privremenim blokiranjem kompromitiranih poslužitelja jer ne želimo da IP adrese budu na crnoj listi. Ali uvijek unaprijed napišemo korisniku da je protiv njega zaprimljena pritužba i zamolimo ga da ga kontaktira i porazgovaramo o problemu. Ukoliko korisnik ne odgovori ili se pojave ponovljene pritužbe, blokiramo cijeli račun i brišemo servere.
Događaju li se često DDoS napadi na korisnike? Što činite u takvim slučajevima? Je li bilo napada konkretno na vas, vašu stranicu ili vašu infrastrukturu?
Klijenti su vrlo rijetko napadnuti. Ali mi sami često imamo web stranicu, osobni račun. Ponekad povezuju mrežu s različitim IP adresama. Ne prosuđujemo tko je i zašto, može postojati nekoliko opcija. Ima čak i pokušaja da nas napadnu iznutra. Prethodno smo prilikom telefonske provjere dali bonus od stotinu rubalja kako bi obični korisnici mogli testirati bilo koju konfiguraciju. Ali jednog dana korisnik je došao s "paketom SIM kartica" i ispod jedne IP počeo je kreirati desetke računa, primajući na njih bonuse. Stoga smo morali ukloniti automatsko prikupljanje rezultata testa. Sada trebate podnijeti zahtjev tehničkoj podršci za testiranje, a mi razmatramo svaki slučaj zasebno.
Kako je organiziran posao, postoji li ured ili svi rade na daljinu?
Postoji ured, ali s početkom ograničenja zbog koronavirusa, svi su otišli na posao od kuće/dače/rodnog grada.
Naš ured
Koji je vaš trenutni smjer razvoja tvrtke?
Idemo prema dodavanju novih usluga. Imamo opsežnu mapu puta, ne prekidamo razvoj, a svaka dva tjedna izlazi novo izdanje osobnog računa. Dodajemo funkcionalnosti i usluge koje su tražene među kolegama i dodajemo ono što klijenti traže.
Kako pronalazite klijente? Je li veliki priljev i odljev klijenata godišnje? Koliki je prosječni “životni vijek” kupca?
Kanali za privlačenje kupaca u našem području su ono na čemu počiva cijeli posao, ako postoji proizvod koji dobro radi. Stoga nismo spremni dijeliti.
Stopa odljeva, LTV i životni ciklus također su vrlo važni pokazatelji koje koristimo samo za internu analitiku, ali ne i za otkrivanje.
Možete li čitateljima dati kakav savjet o odabiru usluge hostinga? Na što treba obratiti pozornost prije kupnje?
Najvažnije je odabrati hosting sa slovom “B” na početku naziva.
Ali ozbiljno, postoji nekoliko čimbenika na koje trebate obratiti pozornost:
- Da biste razumjeli kvalitetu, možete uzeti prosječnu konfiguraciju i pokušati na njoj riješiti svoje probleme s aplikacijom. Odaberite hosting koji ima satnicu - možete testirati poslužitelje bez gubitka puno novca ako kvaliteta nije zadovoljavajuća.
- Pogledajte podatkovne centre u kojima hoster ima fizičke poslužitelje. Po njima se može grubo prosuditi kvaliteta usluga.
- Ne preporučamo obraćanje pozornosti na cijene: postoje super jeftina rješenja s dobrim performansama i super skupa koja nisu ništa posebno.
Ispričajte nam svoje najupečatljivije trenutke s posla.
Početak projekta. Prvih mjesec i pol dana radili smo 24/7: gledali smo kako idu registracije, je li nešto pokvareno u sučelju osobnog računa, kako se korisnici ponašaju, je li im bilo zgodno naručiti usluge. O mnogočemu se moralo odlučivati u hodu, čak do te mjere da su se neki proizvodi zamijenili drugima. Promjene su napravljene odmah u proizvodnji, zaobilazeći testna okruženja. Bilo je to napeto razdoblje, ali uspjeli smo preživjeti i ne odustati od ovog posla.
Korisnici koji su došli tražiti ranjivosti u logici. Bilo je zanimljivo uhvatiti ih i zatvoriti ranjivosti. Na primjer, kada nismo radili za novac, već smo dodjeljivali bonuse kako bi korisnici mogli naručiti servere, na jednom od hakerskih foruma objavljena je poveznica s nama uz komentar: "daju besplatne servere u vrijednosti od 500 rubalja." Naravno, odmah su nas preplavili rudari željni besplatnih poklona.
Možete li ukratko opisati povijest tvrtke?
- Prva polovica 2017. - počeli smo razvijati Boodet.online platformu, web stranicu i osobni račun.
- 2018. - ušao u alfa testiranje, besplatno pružio kapacitet korisnicima i zauzvrat dobio opsežne povratne informacije i rezultate testiranja.
- Sredina 2018. - pokrenuta beta verzija s novcem. Prve stotine klijenata, testiranje tehničke podrške.
- 2019 - počeli smo privlačiti pravne osobe kao klijente i raditi na prilagođenim rješenjima.
- 2020. - svi idu u samoizolaciju, potražnja za virtualizacijom raste. To i sami osjećamo - bilježi se porast klijenata, što omogućuje rad na velikom broju dodatnih usluga.
Izvor: www.habr.com