Moje ime je Leonid, ja sam programer web stranica , stoga me zbog svojih aktivnosti zanimaju priče o nastanku i razvoju raznih kompanija u oblasti hosting usluga. Danas želim da vam predstavim intervju sa Danilom i Dmitrijem, kreatorima hostinga . Oni će govoriti o strukturi infrastrukture, organizaciji rada i svom iskustvu u razvoju virtuelnog servera u Rusiji.
Recite nam nekoliko riječi o sebi. Kako ste ušli u hosting? Šta si radio prije ovoga?
Do 2016. i Dmitrij i ja smo radili u sektoru preduzeća, uključujući kompanije kao što su Dell, HP, EMC. Analizirajući tržište oblaka u Rusiji, shvatili smo da ono aktivno raste i odlučili smo da tržištu možemo ponuditi zanimljivu ponudu. Tim ljudi koji su već radili jedni s drugima na drugim projektima okupio se i zajedno počeli razvijati vlastitu platformu za virtualizaciju namijenjenu velikim preduzećima sa njihovim specifičnim potrebama. Od 2018. istovremeno smo pokrenuli cloud hosting „za sve“ i dodijelili ga za projekat tim od pet ljudi.
Skladište i pripremna stanica prije lansiranja
Da li ovaj poslovni projekat već radi ili je još u razvoju?
Da, radi paralelno – već postoji veći tim, a više govorimo o softverskim i hardverskim rješenjima za IT infrastrukturu, a ne o hostingu.
Sada imate dosta različitih usluga. Kada ste počeli, da li je lista manja ili ista? Štaviše, svi ovi servisi su zapravo obični virtuelni server, ali postoji određeno razdvajanje.
Počeli smo s klasičnim IaaS-om: obezbijedili smo „gole“ virtuelne servere sa zatvorenim portovima i virtuelnim mrežama za njih, kako bi korisnik mogao da kreira potpunu infrastrukturu za sebe. No, nakon lansiranja, pokazalo se da većina korisnika nije razumjela zašto su im takve mogućnosti potrebne, te smo odlučili uvesti novi proizvod za sebe - standardni VDS/VPS, s kojim je tržište već upoznato. Za nas je to u suštini bila skraćena verzija proizvoda, ali korisnici su odmah shvatili o čemu se radi i počeli smo primati prve kupce. Očigledno, naše iskustvo s velikim kompanijama natjeralo nas je da odmah razvijemo složenije i prilagođenije rješenje, dok masovno tržište želi jednostavnost. A onda smo na bazi VPS-a počeli razvijati nove usluge na osnovu onoga što klijenti najčešće traže. I još ga razvijamo.
Gdje postavljate opremu? Da li ga posjedujete ili ga iznajmljujete? Kako ste odabrali DC za plasman? Da li je bilo slučajeva preseljenja?
Sva oprema je naša, samo iznajmljujemo prostor u dva data centra. Počeli smo sa tri data centra: hteli smo da implementiramo trosmernu toleranciju grešaka, ali je potražnja za njom u tom trenutku bila premala da bismo uložili u ovo, pa smo napustili treći data centar. Imali smo jedan potez: upravo smo prelazili iz trećeg data centra u jedan od preostala dva. Odabrani su po sledećem principu: DC-ovi treba da budu poznati na tržištu, pouzdani (Tier III), kako bi oba bila geografski locirana u Moskvi, u oblastima udaljenim jedna od druge.
U kojim DC-ima se trenutno nalazite, a koji ste napustili?
Sada se nalazimo u DataSpace i 3Data. Napustili smo jedan od 3Data data centara.
Napuštanje trećeg data centra
Da li iznajmljujete ili kupujete IP adrese?
Iznajmljujemo.
I iz kojeg razloga ste odabrali ovaj pristup umjesto kupovine?
Uglavnom, brzo rasti. Klijentima pružamo virtuelnu infrastrukturu, za koju ne moraju odmah da plaćaju kapitalna ulaganja, a troškovi se mogu raščlanjivati mesečno. I sami se držimo iste filozofije kao i naši klijenti - težimo širenju i brzom skaliranju.
Šta mislite o IPv6?
Do sada nismo primijetili značajniju potražnju, pa nismo dodavali više, ali je izlazna arhitektura razrađena, spremni smo za "razvaljivanje" u kratkom roku, čim shvatimo da ima zahtjeva .
Koristite KVM virtuelizaciju. Zašto si je izabrao? Kako se ona pokazuje na poslu?
Tako je, ali mi ne koristimo "goli" KVM, već punopravni, modificirani KVM baziran virtualizacijski sistem koji je razvio naš "veliki brat", uključujući sistem za pohranu podataka (SDS) i softverski definiranu mrežu (SDN) . Odabrali smo ga na osnovu izrade proizvoda koji je najviše otporan na greške bez pojedinačnih tačaka kvara. Dobro se pokazuje, do sada nije bilo globalnih problema u proizvodnji. U fazi alfa testiranja na tržištu, kada smo pružali usluge prvim klijentima za bonus bodove, testirali smo tehnologiju i naišli na niz neugodnih momenata, ali smo u protekle dvije godine uspjeli dosta toga shvatiti i riješiti.
Da li koristite overselling? Kako kontrolišete opterećenje na serveru?
Preprodaju koristimo samo za procesore, ali ni u kom slučaju za RAM. Čak ni u slučaju fizičkih procesora, ne dozvoljavamo da njihovo opterećenje pređe 75%. Po disku: radimo sa “tankom” raspodjelom kapaciteta. Imamo centralizirano praćenje cjelokupnog okruženja, što nam omogućava kontrolu opterećenja. Za podršku cjelokupnoj infrastrukturi zadužena su dva inženjera, pa se trudimo da što više automatiziramo i prikupimo sve moguće informacije o sistemu. Sva odstupanja od normalnog rada su odmah vidljiva, a mi periodično procjenjujemo i rebalansiramo opterećenje unutar infrastrukture. Rebalans se uvijek odvija online, a klijenti ga ne primjećuju.
Koliko fizičkih servera trenutno imate? Koliko često dodajete nove? Koje servere koristite?
Trenutno postoji 76 servera, nove dodajemo otprilike svakih četiri do pet mjeseci. Koristimo QCT, Intel, Supermicro.
Da li je bilo slučajeva da je klijent došao i preuzeo sve preostale slobodne resurse, a vi ste morali hitno dodati servere?
Sa resursima tako nešto nije bilo. Za sada rastemo manje-više ravnomjerno. Ali bio je slučaj kada je korisnik došao i htio 50 IP adresa, svaki u zasebnom bloku. Naravno, ovako nešto još nemamo :)
Koji su vaši najpopularniji načini plaćanja? Šta se najmanje koristi?
Najpopularnije su bankovna kartica i QIWI. Najrjeđe je plaćanje bankovnim transferom po ponudi za pravna lica, ali su takvi transferi najobimniji (preduzeća, po pravilu, plaćaju solidna sredstva po nekoliko mjeseci). PayPal također zaostaje: u startu nismo računali na strane korisnike, ali su počeli da se pojavljuju.
Boodet.online ima pisanu naplatu. Zašto ste se odlučili koristiti ovo rješenje? Koje su prednosti i nedostaci? Da li je bilo teško razvijati se?
Cijeli naš sistem je našeg vlastitog dizajna. Postojeće platforme nam se nisu činile baš zgodnim u smislu UX-a, pa smo odlučili kreirati i razvijati vlastitu. Naplata je samo jedan od mikroservisa koji su dio sistema. Pokazalo se da je razvoj teži nego što smo mislili na početku. Čak smo u nekom trenutku morali odgoditi pokretanje projekta kako bismo imali vremena pripremiti radni proizvod koji ne bi bio neugodan za alfa testiranje. Nakon toga, stekli su kompetencije u metodama dugoročnog razvoja i upravljanja proizvodima. Sada je lakše dodati nove funkcionalnosti i nove proizvode sistemu.
Koliko je ljudi sve ovo razvilo? na čemu si pisao?
Imamo pet ljudi za cijeli projekat, od kojih su dva programeri (frontend i backend). Povratak je napisan u RoR/Python-u. Prednja strana je JS.
Kako je organizirana korisnička podrška? Da li je otvoren XNUMX/XNUMX ili samo tokom radnog vremena? Koliko linija za podršku postoji? Šta vas najčešće pitaju?
Imamo tri ulazne tačke: chat, telefon i sistem aplikacija sa vašeg ličnog naloga. Dvije linije podrške: ako dežurni inženjer nije mogao riješiti problem, uključuje se tehnički direktor ili razvojni tim. Ako je problem u glavnoj platformi, što se događa mnogo rjeđe, tada se tehnički direktor obraća podršci „velikog brata“. Noću odgovaramo samo na pozive kupaca koji kupuju posebne tehničke usluge ili na kvarove platforme prijavljene putem posebno napisanog bota u Telegramu.
Najpopularnija pitanja:
- Jesu li naši IP-ovi dostupni u Turkmenistanu (ovo je prvi po popularnosti - očigledno, zemlja ima strogu politiku blokiranja).
- Kako instalirati ovaj ili onaj softver.
- Kako dobiti root pristup (postoji čak i poseban podsjetnik u sučelju prilikom kreiranja strojeva, ali to ne pomaže uvijek).
Da li provjeravate klijente? Da li se često pojavljuju spameri i drugi loši likovi?
Verifikacija putem pošte i telefona (ako korisnik aktivira 2FA). Povremeno se pojavljuju spameri i drugi zlostavljači. Primorani smo da odgovorimo privremenim blokiranjem kompromitovanih servera, jer ne želimo da IP adrese budu na crnoj listi. Ali mi uvijek unaprijed pišemo korisniku da je zaprimljena pritužba protiv njega i zamolimo ga da ga kontaktira i razgovara o problemu. Ako korisnik ne odgovori, ili se pojave ponovljene žalbe, blokiramo cijeli račun i brišemo servere.
Da li se DDoS napadi na klijente često dešavaju? Šta radite u takvim slučajevima? Da li je bilo napada konkretno na vas, vašu web lokaciju ili vašu infrastrukturu?
Klijenti su rijetko napadnuti. Ali mi sami često imamo web stranicu, lični račun. Ponekad povezuju mrežu na različite IP adrese. Ne obavezujemo se da sudimo ko je i zašto, postoji nekoliko opcija. Ima čak i pokušaja da nas napadnu iznutra. Ranije smo prilikom telefonske provjere dali bonus sto rubalja kako bi obični korisnici mogli testirati bilo koju konfiguraciju. Ali jednog dana korisnik je došao sa „paket SIM kartica“ i ispod jedne IP adrese počeo je stvarati desetke računa, primajući bonuse na njih. Stoga smo morali ukloniti automatsko prikupljanje rezultata testa. Sada trebate podnijeti zahtjev tehničkoj podršci za testiranje, a mi razmatramo svaki slučaj posebno.
Kako je organizovan posao, da li postoji kancelarija ili svi rade na daljinu?
Kancelarija postoji, ali sa početkom restrikcija zbog korona virusa svi su otišli na posao od kuće/dače/rodnog grada.
Naša kancelarija
Koji je vaš trenutni razvojni tok kompanije?
Idemo prema dodavanju novih usluga. Imamo opsežnu mapu puta, ne prekidamo razvoj, a svake dvije sedmice izlazi novo izdanje ličnog naloga. Dodajemo funkcionalnost i usluge koje su tražene među kolegama i dodajemo ono što klijenti traže.
Kako pronalazite klijente? Postoji li veliki priliv i odliv klijenata godišnje? Koliki je prosječni “životni vijek” kupca?
Kanali za privlačenje kupaca u našoj oblasti su ono na čemu počiva čitavo poslovanje, ako postoji dobar proizvod koji radi. Stoga, nismo spremni da dijelimo.
Stopa odljeva, LTV i životni ciklus također su prilično važni pokazatelji koje koristimo samo za internu analitiku, ali ne i za otkrivanje.
Možete li čitateljima dati bilo kakav savjet o odabiru usluge hostinga? Na šta treba obratiti pažnju prije kupovine?
Najvažnije je odabrati hosting sa slovom “B” na početku naziva.
Ali ozbiljno, postoji nekoliko faktora na koje morate obratiti pažnju:
- Da biste razumjeli kvalitetu, možete uzeti prosječnu konfiguraciju i pokušati na njoj riješiti probleme svoje aplikacije. Odaberite hosting koji ima satnicu - možete testirati servere bez gubitka puno novca ako kvalitet nije zadovoljavajući.
- Pogledajte centre podataka u kojima hoster ima fizičke servere. Mogu se koristiti za grubu procjenu kvaliteta usluga.
- Ne preporučujemo da obraćate pažnju na cijene: postoje i super jeftina rješenja koja dobro rade, i super skupa koja nisu ništa posebno.
Recite nam o vašim najupečatljivijim radnim trenucima.
Početak projekta. Prvih mjesec i po dana radili smo 24/7: gledali smo kako teku registracije, da li je nešto pokvareno u interfejsu ličnog naloga, kako se ponašaju korisnici, da li im je zgodno da naručuju usluge. Mnogo toga se moralo odlučivati u hodu, čak do te mjere da se neke proizvode zamjenjuju drugima. Promjene su napravljene odmah u proizvodnji, zaobilazeći testna okruženja. Bio je to napet period, ali smo uspjeli da preživimo i ne odustanemo od ovog posla.
Korisnici koji su došli tražeći propuste u logici. Bilo je zanimljivo uhvatiti ih i zatvoriti ranjivosti. Na primjer, kada nismo radili za novac, već smo dodijelili bonuse kako bi korisnici mogli naručiti servere, na jednom od hakerskih foruma postavljen je link do nas uz komentar: „daju besplatne servere u vrijednosti od 500 rubalja“. Naravno, odmah su nas preplavili rudari gladni besplatnog novca.
Možete li nam dati kratak vremenski okvir istorije kompanije?
- Prva polovina 2017. godine - počeli smo da razvijamo Boodet.online platformu, web stranicu i lični nalog.
- 2018 - ušao u alfa testiranje, omogućio kapacitete korisnicima besplatno i zauzvrat dobio opsežne povratne informacije i rezultate testiranja.
- Sredinom 2018. - pokrenuta beta verzija sa novcem. Prve stotine klijenata, testiranje tehničke podrške.
- 2019 - počeli smo da privlačimo pravna lica kao klijente i radimo na prilagođenim rešenjima.
- 2020 - svi idu u samoizolaciju, potražnja za virtuelizacijom raste. To i sami osjećamo - postoji porast broja klijenata, što omogućava rad na velikom broju dodatnih usluga.
izvor: www.habr.com