Jisimni Leonid, jien żviluppatur tal-websajt , għalhekk, minħabba l-attivitajiet tiegħi, jien interessat fl-istejjer tal-formazzjoni u l-iżvilupp ta 'diversi kumpaniji fil-qasam tas-servizzi ta' hosting. Illum nixtieq nippreżenta intervista ma' Danil u Dmitry, il-ħallieqa tal-hosting . Huma se jitkellmu dwar l-istruttura ta 'l-infrastruttura, l-organizzazzjoni tax-xogħol u l-esperjenza tagħhom fl-iżvilupp ta' fornitur ta 'server virtwali fir-Russja.
Jekk jogħġbok għidilna ftit kliem dwarek innifsek. Kif dħalt fl-hosting? X'kont tagħmel qabel dan?
Sal-2016, kemm jien u Dmitry ħdimna fis-settur tal-Intrapriża, inkluż f’kumpaniji bħal Dell, HP, EMC. Meta analizzat is-suq tal-cloud fir-Russja, indunajna li kien qed jikber b'mod attiv, u ddeċidejna li nistgħu nagħmlu offerta interessanti lis-suq. Tim ta’ nies li kienu diġà ħadmu ma’ xulxin fuq proġetti oħra ltaqgħu flimkien u flimkien bdew jiżviluppaw il-pjattaforma ta’ virtualization tagħhom stess immirata għal negozji kbar bil-bżonnijiet speċifiċi tagħhom. Mill-2018, fl-istess ħin nedejna cloud hosting "għal kulħadd" u allokati għall-proġett tim ta’ ħames persuni.
Stazzjon ta 'ħażna u preparazzjoni qabel it-tnedija
Dan il-proġett għan-negozju diġà qed jaħdem jew għadu fl-iżvilupp?
Iva, taħdem b'mod parallel - diġà hemm tim akbar, u qed nitkellmu aktar dwar soluzzjonijiet ta' softwer u ħardwer għall-infrastruttura tal-IT, mhux dwar hosting.
Issa għandek ħafna servizzi differenti. Meta bdejt, il-lista kienet iżgħar jew l-istess? Barra minn hekk, dawn is-servizzi kollha huma attwalment server virtwali regolari, iżda hemm ċerta separazzjoni.
Bdejna b'IaaS klassika: ipprovdejna servers virtwali "vojta" b'portijiet magħluqa u netwerks virtwali għalihom, sabiex l-utent ikun jista 'joħloq infrastruttura sħiħa għalih innifsu. Iżda wara t-tnedija, irriżulta li ħafna mill-utenti ma fehmux għaliex kellhom bżonn opportunitajiet bħal dawn, u ddeċidejna li nintroduċu prodott ġdid għalina nfusna - VDS/VPS standard, li s-suq diġà huwa familjari miegħu. Għalina, kienet essenzjalment verżjoni mqaxxra tal-prodott, iżda l-utenti immedjatament fehmu x'kien, u bdejna nirċievu l-ewwel klijenti tagħna. Apparentement, l-esperjenza tagħna ma 'kumpaniji kbar ġiegħlitna niżviluppaw immedjatament soluzzjoni aktar kumplessa u personalizzata, filwaqt li s-suq tal-massa jrid is-sempliċità. U mbagħad, ibbażati fuq VPS, bdejna niżviluppaw servizzi ġodda bbażati fuq dak li l-klijenti l-aktar jitolbu. U għadna qed niżviluppawha.
Fejn tpoġġi t-tagħmir? Inti stess jew tikriha? Kif għażilt DC għat-tqegħid? Kien hemm xi każi ta’ rilokazzjoni?
It-tagħmir kollu huwa tagħna, aħna nikru spazju biss f'żewġ data centres. Bdejna bi tliet ċentri tad-dejta: ridna nimplimentaw it-tolleranza tal-ħsarat bi tliet direzzjonijiet, iżda d-domanda għaliha f'dak il-mument kienet żgħira wisq biex ninvestu f'dan, għalhekk abbandunajna t-tielet ċentru tad-dejta. Kellna mossa waħda: konna biss nimxu mit-tielet ċentru tad-dejta għal wieħed mit-tnejn li kien fadal. Intgħażlu skont il-prinċipju li ġej: DCs għandhom ikunu magħrufa fis-suq, affidabbli (Livell III), sabiex it-tnejn ikunu jinsabu ġeografikament f'Moska, f'żoni remoti minn xulxin.
Liema DCs tinsab bħalissa u liema waħda abbandunajt?
Issa ninsabu f'DataSpace u 3Data. Abbandunajna wieħed miċ-ċentri tad-dejta 3Data.
Tħalli t-tielet ċentru tad-dejta
Tikri jew tixtri indirizzi IP?
Aħna nikru.
U għal liema raġuni għażilt dan l-approċċ aktar milli tixtri?
B'mod ġenerali, biex jikbru malajr. Aħna nipprovdu lill-klijenti infrastruttura virtwali, li għaliha m'għandhomx għalfejn iħallsu investimenti kapitali minnufih, u l-ispejjeż jistgħu jitqassmu kull xahar. Aħna nfusna nżommu mal-istess filosofija bħall-klijenti tagħna - naħdmu għal espansjoni u skalar rapidu.
X'taħseb dwar l-IPv6?
S'issa ma ndunajna l-ebda domanda sinifikanti, għalhekk ma żidniex aktar, iżda l-arkitettura tal-output ġiet maħduma, aħna lesti li "nfaħħru" fi żmien qasir, hekk kif nifhmu li hemm talbiet .
Qed tuża virtualization KVM. Għaliex għażiltha? Kif turi ruħha fuq ix-xogħol?
Dak id-dritt, iżda aħna ma nużawx KVM "mikxufa", iżda sistema ta' virtwalizzazzjoni bbażata fuq KVM modifikata sħiħa li żviluppat il-"big brother" tagħna, inkluża sistema ta' ħażna tad-dejta (SDS) u netwerk definit minn softwer (SDN) . Aħna għażilna fuq il-bażi tal-bini tal-prodott l-aktar tolleranti għall-ħsarat mingħajr punti singoli ta 'falliment. Juri ruħu tajjeb, s'issa ma nqalgħu l-ebda problemi globali fil-produzzjoni. Fl-istadju tal-ittestjar alfa fis-suq, meta pprovdejna servizzi lill-ewwel klijenti għal punti bonus, ittestjajna t-teknoloġija u ltqajna ma 'numru ta' mumenti spjaċevoli, iżda matul l-aħħar sentejn irnexxielna nifhmu u nsolvu ħafna.
Tuża overselling? Kif tikkontrolla t-tagħbija fuq is-server?
Aħna nużaw l-overselling biss għall-proċessuri, iżda fl-ebda każ għal RAM. Anke fil-każ ta 'proċessuri fiżiċi, ma nħallux it-tagħbija tagħhom taqbeż il-75%. Permezz tad-disk: naħdmu b'allokazzjoni ta 'kapaċità "rqiqa". Għandna monitoraġġ ċentralizzat tal-ambjent kollu, li jippermettilna nikkontrollaw it-tagħbija. Żewġ inġiniera huma responsabbli għall-appoġġ tal-infrastruttura kollha, għalhekk qed nippruvaw nawtomatizzaw kemm jista 'jkun u niġbru l-informazzjoni kollha possibbli fuq is-sistema. Kwalunkwe devjazzjoni mill-operat normali hija viżibbli immedjatament, u perjodikament nevalwaw u nibbilanċjaw mill-ġdid it-tagħbija fi ħdan l-infrastruttura. L-ibbilanċjar mill-ġdid dejjem iseħħ online, mingħajr ma jiġi osservat mill-klijenti.
Kemm għandek servers fiżiċi bħalissa? Kemm-il darba żżid oħrajn ġodda? Liema servers tuża?
Bħalissa hemm 76 server, aħna nżidu oħrajn ġodda bejn wieħed u ieħor kull erba 'sa ħames xhur. Aħna nużaw QCT, Intel, Supermicro.
Kien hemm każijiet meta klijent ġie u ħa r-riżorsi kollha b'xejn li kien fadal, u kellek iżżid servers b'mod urġenti?
Ma kien hemm l-ebda ħaġa bħal din bir-riżorsi. S'issa qed nikbru xi ftit jew wisq b'mod ugwali. Iżda kien hemm każ meta ġie utent u ried 50 IP, kull wieħed fi blokka separata. Ovvjament, għad m'għandna xejn bħal dan :)
X'inhuma l-aktar metodi ta' ħlas popolari tiegħek? X'inhu l-inqas użat?
L-aktar popolari huma karta tal-bank u QIWI. L-inqas komuni huwa ħlas bi trasferiment bankarju taħt l-offerta għal entitajiet legali, iżda trasferimenti bħal dawn huma l-aktar voluminużi (il-kumpaniji, bħala regola, iħallsu għal riżorsi solidi għal diversi xhur). PayPal għadu lura wkoll: fil-bidu ma kontx fuq utenti barranin, iżda bdew jidhru.
Boodet.online għandu kontijiet miktuba minnha stess. Għaliex iddeċidejt li tuża din is-soluzzjoni? X'inhuma l-vantaġġi u l-iżvantaġġi? Kien diffiċli li tiżviluppa?
Is-sistema kollha tagħna hija tad-disinn tagħna stess. Il-pjattaformi eżistenti ma dehrux konvenjenti ħafna għalina f'termini ta 'UX, għalhekk iddeċidejna li noħolqu u niżviluppaw tagħna stess. Il-kontijiet huwa biss wieħed mill-mikroservizzi li huma parti mis-sistema. L-iżvilupp irriżulta li kien aktar diffiċli milli ħsibna fil-bidu. Anke f'xi punt kellna nipposponu t-tnedija tal-proġett sabiex ikollna ħin biex nippreparaw prodott li jaħdem li ma jkunx imbarazzanti għall-ittestjar tal-alpha. Sussegwentement, kisbu kompetenzi fil-metodi ta 'żvilupp fit-tul u l-ġestjoni tal-prodott. Issa huwa aktar faċli li żżid funzjonalità ġdida u prodotti ġodda mas-sistema.
Kemm nies żviluppaw dan kollu? Fuq xiex ktibt?
Għandna ħames persuni għall-proġett kollu, li minnhom tnejn huma żviluppaturi (frontend u backend). Lura hija miktuba f'RoR/Python. Quddiem huwa JS.
Kif huwa organizzat l-appoġġ għall-utent? Huwa miftuħ XNUMX/XNUMX jew biss waqt il-ħinijiet tax-xogħol? Kemm hemm linji ta' appoġġ? X'tistaqsi l-aktar spiss?
Għandna tliet punti ta' dħul: chat, telefon u sistema ta' applikazzjoni mill-kont personali tiegħek. Żewġ linji ta 'appoġġ: jekk l-inġinier fuq ix-xogħol ma kienx kapaċi jsolvi l-problema, id-direttur tekniku jew it-tim ta' żvilupp jiġi involut. Jekk il-problema hija fil-pjattaforma prinċipali, li jiġri ħafna inqas spiss, allura d-direttur tekniku jdur għall-appoġġ tal-"big brother". Bil-lejl, aħna nirrispondu biss għal sejħiet minn klijenti li jixtru servizzi tekniċi separati, jew għal fallimenti tal-pjattaforma rrappurtati permezz ta 'bot miktub apposta f'Telegram.
Mistoqsijiet l-aktar popolari:
- L-IPs tagħna huma disponibbli fit-Turkmenistan (din hija l-ewwel waħda fil-popolarità - apparentement, il-pajjiż għandu politika stretta ta 'imblukkar).
- Kif tinstalla dan jew dak is-software.
- Kif tikseb aċċess għall-għeruq (saħansitra hemm tfakkira speċjali fl-interface meta toħloq magni, iżda dan mhux dejjem jgħin).
Tivverifika l-klijenti? Ispammers u karattri ħżiena oħra spiss jidhru?
Verifika bil-posta u bit-telefon (jekk l-utent jattiva 2FA). Ispammers u persuni oħra li jabbużaw jidhru perjodikament. Aħna sfurzati li nirrispondu billi nibblukkaw temporanjament servers kompromessi, peress li ma rridux li l-IPs ikunu blacklisted. Imma dejjem niktbu lill-utent minn qabel li wasal ilment kontrih, u nitolbuh jikkuntattjah u jiddiskuti l-problema. Jekk l-utent ma jirrispondix, jew jidhru lmenti ripetuti, aħna nibblukkaw il-kont kollu u nħassru s-servers.
L-attakki DDoS fuq il-klijenti jseħħu spiss? X'tagħmel f'każijiet bħal dawn? Kien hemm attakki speċifikament fuqek, fuq is-sit tiegħek jew fuq l-infrastruttura tiegħek?
Klijenti huma attakkati pjuttost rari. Imma aħna stess ħafna drabi jkollna websajt, kont personali. Kultant jgħaqqdu n-netwerk ma 'indirizzi IP differenti. Aħna ma nintrabtux li niġġudikaw min hu u għaliex, jista 'jkun hemm diversi għażliet. Saħansitra hemm tentattivi biex jattakkana minn ġewwa. Preċedentement, meta vverifikaw bit-telefon, tajna bonus mitt rublu sabiex l-utenti normali jkunu jistgħu jittestjaw kwalunkwe konfigurazzjoni. Iżda ġurnata waħda utent ġie b'"pakkett ta 'SIM cards" u minn taħt IP wieħed beda joħloq għexieren ta' kontijiet, u jirċievi bonusijiet fuqhom. Għalhekk, kellna nneħħu l-akkumulazzjoni awtomatika tal-punteġġi tat-test. Issa trid tissottometti talba lill-appoġġ tekniku għall-ittestjar, u aħna nikkunsidraw kull każ separatament.
Kif huwa organizzat ix-xogħol, hemm uffiċċju, jew kulħadd jaħdem mill-bogħod?
Hemm uffiċċju, iżda bil-bidu tar-restrizzjonijiet minħabba l-koronavirus, kulħadd mar jaħdem mid-dar/dacha/belt twelid.
L-uffiċċju tagħna
X'inhu l-kors attwali ta 'żvilupp tiegħek għall-kumpanija?
Qegħdin nimxu lejn iż-żieda ta’ servizzi ġodda. Għandna pjan direzzjonali estensiv, ma ninterrompux l-iżvilupp, u kull ġimgħatejn tiġi rilaxxata rilaxx ġdid tal-kont personali. Inżidu l-funzjonalità u s-servizzi li huma mitluba fost il-kollegi, u nżidu dak li jitolbu l-klijenti.
Kif issib klijenti? Hemm influss kbir u ħruġ ta 'klijenti fis-sena? X'inhi l-"ħajja" medja ta' klijent?
Il-kanali biex jattiraw klijenti fil-qasam tagħna huma fuqu li jistrieħu n-negozju kollu, jekk ikun hemm prodott tajjeb li jaħdem. Għalhekk, m'aħniex lesti li naqsmu.
Ir-rata ta' ċaqliq, LTV u ċ-ċiklu tal-ħajja huma wkoll indikaturi pjuttost importanti li nużaw biss għall-analiżi interna, iżda mhux għall-iżvelar.
Tista' tagħti lill-qarrejja xi parir dwar l-għażla ta' servizz ta' hosting? X'għandek tagħti attenzjoni qabel tixtri?
L-iktar ħaġa importanti hija li tagħżel hosting bl-ittra "B" fil-bidu tal-isem.
Iżda serjament, hemm diversi fatturi li trid tagħti attenzjoni għalihom:
- Biex tifhem il-kwalità, tista 'tieħu konfigurazzjoni medja u tipprova ssolvi l-problemi tal-applikazzjoni tiegħek fuqha. Agħżel hosting li għandu rata ta 'siegħa - tista' tittestja servers mingħajr ma titlef ħafna flus jekk il-kwalità ma tkunx sodisfaċenti.
- Ħares lejn iċ-ċentri tad-dejta fejn il-hoster għandu servers fiżiċi. Jistgħu jintużaw biex jiġġudikaw bejn wieħed u ieħor il-kwalità tas-servizzi.
- Aħna ma nirrakkomandawx li nagħtu attenzjoni lill-prezzijiet: hemm kemm soluzzjonijiet super-irħas li jaħdmu tajjeb, kif ukoll dawk super-għali li m'huma xejn speċjali.
Għidilna dwar l-aktar mumenti ta’ xogħol memorabbli tiegħek.
Bidu tal-proġett. Għall-ewwel xahar u nofs ħdimna 24/7: ħares lejn kif ir-reġistrazzjonijiet kienu sejrin, jekk kienx miksur xi ħaġa fl-interface tal-kont personali, kif ġabu ruħhom l-utenti, jekk kienx konvenjenti għalihom li jordnaw is-servizzi. Kellu jiġi deċiż ħafna fuq il-fly, anke sal-punt li xi prodotti jiġu sostitwiti b'oħrajn. Saru bidliet immedjatament fil-produzzjoni, billi qabżu l-ambjenti tat-test. Kien perjodu ta’ tensjoni, imma rnexxielna ngħixu u ma naqtgħux qalbna minn dan in-negozju.
Utenti li ġew ifittxu vulnerabbiltajiet fil-loġika. Kien interessanti li taqbadhom u tagħlaq il-vulnerabbiltajiet. Pereżempju, meta ma konniex naħdmu għall-flus, iżda konna qed nagħtu bonusijiet sabiex l-utenti jkunu jistgħu jordnaw servers, twaħħlet link magħna fuq wieħed mill-fora tal-hackers bil-kumment: "jagħtu servers b'xejn li jiswew 500 rublu." Naturalment, konna immedjatament mgħarrqa bi guys tal-minjieri bil-ġuħ għal freebies.
Tista' tipprovdi skeda ta' żmien qasira tal-istorja tal-kumpanija?
- L-ewwel nofs tal-2017 - bdejna niżviluppaw il-pjattaforma, il-websajt u l-kont personali Boodet.online.
- 2018 - daħlet fl-ittestjar alpha, ipprovda kapaċità lill-klijenti b'xejn u rċeviet feedback estensiv u riżultati tal-ittestjar bi tpattija.
- Nofs l-2018 - nediet verżjoni beta bil-flus. L-ewwel mijiet ta 'klijenti, ittestjar ta' appoġġ tekniku.
- 2019 - bdejna nattiraw entitajiet legali bħala klijenti u naħdmu fuq soluzzjonijiet personalizzati.
- 2020 - kulħadd jidħol f'iżolament innifsu, id-domanda għall-virtwalizzazzjoni qed tikber. Aħna nħossu dan aħna stess - hemm żieda fil-klijenti, li tagħmilha possibbli li taħdem fuq numru kbir ta 'servizzi addizzjonali.
Sors: www.habr.com