Dia duit, Habr! Táimid ag maireachtáil i staid an-suimiúil le cúpla mí anuas agus ba mhaith liom ár scéal scálaithe bonneagair a roinnt. Le linn an ama seo, d'fhás SberMarket in orduithe 4 huaire agus sheol sé an tseirbhís i 17 gcathracha nua. Mar gheall ar an bhfás pléascach san éileamh ar sheachadadh grósaeireachta bhí orainn ár n-infrastruchtúr a scála. Léigh faoi na conclúidí is suimiúla agus úsáideach faoin gearrtha.
Dima Bobylev is ainm dom, is stiúrthóir teicniúil mé ar SberMarket. Ós é seo an chéad phostáil ar ár mblag, déarfaidh mé cúpla focal fúm féin agus faoin gcuideachta. An titim seo caite ghlac mé páirt i gcomórtas do cheannairí óga Runet. Don chomórtas I faoin gcaoi a bhfeicimid ag SberMarket an cultúr inmheánach agus an cur chuige maidir le forbairt seirbhíse. Agus cé nár éirigh liom an comórtas a bhuachan, cheap mé dom féin na bunphrionsabail chun an éiceachóras TF a fhorbairt.
Agus foireann á bhainistiú, tá sé tábhachtach cothromaíocht a thuiscint agus a fháil idir na riachtanais ghnó agus riachtanais gach forbróra aonair. Anois tá SberMarket ag fás 13 uair ó bhliain go bliain, agus bíonn tionchar aige seo ar an táirge, rud a éilíonn go n-ardóidh sé i gcónaí méid agus luas na forbartha. Ina ainneoin sin, leithdháilimid go leor ama ar fhorbróirí le haghaidh réamhanailís agus códú cáilíochta. Cuidíonn an cur chuige foirmithe ní hamháin le táirge oibre a chruthú, ach freisin lena scálú agus le forbairt bhreise. Mar thoradh ar an bhfás seo, tá SberMarket ina cheannaire cheana féin i measc seirbhísí seachadta grósaeireachta: seachadaimid thart ar 18 míle ordú in aghaidh an lae gach lá, cé go raibh thart ar 3500 ag tús mhí Feabhra.
Lá amháin, d'iarr cliant ar chúiréireachta SberMarket earraí grósaera a sheachadadh dó gan tadhall - díreach chuig an mbalcóin
Ach a ligean ar bogadh ar aghaidh go dtí na sonraíochtaí. Le cúpla mí anuas, tá bonneagar ár gcuideachta á scála go gníomhach. Míníodh an riachtanas seo ag fachtóirí seachtracha agus inmheánacha. Mar aon leis an méadú ar an mbonn custaiméirí, tháinig méadú ar líon na siopaí nasctha ó 90 ag tús na bliana go dtí níos mó ná 200 faoi lár mhí na Bealtaine. Ar ndóigh, d'ullmhaigh muid, d'fhorchoimeádamar an príomh-bhonneagar, agus d'áiríomar go bhféadfaí scálaithe ingearach agus cothrománach a dhéanamh ar na meaisíní fíorúla go léir a óstáiltear sa scamall Yandex. Mar sin féin, léirigh cleachtas: "Gach rud a d'fhéadfadh dul mícheart, rachaidh sé mícheart." Agus inniu ba mhaith liom na cásanna is suimiúla a tharla le linn na seachtaine seo a roinnt. Tá súil agam go mbeidh ár dtaithí úsáideach duit.
Tá sclábhaí lán réidh don chomhrac
Fiú roimh thús na paindéime, bhí méadú ar líon na n-iarratas chuig ár bhfreastalaithe innill os ár gcomhair. Thosaigh an treocht maidir le earraí grósaera a ordú le haghaidh seachadadh baile ag dul i méid, agus le tabhairt isteach na gcéad bhearta féin-aonraithe de bharr COVID-19, tháinig méadú suntasach ar an ualach oibre i rith an lae. Bhí gá le máistirfhreastalaithe an phríomhbhunachar sonraí a dhíluchtú go tapa agus roinnt de na hiarratais léite a aistriú chuig freastalaithe macasamhail (daor).
D’ullmhaigh muid don chéim seo roimh ré, agus seoladh 2 fhreastalaí sclábhaithe cheana féin le haghaidh ainliú den sórt sin. Bhain siad úsáid go príomha as tascanna baisce chun fothaí faisnéise a ghiniúint chun sonraí a mhalartú le comhpháirtithe. Chruthaigh na próisis seo ualach breise agus tógadh amach as an gcothromóid iad cúpla mí roimhe sin.
Ó tharla macasamhlú ar an Sclábhaí, chloíomar leis an gcoincheap nach bhféadfadh feidhmchláir oibriú leo ach i mód inléite amháin. Glacadh leis sa Phlean Athshlánaithe Tubaiste go bhféadfaimis, i gcás tubaiste, an daor a chur suas in ionad an Mháistir agus gach iarratas scríofa agus léite a aistriú chuig an daor. Mar sin féin, theastaigh uainn freisin macasamhla a úsáid le haghaidh riachtanais na roinne anailíse, mar sin níor aistrigh na freastalaithe go hiomlán chuig stádas inléite amháin, ach bhí a sraith úsáideoirí féin ag gach óstach, agus bhí cearta scríofa ag cuid acu chun torthaí ríomha idirmheánacha a shábháil.
Suas go dtí leibhéal áirithe ualaigh, bhí go leor máistir againn le scríobh agus le léamh agus iarratais http á bpróiseáil againn. I lár mhí an Mhárta, díreach nuair a chinn Sbermarket aistriú go hiomlán chuig obair chianda, thosaigh ár RPS ag fás go heaspónantúil. Chuaigh níos mó agus níos mó dár gcliaint ina n-aonaránaithe féin nó d'oibrigh siad ón mbaile, rud a chuir isteach ar ár dtáscairí ualaigh oibre.
Ní raibh feidhmíocht an “mháistir” leordhóthanach a thuilleadh, agus mar sin thosaigh muid ag aistriú cuid de na hiarratais is troime le léamh go dtí an macasamhail. Chun iarratais a scríobh chuig an máistir go trédhearcach agus iarratais chuig an sclábhaí a léamh, d'úsáideamar an ruby gem "" Chruthaíomar úsáideoir speisialta leis an iarshocrú _readonly gan cearta scríofa. Ach mar gheall ar earráid i gcumraíocht cheann de na hóstach, chuaigh cuid de na hiarratais ar scríobh chuig an bhfreastalaí sclábhaithe thar ceann úsáideora a raibh na cearta cuí aige.
Níor tháinig an fhadhb chun solais láithreach, mar... chuir an t-ualach méadaithe moill ar na sclábhaithe. Thángthas ar neamhréireacht na sonraí ar maidin nuair nach raibh na sclábhaithe “ag teacht suas” leis an máistir tar éis allmhairí oíche. Chuireamar é seo i leith an ualaigh ard ar an tseirbhís féin agus na hallmhairí a bhain le seoladh na siopaí nua. Ach bhí sé do-ghlactha sonraí a sheoladh le moill iluaireanta, agus d'aistrigh muid próisis chuig an dara sclábhaí anailíseach, toisc go raibhоacmhainní níos mó agus ní raibh sé lódáilte le hiarratais léite (sin mar a mhínigh muid dúinn féin an easpa moille macasamhlaithe).
Nuair a rinneamar amach na cúiseanna a bhí le “leathadh” an phríomh-sclábhaí, bhí teipthe ar an gceann anailíseach cheana féin ar an gcúis chéanna. In ainneoin go raibh dhá fhreastalaí breise i láthair a raibh sé beartaithe againn an t-ualach a aistriú chucu i gcás máistir-theip, mar gheall ar earráid trua d'éirigh sé amach nach raibh aon cheann ar fáil ag an nóiméad ríthábhachtach.
Ach ós rud é nár dhumpáil muid an bunachar sonraí amháin (thóg an t-aisiríoch ag an am sin thart ar 5 uair an chloig), ach freisin pictiúr den mháistirfhreastalaí, d'éirigh linn an macasamhail a sheoladh laistigh de 2 uair an chloig. Fíor, ina dhiaidh sin bhí orainn an logáil macasamhlú ag dul ar aghaidh ar feadh i bhfad (toisc go ritheann an próiseas i mód aon-snáithithe, ach sin scéal go hiomlán difriúil).
Conclúid: Tar éis eachtra den sórt sin, ba léir go raibh sé riachtanach an cleachtas a bhaineann le scríbhneoireacht a theorannú d'úsáideoirí a thréigean agus an freastalaí iomlán a dhearbhú inléite amháin. Leis an gcur chuige seo, níl aon amhras ach go mbeidh macasamhla ar fáil ag amanna ríthábhachtacha.
Má dhéantar fiú ceist throm amháin a bharrfheabhsú is féidir an bunachar sonraí a thabhairt ar ais beo
Cé go ndéanaimid nuashonrú leanúnach ar an gcatalóg ar an suíomh, d’fhág na hiarratais a chuireamar chuig na freastalaithe Slave moill bheag ar an Máistir. Ba mhó an t-am a fuaireamar amach agus a chuireamar deireadh le fadhb na sclábhaithe “ag fágáil an achair go tobann” ná an “bhacainn shíceolaíoch” (i rith an ama seo d’fhéadfaí praghsanna a nuashonrú, agus bheadh sonraí as dáta feicthe ag cliaint), agus b’éigean dúinn aistrigh gach iarratas go dtí an príomhfhreastalaí bunachar sonraí . Mar thoradh air sin, bhí an suíomh mall ... ach ar a laghad d'oibrigh sé. Agus cé go raibh Sclábhaí ag téarnamh, ní raibh de rogha againn ach barrfheabhsú.
Cé go raibh na freastalaithe daor ag teacht chucu féin, rith na miontuairiscí go mall, d’fhan an Máistir ró-ualach, agus chaitheamar ár n-iarrachtaí go léir chun tascanna gníomhacha a bharrfheabhsú de réir “Riail Pareto”: roghnaigh muid na hiarratais BARR a ghineann formhór an ualaigh agus thosaigh muid ag tiúnadh. . Rinneadh é seo ar an eitilt.
Éifeacht suimiúil ná gur fhreagair MySQL, a bhí luchtaithe de réir toilleadh, fiú feabhas beag ar phróisis. Le barrfheabhsú a dhéanamh ar chúpla ceist a tháirg ach 5% den ualach iomlán tá ualach LAP suntasach léirithe cheana féin. Mar thoradh air sin, bhíomar in ann soláthar inghlactha acmhainní a sholáthar don Mháistir chun oibriú leis an mbunachar sonraí agus an t-am riachtanach a fháil chun macasamhla a athchóiriú.
Conclúid: Ligeann fiú leas iomlán a bhaint beag duit “maireachtáil” faoi ró-ualach ar feadh roinnt uaireanta. Ba leor é seo dúinn na freastalaithe a chur ar ais le macasamhla. Dála an scéil, déanfaimid plé ar an taobh teicniúil de bharrfheabhsú fiosrúcháin i gceann de na poist seo a leanas. Mar sin liostáil lenár mblag le do thoil má tá sé úsáideach duit.
Monatóireacht a dhéanamh ar fheidhmíocht na seirbhísí comhpháirtíochta a eagrú
Déanaimid orduithe ó chustaiméirí a phróiseáil, agus mar sin idirghníomhaíonn ár gcuid seirbhísí i gcónaí le APInna tríú páirtí - is geataí iad seo chun SMS, ardáin íocaíochta, córais ródaithe, geochódóir, Seirbhís Cánach Feidearálach agus go leor córais eile a sheoladh. Agus nuair a thosaigh an t-ualach ag fás go tapa, thosaigh muid ag dul i bhfeidhm ar theorainneacha API ár seirbhísí comhpháirtíochta, rud nár smaoinigh muid orthu roimhe seo fiú.
Má sháraítear cuótaí na seirbhísí comhpháirtíochta gan choinne, féadfaidh tú aga neamhfhónaimh a dhéanamh. Cuireann go leor APIs bac ar chliaint a sháraíonn teorainneacha, agus i gcásanna áirithe, is féidir leis an iomarca iarrataí ró-ualach a dhéanamh ar tháirgeadh comhpháirtí.
Mar shampla, nuair a tháinig méadú ar líon na seachadtaí, ní raibh na seirbhísí tionlacain in ann dul i ngleic leis na cúraimí a bhain leo a dháileadh agus bealaí a chinneadh. Mar thoradh air sin, d'éirigh sé amach go ndearnadh orduithe, ach níor oibrigh an tseirbhís a chruthaigh an bealach. Ní mór a rá go ndearna ár lóistíochta beagnach dodhéanta faoi na coinníollacha seo, agus chabhraigh idirghníomhú soiléir na foirne le cúiteamh a dhéanamh ar theipeanna seirbhíse sealadacha. Ach tá sé neamhréadúil líon orduithe den sórt sin a phróiseáil de láimh an t-am ar fad, agus tar éis roinnt ama bheadh bearna do-ghlactha againn idir orduithe agus a gcur i gcrích.
Glacadh roinnt beart eagraíochtúil agus chabhraigh obair dea-chomhordaithe na foirne le ham a fháil agus muid ag comhaontú ar choinníollacha nua agus ag fanacht le seirbhísí a nuachóiriú ó roinnt comhpháirtithe. Tá APIanna eile ann a bhfuil rátaí arda seasmhachta agus uafásacha ann i gcás ardthráchta. Mar shampla, ar dtús d’úsáideamar API mapála aitheanta amháin chun seoladh an phointe seachadta a chinneadh. Ach ag deireadh na míosa fuair muid bille slachtmhar ar feadh beagnach 2 mhilliún rúbal. Tar éis seo, shocraigh siad a athsholáthar go tapa. Ní bheidh mé i mbun fógraíochta, ach déarfaidh mé go bhfuil laghdú suntasach tagtha ar ár gcostais.
Conclúid: Tá sé ríthábhachtach monatóireacht a dhéanamh ar choinníollacha oibriúcháin na seirbhísí comhpháirtíochta go léir agus iad a choinneáil i gcuimhne. Fiú má tá an chuma ar an scéal inniu go bhfuil siad “le corrlach mór” duit, ní chiallaíonn sé seo nach mbeidh siad ina mbac ar fhás amárach. Agus, ar ndóigh, tá sé níos fearr a aontú ar théarmaí airgeadais na n-iarratas méadaithe ar an tseirbhís roimh ré.
Uaireanta tharlaíonn sé go bhfuil "“(c) ní chabhraíonn
Táimid i dtaithí ar “gobáin” sa phríomhbhunachar sonraí nó ar fhreastalaithe feidhmchlár, ach nuair a bhíonn an scála á dhéanamh, féadann trioblóidí teacht chun cinn nuair nach rabhthas ag súil leo. De réir mar a mhéadaigh an t-ualach, thugamar faoi deara laghdú ar an am freagartha, agus shroich ualach próiseálaí an fhreastalaí 100% cheana féin. Cad a d'fhéadfadh a bheith níos simplí - tugaimid níos mó acmhainní don choimeádán le Solr.
In ionad an mhéadaithe feidhmíochta a rabhthas ag súil leis, níl an freastalaí “fuair bás”. Luchtaigh sé láithreach ag 100% agus d'fhreagair sé níos moille fós. Ar dtús bhí 2 chroílár againn agus 2 GB RAM. Shocraigh muid rud a chabhraíonn de ghnáth a dhéanamh - thugamar 8 cores agus 32 GB don fhreastalaí. Chuaigh gach rud i bhfad níos measa (inseoimid duit go díreach conas agus cén fáth i bpost ar leith).
Thar chúpla lá, rinneamar amach intricacies na saincheiste seo agus bhaineamar an fheidhmíocht is fearr amach le 8 cores agus 32 GB. Ligeann an chumraíocht seo dúinn leanúint ar aghaidh ag méadú an t-ualach inniu, rud atá an-tábhachtach, toisc go bhfuil an fás ní hamháin i gcliant, ach freisin i líon na siopaí ceangailte - i 2 mhí tá a n-uimhir méadaithe faoi dhó.
Conclúid: Ní i gcónaí a oibríonn modhanna caighdeánacha cosúil le “cuir níos mó iarainn leis”. Mar sin agus aon seirbhís á scála, ní mór duit tuiscint mhaith a bheith agat ar conas a úsáideann sé acmhainní agus a oibriú a thástáil faoi choinníollacha nua roimh ré.
Is é Gan stát an eochair do scálaithe cothrománach éasca
Go ginearálta, leanann ár bhfoireann cur chuige aitheanta: níor cheart go mbeadh stát inmheánach (gan stát) ag seirbhísí agus ba cheart go mbeidís neamhspleách ar an timpeallacht fhorghníomhaithe. Chuir sé seo ar ár gcumas dul i ngleic le fás ualaigh trí scálú cothrománach a dhéanamh. Ach bhí seirbhís eisceachta amháin againn - láimhseálaí le haghaidh tascanna cúlra fada. Bhí baint aige le ríomhphost agus sms a sheoladh, imeachtaí a phróiseáil, fothaí a ghiniúint, praghsanna agus stoic a allmhairiú, agus íomhánna a phróiseáil. Tharla sé sin go raibh sé ag brath ar stóráil comhad áitiúil agus go raibh sé in aon chóip amháin.
Nuair a mhéadaigh líon na dtascanna sa scuaine próiseálaí (agus tharla sé seo go nádúrtha le méadú ar líon na n-orduithe), tháinig teorainn le feidhmíocht an óstaigh ar a raibh an próiseálaí agus an stóráil comhad suite. Mar thoradh air sin, stop an éagsúlacht agus na praghsanna a nuashonrú, fógraí a sheoladh chuig úsáideoirí, agus go leor feidhmeanna ríthábhachtacha eile a bhí i bhfostú sa scuaine. D’aistrigh foireann Ops stóráil comhad go tapa chuig stóráil líonra cosúil le S3, agus lig sé seo dúinn roinnt meaisíní cumhachtacha a ardú chun an próiseálaí tasc cúlra a scála.
Conclúid: Ní mór an riail gan stát a chomhlíonadh i gcás na gcomhpháirteanna go léir gan eisceacht, fiú má dhealraíonn sé “is cinnte nach mbeimid in ann seasamh in aghaidh anseo.” Is fearr beagán ama a chaitheamh ar oibriú na gcóras go léir a eagrú i gceart ná an cód a athscríobh go pras agus seirbhís ró-ualaithe a shocrú.
7 prionsabail le haghaidh dianfhás
In ainneoin go bhfuil acmhainn bhreise ar fáil, tá roinnt botúin curtha i bhfeidhm againn i bpróiseas an fháis. Le linn an ama seo, mhéadaigh líon na n-orduithe níos mó ná 4 huaire. Anois táimid ag seachadadh níos mó ná 17 ordú in aghaidh an lae cheana féin i 000 cathair agus tá sé beartaithe againn an tíreolaíocht a leathnú níos mó fós - sa chéad leath de 62 táthar ag súil go seolfar an tseirbhís ar fud na Rúise. Chun dul i ngleic leis an ualach oibre atá ag dul i méid, agus ár gcón iomlána atá againn cheana féin á gcur san áireamh, tá 2020 mbunphrionsabal forbartha againn maidir le hoibriú i gcoinníollacha fáis seasta:
- Bainistíocht teagmhas. Chruthaíomar bord i Jira, áit a léirítear gach teagmhas i bhfoirm ticéad. Cabhróidh sé seo le tascanna a bhaineann le teagmhais a chur in ord tosaíochta agus a chur i gcrích. Tar éis an tsaoil, go bunúsach, níl sé scanrúil botúin a dhéanamh, ach tá sé scanrúil botúin a dhéanamh faoi dhó ar an ócáid chéanna. I gcás na gcásanna sin ina dtarlaíonn teagmhais arís sular féidir an chúis a cheartú, ba cheart go mbeadh na treoracha gníomhaíochta réidh, mar go bhfuil sé tábhachtach freagairt le luas an tintreach le linn tréimhsí tromualach.
- Monatóireacht ag teastáil le haghaidh gach eilimint bhonneagair gan eisceacht. Ba é a bhuíochas leis go rabhamar in ann fás an ualaigh a thuar agus na “bacanna” a roghnú i gceart chun tús áite a thabhairt don díothú. Is dócha, faoi ualach ard, go mbrisfidh gach rud nár smaoinigh tú riamh air nó go dtosóidh sé ag moilliú. Mar sin, is fearr foláirimh nua a chruthú díreach tar éis na chéad teagmhais chun monatóireacht a dhéanamh orthu agus iad a réamh-mheas.
- Foláirimh cheart simplí riachtanach nuair a mhéadaíonn an t-ualach go géar. Ar dtús, ní mór dóibh a thuairisciú cad go díreach atá briste. Ar an dara dul síos, níor cheart go mbeadh go leor foláirimh ann, toisc go ndéantar neamhaird iomlán de gach foláireamh mar thoradh ar an iliomad foláireamh neamhchriticiúil.
- Caithfidh iarratais a bheith gan stát. Táimid cinnte nár cheart go mbeadh aon eisceachtaí ann don riail seo. Teastaíonn neamhspleáchas iomlán uainn ó thimpeallacht an ama rite. Chun seo a dhéanamh, is féidir leat sonraí comhroinnte a stóráil i mbunachar sonraí nó, mar shampla, go díreach in S3. Níos fearr fós, lean na rialacha.. Le linn méadú géar ar an am, níl aon bhealach ann chun an cód a bharrfheabhsú, agus beidh ort dul i ngleic leis an ualach trí acmhainní ríomhaireachta agus scálaithe cothrománach a mhéadú go díreach.
- Cuótaí agus feidhmíocht seirbhísí seachtracha. Le fás tapa, d'fhéadfadh fadhb teacht chun cinn ní hamháin i do bhonneagar, ach freisin i seirbhís sheachtrach. Is é an rud is annoying nuair a tharlaíonn sé seo ní mar gheall ar teip, ach mar gheall ar bhaint amach cuótaí nó teorainneacha. Mar sin ba chóir do sheirbhísí seachtracha scála chomh maith agus a dhéanann tú.
- Próisis agus scuainí ar leith. Cuidíonn sé seo go mór nuair a bhíonn bac ag ceann de na geataí. Ní bheadh moill ar aistriú sonraí mura mbeadh scuainí seolta SMS iomlán tar éis cur isteach ar mhalartú fógraí idir córais faisnéise. Agus bheadh sé níos éasca líon na n-oibrithe a mhéadú dá n-oibreoidís ar leithligh.
- Réaltachtaí airgeadais. Nuair a bhíonn fás pléascach ar shreabhadh sonraí, níl aon am ann smaoineamh ar tharaifí agus síntiúis. Ach ní mór duit cuimhneamh orthu, go háirithe má tá tú ag cuideachta bheag. Is féidir le húinéir aon API, chomh maith le do sholáthraí óstála, bille mór a thabhú. Mar sin ní mór duit conarthaí a léamh go cúramach.
Conclúid
Gan caillteanais, ach mhair muid an gcéim seo, agus inniu déanaimid iarracht cloí leis na prionsabail go léir a fuarthas, agus tá an cumas ag gach meaisín feidhmíocht x4 a mhéadú go héasca chun dul i ngleic le roinnt imeachtaí gan choinne.
Sna poist seo a leanas, roinnfimid ár dtaithí maidir le díghrádú feidhmíochta a imscrúdú in Apache Solr, agus labhróimid freisin faoi bharrfheabhsú fiosrúcháin agus conas a chuidíonn idirghníomhaíocht leis an tSeirbhís Cánach Feidearálach leis an gcuideachta airgead a shábháil. Liostáil lenár mblag ionas nach gcaillfidh tú rud ar bith, agus inis dúinn sna tuairimí má bhí trioblóidí comhchosúla agat le linn fás tráchta.
Ní féidir ach le húsáideoirí cláraithe páirt a ghlacadh sa suirbhé. , le do thoil.
An raibh moilliú/laghdú seirbhíse agat riamh mar gheall ar ardú géar ar an ualach mar gheall ar:
-
55,6%Neamhábaltacht acmhainní ríomhaireachta a chur leis go tapa10
-
16,7%Teorainneacha bonneagair an tsoláthraí óstála3
-
33,3%Teorainneacha APInna tríú páirtí6
-
27,8%Sáruithe ar phrionsabail gan stát a bhfeidhmeanna5
-
88,9%Cód neamh-optamach na seirbhísí dílse16
Vótáil 18 úsáideoir. Staon 6 úsáideoir.
Foinse: will.com