Hello!
Ang akong ngalan mao si Mikhail, ako ang Deputy Director sa IT sa kompanya nga Sportmaster. Gusto nakong ipaambit ang istorya kung giunsa namo pag-atubang ang mga hagit nga mitungha sa panahon sa pandemya.
Sa unang mga adlaw sa bag-ong mga katinuoran, ang naandan nga offline nga format sa trading sa Sportmaster nagyelo, ug ang load sa among online nga channel, labi na sa mga termino sa paghatud sa adres sa kliyente, nadugangan 10 ka beses. Sa pipila lang ka semana, among giusab ang usa ka dako nga offline nga negosyo ngadto sa usa ka online ug gipahiangay ang serbisyo sa mga panginahanglan sa among mga kliyente.
Sa panguna, kung unsa ang hinungdanon nga among operasyon sa kilid nahimong among kinauyokan nga negosyo. Ang kamahinungdanon sa matag online order miuswag pag-ayo. Kinahanglan nga i-save ang matag ruble nga gidala sa kliyente sa kompanya.
Aron dali nga matubag ang mga hangyo sa kostumer, nagbukas kami usa ka dugang nga sentro sa pagkontak sa punoan nga opisina sa kompanya, ug karon makadawat mga 285 ka libo nga tawag matag semana. Sa samang higayon, gibalhin namo ang 270 ka tindahan ngadto sa bag-ong walay kontak ug luwas nga operating format, nga nagtugot sa mga kustomer nga makadawat og mga order ug mga empleyado sa pagpadayon sa ilang mga trabaho.
Atol sa proseso sa pagbag-o, nasugatan namo ang duha ka dagkong problema. Una, ang pagkarga sa among mga kapanguhaan sa online labi nga nadugangan (isulti kanimo ni Sergey kung giunsa namon kini giatubang). Ikaduha, ang pagdagayday sa mga talagsaon (pre-COVID) nga mga operasyon misaka sa daghang mga higayon, nga sa baylo nanginahanglan usa ka dako nga kantidad sa paspas nga automation. Aron masulbad kini nga problema, kinahanglan namon nga dali nga ibalhin ang mga kahinguhaan gikan sa mga lugar nga kaniadto mao ang panguna. Isulti kanimo ni Elena kung giunsa namon kini giatubang.
Operasyon sa mga serbisyo sa online
Kolesnikov Sergey, responsable sa operasyon sa online store ug microservices
Gikan sa higayon nga ang among mga retail store nagsugod sa pagsira sa mga bisita, nagsugod kami sa pagrekord sa pagtaas sa mga sukatan sama sa gidaghanon sa mga tiggamit, ang gidaghanon sa mga order nga gibutang sa among aplikasyon, ug ang gidaghanon sa mga hangyo sa mga aplikasyon.
Gidaghanon sa mga order gikan sa Marso 18 hangtod Marso 31Gidaghanon sa mga hangyo sa online nga pagbayad microservicesGidaghanon sa mga order nga gibutang sa website
Sa una nga graph atong makita nga ang pagtaas gibana-bana nga 14 ka beses, sa ikaduha - 4 ka beses. Among gikonsiderar nga ang metric sa oras sa pagtubag sa among mga aplikasyon mao ang labing timailhan.
Sa kini nga graph nakita namon ang tubag sa mga nataran ug aplikasyon, ug alang sa among kaugalingon nahibal-an namon nga wala kami nakamatikod sa bisan unsang pagtubo nga ingon niana.
Nag-una kini tungod sa kamatuoran nga nagsugod kami sa buluhaton sa pagpangandam sa katapusan sa 2019. Karon ang among mga serbisyo gireserba, ang pagtugot sa sayup gisiguro sa lebel sa pisikal nga mga server, mga sistema sa virtualization, mga pantalan, ug mga serbisyo sa kanila. Sa parehas nga oras, ang kapasidad sa among mga kapanguhaan sa server nagtugot kanamo nga makasugakod sa daghang mga karga.
Ang nag-unang himan nga nakatabang kanamo niining tibuok nga istorya mao ang among monitoring system. Tinuod, hangtod sa bag-o lang wala kami usa ka sistema nga magtugot kanamo sa pagkolekta sa mga sukatan sa tanan nga mga layer, gikan sa lebel sa pisikal nga kagamitan ug hardware hangtod sa lebel sa mga sukatan sa negosyo.
Sa pormal nga paagi, adunay pag-monitor sa kompanya, apan ingon usa ka lagda kini nagkatibulaag ug naa sa lugar nga responsibilidad sa mga piho nga departamento. Sa pagkatinuod, sa diha nga ang usa ka insidente nahitabo, kami halos wala gayud makabaton sa usa ka komon nga pagsabot sa unsa gayud nga nahitabo, walay komunikasyon, ug sa kasagaran mitultol kini sa pagdagan sa mga sirkulo aron sa pagpangita ug paglain sa problema aron kini masulbad.
Sa pila ka punto, naghunahuna kami ug nakahukom nga igo na kami sa pag-antos niini - kinahanglan namon ang usa ka hiniusa nga sistema aron makita ang tibuuk nga litrato sa tibuuk. Ang mga nag-unang teknolohiya nga gilakip sa among stack mao ang Zabbix ingon usa ka sentro sa pag-alerto ug pagtipig sa mga sukatan, Prometheus alang sa pagkolekta ug pagtipig sa mga sukatan sa aplikasyon, Stack ELK alang sa pag-log ug pagtipig sa datos gikan sa tibuuk nga sistema sa pag-monitor, ingon man ang Grafana alang sa visualization, Swagger, Docker ug uban pang mapuslanon ug mga butang nga pamilyar kanimo.
Sa parehas nga oras, gigamit namon dili lamang ang mga teknolohiya nga magamit sa merkado, apan nagpalambo usab kami sa among kaugalingon. Pananglitan, naghimo kami og mga serbisyo alang sa paghiusa sa mga sistema sa usag usa, nga mao, usa ka matang sa API alang sa pagkolekta sa mga sukatan. Dugang pa, nagtrabaho kami sa among kaugalingon nga mga sistema sa pag-monitor - sa lebel sa mga sukatan sa negosyo gigamit namon ang mga pagsulay sa UI. Ug usa usab ka bot sa Telegram aron ipahibalo ang mga koponan.
Naningkamot usab kami nga mahimo ang sistema sa pag-monitor nga ma-access sa mga team aron sila independente nga magtipig ug magtrabaho sa ilang mga sukatan, lakip ang pag-set up sa mga alerto alang sa pipila ka pig-ot nga sukatan nga dili kaylap nga gigamit.
Sa tibuok sistema, naningkamot kami alang sa proactivity ug localization sa mga insidente sa labing madali nga panahon. Dugang pa, ang gidaghanon sa among mga microservice ug mga sistema miuswag pag-ayo bag-o lang, ug ang gidaghanon sa mga panagsama miuswag. Ug ingon nga bahin sa pag-optimize sa proseso sa pag-diagnose sa mga insidente sa lebel sa panagsama, kami nagpalambo sa usa ka sistema nga nagtugot kanimo sa pagpahigayon sa cross-system checks ug ipakita ang resulta, nga nagtugot kanimo sa pagpangita sa mga nag-unang problema nga may kalabutan sa mga import ug interaksyon sa mga sistema uban sa usag-usa.
Siyempre, aduna pa kitay lawak nga motubo ug molambo sa mga termino sa mga operating system, ug kita aktibo nga nagtrabaho niini. Mahimo nimong mabasa ang dugang bahin sa among sistema sa pag-monitor .
Mga teknikal nga pagsulay
Orlov Sergey, nangulo sa competence center alang sa web ug mobile development
Sukad nagsugod ang pagsira sa pisikal nga tindahan, nag-atubang kami sa lainlaing mga hagit gikan sa panan-aw sa pag-uswag. Una sa tanan, ang load surge sa ingon. Klaro nga kung ang angay nga mga lakang dili himuon, kung ang usa ka taas nga karga gipadapat sa sistema, mahimo kini nga usa ka kalabasa nga adunay usa ka makapasubo nga bang, o hingpit nga madaot ang pasundayag, o mawad-an pa sa pag-andar niini.
Ang ikaduha nga aspeto, dili kaayo klaro, mao nga ang sistema sa ilawom sa taas nga karga kinahanglan nga usbon dayon, nga mopahiangay sa mga pagbag-o sa mga proseso sa negosyo. Usahay daghang beses sa usa ka adlaw. Daghang mga kompanya ang adunay usa ka lagda nga kung adunay daghang kalihokan sa pagpamaligya, dili kinahanglan nga maghimo bisan unsang mga pagbag-o sa sistema. Wala gyud, pasagdi kini nga molihok samtang kini molihok.
Ug kami adunay usa ka walay katapusan nga Black Friday, diin kinahanglan nga usbon ang sistema. Ug ang bisan unsang sayup, problema, o kapakyasan sa sistema mahimong mahal kaayo alang sa negosyo.
Sa pagtan-aw sa unahan, isulti ko nga nakahimo kami sa pagsagubang sa kini nga mga pagsulay, ang tanan nga mga sistema nakalahutay sa pagkarga, dali nga gi-scale, ug wala kami makasinati bisan unsang mga kapakyasan sa teknikal sa kalibutan.
Adunay upat ka mga haligi diin ang katakus sa sistema nga makasugakod sa taas nga mga karga sa pagdagsang nagsalig. Ang una niini mao ang pag-monitor, nga imong nabasa bahin sa ibabaw. Kung wala ang usa ka built-in nga sistema sa pag-monitor, hapit imposible nga makit-an ang mga bottleneck sa sistema. Ang maayo nga sistema sa pagmonitor sama sa mga sinina sa balay; kini kinahanglan nga komportable ug gipahaum kanimo.
Ang ikaduha nga aspeto mao ang pagsulay. Giseryoso namon kini nga punto: nagsulat kami sa mga klasiko nga yunit, mga pagsulay sa panagsama, mga pagsulay sa pagkarga ug daghan pa alang sa matag sistema. Nagsulat usab kami usa ka estratehiya sa pagsulay, ug sa samang higayon naningkamot nga madugangan ang lebel sa pagsulay hangtod sa punto nga dili na kinahanglan ang mga manual nga pagsusi.
Ang ikatulo nga haligi mao ang CI/CD Pipeline. Ang mga proseso sa pagtukod, pagsulay, ug pag-deploy sa usa ka aplikasyon kinahanglan nga awtomatiko kutob sa mahimo; kinahanglan nga wala’y manual nga interbensyon. Ang hilisgutan bahin sa CI/CD Pipeline medyo lawom, ug ako ra ang mohikap niini sa makadiyot. Angayan lamang nga hisgutan nga kita adunay usa ka CI/CD Pipeline checklist, diin ang matag team sa produkto moagi sa tabang sa mga competency centers.
Ug ania ang checklist
Niining paagiha, daghang tumong ang makab-ot. Kini ang API versioning ug feature toggle aron malikayan ang pagpagawas sa tren, ug pagkab-ot sa coverage sa nagkalain-laing mga pagsulay sa ingon nga lebel nga ang pagsulay hingpit nga awtomatiko, ang mga pag-deploy walay seamless, ug uban pa.
Ang ikaupat nga haligi mao ang mga prinsipyo sa arkitektura ug teknikal nga mga solusyon. Daghan kitag masulti bahin sa arkitektura sa dugay nga panahon, apan gusto nako nga hatagan og gibug-aton ang pipila ka mga prinsipyo nga gusto nakong ipunting.
Una, kinahanglan ka nga mopili sa espesyal nga mga himan alang sa piho nga mga buluhaton. Oo, kini klaro nga paminawon, ug klaro nga ang mga lansang kinahanglan nga iduso gamit ang martilyo, ug ang mga relo sa pulso kinahanglan nga bungkagon gamit ang mga espesyal nga screwdriver. Apan sa atong edad, daghang mga himan ang naningkamot alang sa unibersalisasyon aron matabonan ang labing kadaghan nga bahin sa mga tiggamit: mga database, cache, balangkas ug uban pa. Pananglitan, kung imong kuhaon ang database sa MongoDB, kini magamit sa daghang mga transaksyon sa dokumento, ug ang database sa Oracle nagtrabaho sa json. Ug ingon og ang tanan magamit sa tanan. Apan kung kita mobarug alang sa pagka-produktibo, nan kinahanglan natong tin-aw nga masabtan ang mga kalig-on ug mga kahuyang sa matag himan ug gamiton ang atong gikinahanglan alang sa atong klase sa mga buluhaton.
Ikaduha, kung nagdesinyo sa mga sistema, ang matag pagtaas sa pagkakomplikado kinahanglan nga makatarunganon. Kinahanglan naton kini kanunay nga ibutang sa hunahuna; ang prinsipyo sa ubos nga pagdugtong nahibal-an sa tanan. Nagtuo ako nga kini kinahanglan nga magamit sa lebel sa usa ka piho nga serbisyo, ug sa lebel sa tibuuk nga sistema, ug sa lebel sa talan-awon sa arkitektura. Importante usab ang abilidad sa horizontally scale sa matag component sa system subay sa load path. Kung naa nimo kini nga abilidad, dili lisud ang pag-scale.
Naghisgot bahin sa mga teknikal nga solusyon, gihangyo namon ang mga team sa produkto nga mag-andam usa ka bag-ong hugpong sa mga rekomendasyon, ideya ug solusyon, nga ilang gipatuman agig pagpangandam alang sa sunod nga balud sa trabaho.
Keshi
Kinahanglan nga mahunahunaon nga moduol sa pagpili sa lokal ug gipang-apod-apod nga mga cache. Usahay makataronganon ang paggamit sa duha sulod sa samang sistema.Pananglitan, aduna kitay mga sistema diin ang pipila sa mga datos sa esensya usa ka showcase cache, nga mao, ang tinubdan sa mga update nahimutang luyo sa sistema mismo, ug ang mga sistema dili mausab. kini nga datos. Alang niini nga pamaagi gigamit namon ang lokal nga Caffeine Cache.
Ug adunay mga datos nga ang sistema aktibo nga nagbag-o sa panahon sa operasyon, ug dinhi gigamit na namon ang usa ka gipang-apod-apod nga cache sa Hazelcast. Kini nga pamaagi nagtugot kanato sa paggamit sa mga benepisyo sa usa ka gipang-apod-apod nga cache diin sila gikinahanglan gayud, ug mamenosan ang mga gasto sa serbisyo sa pag-circulate sa Hazelcast cluster data diin mahimo nato nga wala kini. Daghan na mig nasulat bahin sa mga cache. и .
Dugang pa, ang pagbag-o sa serializer sa Kryo sa Hazelcast naghatag kanamo usa ka maayong pag-uswag. Ug ang transisyon gikan sa ReplicatedMap ngadto sa IMap + Near Cache sa Hazelcast nagtugot kanamo sa pagpamenos sa paglihok sa datos sa tibuok cluster.
Usa ka gamay nga tambag: sa kaso sa mass cache invalidation, ang taktika sa pagpainit sa ikaduha nga cache ug dayon pagbalhin niini usahay magamit. Mopatim-aw nga sa kini nga pamaagi kinahanglan kita makakuha og doble nga pagkonsumo sa panumduman, apan sa praktis, sa mga sistema diin kini gipraktis, ang pagkonsumo sa memorya mikunhod.
Reaktibo nga stack
Gigamit namon ang reaktibo nga stack sa daghang mga sistema. Sa among kaso, kini ang Webflux o Kotlin nga adunay mga coroutine. Ang reaktibo nga stack labi ka maayo kung diin gipaabut namon ang hinay nga mga operasyon sa input-output. Pananglitan, ang mga tawag sa hinay nga mga serbisyo, nagtrabaho kauban ang file system o mga sistema sa pagtipig.
Ang labing importante nga prinsipyo mao ang paglikay sa pagbabag sa mga tawag. Ang mga reaktibo nga gambalay adunay gamay nga gidaghanon sa mga live service thread nga nagdagan sa ilawom sa hood. Kon kita walay pagtagad sa atong kaugalingon sa paghimo sa usa ka direkta nga blocking tawag, sama sa usa ka JDBC drayber tawag, ang sistema sa yano nga mohunong sa paghunong.
Sulayi nga himuon ang mga sayup nga imong kaugalingon nga eksepsiyon sa runtime. Ang aktuwal nga dagan sa pagpatuman sa programa mobalhin ngadto sa reaktibo nga mga gambalay, ug ang pagpatuman sa code mahimong nonlinear. Ingon nga resulta, lisud kaayo ang pag-diagnose sa mga problema gamit ang stack traces. Ug ang solusyon dinhi mao ang paghimo sa tin-aw, katuyoan nga runtime nga mga eksepsiyon alang sa matag sayup.
Elasticsearch
Kung gigamit ang Elasticsearch, ayaw pagpili sa wala magamit nga datos. Kini, sa prinsipyo, yano ra usab nga tambag, apan kasagaran kini ang nakalimtan. Kung kinahanglan nimo nga mopili labaw pa sa 10 ka libo nga mga rekord matag higayon, kinahanglan nimo nga gamiton ang Scroll. Sa paggamit sa usa ka analohiya, kini sama sa usa ka cursor sa usa ka relational database.
Ayaw gamita ang postfilter gawas kung gikinahanglan. Uban sa daghang datos sa panguna nga sample, kini nga operasyon nag-load sa database.
Gamita ang daghang mga operasyon kung mahimo.
API
Sa pagdesinyo sa usa ka API, ilakip ang mga kinahanglanon alang sa pagminus sa gipasa nga datos. Tinuod kini labi na sa kalambigitan sa atubangan: sa kini nga junction nga kita molapas sa mga agianan sa among mga sentro sa datos ug nagtrabaho na sa channel nga nagkonektar kanamo sa kliyente. Kung kini adunay gamay nga problema, ang sobra nga trapiko hinungdan sa negatibo nga kasinatian sa tiggamit.
Ug sa katapusan, ayaw paglabay sa usa ka bug-os nga hugpong sa mga datos, klaroha ang bahin sa kontrata tali sa mga konsumedor ug mga supplier.
Pagbag-o sa organisasyon
Eroshkina Elena, Deputy Director alang sa IT
Sa higayon nga nahitabo ang quarantine, ug mitungha ang panginahanglan aron madugangan ang dagan sa pag-uswag sa online ug pagpaila sa mga serbisyo sa omnichannel, naa na kami sa proseso sa pagbag-o sa organisasyon.
Ang bahin sa among istruktura gibalhin sa pagtrabaho sumala sa mga prinsipyo ug gawi sa pamaagi sa produkto. Naporma ang mga team nga responsable na karon sa operasyon ug pagpalambo sa matag produkto. Ang mga empleyado sa ingon nga mga team 100% nga nalambigit ug nag-istruktura sa ilang trabaho gamit ang Scrum o Kanban, depende sa kung unsa ang gusto nila, pag-set up sa pipeline sa pag-deploy, pagpatuman sa mga teknikal nga gawi, mga gawi sa pagsiguro sa kalidad, ug daghan pa.
Sa swerte, ang kadaghanan sa among mga team sa produkto naa sa lugar sa mga serbisyo sa online ug omnichannel. Kini nagtugot kanamo sa pagbalhin ngadto sa remote work mode sa pinakamubo nga panahon (seryoso, literal sa duha ka adlaw) nga walay pagkawala sa kaepektibo. Ang gipahiangay nga proseso nagtugot kanamo sa dali nga pagpahiangay sa bag-ong mga kahimtang sa pagtrabaho ug pagpadayon sa usa ka medyo taas nga tulin sa paghatud sa bag-ong kagamitan.
Dugang pa, kinahanglan namon nga palig-onon ang mga koponan nga naa sa utlanan sa online nga negosyo. Nianang higayona nahimong klaro nga mahimo ra naton kini gamit ang internal nga mga kapanguhaan. Ug mga 50 ka tawo sulod sa duha ka semana ang nagbag-o sa lugar diin sila nagtrabaho kaniadto ug miapil sa pagtrabaho sa usa ka produkto nga bag-o kanila.
Wala kini magkinahanglan og bisan unsang espesyal nga paningkamot sa pagdumala, tungod kay kauban ang pag-organisar sa among kaugalingon nga proseso, teknikal nga pag-uswag sa produkto, ug mga pamaagi sa pagsiguro sa kalidad, gitudloan namon ang among mga koponan sa pag-organisar sa kaugalingon - aron madumala ang ilang kaugalingon nga proseso sa produksiyon nga wala mag-apil sa mga kapanguhaan sa pagdumala.
Nahimo namon nga ipunting ang among mga kapanguhaan sa pagdumala sa eksakto kung diin kini kinahanglan sa kana nga higayon - sa pag-coordinate kauban ang negosyo: Unsa ang hinungdanon alang sa among kliyente karon, kung unsa nga gamit ang kinahanglan una nga ipatuman, kung unsa ang kinahanglan buhaton aron madugangan ang among abilidad sa throughput sa paghatud ug pagproseso sa mga order. Kining tanan ug ang usa ka tin-aw nga sulondan nagpaposible niining panahona sa pagkarga sa atong mga sapa sa bili sa produksiyon sa unsay tinuod nga importante ug gikinahanglan.
Klaro nga sa hilit nga trabaho ug taas nga dagan sa pagbag-o, kung ang mga indikasyon sa negosyo nagdepende sa partisipasyon sa tanan, dili ka makasalig lamang sa internal nga mga pagbati gikan sa serye nga "Maayo ba ang tanan sa amon? Oo, morag maayo." Ang mga katuyoan nga sukatan sa proseso sa produksiyon gikinahanglan. Kami adunay niini, kini magamit sa bisan kinsa nga interesado sa mga sukatan sa mga team sa produkto. Una sa tanan, ang team mismo, ang negosyo, mga subkontraktor ug pagdumala.
Kausa sa matag duha ka semana, usa ka status ang gihimo sa matag team, diin ang mga sukatan analisa sulod sa 10 ka minuto, ang mga bottleneck sa proseso sa produksiyon giila, ug usa ka hiniusang solusyon ang gihimo: unsa ang mahimo aron mapapas kini nga mga bottleneck. Dinhi mahimo ka dayon nga mangayo og tabang gikan sa pagdumala kung adunay bisan unsang nahibal-an nga problema nga naa sa gawas sa zone of influence sa mga team, o ang kahanas sa mga kauban nga tingali nakasugat na sa susamang problema.
Bisan pa, nasabtan namon nga aron mapadali ang daghang mga higayon (ug mao gyud kini ang katuyoan nga among gitakda alang sa among kaugalingon), kinahanglan pa namon nga makat-on og daghan ug ipatuman kini sa among adlaw-adlaw nga trabaho. Sa pagkakaron nagpadayon kami sa pag-scale sa among pamaagi sa produkto ngadto sa ubang mga team ug bag-ong mga produkto. Aron mahimo kini, kinahanglan namon nga mag-master sa usa ka bag-ong format alang kanamo - usa ka online nga eskwelahan sa mga metodologo.
Ang mga metodologo, mga tawo nga nagtabang sa mga grupo sa paghimo og proseso, pag-establisar sa mga komunikasyon, ug pagpalambo sa kahusayan sa trabaho, mga ahente sa pagbag-o. Sa pagkakaron, ang mga gradwado sa among unang cohort nagtrabaho uban sa mga team ug nagtabang kanila nga magmalampuson.
Sa akong hunahuna ang kasamtangan nga sitwasyon nagbukas sa mga oportunidad ug mga palaaboton alang kanato nga tingali sa atong kaugalingon wala pa hingpit nga nahibal-an. Apan ang kasinatian ug praktis nga atong naangkon karon nagpamatuod nga atong gipili ang husto nga dalan sa kalamboan, dili nato palabyon kining bag-ong mga oportunidad sa umaabot ug makahimo sa pagtubag sama ka epektibo sa mga hagit nga atubangon sa Sportmaster.
kaplag
Atol niining lisud nga panahon, among giporma ang mga nag-unang mga prinsipyo diin ang software development nagsalig, nga, sa akong hunahuna, mahimong may kalabutan sa matag kompanya nga naghisgot niini.
mga tawo. Mao kini ang gisaligan sa tanan. Ang mga empleyado kinahanglang malingaw sa ilang trabaho ug masabtan ang mga tumong sa kompaniya ug ang mga tumong sa mga produkto nga ilang gitrabahoan. Ug, siyempre, mahimo silang molambo nga propesyonal.
teknolohiya. Gikinahanglan alang sa kompanya nga maghimo usa ka hamtong nga pamaagi sa pagtrabaho kauban ang stack sa teknolohiya niini ug magtukod mga kahanas kung diin kini kinahanglan. Kini paminawon kaayo yano ug klaro. Ug kanunay nga gibalewala.
Ang mga proseso. Mahinungdanon nga husto ang pag-organisar sa trabaho sa mga team sa produkto ug mga sentro sa kahanas, aron matukod ang interaksyon sa negosyo aron makatrabaho kini ingon usa ka kauban.
Sa kinatibuk-an, ingon niana ang paagi nga kami naluwas. Ang panguna nga tesis sa among panahon gipamatud-an pag-usab, nga adunay usa ka lanog nga pag-klik sa agtang
Bisan kung ikaw usa ka dako nga offline nga negosyo nga adunay daghang mga tindahan ug usa ka hugpong sa mga lungsod diin ikaw naglihok, pauswaga ang imong online nga negosyo. Dili lang kini usa ka dugang nga channel sa pagpamaligya o usa ka matahum nga aplikasyon diin mahimo ka usab makapalit usa ka butang (ug tungod kay ang mga kakompetensya usab adunay mga matahum). Dili kini basta-basta nga reserbang ligid aron matabangan ka sa pagsagubang sa bagyo.
Kini usa ka hingpit nga kinahanglanon. Alang niini dili lamang ang imong teknikal nga kapabilidad ug imprastraktura kinahanglan nga andamon, apan usab ang imong mga tawo ug mga proseso. Human sa tanan, dali ka makapalit og dugang nga memorya, luna, pag-deploy og bag-ong mga higayon, ug uban pa sulod sa pipila ka oras. Apan ang mga tawo ug mga proseso kinahanglan nga andam alang niini nga daan.
Source: www.habr.com