Air 25 Giblean, chùm sinn aig Mail.ru Group co-labhairt mu sgòthan agus timcheall - . Beagan thachartasan:
- Am prìomh - Bhruidhinn Mail.ru Cloud Solutions, #CloudMTS, SberCloud, Selectel, Ionad Dàta Rostelecom agus Yandex.Cloud mu dheidhinn mion-fhiosrachadh ar margaidh sgòthan agus na seirbheisean aca;
- Dh'innis co-obraichean bho Bitrix24 mar a bha iad ;
- Thug Leroy Merlin, Otkritie, Burger King agus Schneider Electric seachad inntinneach - dè na gnìomhan a tha an gnìomhachas aca a’ suidheachadh airson IT agus dè na teicneòlasan, a’ toirt a-steach feadhainn sgòthan, a tha iad a’ faicinn mar an fheadhainn as gealltanach.
Faodaidh tu coimhead air a h-uile bhidio bhon cho-labhairt mailto:CLOUD , agus an seo faodaidh tu leughadh mar a chaidh an deasbad mu dheidhinn microservices. Cho-roinn Alexander Deulin, ceannard ionad sgrùdaidh is leasachaidh siostaman gnìomhachais MegaFon, agus Sergey Sergeev, stiùiriche teicneòlas fiosrachaidh na buidhne M.Video-Eldorado, na cùisean soirbheachail aca mu bhith a’ faighinn cuidhteas monoliths. Bhruidhinn sinn cuideachd air cùisean co-cheangailte ri ro-innleachd IT, pròiseasan agus eadhon HR.
Luchd-phannail
- Sergey Sergeev, Buidheann CIO "M.Video-Eldorado";
- Alasdair Deulin, ceannard an ionaid airson rannsachadh agus leasachadh siostaman gnìomhachais MegaFon;
- Modaireatair - Dmitry Lazarev, Ceannard stiùireadh PaaS Mail.ru Cloud Solutions.
An dèidh òraid Alasdair Deulin còmhla ris airson deasbad bidh Sergey Sergeev bho M.Video-Eldorado agus modaireatair deasbaid Dmitry Lazarenko, Mail.ru Cloud Solutions.
Gu h-ìosal tha sinn air tar-sgrìobhadh den deasbad ullachadh dhut, ach faodaidh tu coimhead air a’ bhidio cuideachd:
Tha an gluasad gu microservices mar fhreagairt do fheumalachdan margaidh
Dmitriy:
A bheil eòlas soirbheachail sam bith agad air imrich gu microservices? Agus san fharsaingeachd: càite am faic thu a ’bhuannachd gnìomhachais as motha bho bhith a’ cleachdadh microservices no a ’gluasad bho monoliths gu microservices?
Sergey:
Tha sinn mu thràth air tighinn gu ìre anns a’ ghluasad gu microservices agus tha sinn air a bhith a’ cleachdadh an dòigh-obrach seo airson còrr is trì bliadhna. B’ e a’ chiad fheum a bha a’ fìreanachadh an fheum air meanbh-sheirbheisean an aonachadh gun chrìoch de dhiofar thoraidhean aghaidh leis an oifis chùil. Agus gach uair b’ fheudar dhuinn amalachadh agus leasachadh a bharrachd a dhèanamh, a’ cur an gnìomh ar riaghailtean fhèin airson obrachadh na seirbheis seo no an t-seirbheis sin.
Aig àm air choreigin, thuig sinn gum feumadh sinn gnìomhachd ar siostaman agus toradh gnìomhachd a luathachadh. Aig an àm sin, bha bun-bheachdan mar microservices agus dòigh-obrach microservice mar-thà air a 'mhargaidh, agus chuir sinn romhainn feuchainn air. Thòisich seo ann an 2016. An uairsin chaidh an àrd-ùrlar a chuir sìos agus chaidh a ’chiad 10 seirbheisean a chuir an gnìomh le sgioba air leth.
B 'e aon de na ciad sheirbheisean, an fheadhainn as motha a chaidh a luchdachadh, an t-seirbheis àireamhachadh prìsean. Gach uair a thig thu gu seanal sam bith, chun bhuidheann chompanaidhean M.Video-Eldorado, ge bith an e làrach-lìn no stòr reic a th’ ann, tagh toradh an sin, faic a ’phrìs air an làrach-lìn no anns a’ “Bhasgaid”, tha a’ chosgais gu fèin-ghluasadach air a thomhas le aon seirbheis. Carson a tha seo riatanach: roimhe seo, bha a phrionnsabalan fhèin aig gach siostam airson a bhith ag obair le sanasachd - le lasachaidhean agus mar sin air adhart. Bidh an oifis cùil againn a’ làimhseachadh prìsean; tha gnìomhachd lasachaidh air a chuir an gnìomh ann an siostam eile. Dh'fheumadh seo a bhith air a mheadhanachadh agus seirbheis air leth, dealaichte a chruthachadh ann an cruth pròiseas gnìomhachais a leigeadh leinn seo a chur an gnìomh. Sin mar a thòisich sinn gu ìre mhòr.
Bha luach a’ chiad thoraidhean fìor mhath. An toiseach, bha e comasach dhuinn buidhnean sgaraichte a chruthachadh a leigeas leinn a bhith ag obair air leth agus ann an dòigh iomlan. San dàrna h-àite, tha sinn air cosgais seilbh a lùghdachadh a thaobh amalachadh le barrachd shiostaman.
Thairis air na trì bliadhna a dh’ fhalbh, tha sinn air trì siostaman aghaidh a chuir ris. Bha e duilich an cumail leis an aon uiread de ghoireasan a b’ urrainn don chompanaidh a phàigheadh. Mar sin, dh 'èirich an obair a bhith a' coimhead airson ionadan ùra, a 'freagairt a' mhargaidh a thaobh astar, a thaobh cosgaisean taobh a-staigh agus èifeachdas.
Mar a nì thu tomhas air soirbheachas imrich gu microservices
Dmitriy:
Ciamar a tha soirbheachas ann an imrich gu microservices air a dhearbhadh? Dè bha “roimhe” anns gach companaidh? Dè an meatrach a chleachd thu gus soirbheachadh a’ ghluasaid a dhearbhadh, agus cò dha-rìribh a dhearbh e?
Sergey:
An toiseach, rugadh e taobh a-staigh IT mar neach-comasachaidh - “fuasgladh” comasan ùra. Bha feum againn air a h-uile càil a dhèanamh nas luaithe airson an ìre mhath an aon airgead, a’ freagairt air dùbhlain a’ mhargaidh. A-nis tha soirbheachas air a chuir an cèill anns an àireamh de sheirbheisean air an ath-chleachdadh le diofar shiostaman, aonachadh phròiseasan am measg iad fhèin. A-nis tha e, ach aig an àm sin bha e na chothrom àrd-ùrlar a chruthachadh agus dearbhadh a dhèanamh air a ’bheachd gun urrainn dhuinn seo a dhèanamh, bheir e buaidh agus obrachadh a-mach a’ chùis gnìomhachais.
Alexander:
Is e faireachdainn taobh a-staigh a th’ ann an soirbheachas. Bidh gnìomhachas an-còmhnaidh ag iarraidh barrachd, agus tha doimhneachd ar cùl-taic na dhearbhadh air soirbheachas. Tha e coltach riumsa.
Sergey:
Tha, tha mi ag aontachadh. Ann an trì bliadhna, tha còrr air dà cheud seirbheis agus cùl-taic againn mu thràth. Chan eil an fheum air goireasan taobh a-staigh na sgioba ach a 'fàs - le 30% gach bliadhna. Tha seo a 'tachairt oir bha daoine a' faireachdainn: tha e nas luaithe, tha e eadar-dhealaichte, tha diofar theicneòlasan ann, tha seo uile a 'leasachadh.
Thig microservices, ach fuirichidh an cridhe
Dmitriy:
Tha e coltach ri pròiseas gun chrìoch far am bi thu a’ tasgadh ann an leasachadh. A bheil an gluasad gu microservices airson gnìomhachas seachad mu thràth no nach eil?
Sergey:
Tha e gu math furasta a fhreagairt. Dè do bheachd: is e pròiseas gun chrìoch a th’ ann an àite fònaichean ùra? Bidh sinn fhìn a’ ceannach fònaichean gach bliadhna. Agus an seo tha e: fhad 'sa tha feum air luaths, airson atharrachadh air a' mhargaidh, bidh feum air cuid de dh'atharrachaidhean. Chan eil seo a 'ciallachadh gu bheil sinn a' trèigsinn rudan àbhaisteach.
Ach chan urrainn dhuinn a h-uile càil a chòmhdach agus ath-dhèanamh aig an aon àm. Tha seirbheisean amalachaidh dìleabach àbhaisteach againn a bha ann roimhe: busaichean iomairt is mar sin air adhart. Ach tha cùl-taic ann, agus tha feum ann cuideachd. Tha an àireamh de thagraidhean gluasadach agus an comas-gnìomh a’ fàs. Aig an aon àm, chan eil duine ag ràdh gun tèid 30% a bharrachd airgid a thoirt dhut. Is e sin, tha an-còmhnaidh feumalachdan air an aon làimh, agus rannsachadh airson èifeachdas air an taobh eile.
Dmitriy:
Tha beatha ann an deagh chàileachd. (Gàireachdainn)
Alexander:
San fharsaingeachd, tha. Chan eil dòighean rèabhlaideach againn airson am prìomh phàirt a thoirt air falbh bhon chruth-tìre. Tha obair rianail a’ dol air adhart gus siostaman a bhriseadh sìos gus am bi iad nas cunbhalaiche ri ailtireachd microservice, gus buaidh shiostaman air a chèile a lughdachadh.
Ach tha sinn an dùil am prìomh phàirt a chumail, oir ann an cruth-tìre a’ ghnìomhaiche bidh an-còmhnaidh cuid de àrd-ùrlaran a cheannaicheas sinn. A-rithist, tha feum againn air cothromachadh fallain: cha bu chòir dhuinn cabhag a dhèanamh gus an cridhe a ghearradh a-mach. Bidh sinn a 'cur nan siostaman taobh ri taobh, agus a-nis tha e a' tionndadh a-mach gu bheil sinn mu thràth air mullach mòran de phrìomh phàirtean. Nas fhaide, a’ leasachadh comas-gnìomh, bidh sinn a’ cruthachadh nan riochdachaidhean riatanach airson a h-uile seanail a bhios ag obair le ar seirbheisean conaltraidh.
Mar a reic thu microservices do ghnìomhachasan
Dmitriy:
Tha ùidh agam cuideachd - dhaibhsan nach eil air atharrachadh, ach a tha an dùil: dè cho furasta ‘s a bha e am beachd seo a reic ri gnìomhachas agus an e dàn-thuras a bh’ ann, pròiseact tasgaidh? No an e ro-innleachd mothachail a bh ’ann: a-nis tha sinn a’ dol gu microservices agus sin e, cha chuir dad stad oirnn. Ciamar a bha e dhut?
Sergey:
Cha robh sinn a 'reic dòigh-obrach, ach buannachd gnìomhachais. Bha duilgheadas ann an gnìomhachas, agus dh'fheuch sinn ri fuasgladh fhaighinn air. Aig an àm sin, chaidh a chuir an cèill gun robh diofar shianalan a 'cleachdadh phrionnsabalan eadar-dhealaichte airson a bhith a' cunntadh phrìsean - fa leth airson sanasachd, airson sanasachd, agus mar sin air adhart. Bha e duilich a chumail suas, thachair mearachdan, agus dh'èist sinn ri gearanan luchd-cleachdaidh. Is e sin, bha sinn a 'reic fuasgladh do dhuilgheadas, ach thàinig sinn leis an fhìrinn gu robh feum againn air airgead airson àrd-ùrlar a chruthachadh. Agus sheall iad cùis gnìomhachais a 'cleachdadh an eisimpleir den chiad ìre de thasgadh: mar a chumas sinn oirnn a' faighinn air ais agus dè a leigeas leinn a dhèanamh.
Dmitriy:
An do chlàr thu dòigh air choireigin àm a’ chiad ìre?
Sergey:
Seadh, cinnteach. Thug sinn seachad 6 mìosan gus an cridhe a chruthachadh mar àrd-ùrlar agus deuchainn a dhèanamh air a’ phìleat. Rè na h-ùine seo, dh'fheuch sinn ri àrd-ùrlar a chruthachadh airson am pìleat a spèileadh. An uairsin chaidh am beachd-bharail a dhearbhadh, agus leis gu bheil e ag obair, tha e a ’ciallachadh gun urrainn dhuinn cumail a’ dol. Thòisich iad air ath-riochdachadh agus neartaich iad an sgioba - ghluais iad e gu roinn air leth a nì dìreach sin.
An ath rud thig obair rianail stèidhichte air feumalachdan gnìomhachais, cothroman, goireasan rim faighinn agus a h-uile càil a tha san obair an-dràsta.
Dmitriy:
ceart gu leòr. Alasdair, dè tha thu ag ràdh?
Alexander:
Rugadh na microservices againn bho “foam of the sea” - mar thoradh air sàbhaladh ghoireasan, mar thoradh air cuid de na tha air fhàgail ann an cruth comas frithealaiche agus ath-sgaoileadh feachdan taobh a-staigh na sgioba. An toiseach, cha do reic sinn am pròiseact seo gu gnìomhachas. B’ e pròiseact a bha seo far an do rinn sinn an dà chuid rannsachadh agus leasachadh a rèir sin. Thòisich sinn aig toiseach 2018 agus dìreach leasaich sinn an taobh seo le dealas. Tha reic dìreach air tòiseachadh agus tha sinn sa phròiseas.
Dmitriy:
A bheil e a 'tachairt gu bheil gnìomhachas a' leigeil leat rudan mar Google a dhèanamh - air aon latha an-asgaidh san t-seachdain? A bheil an leithid de stiùireadh agad?
Alexander:
Aig an aon àm ri rannsachadh, dhèilig sinn cuideachd ri duilgheadasan gnìomhachais, agus mar sin tha na microservices againn uile nam fuasglaidhean do dhuilgheadasan gnìomhachais. Is ann dìreach aig an toiseach a thog sinn microservices a bha a’ còmhdach pàirt bheag den bhunait ballrachd, agus a-nis tha sinn an làthair anns cha mhòr a h-uile toradh suaicheanta.
Agus tha a’ bhuaidh tàbhachdach soilleir mu thràth - faodaidh sinn a bhith air ar cunntadh mu thràth, faodar astar cur air bhog toraidh agus teachd-a-steach caillte a thomhas nam biodh sinn air an t-seann shlighe a leantainn. Is e seo a tha sinn a’ togail a’ chùis.
Microservices: hype no feum?
Dmitriy:
Is e àireamhan àireamhan. Agus tha teachd a-steach no airgead air a shàbhaladh glè chudromach. Dè ma choimheadas tu air an taobh eile? Tha e coltach gur e gluasad a th’ ann am microservices, hype agus gu bheil mòran chompanaidhean a’ dèanamh ana-cainnt air? Dè cho soilleir ‘s a tha thu eadar-dhealachadh eadar na bhios tu a’ dèanamh agus nach dèan thu eadar-theangachadh gu microservices? Ma tha dìleab a-nis, am bi dìleab agad fhathast ann an 5 bliadhna? Dè an aois a bhios aig na siostaman fiosrachaidh a bhios ag obair aig M.Video-Eldorado agus MegaFon ann an 5 bliadhna? Am bi siostaman fiosrachaidh deich bliadhna, còig bliadhna deug a dh'aois ann neo an e ginealach ùr a bhios ann? Ciamar a tha thu a’ faicinn seo?
Sergey:
Tha e coltach rium gu bheil e duilich smaoineachadh gu math fada air falbh. Ma choimheadas sinn air ais, cò a smaoinich gun leasaich margaidh an teicneòlais mar seo, a’ toirt a-steach ionnsachadh innealan agus comharrachadh luchd-cleachdaidh le aghaidh? Ach ma choimheadas tu air na bliadhnaichean ri thighinn, tha e coltach riumsa gu bheil prìomh shiostaman, siostaman iomairt ERP-clas ann an companaidhean - tha iad air a bhith ag obair airson ùine mhòr.
Tha na companaidhean againn còmhla 25 bliadhna a dh'aois, le ERP clasaigeach gu math domhainn ann an cruth-tìre nan siostaman. Tha e soilleir gu bheil sinn a’ toirt pìosan a-mach às an sin agus a’ feuchainn rin cur còmhla ann am meanbh-sheirbheisean, ach fuirichidh an cridhe. Tha e duilich dhomh a-nis smaoineachadh gun cuir sinn an àite a h-uile prìomh shiostam an sin agus gun gluais sinn gu sgiobalta gu taobh soilleir eile nan siostaman ùra.
Tha mi a’ toirt taic don fhìrinn gu bheil a h-uile dad a tha nas fhaisge air an neach-dèiligidh agus an neach-cleachdaidh far a bheil a’ bhuannachd agus an luach gnìomhachais as motha, far a bheil sùbailteachd agus fòcas air astar, air atharrachadh, air “feuch, cuir dheth, ath-chleachdadh, dèan rudeigin eadar-dhealaichte” a dhìth “—sin far an atharraich an cruth-tìre. Agus chan eil toraidhean bogsa a’ freagairt gu math ann. Co-dhiù chan eil sinn ga fhaicinn. Tha feum air na fuasglaidhean as fhasa, as sìmplidh an sin.
Chì sinn an leasachadh seo:
- siostaman fiosrachaidh bunaiteach (oifis cùil sa mhòr-chuid);
- sreathan meadhanach ann an cruth microservices a 'ceangal a' chridhe, iomlan, a 'cruthachadh tasgadan, agus mar sin air adhart;
- tha siostaman aghaidh ag amas air an neach-cleachdaidh;
- ìre amalachaidh a tha sa chumantas air fhilleadh a-steach do mhargaidhean, siostaman eile agus eag-shiostaman. Tha an ìre seo cho aotrom ‘s a ghabhas, sìmplidh, agus tha a’ char as lugha de loidsig gnìomhachais ann.
Ach aig an aon àm, tha mi a 'toirt taic do bhith a' leantainn air adhart a 'cleachdadh nan seann phrionnsabalan ma thèid an cleachdadh gu h-iomchaidh.
Canaidh sinn gu bheil siostam iomairt clasaigeach agad. Tha e suidhichte ann an cruth-tìre aon reiceadair agus tha e air a dhèanamh suas de dhà mhodal a bhios ag obair còmhla. Tha eadar-aghaidh aonachaidh àbhaisteach ann cuideachd. Carson ath-dhèanamh e agus thoir leat microservice ann?
Ach nuair a tha 5 modalan anns an oifis chùil, às am bi pìosan fiosrachaidh air an cruinneachadh ann am pròiseas gnìomhachais, a tha an uairsin air a chleachdadh le siostaman aghaidh 8-10, tha am buannachd follaiseach sa bhad. Gabhaidh tu bho chòig siostaman cùl-oifis agus cruthaichidh tu seirbheis, tè iomallach, a tha ag amas air a’ phròiseas gnìomhachais. Dèan an t-seirbheis adhartach gu teicneòlach - gus am bi i a’ tilgeil fiosrachadh agus a’ fulang le lochdan, agus cuideachd ag obair le sgrìobhainnean no buidhnean gnìomhachais. Agus bidh thu ga fhilleadh a-steach a rèir aon phrionnsapal leis a h-uile toradh aghaidh. Chuir iad dheth an toradh aghaidh - dìreach chuir iad dheth an amalachadh. A-màireach feumaidh tu tagradh gluasadach a sgrìobhadh no làrach-lìn beag a dhèanamh agus dìreach aon phàirt a chuir a-steach don ghnìomhachd - tha a h-uile dad sìmplidh: chruinnich thu e mar neach-togail. Tha mi a 'faicinn barrachd leasachaidh san taobh seo - co-dhiù san dùthaich againn.
Alexander:
Thug Sergey cunntas iomlan air ar dòigh-obrach, tapadh leat. Canaidh mi dìreach far nach tèid sinn gu cinnteach - chun phrìomh phàirt, gu cuspair bileachaidh air-loidhne. Is e sin, bidh rangachadh agus cosgais fhathast, gu dearbh, na bhualadh “mòr” a chuireas às do airgead gu earbsach. Agus bidh an siostam seo fhathast air a dhearbhadh leis na h-ùghdarrasan riaghlaidh againn. Is e a h-uile càil eile a tha a ’coimhead a dh’ ionnsaigh teachdaichean, gu dearbh, microservices.
Dmitriy:
An seo tha teisteanas mar aon sgeulachd. 'S dòcha barrachd taic. Ma chosgas tu glè bheag air taic no mura bheil an siostam feumach air taic agus atharrachadh, tha e nas fheàrr gun a bhith ga cheangal. Co-rèiteachadh reusanta.
Mar a leasaicheas tu microservices earbsach
Dmitriy:
Gu math. Ach tha ùidh agam fhathast. A-nis tha thu ag innse sgeulachd soirbheachais: bha a h-uile dad gu math, thionndaidh sinn gu microservices, dhìon sinn am beachd don ghnìomhachas, agus dh’ obraich a h-uile càil a-mach. Ach tha mi air sgeulachdan eile a chluinntinn.
O chionn bliadhna no dhà, dhùin companaidh às an Eilbheis a bha air tasgadh dà bhliadhna ann a bhith a’ leasachadh àrd-ùrlar microservice ùr airson bancaichean am pròiseact mu dheireadh. Thuit gu tur. Chaidh mòran mhilleanan de francs na h-Eilbheis a chaitheamh, agus aig a ’cheann thall bha an sgioba sgapte - cha do dh’ obraich e a-mach.
An robh sgeulachdan co-chosmhail riut? An robh no a bheil duilgheadasan ann? Mar eisimpleir, tha cumail suas microservices agus sgrùdadh cuideachd na cheann goirt ann an gnìomhachd obrachaidh a’ chompanaidh. Às deidh na h-uile, tha an àireamh de phàirtean a 'meudachadh deichean tursan. Ciamar a tha thu ga fhaicinn, an robh eisimpleirean neo-shoirbheachail de thasgaidhean an seo? Agus dè as urrainn dhut comhairle a thoirt do dhaoine gus nach tig iad tarsainn air na duilgheadasan sin?
Alexander:
Am measg eisimpleirean neo-shoirbheachail bha gnìomhachasan ag atharrachadh phrìomhachasan agus a’ cuir dheth phròiseactan. Nuair a tha sinn aig ìre deiseil (gu dearbh, tha an MVP deiseil), thuirt a’ ghnìomhachas: “Tha prìomhachasan ùra againn, tha sinn a’ gluasad air adhart gu pròiseact eile, agus tha sinn a’ dùnadh am fear seo."
Cha robh fàilligidhean cruinne sam bith againn le microservices. Bidh sinn a’ cadal gu sìtheil, tha gluasad dleastanais 24/7 againn a bheir seirbheis don BSS gu lèir [siostam taic gnìomhachais].
Agus aon rud eile - bidh sinn a’ toirt air màl microservices a rèir nan riaghailtean a tha a’ buntainn ri toraidhean bogsa. Is e an iuchair gu soirbheachas gum feum thu, an toiseach, sgioba a chuir ri chèile a bhios ag ullachadh a’ mhicro-sheirbheis airson cinneasachadh. Tha an leasachadh fhèin, le cumhachan, 40%. Is e an còrr mion-sgrùdadh, modh-obrach DevSecOps, na h-aonaidhean ceart agus an ailtireachd cheart. Bidh sinn a’ toirt aire shònraichte do phrionnsapalan togail thagraidhean tèarainte. Bidh riochdairean tèarainteachd fiosrachaidh a’ gabhail pàirt anns gach pròiseact an dà chuid aig ìre dealbhadh ailtireachd agus tron phròiseas buileachaidh. Bidh iad cuideachd a’ riaghladh shiostaman airson mion-sgrùdadh còd airson so-leòntachd.
Canaidh sinn gu bheil sinn a’ cleachdadh ar seirbheisean gun stàit - tha iad againn ann an Kubernetes. Leigidh seo leis a h-uile duine cadal gu sìtheil mar thoradh air fèin-sgèileadh agus àrdachadh sheirbheisean gu fèin-ghluasadach, agus bidh an gluasad dleastanais a’ togail thachartasan.
Leis gu bheil na meanbh-sheirbheisean againn gu lèir, cha robh ach tachartas no dhà air ar loidhne a ruighinn. A-nis chan eil duilgheadasan ann le gnìomhachd. Gu dearbh, chan eil 200 againn, ach timcheall air 50 microservices, ach tha iad air an cleachdadh ann am bathar suaicheanta. Ma dh’fhàillig iad, is sinne a’ chiad fheadhainn a dh’ fhiosraich mu dheidhinn.
Microservices agus HR
Sergey:
Tha mi ag aontachadh le mo cho-obraiche mun ghluasad gu taic - gum feum an obair a bhith air a eagrachadh gu ceart. Ach innsidh mi dhut mu na duilgheadasan a tha ann, gu dearbh.
An toiseach, tha an teicneòlas ùr. Tha seo hype ann an dòigh mhath, agus tha e na dhùbhlan mòr a bhith a’ lorg eòlaiche a thuigeas agus a chruthaicheas seo. Tha an fharpais airson goireasan craicte, agus mar sin is fhiach eòlaichean an cuideam aca ann an òr.
San dàrna h-àite, le cruthachadh cruthan-tìre sònraichte agus àireamh a tha a’ sìor fhàs de sheirbheisean, feumar fuasgladh fhaighinn air duilgheadas ath-chleachdadh gu cunbhalach. Mar a tha luchd-leasachaidh ag iarraidh a dhèanamh: “Sgrìobhaidh sinn tòrr rudan inntinneach an seo a-nis...” Air sgàth seo, bidh an siostam a’ fàs agus a’ call cho èifeachdach sa tha e a thaobh airgead, cosgais seilbh, is mar sin air adhart. Is e sin, feumar ath-chleachdadh a ghabhail a-steach ann an ailtireachd an t-siostaim, a thoirt a-steach don mhapa-rathaid airson seirbheisean a thoirt a-steach agus dìleab a ghluasad gu ailtireachd ùr.
Is e duilgheadas eile - ged a tha seo math na dhòigh fhèin - farpais a-staigh. “O, tha gillean ùra fasanta air nochdadh an seo, tha cànan ùr aca.” Tha daoine, gu dearbh, eadar-dhealaichte. Tha feadhainn ann a tha cleachdte ri sgrìobhadh ann an Java, agus feadhainn a bhios a’ sgrìobhadh agus a’ cleachdadh Docker agus Kubernetes. Tha iad sin nan daoine gu tur eadar-dhealaichte, bidh iad a’ bruidhinn ann an dòigh eadar-dhealaichte, a’ cleachdadh diofar bhriathran agus uaireannan chan eil iad a’ tuigsinn a chèile. Tha an comas no an neo-chomas air cleachdadh a cho-roinn, roinneadh eòlais, san t-seagh seo cuideachd na dhuilgheadas.
Uill, meudaich goireasan. “Sgoinneil, rachamaid! Agus a-nis tha sinn ag iarraidh nas luaithe, barrachd. Dè, chan urrainn dhut? Nach eil e comasach a dhà uimhir a lìbhrigeadh ann am bliadhna? Agus carson?" Is dòcha gu bheil pianta fàs mar sin àbhaisteach airson mòran rudan, mòran dhòighean-obrach, agus faodaidh tu am faireachdainn.
A thaobh sgrùdadh. Tha e coltach rium gu bheil seirbheisean no innealan sgrùdaidh gnìomhachais ag ionnsachadh mu thràth no comasach air obrachadh leis an dà chuid Docker agus Kubernetes ann am modh eadar-dhealaichte, neo-àbhaisteach. Mar sin, mar eisimpleir, nach bi thu a’ tighinn gu crìch le 500 inneal Java fon bheil seo uile a ’ruith, is e sin, bidh e a’ cruinneachadh. Ach tha dìth aibidh fhathast aig na toraidhean sin; feumaidh iad a dhol tro seo. Tha an cuspair fìor ùr, leanaidh e air adhart.
Dmitriy:
Tha, gu math inntinneach. Agus tha seo a’ buntainn ri HR. Is dòcha gu bheil do phròiseas HR agus suaicheantas HR air atharrachadh beagan thairis air na 3 bliadhna sin. Thòisich thu air daoine eile fhastadh le diofar chomasan. Agus is dòcha gu bheil an dà chuid buannachdan agus eas-bhuannachdan ann. Roimhe sin, b 'e blockchain agus saidheans dàta an hype, agus b' fhiach eòlaichean annta milleanan. A-nis tha a 'chosgais a' tuiteam, tha a 'mhargaidh a' fàs làn-shàthaichte, agus tha an aon ghluasad ann am microservices.
Sergey:
Tha, gu tur.
Alexander:
Tha HR a’ faighneachd na ceiste: “Càit a bheil an aon-adharcach pinc agad eadar an backend agus aghaidh?” Chan eil HR a’ tuigsinn dè a th’ ann am microservice. Dh'innis sinn dhaibh an dìomhair agus dh'innis sinn dhaibh gun do rinn an backend a h-uile càil, agus nach eil aon-adharcach ann. Ach tha HR ag atharrachadh, ag ionnsachadh gu sgiobalta agus a’ fastadh dhaoine aig a bheil eòlas bunaiteach air IT.
Tha mean-fhàs de microservices
Dmitriy:
Ma choimheadas tu air an ailtireachd targaid, bidh microservices a ’coimhead mar uilebheist mar sin. Thug do thuras grunn bhliadhnaichean. Tha bliadhna aig cuid eile, cuid eile trì bliadhna. An robh thu a’ faicinn a h-uile duilgheadas, an ailtireachd targaid, an do dh’ atharraich dad? Mar eisimpleir, a thaobh microservices, tha geataichean agus mogalan seirbheis a-nis a’ nochdadh a-rithist. An do chleachd thu iad aig an toiseach no an do dh'atharraich thu an ailtireachd fhèin? A bheil dùbhlain mar sin agad?
Sergey:
Tha sinn mu thràth air grunn phròtacalan conaltraidh ath-sgrìobhadh. An toiseach bha aon phròtacal ann, a-nis thionndaidh sinn gu fear eile. Bidh sinn a 'meudachadh sàbhailteachd agus earbsachd. Thòisich sinn le teicneòlasan iomairt - Oracle, Web Logic. A-nis tha sinn a’ gluasad air falbh bho thoraidhean iomairt teicneòlais ann am microservices agus a’ gluasad gu teicneòlasan stòr fosgailte no gu tur fosgailte. Bidh sinn a’ trèigsinn stòran-dàta agus a’ gluasad gu na tha ag obair nas èifeachdaiche dhuinn sa mhodail seo. Chan eil feum againn air teicneòlasan Oracle tuilleadh.
Thòisich sinn dìreach mar sheirbheis, gun a bhith a 'smaoineachadh air dè a dh' fheumadh sinn tasgadan, dè a dhèanadh sinn nuair nach robh ceangal ann le microservice, ach bha feum air dàta, msaa. A-nis tha sinn a 'leasachadh àrd-ùrlar gus an tèid an ailtireachd a mhìneachadh chan ann ann an cànan nan seirbheisean, agus ann an cànan gnìomhachais, thoir loidsig gnìomhachais chun ath ìre nuair a thòisicheas sinn a’ bruidhinn ann am faclan. A-nis tha sinn air ionnsachadh bruidhinn ann an litrichean, agus is e an ath ìre nuair a thèid na seirbheisean a chruinneachadh ann an cuid de sheòrsa, nuair a tha seo mar fhacal mar-thà - mar eisimpleir, cairt toraidh iomlan. Tha e air a chruinneachadh bho microservices, ach is e API a th’ ann a chaidh a thogail a bharrachd air an seo.
Tha sàbhailteachd glè chudromach. Cho luath ‘s a thòisicheas tu a bhith ruigsinneach agus gu bheil seirbheis agad tro am faigh thu tòrr rudan inntinneach, agus gu math luath, ann an diog sgoltadh, tha miann ann faighinn ann an dòigh nach eil cho tèarainte. Gus faighinn air falbh bho seo, bha againn ri dòighean-obrach deuchainn is sgrùdaidh atharrachadh. B’ fheudar dhuinn an sgioba atharrachadh, an structar stiùireadh lìbhrigidh, CI/CD.
Is e mean-fhàs a tha seo - mar le fònaichean, dìreach fada nas luaithe: an toiseach bha fònaichean putan putaidh ann, an uairsin nochd fònaichean sgairteil. Rinn iad ath-sgrìobhadh agus ath-dhealbhadh an toraidh oir bha feum eadar-dhealaichte air a’ mhargaidh. Seo mar a bhios sinn ag atharrachadh: a’ chiad ìre, an deicheamh ìre, obair.
Gu fìrinneach, tha rudeigin air a dhealbhadh gach bliadhna bho shealladh teicneòlais, rudeigin eile bho shealladh an cùl-taic agus feumalachdan. Bidh sinn a 'ceangal aon rud ri rud eile. Bidh an sgioba a’ cosg 20% air fiachan teicnigeach agus taic theicnigeach don sgioba, 80% air an eintiteas gnìomhachais. Agus gluaisidh sinn le tuigse air carson a tha sinn ga dhèanamh, carson a tha sinn a’ dèanamh nan leasachaidhean teicneòlach sin, dè a thig orra. Mar sin.
Dmitriy:
Tarraingeach. Dè tha ann am MegaFon?
Alexander:
B’ e am prìomh dhùbhlan nuair a thàinig sinn gu microservices gun a bhith a’ tuiteam ann an caos. Thàinig oifis ailtireachd MegaFon còmhla rinn sa bhad, eadhon gu bhith na neach-tòiseachaidh agus na dhràibhear - a-nis tha ailtireachd fìor làidir againn. B’ e an obair aige a bhith a’ tuigsinn dè am modal targaid a tha sinn a’ dol a dhèanamh agus dè na teicneòlasan a dh’ fheumar fheuchainn. Le ailtireachd, stiùir sinn na pìleatan sin sinn fhìn.
B’ e an ath cheist: “Mar sin ciamar a nì thu brath air seo uile?” Agus aon eile: “Ciamar a nì thu cinnteach gum bi eadar-obrachadh follaiseach eadar microservices?” Chuidich mogal seirbheis sinn gus a’ cheist mu dheireadh a fhreagairt. Rinn sinn pìleat air Istio agus chòrd na toraidhean rinn. A-nis tha sinn aig an ìre de bhith ga sgaoileadh a-mach gu sònaichean toraidh. Tha deagh bheachd againn air a h-uile dùbhlan - an fhìrinn gum feum sinn an stac atharrachadh gu cunbhalach, rudeigin ùr ionnsachadh. Tha ùidh againn ann a bhith a’ leasachadh, gun a bhith a’ cleachdadh seann fhuasglaidhean.
Dmitriy:
Faclan òir! Bidh dùbhlain mar seo a’ cumail an sgioba agus a’ ghnìomhachas air an òrdagan agus a’ cruthachadh an ama ri teachd. Chruthaich GDPR prìomh oifigearan dìon dàta, agus tha dùbhlain làithreach a’ cruthachadh prìomh oifigearan microservices agus ailtireachd. Agus tha e toilichte.
Bhruidhinn sinn tòrr. Is e am prìomh rud gu bheil dealbhadh math de microservices agus an ailtireachd fhèin a ’toirt cothrom dhut mòran mhearachdan a sheachnadh. Gu dearbh, tha am pròiseas ath-aithriseach agus mean-fhàsach, ach is e an àm ri teachd a th’ ann.
Taing dha na com-pàirtichean uile, taing do Sergei agus Alasdair!
Ceistean bhon luchd-èisteachd
Ceist bhon luchd-èisteachd (1):
Sergey, ciamar a tha riaghladh IT air atharrachadh sa chompanaidh agad? Tha mi a’ tuigsinn, nuair a tha cruach mhòr de ghrunn shiostaman ann, gur e pròiseas gu math soilleir agus loidsigeach a th’ ann mar a tha e air a riaghladh. Ciamar a rinn thu ath-thogail air riaghladh na h-earrainn IT às deidh àireamh mhòr de mhicro-sheirbheisean a bhith air am filleadh a-steach ann an ùine cho goirid?
Sergey:
Tha mi ag aontachadh le mo cho-obraiche gu bheil ailtireachd glè chudromach mar dhràibhear atharrachaidh. Thòisich sinn le bhith a 'faighinn roinn ailtireachd. Tha ailtirean aig an aon àm nan sealbhadairean air cuairteachadh gnìomhachd agus na riatanasan airson mar a nochdas e san t-sealladh-tìre. Mar sin bidh iad cuideachd nan co-òrdanaichean airson na h-atharrachaidhean sin. Mar thoradh air an sin, bha atharrachaidhean sònraichte air pròiseas lìbhrigidh sònraichte nuair a chruthaich sinn àrd-ùrlar CI/CD.
Ach cha deach na prionnsapalan àbhaisteach, bunaiteach airson leasachadh, mion-sgrùdadh gnìomhachais, deuchainn agus leasachadh a chuir dheth. Chuir sinn dìreach astar ris. Roimhe sin, ghabh an cearcall uimhir, thug stàladh air àrainneachdan deuchainn tòrr a bharrachd. A-nis tha gnìomhachas a’ faicinn a’ bhuannachd agus ag ràdh: “Carson nach urrainn dhuinn an aon rud a dhèanamh ann an àiteachan eile?”
Tha e coltach, ann an dòigh mhath, le in-stealladh ann an cruth banachdach a sheall: faodaidh tu a dhèanamh san dòigh seo, ach faodaidh tu a dhèanamh ann an dòigh eile. Gu dearbh, tha duilgheadas ann an sgiobachd, ann an comasan, ann an eòlas, ann an strì.
Ceist bhon luchd-èisteachd (2):
Tha luchd-breithneachaidh ailtireachd microservice ag ràdh gu bheil deuchainn agus leasachadh duilich. Tha seo loidsigeach far a bheil cùisean a’ fàs iom-fhillte. Dè na dùbhlain a bha fa chomhair an sgioba agad agus ciamar a fhuair thu thairis orra? Ceist airson a h-uile duine.
Alexander:
Tha duilgheadasan ann nuair a ghluaiseas tu bho microservices gu àrd-ùrlar, ach faodar am fuasgladh.
Mar eisimpleir, tha sinn a 'dèanamh toradh anns a bheil 5-7 microservices. Feumaidh sinn deuchainnean amalachaidh a thoirt seachad thairis air a’ chruach microservices gu lèir gus an solas uaine a thoirt seachad airson gluasad chun phrìomh mheur. Cha robh an obair seo ùr dhuinn: bha sinn air a bhith a’ dèanamh seo airson ùine mhòr aig BSS, nuair a thug an neach-reic dhuinn fuasglaidhean a chaidh a chuir a-steach mu thràth.
Agus chan eil an duilgheadas againn ach anns an sgioba bheag. Tha feum air aon innleadair QA airson aon toradh gun chumhachan. Agus mar sin, bidh sinn a’ cur air falbh toradh de 5-7 microservices, agus faodar 2-3 dhiubh sin a leasachadh le treas phàrtaidhean. Mar eisimpleir, tha toradh againn ann an leasachadh a bhios an neach-reic siostam bileachaidh againn, Mail.ru Group agus MegaFon R&D a’ gabhail pàirt. Feumaidh sinn seo a chòmhdach le deuchainnean mus tèid a chuir gu cinneasachadh. Tha an innleadair QA air a bhith ag obair air an toradh seo airson mìos gu leth, agus tha an còrr den sgioba air fhàgail às aonais a thaic.
Chan eil an iom-fhillteachd seo air adhbhrachadh ach le sgèileadh. Tha sinn a’ tuigsinn nach urrainn microservices a bhith ann am falamh; chan eil aonaranachd iomlan ann. Nuair a dh'atharraicheas sinn aon seirbheis, bidh sinn an-còmhnaidh a 'feuchainn ris a' chùmhnant API a ghleidheadh. Ma dh'atharraicheas rudeigin fon chochall, bidh an t-seirbheis aghaidh fhathast. Ma tha na h-atharrachaidhean marbhtach, bidh cruth-atharrachadh ailtireil de sheòrsa air choreigin a’ tachairt agus gluaisidh sinn gu metamodel dàta gu tur eadar-dhealaichte, a tha gu tur neo-fhreagarrach - is ann dìreach an uairsin a bhios sinn a’ bruidhinn mu dheidhinn sònrachadh API seirbheis v2 a’ nochdadh. Bidh sinn a’ toirt taic don chiad agus an dàrna dreach aig an aon àm, agus às deidh a h-uile neach-cleachdaidh gluasad chun dàrna dreach, bidh sinn dìreach a’ dùnadh a ’chiad fhear.
Sergey:
Tha mi airson a chur ris. Tha mi gu tur ag aontachadh mu dhuilgheadasan - bidh iad a 'tachairt. Tha an cruth-tìre a’ fàs nas iom-fhillte, agus tha cosgaisean os-cionn a’ dol am meud, gu sònraichte airson deuchainn. Mar a dhèiligeas tu ri seo: gluais gu deuchainn fèin-ghluasadach. Feumaidh, feumaidh tu tasgadh a bharrachd a dhèanamh ann a bhith a’ sgrìobhadh autotests agus deuchainnean aonaid. Gus nach b 'urrainn do luchd-leasachaidh gealltainn gun a bhith a' dol seachad air an deuchainn, cha b 'urrainn dhaibh an còd atharrachadh. Gus nach obraich eadhon am putan putaidh às aonais autotest, deuchainn aonad.
Tha e cudromach an comas-gnìomh a bh ’ann roimhe a chumail suas, agus tha seo na cheann-cinn a bharrachd. Ma nì thu ath-sgrìobhadh air teicneòlas gu protocol eile, an uairsin ath-sgrìobh thu e gus an dùin thu a h-uile càil gu tur.
Aig amannan cha bhith sinn a’ dèanamh deuchainnean deireadh-gu-deireadh a dh’aona ghnothach, oir chan eil sinn airson stad a chuir air leasachadh, ged a tha aon rud againn às deidh a chèile cuideachd. Tha an cruth-tìre glè mhòr, iom-fhillte, tha mòran shiostaman ann. Aig amannan is e dìreach stocainnean a th’ ann - tha, lughdaich thu an iomall sàbhailteachd, nochdaidh barrachd chunnartan. Ach aig an aon àm bidh thu a 'leigeil às an t-solar.
Alexander:
Tha, leigidh autotests agus deuchainnean aonad dhut seirbheis àrd-inbhe a chruthachadh. Tha sinn airson loidhne-phìoban nach gabh a thoirt seachad às aonais deuchainnean aonaid agus amalachaidh. Gu tric feumaidh sinn emuladairean agus siostaman malairteach a shlaodadh gu sònaichean deuchainn agus àrainneachdan leasachaidh, leis nach urrainnear a h-uile siostam a chuir ann an sònaichean deuchainn. A bharrachd air an sin, chan eil iad dìreach a’ fàs fliuch - bidh sinn a’ gineadh freagairt làn-chuimseach bhon t-siostam. Tha seo na fhìor phàirt de bhith ag obair le microservices, agus tha sinn cuideachd a’ tasgadh ann. Às aonais seo, thig caos.
Ceist bhon luchd-èisteachd (3):
Cho fad ‘s a tha mi a’ tuigsinn, dh ’fhàs microservices an toiseach bho sgioba air leth agus tha iad a-nis sa mhodail seo. Dè na buannachdan agus na h-eas-bhuannachdan a th’ ann?
Tha dìreach an aon sgeulachd againn: dh’ èirich seòrsa de fhactaraidh microservices. A-nis tha sinn gu bun-bheachdail air an ìre a ruighinn far a bheil sinn a’ leudachadh an dòigh-obrach seo a thaobh cinneasachadh thar sruthan agus thar shiostaman. Ann am faclan eile, tha sinn a 'gluasad air falbh bho leasachadh meadhanaichte microservices, modalan microservice, agus tha sinn a' fàs nas fhaisge air siostaman.
A rèir sin, bidh ar gnìomhachd cuideachd a’ dol gu siostaman, is e sin, tha sinn a’ dì-mheadhanachadh a’ chuspair seo. Dè an dòigh-obrach a th’ agad agus dè an sgeulachd a th’ agad?
Alexander:
Thuit thu an t-ainm “factaraidh microservices” dìreach a-mach às do bheul - tha sinn cuideachd airson sgèile. An toiseach, tha dha-rìribh aon sgioba againn a-nis. Tha sinn airson cothrom a thoirt don h-uile sgioba leasachaidh a tha aig MegaFon a bhith ag obair ann an eag-shiostam cumanta. Chan eil sinn airson a h-uile gnìomh leasachaidh a th’ againn a-nis a ghabhail thairis gu tur. Is e an obair ionadail sgèile, is e an obair chruinneil leasachadh a stiùireadh gu gach sgioba anns an ìre microservice.
Sergey:
Innsidh mi dhut an t-slighe a ghabh sinn. Thòisich sinn gu mòr ag obair mar aon sgioba, ach a-nis chan eil sinn nar n-aonar. Tha mi a 'moladh na leanas: feumaidh sealbhadair a bhith aig a' phròiseas. Feumaidh cuideigin am pròiseas leasachaidh microservices a thuigsinn, a riaghladh, a riaghladh agus a thogail. Feumaidh e goireasan a bhith aige agus a dhol an sàs ann an riaghladh ghoireasan.
Faodar na goireasan sin, aig a bheil eòlas air teicneòlasan, mion-fhiosrachadh agus a thuigeas mar a thogas iad meanbh-sheirbheisean, a bhith suidhichte ann an sgiobaidhean toraidh. Tha measgachadh againn far a bheil daoine bhon àrd-ùrlar microservice anns an sgioba toraidh a nì an tagradh gluasadach. Tha iad ann, ach bidh iad ag obair a rèir pròiseas roinn riaghlaidh àrd-ùrlar microservice leis a’ mhanaidsear leasachaidh aca. Taobh a-staigh na roinne seo tha sgioba air leth a bhios a’ dèiligeadh ri teicneòlas. Is e sin, bidh sinn a’ measgachadh cruinneachadh cumanta de ghoireasan nar measg fhìn agus gan roinn, gan toirt do sgiobaidhean.
Aig an aon àm, tha am pròiseas fhathast coitcheann, fo smachd, bidh e a 'dol air adhart a rèir prionnsapalan coitcheann teicneòlasach, le deuchainn aonad agus mar sin air adhart - a h-uile dad a tha air a thogail air a' mhullach. Is dòcha gu bheil colbhan ann an cruth ghoireasan air an cruinneachadh bho dhiofar roinnean den dòigh toraidh.
Alexander:
Sergey, tha thu dha-rìribh na shealbhadair air a’ phròiseas, ceart? A bheil cùl-raon nan gnìomhan air a cho-roinn? Cò a tha cunntachail airson a sgaoileadh?
Sergey:
Seall: seo am measgachadh a-rithist. Tha cùl-raon ann a tha stèidhichte air leasachaidhean teicneòlais - is e seo aon sgeulachd. Tha cùl-taic ann, a tha air a chruthachadh bho phròiseactan, agus tha cùl-taic ann bho thoraidhean. Ach tha an t-sreath de thoirt a-steach do gach aon de na toraidhean seirbheis no cruthachadh na seirbheis seo air a leasachadh le eòlaiche toraidh. Chan eil e anns an sgioba-stiùiridh IT, chaidh a thoirt a-mach gu sònraichte bhuaithe. Ach tha na daoine agam gu cinnteach ag obair a rèir an aon phròiseas.
Bidh sealbhadair an cùl-taic ann an diofar stiùiridhean - cùl-raon atharrachaidhean - nan daoine eadar-dhealaichte. Ceangal seirbheisean teicneòlais, am prionnsapal eagrachaidh - bidh seo uile ann an IT. Tha sealbh agam air an àrd-ùrlar agus na goireasan cuideachd. Aig a’ mhullach tha na tha a’ buntainn ris a’ chùl-raon agus atharrachaidhean gnìomh, agus an ailtireachd san t-seagh seo.
Canaidh sinn gnìomhachas ag ràdh: “Tha sinn ag iarraidh a’ ghnìomh seo, tha sinn airson toradh ùr a chruthachadh - iasad ath-dhèanamh. ” Bidh sinn a’ freagairt: “Tha, nì sinn a-rithist e.” Tha ailtirean ag ràdh: “Smaoinicheamaid: càite san iasad a sgrìobhas sinn microservices agus ciamar a nì sinn e?” An uairsin bidh sinn ga bhriseadh sìos ann am pròiseactan, toraidhean no stac teicneòlais, ga chuir ann an sgiobaidhean agus ga chuir an gnìomh. A bheil thu air toradh a chruthachadh air an taobh a-staigh agus air co-dhùnadh microservices a chleachdadh san toradh seo? Tha sinn ag ràdh: “A-nis feumaidh na siostaman dìleab a bh’ againn, no na siostaman aghaidh, atharrachadh gu na meanbh-sheirbheisean sin. ” Tha na h-ailtirean ag ràdh: “Mar sin: anns a’ chùl-raon teicneòlach taobh a-staigh thoraidhean aghaidh - an gluasad gu microservices. Rach". Agus tha eòlaichean toraidh no sealbhadairean gnìomhachais a’ tuigsinn na tha de chomas air a riarachadh, cuin a thèid a dhèanamh agus carson.
Deireadh an deasbaid, ach chan eil a h-uile
Chaidh co-labhairt mailto:CLOUD a chuir air dòigh .
Bidh sinn a’ dèanamh tachartasan eile cuideachd – m.e. @Kubernetes Meetup, far a bheil sinn an-còmhnaidh a’ coimhead airson sàr luchd-labhairt:
- Lean @Kubernetes agus naidheachdan eile @Meetup anns an t-sianal Telegram againn
- A bheil ùidh agad bruidhinn aig aon de na @Meetups? Fàg iarrtas airson
Source: www.habr.com