Први поглед: како функционише нови систем корпоративне поште Маилион из МиОффице-а

Пре скоро четири године почели смо да дизајнирамо фундаментално нови дистрибуирани систем е-поште, Маилион, који је дизајниран за корпоративну комуникацију. Наше решење је изграђено на Цлоуд Нативе микросервисној архитектури, способно је да ради са више од 1 корисника истовремено и биће спремно да покрије 000% потреба великих корпорација.

Током рада на Маилиону, тим је порастао неколико пута, а сада је скоро 70 програмера укључено у производ. Прешли смо дуг пут од идеје и првих прототипова до фазе пилотирања комерцијалне верзије. Време је да Хабру кажемо какву врсту производа креирамо, како је наш систем поште структуриран и функционише, који технолошки стек користимо и зашто је наше решење будућност корпоративних комуникација. Идемо!

Хабр, здраво! Моје име је Антон Герасимов, руководим одељењем за развој у московском развојном центру компаније Моја канцеларија. Данас желимо да вам представимо Маилион, фундаментално нови руски поштански систем пословне класе који ће постати достојна алтернатива популарним страним решењима. Маилион има висок капацитет оптерећења, невиђену скалабилност и толеранцију грешака и захтева минималну пажњу администратора система.

Тренутно је наш развој у бета фази, али ће врло брзо, према нашем плану, до краја 2020. године, постати пилот имплементација комерцијалног производа.

У већини случајева, овај чланак садржи опште информације - једноставно је немогуће говорити о сложеном софтверском производу у једној публикацији. Планирам да направим серију чланака о кључним технологијама. У међувремену, ради ваше удобности, нудим следећи садржај:

• Шта је корпоративни систем е-поште?
  • Коме треба још једна пошта и зашто?
  • Шта се крије испод хаубе
  • Са којим изазовима се суочавају програмери?
    • Поузданост
    • толеранција грешака
    • Независност
    • Једноставност рада
    • Економска ефикасност
    • Децентрализација
    • Системски захтеви
• Технолошки стог
• Од чега се састоји производ?
  • Компатибилност са системима поште
  • Лакоћа администрације
  • Модеран дизајн
    • Прилагодљивост
    • Доследност
    • Постављање корпоративног идентитета
  • Мобиле Аппс
  • Интелигентни медијски панел
  • Локализација
• Да, запошљавамо!

Шта је корпоративни систем е-поште?

Једноставан и очигледан одговор на ово питање је алатка за е-пошту и календар. Али ђаво је, као што знамо, у детаљима.

Дакле, креирамо нову генерацију поште са напредним функцијама заказивања, која је намењена корпоративном сегменту и великим компанијама. Усмерени смо на рад са великим комерцијалним и државним структурама, које могу имати од 30 хиљада до неколико стотина хиљада радних места.

Наш систем је заснован на принципу платформског решења. Надограђујемо концепт Унифиед Цоммуницатионс и нудимо јединствен алат за рад са поштом, календаром и документима у оквиру једног система, са могућношћу повећања функционалности решења повезивањем додатних модула и компоненти. Екстензије, иначе, можемо развити не само ми, већ и наши партнери. У ту сврху биће објављен прилично широк СДК алат.

Коме треба још једна пошта и зашто?

Велика предузећа су формирала занимљив тренд - предузећа имају потребу за функцијама сарадње. Не говоримо само о директној интеракцији између запослених кроз слање нечега, већ о заједничком приступу поштанским сандучићима и налозима за играње улога, могућности рада са великим групама учесника и присутности различитих корпоративних функција.

Типична корпоративна функција је механизам за опозив писама, који је изузетно популаран у великим компанијама, али се практично не користи ни у Б2Ц сегменту ни у малим предузећима. Ствар је у томе што је међу малим групама корисника вероватноћа да ће се појавити таква потреба прилично мала, а цена грешке је много мања. Штавише, једноставно је немогуће имплементирати ову функцију изван система корпоративне поште - чак ни Гоогле маил не памти писма у облику на који су корисници Екцханге навикли. Корен проблема лежи у дизајну поштанских протокола из 80-их година прошлог века.

Спровели смо десетине фокус група, анкетирали стотине корисника и потрошили неколико хиљада радних сати идентификујући типичне сценарије коришћења е-поште. То нам је омогућило да пажљиво проучимо потребе наших потенцијалних корисника и карактеристике њихових пословних процеса. На основу добијених података, одлучили смо да развијемо архитектуру која би нам омогућила скалирање до потребног обима оптерећења ако је потребно. По нашем мишљењу, ограничења уопште нема, али у овом тренутку разумемо како да обезбедимо рад компанија које запошљавају неколико стотина хиљада корисника.

Шта се крије испод хаубе

Наш производ укључује решење за е-пошту, алатку за планирање календара, адресар, као и интерактивни преглед докумената на основу нашег МиОффице решења за рад са документима.

Пошто је реч о решењу на нивоу предузећа, саставни део корпоративне поште је и пуноправни систем за претрагу. Наше решење је способно да изврши морфолошко претраживање од краја до краја у свим компонентама. Поред тога, цео систем поште је заснован на сопственом складишту, које је такође оптимизовано за сарадњу.

Које су разлике између МиОффице система поште?

Читалац Хабра који је већ имао искуства у раду са МиОффице решењима зна да комерцијални производи укључују „МиОффице Маил“. И поставља се питање – које су његове разлике од корпоративног система електронске поште Маилион, на којем је радио мој тим?

Ми у МиОффице-у смо одлучили да је за задовољење потреба компанија различитих величина неопходно креирати два система електронске поште пословне класе. Производ МиОффице Маил намењен је организацијама у којима број корисника износи хиљаде или неколико десетина хиљада. За веће структуре, препоручљивије је користити Маилион – нови МиОффице производ, који је изграђен на Цлоуд Нативе микросервисној архитектури и има невиђене могућности скалирања и толеранције грешака.

Приликом избора производа, клијенти треба унапред да се одлуче за стратегију даљег развоја своје компаније. За сваку организацију, имплементација система е-поште је сложен пројектни рад који не укључује брзу замену једног решења другим. Због тога треба унапред узети у обзир максимално могуће оптерећење, толеранцију кварова и критеријуме самоизлечења, као и фактор географске дистрибуције.

Два МиОффице система е-поште су фундаментално различита. Изграђени су коришћењем различитих технолошких стекова, а алати за сваки систем се бирају у складу са циљевима и задацима сегмента у којем ће систем поште бити распоређен. Имамо заједничку визију производа шта треба да буде присутно у системима поште, као и синхронизацију у приступима дизајну. Али ово су два производа који су дизајнирани за различите групе корисника.

Са којим изазовима се суочавају програмери?

Даље у тексту говорићу само о новом систему корпоративне поште Маилион.

Спровели смо темељно истраживање и анализирали предности и недостатке постојећих решења за е-пошту. Акумулирано искуство наших стручњака, који су у прошлости били директно укључени у креирање система са високим оптерећењем, омогућило нам је да брзо идентификујемо главну болну тачку било ког добро познатог производа - перформансе улазних и излазних операција диска (ИО) .

Можемо рећи да је задатак убрзања ИО операција постао главни изазов са којим смо се суочили. Било је неопходно да се фокусирамо на решавање наших специфичних проблема и почели смо да креирамо и развијамо сопствени систем за складиштење бинарних података. Овај приступ има веома очигледну економску компоненту – потребно је не само да складиштимо податке, већ и да извршимо доста операција за унос и излаз на диску.

Ова одлука није донета олако. Проучавали смо многе производе пословне класе који су намењени складиштењу информација и нисмо могли да нађемо ништа спремно и прикладно за наше захтеве. На крају крајева, потребно је не само да чувамо податке, већ и да стално радимо са њима, и то не у ексклузивном режиму са приступом једном кориснику, већ да обезбедимо могућност сарадње између неколико десетина хиљада корисника.
Дакле, утврдили смо да је корпоративни критеријум највећег приоритета за нас рад са великим количинама података.

Поузданост

Штавише, ово није толико питање складиштења колико задатак обраде и брзог приступа овим информацијама. Потребно је обезбедити високе показатеље поузданости - време непрекидног рада целог решења треба да буде на нивоу од 99,9%. Истовремено, систем поште мора бити аутономан у доношењу исправних одлука о обради одбијања. Само на тај начин можемо да обезбедимо одсуство кварова који могу да паралишу пословне процесе одређене компаније.

толеранција грешака

Радили смо кроз скуп мера које се примењују на сваку компоненту и одабрали приступе како бисмо обезбедили толеранцију грешака. Конкретно, систем корпоративне поште користи кворумну обраду података, резервацију услуга и контролу одсуства њихових стања, као и сопствене механизме за рутирање и подршку кворума на основу консензуса.

Критеријум за високу толеранцију грешака је присуство механизама за самоконтролу у свакој компоненти. Маилион стално анализира да ли се ова или она функција извршава исправно или нетачно, да ли овај или онај блок ради исправно. Ово је једно од средстава за самоизлечење система у случају квара. Информације не би требало да се изгубе, решење би на крају требало да дође до конзистентног стања.

Морате схватити да није могуће предвидети све могуће догађаје у животу - не можете преварити физику. Али ми се придржавамо таквих приступа дизајну који нам омогућавају да са прилично високим степеном самопоуздања говоримо о исправном поступању са незгодама одређених образаца. Такође имамо велику групу за тестирање која увек покушава да разбије нешто у производу. И понекад успевају. Ова чињеница покреће инцидент, који детаљно проучавамо и на основу њега креирамо нови механизам за отклањање оваквог проблема.

Како систем реагује на незгоде

Тржиште често поставља питање - шта ће се десити са системом ако изненада изгуби комуникацију са једним од својих чворова? Овај захтев је посебно релевантан ако планирате да примените географски распоређено решење.

Приликом пројектовања такве инсталације потребно је узети у обзир потребе купца и његов скуп критеријума поузданости. Погрешно је веровати да је веза са мрежом података свуда иста. У системима предузећа, важно је узети у обзир чак и брзину сигнала кроз оптичко влакно.

Ако купац има високе захтеве за поузданошћу, онда ћемо препоручити инсталацију у неколико дата центара, који ће бити повезани наменским комуникационим линијама.
Међутим, не може се искључити сценарио потпуног нестанка струје у једном од чворова поштанског система. У овом случају, рад са главним подацима овог сегмента ће паузирати, али ће преостали делови радити као да се ништа није догодило. Систем ће обавестити администраторе да је чвор изгубљен, а запослени ће морати да предузму одговарајуће мере.

Такође, наш систем поште се може конфигурисати на начин да се резервације дешавају унутар дата центра. Овакав приступ ће обезбедити оперативност у случају губитка неколико чворова унутар центра података, а губитак једног од чворова нико неће приметити – осим, ​​наравно, система за праћење. Када дође до таквог догађаја, оптерећење се једноставно прераспоређује. Због тога је приликом дизајнирања система поште важно узети у обзир маргину - колико и које компоненте могу бити „изгубљене“ у несрећи.

Независност

Не постоје апсолутно поуздани системи, а кварови, на овај или онај начин, могу се десити. Због тога је приликом пројектовања система поште важно обезбедити могућност брзог локализовања кварова, што ће омогућити њихово отклањање у одређеном СЛА периоду. Штавише, кварове би систем требало да исправља независно, уз минимализовање интервенције администратора система и оперативних служби.

Једноставност рада

Наравно, велики системи не могу а да не захтевају пажњу висококвалификованих запослених. Али један од аспеката који узимамо у обзир приликом дизајнирања је да систем треба да буде лак за администрацију и да не захтева никакве јединствене компетенције.

Економска ефикасност

Наравно, за рад са било којим таквим корпоративним системима потребна је обука запослених - на крају крајева, говоримо о заиста огромном обиму. Стога смо се приликом креирања нашег производа фокусирали на смањење укупних трошкова поседовања система. За сваки посао је важно пратити ефикасност трошења и настојати да се избегне бесконачно преливање новца у оперативне трошкове.

Децентрализација

Да би се постигли принципи о којима сам раније говорио, систем мора бити потпуно дистрибуиран – централизовани приступ је увек ограничен условима коришћења хардвера.

Наравно, можете купити један велики сервер и покушати да инсталирате све апликације и услуге на њему. Али што је систем већи, то је читав дизајн сложенији, а поузданост таквог система се стално смањује – на крају крајева, један сервер значи једну тачку квара. И што више централизујемо рад, то више зависимо од ове централне тачке.

Системски захтеви

Када говоримо о сложеним корпоративним системима е-поште, морамо да схватимо да не постоји таква ствар као што је „минимална конфигурација за рад“. Основа сваке велике имплементације је увек озбиљан рад на дизајну. Омогућава вам да повежете потребе одређеног посла и оптималну конфигурацију система поште.

Систем корпоративне е-поште је флексибилан алат који се може конфигурисати према великом броју параметара. Испитивање оптерећења вршимо по сопственој методологији, која нам омогућава да симулирамо оптерећење на основу анализе десетак основних и неколико стотина могућих критеријума.

Можемо рећи да ће приликом припреме имплементационог пројекта управо прорачуни показати интензитет рада корисника у постојећим пословним процесима организације. У овом случају се анализирају многи улазни параметри и у зависности од могућег оптерећења доноси се одлука о потребној количини рачунарске снаге – од једног рачунара до целе рачунарске собе.

Стога, говорити о неким минималним конфигурацијама није сасвим тачно. Конкретно, имамо и демонстрациони штанд који ради на само једној машини. Али разумемо да рад у корпоративном сегменту захтева инсталацију на десетине, па чак и стотине виртуелних машина.

Технолошки стог

Приликом креирања производа посебну пажњу посвећујемо лиценцираној чистоћи кода. МиОффице је успоставио и примењује високе стандарде квалитета, који захтевају од нас да потпуно самостално развијамо производе, уз минимално учешће екстерног кода.

Већи део Маилионовог кода је наш сопствени, код на који у потпуности поседујемо права и који можемо мењати и модификовати по потреби. Већина кода за наш систем е-поште је написан у компанији Го (Голанг). Поред Го, користимо Ц++ као и Јава Сцрипт ЕС6 за веб део.

Преосталих 5% су такозване „тешке компоненте“, као што су базе података. То укључује РетхинкДБ, АрангоДБ и Редис. Међу кључним технологијама навешћу и гРПЦ - систем удаљеног позива процедура, који се користи као јединствени механизам за интеракцију преко АПИ-ја, ово је важан део.

Од чега се састоји производ?

Корпоративни систем е-поште није „сервер у вакууму“. Наш производ обухвата око 70 компоненти и 45 сервиса који одржавају систем поште. Сви ови елементи су написани „од нуле“ и сопствени су развој МиОффице-а.

Најуочљивији део система је серверски комплекс који обезбеђује системе за складиштење, пошту, календар и претрагу, као и веб клијент. Такође развијамо неколико корисничких апликација и планирамо да нашим корисницима понудимо нове „танке клијенте“ засноване на нашим технологијама веб клијента до комерцијалног објављивања.

Компатибилност са системима поште

Маилион ради користећи стандардне протоколе. Да бисте почели да користите наше решење, потребно је само да конфигуришете клијентске апликације и наставите да радите са њима у свом уобичајеном окружењу. На пример, можете користити клијентску апликацију укључену у производ МиОффице Маил.

Такође, ради погодности наших корисника, направили смо посебан додатак који омогућава несметан прелазак са Екцханге-а. Уз његову помоћ, корисници ће моћи да наставе рад са МС Оутлоок-ом приликом замене маил сервера – неће ни приметити да се нешто променило у њиховој уобичајеној интеракцији са комуникационим алатима. Овај додатак вам омогућава несметано пребацивање корисника са претходног система поште, без заустављања рада целе организације. Ово је посебно важно ако треба да замените алате да бисте служили стотинама хиљада корисника.

Лакоћа администрације

Посебност нашег система корпоративне поште је у томе што захтева изузетно мало учешћа администратора. Приликом пројектовања покушали смо да пронађемо баланс између могућности прилагођавања и сложености управљања. Да бисмо то постигли, морали смо да спроведемо многа истраживања образаца понашања администратора сложених корпоративних система.

Наш тим се састоји, као што сам раније рекао, од високо квалификованих стручњака - сваки од њих има солидно административно искуство. Стога смо приликом развоја система настојали да њихова искуства пренесемо на потребе корисника приликом управљања сложеним производом. Другим речима, знајући за потенцијалне проблеме, проактивно смо обезбедили начине за њихово решавање на нивоу архитектонског пројектовања.

На пример,

• Обезбеђена је изолација компоненти система у контејнере, укључујући инфраструктурне - ово нам помаже да повећамо ниво безбедности, флексибилно конфигуришемо приступ између компоненти, а такође нам омогућава да брзо укључимо нове ставке које захтева пословање у листу подржаних система и платформи;
• јединствен приступ развоју и примени, јединствени конфигурациони формат за све компоненте доприносе јаснијем и ефикаснијем раду и смањују трошкове подршке;
• ваш сопствени инсталатер система, заснован на познатим алатима за примену, омогућава вам да централизовано, флексибилно и јасно управљате инсталацијом;
  микросервисна архитектура са јасном поделом одговорности пословне логике између услуга помаже да се разуме шема рада система и ефикасније пружа подршка;
• инфраструктурни део система је заснован на познатим решењима, користећи најбољу праксу, а такође омогућава интеграцију са постојећим системима у предузећу, што поједностављује пуштање система у рад у оквиру компаније;
• У ту сврху, складиште ће имати систем заснован на вештачкој интелигенцији, који ће моћи самостално да идентификује потенцијалне кварове и контролише опрему.

Модеран дизајн

Било је потребно неколико хиљада радних сати да се креира дизајн производа. Развојни задатак је био да се интерфејс учини модерним – лаким и интуитивним. Ово је тешко када дизајнирате систем предузећа, који подразумевано мора да садржи низ специфичних функција.

Наравно, дизајн се не може „уклесати у камен“ или одобрити потписом и печатом – то је живо оруђе, стално се развија и усавршава. Током четири године, неколико пута смо трансформисали дизајн, али није било радикалне промене у идеологији. Кључни принцип за изградњу читаве корпоративне линије производа је стварање универзалног система дизајна.

Приликом пројектовања корпоративног система електронске поште посебну пажњу смо посветили развоју три кључне области – прилагодљивости, доследности и способности прилагођавања корпоративном стилу клијента.

Прилагодљивост

Посебна карактеристика дизајна интерфејса корпоративног система поште Маилион је могућност његовог приказа на уређајима са екранима било које величине. Све визуелне компоненте су пажљиво приказане, правилно скалирају када се покрећу на мобилним уређајима и одличне су чак и за контролу прстима на екранима осетљивим на додир. Такође, када промените величину прозора апликације, трансформише се и распоред колона – величина колона се пропорционално помера, у строгом складу са постулатима концепта богатих Интернет апликација.

Доследност

Дизајн Маилион корпоративног система електронске поште заснован је на систематском приступу. Ову област развијамо од почетка 2017. године, када није било модерно говорити о системима дизајна као сада. Систем дизајна је скуп правила и алата за визуелно и техничко извођење који одражава филозофију производа и који се стално развија. Увели смо га да бисмо поједноставили комуникацију између развоја и дизајна.

Постављање корпоративног идентитета

Наш дизајн је „камелеон“, способан да се прилагоди корпоративном стилу сваког клијента. Боје свих елемената интерфејса дефинисане су кроз променљиве. Тако, променом основног скупа од неколико боја, можете пребојити све апликације одједном.

Фонтови се такође дефинишу кроз варијабле: интерфејс може да користи корпоративни фонт компаније клијента, ако је то предвиђено у књизи брендова клијента. У исто време, различити фонтови могу имати различите величине слова, и ми то узимамо у обзир. На пример, ПТ Санс у величини 16 изгледа приметно мањи од Робото у истој величини 16. Због тога прилагођавамо величину текстуалних блокова карактеристикама одређеног фонта.

Структури наше библиотеке боја и карактеристикама рада са фонтовима ћемо посветити посебне чланке.

Мобиле Аппс

Саставни део сваког модерног система електронске поште су мобилне апликације – корисници би требало да буду у могућности да раде са било ког места и у било које време.
Сада тек формирамо концепт корпоративних мобилних апликација које треба да узму у обзир разлике у функционалности МиОффице емаил система и да понуде различите приступе коришћењу система електронске поште и календара у корпорацијама.

Интелигентни медијски панел

Наше фокус групе су показале да корисници сматрају интерфејсе традиционалних система е-поште гломазним. Испитаници које смо интервјуисали су приметили да је рад са календарским догађајима и прилозима био посебно тежак. Покушали смо да постигнемо прилагодљив интерфејс и повећамо продуктивност – да наш производ учинимо пријатним за коришћење.

Медиа Панел, нови алат за убрзавање сарадње, организује све информације о преписци и омогућава тренутни приступ листи учесника у кореспонденцији, линковима и верзијама докумената који су икада послати.

Овај алат помаже у ситуацијама када корисници морају да раде са великим стазама од стотина порука. Често се дешава да морате пронаћи документ или слику која се налазила само у једном од њих. Медијски панел креира листу свих елемената из ланца е-поште и приказује их на једном месту. Као резултат тога, проналажење жељеног објекта постаје много лакше.

Локализација

Не само руски корисници имају потребу за корпоративним системом е-поште. МиОффице води доследну политику изласка на страна тржишта, тако да се доста пажње посвећује питањима локализације производа.

У нашем производу, потреба за локализацијом на стране језике је постављена првобитно, на нивоу основног дела система. Само по себи, додавање нових језика за нас није велики проблем - то је потпуно разумљив задатак који знамо како да решимо.

Тренутно су корисницима доступни руски и енглески језик. У наредним издањима додаћемо подршку систему корпоративне е-поште за језике на којима раде МиОффице производи - француски, шпански, португалски и друге. Нама је на неки начин лакше него колегама из суседних одељења, пошто за системе поште и календара треба само да водимо рачуна о азбуци и карактеристикама рада са датумима и временима – на срећу, немамо формуле као у уређивач табела.

Да, запошљавамо!

Било је потребно неколико стотина човек-година да се створи наш производ. А чак и да желим, не бих могао да вам кажем све одједном у једном чланку. Ипак, надам се да ће ова публикација послужити као полазна тачка за упознавање са нашим производом - као што сам већ рекао, планирам да у будућности причам детаљније како о самом решењу и његовим карактеристикама, тако ио нашем развоју приступа.

Без сенке скромности, рећи ћу и да је данас мали број компанија које развијају такве системе поште широм света. Ово је заиста комплексан инжењерски задатак, који захтева дубоко разумевање потреба корпоративних купаца и темељну анализу пословних процеса великих организација, савремених трендова у пројектовању и развоју, као и приличан број компетентних стручњака. Наш поштански систем се свакодневно развија.

Тренутно смо скоро отворени педесет слободна радна места у развоју. Дођите да радите са нама ако желите да радите са нама на стварању производа који може да промени начин на који корпоративни свет размишља о е-пошти.

Извор: ввв.хабр.цом