Од оутсоурцинга до развоја (2. део)

В претходни чланак, говорио сам о позадини стварања Велиама и одлуци да се дистрибуира преко СааС система. У овом чланку ћу говорити о томе шта сам морао да урадим да производ не буде локални, већ јавни. О томе како је почела дистрибуција и на које проблеме су наишли.

Планирање

Тренутни бацкенд за кориснике био је на Линук-у. Скоро свака организација има Виндовс сервере, што се не може рећи за Линук. Велиамова главна снага је даљинско повезивање са серверима и мрежном опремом иза НАТ-а. Али ова функционалност је била веома тесно повезана са чињеницом да рутер мора бити Микротик. А ово очигледно не би задовољило многе. Прво сам почео да размишљам о додавању подршке за рутере од најчешћих произвођача. Али схватио сам да је ово бескрајна трка за проширењем листе подржаних компанија. Штавише, оне које су већ подржане могу имати другачији скуп команди за промену НАТ правила од модела до модела. Чинило се да је једини излаз из ситуације ВПН.

Пошто смо одлучили да дистрибуирамо производ, али не као отворени код, постало је немогуће укључити разне библиотеке са отвореним лиценцама као што је ГПЛ. Ово је генерално посебна тема након што сам донео одлуку о продаји производа, морао сам да прођем кроз половину библиотека због чињенице да су биле ГПЛ. Када су писали за себе, то је било нормално. Али није погодан за дистрибуцију. Први ВПН који вам пада на памет је ОпенВПН. Али то је ГПЛ. Друга опција је била употреба јапанског СофтЕтхер ВПН-а. Његова лиценца му је омогућила да је укључи у свој производ. После пар дана разних тестирања како да га интегришемо тако да корисник не мора ништа да конфигурише и да зна за СофтЕтхер ВПН, добијен је прототип. Све је било како треба. Али из неког разлога нас је ова шема и даље збунила, и на крају смо је напустили. Али, наравно, одбили су након што су смислили другу опцију. На крају, све је урађено на редовним ТЦП везама. Неке везе раде преко координатора, неке директно преко технологије Нат Холе Пунцхинг (НХП), која је такође имплементирана у Фрее Пасцал. Морам рећи да никада раније нисам ни чуо за НХП. И није ми пало на памет да је могуће повезати 2 мрежна уређаја, оба директно иза НАТ-а. Проучио сам тему, разумео принцип рада и сео да пишем. План је реализован, корисник се једним кликом повезује на жељени уређај иза НАТ-а преко РДП, ССХ или Винбок-а без уношења лозинки или подешавања ВПН-а. Штавише, већина ових веза пролази поред нашег координатора, што има добар ефекат на пинг и трошкове сервисирања ових веза.

Пребацивање серверске стране са Линук-а на Виндовс

Било је неколико проблема приликом преласка на Виндовс. Први је да уграђени вмиц у виндовс не дозвољава да правите ВКЛ упите. А у нашем систему је све већ било изграђено на њима. И било је још нешто, али сада сам заборавио зашто су коначно напустили његову употребу. Могуће разлике између верзија Виндовс-а. А други проблем је вишенитност. Пошто нисам нашао добар услужни програм треће стране под „прихватљивом“ лиценцом за нас, поново сам покренуо Лазарус ИДЕ. И написао сам неопходан услужни програм. Улаз је потребна листа објеката и које специфичне упите треба направити, а као одговор добијам податке. И све ово у вишенитном режиму. Велики.

Након што сам подесио птхреадс за ПХП Виндовс, мислио сам да ће све почети одмах, али није било тако. Након неког времена отклањања грешака, схватио сам да птхреадс изгледа да функционишу, али то није функционисало на нашем систему. Постало је јасно да постоји нека посебност у раду са птхреадовима на Виндовс-у. И тако је било. Прочитао сам документацију, а тамо је писало да је за Виндовс број нити ограничен, и то, колико се сећам, имплицитно. Ово је постало проблем. Јер када сам почео да смањујем број нити на којима је апликација радила, посао је обављала веома споро. Поново сам отворио ИДЕ и истом услужном програму је додата функционалност за вишенитно пинговање објеката. Па, тамо већ постоји много скенирања портова. Заправо, након овога је нестала потреба за птхреадовима за ПХП и више се не користи. Даље, овом услужном програму је додато још неколико функционалности и он и даље ради до данас. Након тога је састављен инсталатер за Виндовс, који је укључивао Апацхе, ПХП, МариаДБ, саму ПХП апликацију и скуп услужних програма за интеракцију са системом, написан у Фрее Пасцал-у. Што се тиче инсталатера, мислио сам да ћу брзо решити овај проблем, јер... Ово је врло уобичајена ствар и неопходна за скоро сваки софтвер. Или сам тражио на погрешном месту, или нешто друго. Али стално сам наилазио на производе који или нису били довољно флексибилни, или скупи и такође нефлексибилни. Па ипак, нашао сам бесплатан инсталатер у којем ће бити могуће испунити све жеље. Ово је ИнноСетуп. Пишем о овоме овде јер сам морао да га потражим у случају да неком уштедим време.

Одбијање додатка у корист вашег клијента

Претходно сам написао да је клијентски део претраживач са „додатком“. Дакле, било је тренутака када је Цхроме ажуриран и распоред је био мало крив, затим је Виндовс ажуриран и прилагођена ури шема је нестала. Заиста нисам желео да имам оваква изненађења у јавној верзији производа. Штавише, прилагођени ури је почео да нестаје након сваког ажурирања оперативног система Виндовс. Мицрософт је једноставно избрисао све гране које нису његове у потребном одељку. Такође, Гоогле Цхроме вам сада не дозвољава да запамтите избор да отворите или не апликацију из прилагођеног ури-а и поставља ово питање сваки пут када кликнете на објекат за надгледање. Па, генерално, била је неопходна нормална интеракција са корисничким локалним системом, што претраживач не пружа. Чини се да је најједноставнија опција у овој шеми једноставно направити свој претраживач, као што многи сада раде преко Елецтрон-а. Али многе ствари су већ биле написане у Фрее Пасцал-у, укључујући и серверски део, па смо одлучили да направимо клијента на истом језику, а не да правимо зоолошки врт. Овако је написан клијент са Цхромиум-ом. Након тога, почео је да добија разне траке.

Издање

На крају смо изабрали име за систем. Стално смо пролазили кроз разне опције док је био у току процес конверзије са локалне верзије на СааС. Пошто смо првобитно планирали да уђемо не само на домаће тржиште, главни критеријум за избор имена је било присуство незаузетог или не баш скупог домена у зони „.цом“. Неке функције/модули још увек нису пренети са локалне верзије на Велиам, али смо одлучили да их објавимо са тренутном функционалношћу и завршимо остале као ажурирања. У првој верзији није постојао ХелпДеск, Велиам Цоннецтор, било је немогуће променити прагове за окидаче обавештења и још много тога. Купили смо сертификат кодног знака и потписали делове клијента и сервера. Написали смо веб страницу за производ, започели процедуре за регистрацију софтвера, жига итд. Генерално, спремни смо за почетак. Лагана еуфорија од обављеног посла и од чињенице да ће можда неко користити ваш производ, иако нисмо сумњали у то. И онда престани. Партнер је рекао да је немогуће ући на тржиште без обавештења путем месинџера. Без много тога је могуће, али без овога не. После неке дебате, додата је интеграција са Телеграмом, што нам је одговарало. Од свих тренутних инстант мессенгера, овај једини омогућава приступ својим АПИ-јима бесплатно и без икаквих сложених процедура одобрења. Исти ВхатсАпп предлаже контактирање провајдера који наплаћују добар новац за коришћење својих услуга, сва писма која траже приступ без заптивача су занемарена. Па Вибер... Не знам ко га сада користи, јер... нежељена пошта и оглашавање тамо су ван листе. Крајем децембра, након низа интерних тестова и тестова међу пријатељима, отворена је регистрација за све и софтвер је стављен на располагање за преузимање.

Почетак дистрибуције

Од самог почетка смо схватили да нам је потребан мали проток корисника система како би могли да тестирају производ у борбеном режиму и дају прве повратне информације. Неколико купљених постова на ВК уродило је плодом. Стигле су прве регистрације.

Овде се мора рећи да је улазак на тржиште када ваша компанија нема познато име, а истовремено пружање функционалности праћења без агента у коју треба да унесете налоге са својих сервера и радних станица, веома тежак. Ово плаши многе људе. Схватили смо од самог почетка да ће са тим бити проблема и били смо спремни за то и технички и морално. Све удаљене везе, упркос чињеници да су РДП и ССХ већ подразумевано шифровани, додатно шифрује наш софтвер користећи АЕС стандард. Сви подаци са локалних сервера се преносе у облак преко ХТТПС-а. Налози се чувају у шифрованом облику. Кључеви за шифровање за све подсистеме су индивидуални за све клијенте. За удаљене везе се углавном користе кључеви за шифровање сесије.

Све што можемо да урадимо у овој ситуацији да се људи осећају мирније је да будемо што је могуће отворенији, радимо на безбедности и да се никада не уморимо од одговарања на питања људи.

За многе, погодност и функционалност софтвера надмашују страх и они се региструју. Неки појединци су у објављеним објавама на ВК написали да се овај софтвер не може користити јер Ово је збирка њихових лозинки и генерално компанија без имена. Мора се рећи да је више од једне особе имало овакво мишљење. Многи људи једноставно не разумеју да када инсталирају други власнички софтвер на сервер који ради као услуга, он такође има пуна права у систему и да им не требају налози да би урадили нешто незаконито (јасно је да можете променити корисник од кога се сервис покреће, али и овде можете да унесете било који налог). У ствари, страхови људи су разумљиви. Инсталирање софтвера на сервер је уобичајена ствар, али улазак у налог је мало застрашујући и интимни, пошто добра половина људи има исту лозинку за све сервисе, а креирање посебног налога чак и за тест је лењо. Али у овом тренутку постоји огроман број услуга којима људи верују својим акредитивима и још много тога. И ми се трудимо да постанемо један од њих.

Било је много коментара који су говорили да смо то негде украли. Ово нас је мало изненадило. Па добро, мишљење једне особе, али такви коментари су пронађени у разним публикацијама од различитих људи. У почетку нису знали како да реагују на ово. Или да буду тужни што неки људи мисле да у Русији нико ништа не може сам, већ само да краде, или да се радују што мисле да се ово може само украсти.

Сада смо завршили процедуру за добијање сертификата за ЕВ код знак. Да бисте га добили, потребно је да прођете низ провера и пошаљете гомилу докумената о компанији, од којих неке морају бити оверене од стране адвоката. Добијање сертификата ЕВ Цоде Сигн током пандемије је посебна тема за чланак. Процедура је трајала месец дана. И није то био месец чекања, већ сталних захтева за додатним документима. Можда пандемија није имала никакве везе са тим, а процедура је свима трајала толико дуго? Објави.

Неки кажу да га нећемо користити јер не постоји ФСТЕЦ сертификат. Морамо да објаснимо да га не можемо добити и нећемо јер да бисмо добили овај сертификат, шифровање мора бити у складу са ГОСТ-ом, а планирамо да дистрибуирамо софтвер не само у Русији и користимо АЕС.

Сви ови коментари бацају извесну сумњу да је могуће промовисати производ који захтева да уђете у налог а да нисте јавно познати. Иако смо знали да ће бити и оних који имају веома негативан став према овоме. Након што је број регистрација прешао хиљаду, престали смо да размишљамо о томе. Нарочито након што су, поред негативности оних који нису ни пробали производ, почеле да се појављују веома пријатне критике. Мора се рећи да су ове позитивне критике највећи мотиватор за развој производа.

Додавање функционалности даљинског приступа за запослене

Један од честих задатака клијената је „да Вањи приступи његовом рачунару од куће“. Подигли смо ВПН на Микротику и креирали налоге за кориснике. Али ово је прави проблем. Корисници нису у могућности да гледају упутства и прате их корак по корак да би се повезали преко ВПН-а. Различите верзије Виндовс-а. У једном Виндовс-у се све добро повезује, у другом је потребан другачији протокол. И генерално, ово је увек било повезано са реконфигурацијом мрежне опреме, која је деловала као ВПН сервер, а немају сви запослени приступ и то је било незгодно.

Али већ имамо удаљене везе са серверима и мрежном опремом. Зашто не користите готов транспорт и направите посебан мали услужни програм који једноставно можете дати кориснику да се повеже. Само сам хтео да се уверим да корисник ту није унео ништа нејасно. Само једно дугме „повежи“. Али како ће овај услужни програм разумети где да се повеже ако има само једно дугме? Постојала је идеја да се потребна апликација направи онлајн на нашим серверима. Администратор система кликне на дугме „пречицу за преузимање“, а команда се шаље нашем облаку да направи индивидуалну бинарну датотеку са ожиченим информацијама за повезивање на жељени сервер/рачунар преко РДП-а. Генерално, ово би се могло урадити. Али ово траје дуго, администратор би прво морао да сачека док се бинарни фајл не компајлира, а затим преузме. Наравно, било би могуће једноставно додати другу датотеку са конфигурацијом, али ово су већ 2 датотеке, а кориснику је за једноставност потребна једна. Једна датотека, једно дугме и без инсталатора. Након што сам мало прочитао на Гуглу, дошао сам до закључка да ако додате неке информације на крај састављеног „.еке“, онда се он не погоршава (па, скоро). Ту можете бар додати рат и мир, па ће радити као и до сада. Био би грех не искористити ово. Сада можете једноставно да распакујете апликацију у покрету директно у самом клијенту, иначе се зове Велиам Цоннецтор, и једноставно додате информације неопходне за повезивање на крај. И сама апликација зна шта да ради са њом. Зашто сам мало више написао „па скоро“ у загради? Зато што морате да платите за ову погодност јер апликација губи свој дигитални потпис. Али у овој фази, верујемо да је ово мала цена за такву погодност.

Лиценце за модул треће стране

Већ сам писао изнад да смо након што је одлучено да производ учинимо јавно доступним, а не само за сопствену употребу, морали да се потрудимо и тражимо замене за неке модуле који себи нису дозволили да буду укључени у наш производ. Али након пуштања, случајно је откривена веома непријатна ствар. Велиам Сервер, који је био на страни клијента, укључивао је МариаДБ ДБМС. И има ГПЛ лиценцу. ГПЛ лиценца подразумева да софтвер мора бити отвореног кода, а ако наш производ укључује МариаДБ, који има ову лиценцу, онда наш производ мора бити под овом лиценцом. Али, на срећу, сврха ове лиценце је отворени извор, а не кажњавање оних који случајно направе грешке на суду. Ако носилац ауторског права има приговор, писмено обавештава прекршиоца и он је дужан да отклони повреду у року од 30 дана. Сами смо открили нашу грешку и нисмо добили никаква писма и одмах смо почели да разматрамо опције како да решимо проблем. Решење се показало очигледним - пређите на СКЛите. Ова база података нема ограничења лиценцирања. Већина модерних претраживача користи СКЛите и гомилу других програма. На интернету сам нашао информацију да се СКЛите сматра најраспрострањенијим ДБМС-ом на свету, управо због претраживача, али нисам тражио доказ, тако да је ово нетачан податак. Почео сам да проучавам опасности преласка на СКЛите.

Ово постаје нетривијалан задатак када клијенти имају инсталирано неколико стотина сервера са МариаДБ-ом и подацима у њему. Неке МариаДБ функције нису доступне у СКЛите-у. Па, на пример, у коду смо користили упите попут

Select * FROM `table` WHERE `id`>1000 FOR UPDATE

Ова конструкција не само да прави избор из табеле, већ и закључава податке реда. И још неколико дизајна је такође морало бити преписано. Али поред чињенице да смо морали да препишемо много упита, морали смо да смислимо и механизам који ће, приликом ажурирања клијентовог Велиам сервера, пренети све податке у нови ДБМС и избрисати стари. Такође, трансакције у СКЛите-у нису функционисале и ово је био прави проблем. Али након што сам прочитао пространство Ворлд Виде Веб-а, без икаквих проблема сам открио да се трансакције у СКЛите-у могу омогућити прослеђивањем једноставне команде приликом повезивања

PRAGMA journal_mode=WAL;

Као резултат тога, задатак је завршен и сада клијентов серверски део ради на СКЛите-у. Нисмо приметили никакве промене у раду система.

Нови ХелпДеск

Било је потребно пренети ХелпДеск систем са интерне верзије на СааС верзију, али уз неке измене. Прво што сам желео да урадим је интеграција са доменом клијента у смислу транспарентне ауторизације корисника у систему. Сада, да би се пријавио на ХелпДеск и оставио захтев у систему, корисник једноставно кликне на пречицу на радној површини и отвара се претраживач. Корисник не уноси никакве акредитиве. Модул за Апацхе ССПИ, који је део Велиам сервера, аутоматски овлашћује корисника под налогом домена. Да би оставио захтев у систему када је корисник ван корпоративне мреже, он кликне на дугме и у своју е-пошту добија линк преко којег се пријављује у ХелпДеск систем без лозинке. Ако је корисник онемогућен или избрисан у домену, онда ће налог за помоћ такође престати да ради. Дакле, администратор система не мора да надгледа налоге у домену и сам ХелпДеск. Запослени да отказ - искључи свој налог у домену и то је то, неће се улоговати у систем ни са корпоративне мреже, ни преко везе. Да би ова интеграција функционисала, администратор система треба да креира један ГПО, који додаје интерну локацију у интранет зону и дистрибуира пречицу свим корисницима на радној површини.

Друга ствар коју сматрамо изузетно неопходном за ХелпДеск системе, бар за нас саме, јесте повезивање са подносиоцем захтева директно из апликације једним кликом. Штавише, везе морају проћи ако је администратор система на другој мрежи. За оутсоурцинг ово је обавезно, за систем администраторе са пуним радним временом је такође често веома неопходно. Већ постоји неколико производа који одлично раде на даљинском повезивању. И одлучили смо да направимо интеграције за њих. Сада смо интегрисали ВНЦ, ау будућности планирамо да додамо Радмин и ТеамВиевер. Користећи наш мрежни транспорт за удаљене инфраструктурне везе, натерали смо ВНЦ да се повеже са удаљеним радним станицама иза НАТ-а. Исто ће бити и са Радмином. Сада, да бисте се повезали са корисником, само треба да кликнете на дугме „повежи се са апликантом“ у самој апликацији. ВНЦ клијент се отвара и повезује са апликантом, без обзира да ли сте на истој мрежи или седите код куће у папучама. Прво, администратор система, користећи ГПО, мора да инсталира ВНЦ сервер на свачијим радним станицама.

Сада и сами прелазимо на нови ХелпДеск и користимо интеграцију са доменом и ВНЦ. Ово је веома згодно за нас. Сада можемо да избегнемо плаћање за ТеамВиевер, који користимо више од три године за покретање наше услуге подршке.

Шта планирамо даље?

Када смо пустили производ, нисмо направили никакве плаћене тарифе, већ смо једноставно ограничили бесплатну тарифу на 50 објеката за праћење. Пет десетина мрежних уређаја и сервера требало би да буде довољно за све, помислили смо. А онда су почели да стижу захтеви за повећање лимита. Рећи да смо били мало шокирани значи не рећи ништа. Да ли су компаније које имају толико сервера заиста заинтересоване за наш софтвер? Бесплатно смо проширили ограничење за оне који су поднели такве захтеве. У одговору на њихов захтев, питали смо неке зашто им је толико потребно, да ли заиста имају толики број сервера и мрежне опреме. И испоставило се да су системски администратори почели да користе систем на начине које уопште нисмо планирали. Испоставило се да је све једноставно - наш софтвер је почео да прати не само сервере, већ и радне станице. Отуда има много захтева за проширење ограничења. Сада смо већ увели плаћене тарифе и границе се могу самостално проширити.

Сервери скоро увек раде или са системима за складиштење података или са локалним дисковима у РАИД низу. И ми смо у почетку направили производ за њих. А СМАРТ мониторинг није био занимљив за овај задатак. Али имајући у виду чињеницу да су људи прилагодили софтвер за праћење радних станица, појавили су се захтеви за имплементацију СМАРТ мониторинга. Ускоро ћемо то спровести.

Са појавом Велиам Цоннецтор-а, постало је непотребно постављати ВПН сервер у корпоративну мрежу, или радити РДГВ, или једноставно прослеђивати портове потребним машинама за повезивање преко РДП-а. Многи људи користе наш систем само за ове удаљене везе. Велиам Цоннецтор је доступан само за Виндовс, а неки корисници компаније се повезују са кућних лаптопова који користе МацОС на радне станице или терминале на корпоративној мрежи. И испоставило се да је администратор система принуђен, због неколико корисника, да се ипак врати питању прослеђивања или ВПН-а. Стога сада завршавамо израду верзије Велиам Цоннецтор-а за МацОС. Корисници своје омиљене Аппле технологије такође ће имати прилику да се једним кликом повежу на корпоративну инфраструктуру.

Заиста ми се свиђа чињеница да, са великим бројем корисника система, не морате да се мучите шта је људима потребно и шта ће бити згодније. Они сами пишу своје жеље, тако да има пуно развојних планова за блиску будућност.

Паралелно са тим, сада планирамо да почнемо да преводимо систем на енглески и да га дистрибуирамо у иностранству. Још не знамо како ћемо дистрибуирати производ ван наше земље, тражимо опције. Можда ће касније бити посебан чланак о томе. Можда ће неко ко је прочитао овај чланак моћи да предложи тражени вектор, или он сам зна и уме да то уради и понудиће своје услуге. Ценили бисмо вашу помоћ.

Извор: ввв.хабр.цом