Проверавамо на себи: како се 1Ц примењује и како се њиме управља: ​​Ток докумената унутар 1Ц компаније

У 1Ц, ми нашироко користимо сопствени развој за организацију рада компаније. Нарочито, "1Ц: Ток докумената 8". Поред управљања документима (као што и само име говори), то је и модерно ЕЦМ-систем (Ентерприсе Цонтент Манагемент - управљање корпоративним садржајем) са широким спектром функционалности - пошта, радни календари запослених, организовање заједничког приступа ресурсима (на пример, резервација сала за састанке), праћење времена, корпоративни форум и још много тога.

Више од хиљаду запослених користи управљање документима у 1Ц. База података је већ постала импресивна (11 милијарди записа), што значи да захтева пажљивију негу и моћнију опрему.

Како функционише наш систем, на које потешкоће наилазимо при одржавању базе података и како их решавамо (користимо МС СКЛ Сервер као ДБМС) - рећи ћемо вам у чланку.

За оне који први пут читају о 1Ц производима.
1Ц:Доцумент Флов је апликативно решење (конфигурација) имплементирано на основу оквира за развој пословних апликација – платформе 1Ц:Ентерприсе.

„1Ц: Ток докумената 8“ (скраћено ДО) вам омогућава да аутоматизујете рад са документима у предузећу. Један од главних алата за интеракцију запослених је е-пошта. Поред поште, ДО решава и друге проблеме:

• Праћење времена
• Праћење одсуства запослених
• Пријаве за курире/транспорт
• Радни календари запослених
• Регистрација преписке
• Контакти запослених (адресар)
• Корпоративни форум
• Резервација собе
• Планирање догађаја
• ЦРМ
• Колективни рад са датотекама (са чувањем верзија датотека)
• итд

Улазимо у Управљање документима танки клијент (природна извршна апликација) из Виндовс, Линук, мацОС, веб клијент (из претраживача) и мобилни клијент - зависно од ситуације.

И захваљујући нашем другом производу повезаном са Током докумената - Систем интеракције – ми директно у Доцумент Флов-у добијамо функционалност месинџера – ћаскање, аудио и видео позиве (укључујући групне позиве, што је сада постало посебно важно, укључујући и са мобилног клијента), брзу размену датотека плус могућност писања ботова за ћаскање који поједностављују рад са системом. Још једна предност коришћења Интеракционог система (у поређењу са другим месинџерима) је могућност вођења контекстуалних дискусија везаних за специфичне објекте Тока докумената – документе, догађаје итд. То јест, систем интеракције је дубоко интегрисан са циљном апликацијом и не делује само као „засебно дугме“.

Број слова у нашем ДО је већ премашио 100 милиона, а генерално има више од 11 милијарди записа у ДБМС-у. Укупно, систем користи скоро 30 ТБ простора за складиштење: обим базе података је 7,5 ТБ, датотеке за колективни рад се чувају одвојено и заузимају још 21 ТБ.

Ако говоримо о конкретнијим бројевима, ево тренутног броја слова и датотека:

• Одлазних мејлова – 14,7 милиона.
• Пристигла писма – 85,4 милиона.
• Верзије датотека – 70,8 милиона.
• Интерна документа – 30,6 хиљада.

ДО има више од поште и датотека. Испод су бројке за друге рачуноводствене објекте:

• Резервација сала за састанке – 52
• Недељни извештаји – 153
• Дневни извештаји – 628
• Одобрене визе – 11
• Пристигла документа – 79
• Одлазних докумената – 28
• Уноси о догађајима у радним календарима корисника – 168
• Пријаве за курире – 21
• Уговорне стране – 81
• Евиденција о раду са уговорним странама – 45
• Контакт особе са уговорним странама – 41
• Догађаји – 10
• Пројекти – 6
• Задаци запослених – 245
• Постови на форуму – 26
• Поруке за ћаскање – 891 095
• Пословни процеси – 109 Интеракција између запослених настаје кроз процесе – одобравање, извршење, преглед, регистрација, потписивање итд. Меримо трајање процеса, број циклуса, број учесника, број повратака, број захтева за промену рокова. И ове информације су веома корисне за анализу како би се разумело који се процеси одвијају у предузећу и повећала ефикасност сарадње запослених.

На којој опреми све ово обрађујемо?

Ове бројке указују на импресиван обим задатака, тако да смо се суочили са потребом да за потребе интерних филијала издвојимо прилично продуктивну опрему. Тренутно су његове карактеристике следеће: 38 језгара, 240 ГБ РАМ-а, 26 ТБ дискова. Ево табеле сервера:


У будућности планирамо повећање капацитета опреме.

Како стоје ствари са оптерећењем сервера?

Мрежна активност никада није била проблем за нас или наше клијенте. По правилу, слаба тачка су процесор и дискови, јер сви већ знају како да се изборе са недостатком меморије. Ево снимака екрана наших сервера са Ресоурце Монитор-а, који показују да немамо никакво страшно оптерећење, веома је скромно.

На пример, на слици испод видимо СКЛ сервер где је оптерећење ЦПУ-а 23%. И ово је веома добар показатељ (за поређење: ако се оптерећење приближи 70%, онда ће, највероватније, запослени приметити прилично значајно успоравање у раду).

На другом снимку екрана је приказан сервер апликација на коме ради платформа 1Ц:Ентерприсе - он служи само сесије корисника. Овде је оптерећење процесора нешто веће - 38%, глатко је и мирно. Постоји одређено учитавање диска, али је прихватљиво.

Трећи снимак екрана приказује још један 1Ц:Ентерприсе сервер (то је други, имамо их два у кластеру). Само претходни служи корисницима, а на овом раде роботи. На пример, примају пошту, рутирају документе, размењују податке, израчунавају права итд. Све ове позадинске активности обављају отприлике 90-100 позадинских послова. И овај сервер је веома оптерећен - 88%. Али то не утиче на људе и имплементира тачно сву аутоматизацију коју би требало да уради управљање документима.

Који су показатељи за мерење учинка?

Имамо озбиљан подсистем уграђен у наше подружнице за мерење индикатора учинка и израчунавање различитих метрика. Ово је неопходно да би се разумело и у садашњем тренутку и из историјске перспективе шта се дешава у систему, шта је све горе, шта све боље. Алати за праћење - метрика и временска мерења - укључени су у стандардну испоруку "1Ц: Ток докумената 8". метрика захтева прилагођавање током имплементације, али сам механизам је стандардан.

Метрике су мерења различитих показатеља пословања у одређеним временским периодима (на пример, просечно време испоруке поште је 10 минута).

Једна од метрика показује број активних корисника у бази података. У просеку их има 1000-1400 током дана. Графикон показује да је у тренутку снимања екрана било 2144 активних корисника у бази података.

Оваквих акција има више од 30, списак је под резом.Списак

• Логин
• Одјава
• Учитавање поште
• Промена валидности објекта
• Промена права приступа
• Промена предмета процеса
• Промена радне групе објекта
• Промена састава комплета
• Промена датотеке
• Увоз датотеке
• Слање поштом
• Премештање датотека
• Преусмеравање задатка
• Потписивање електронског потписа
• Тражи по детаљима
• Претраживање целог текста
• Пријем датотеке
• Прекидање процеса
• Поглед
• Дешифровање
• Регистрација документа
• Скенирај
• Уклањање ознаке брисања
• Креирање објекта
• Чување на диск
• Почетак процеса
• Брисање уноса у дневнику корисника
• Уклањање електронског потписа
• Постављање ознаке за брисање
• Шифровање
• Извезите фасциклу

Претпрошле недеље, наша просечна активност корисника порасла је за један и по пута (на графикону је приказано црвеном бојом) – то је због преласка већине запослених на рад на даљину (због познатих догађаја). Такође, број активних корисника се повећао за 3 пута (приказано плавом бојом на снимку екрана), пошто су запослени почели да активно користе мобилне телефоне: сваки мобилни клијент ствара везу са сервером. Сада, у просеку, сваки наш запослени има 2 везе са сервером.

За нас, као администраторе, ово је сигнал да треба да будемо пажљивији према проблемима са перформансама и да видимо да ли су се ствари погоршале. Али ово посматрамо на основу других параметара. На пример, како се мења време испоруке поште за интерно рутирање (приказано плавом бојом на слици испод). Видимо да је до ове године флуктуирао, али сада је стабилан – за нас је то показатељ да је све у реду са системом.

Још једна примењена метрика за нас је просечно време чекања за преузимање писама са сервера поште (приказано црвеном бојом на снимку екрана). Грубо говорећи, колико дуго ће писмо лебдети интернетом пре него што стигне до нашег запосленог. Снимак екрана показује да се ово време такође није променило ни на који начин у последње време. Постоје изоловани скокови - али они нису повезани са кашњењима, већ са чињеницом да се губи време на серверима поште.

Или, на пример, други показатељ (приказано плавом бојом на снимку екрана) – ажурирање слова у фасцикли. Отварање фасцикле за пошту је врло уобичајена операција и мора се обавити брзо. Меримо колико брзо се то изводи. Овај индикатор се мери за сваког клијента. Можете видети и укупну слику за компанију и динамику, на пример, за појединачног запосленог. Снимак екрана показује да је до ове године метрика била неуравнотежена, затим смо направили низ побољшања, а сада се не погоршава - графикон је скоро раван.

Метрике су у основи алатка администратора за надгледање система, за брзо реаговање на све промене у понашању система. Снимак екрана приказује интерне метрике подружнице за годину. Скок у графиконима је због чињенице да смо добили задатке да развијамо интерна зависна предузећа.

Ево листе још неких метрика (испод одсека).
метрике

• Активност корисника
• Активни корисници
• Активни процеси
• Број датотека
• Величина датотеке (МБ)
• Број докумената
• Број објеката који се шаљу примаоцима
• Број уговорних страна
• Недовршени задаци
• Просечно време чекања за преузимање е-поште са сервера поште у последњих 10 минута
• Екстерни бафер података: број датотека
• Граница која заостаје од тренутног датума
• Дугачак ред
• Оперативни ред
• Старост необрађеног налога екстерним рутирањем
• Величина реда за прихватање интерног рутирања (дугачак ред)
• Величина реда за прихватање интерног рутирања (брзи ред)
• Време испоруке поште путем интерног рутирања (дугачак ред)
• Време испоруке поште путем интерног рутирања (брзи ред)
• Време испоруке поште преко екстерног рутирања (просечно)
• Број докумената Резервација
• Број докумената Одсуство
• Број докумената „Евиденција о раду са другом страном“
• Маил Ажурирај писма у фасцикли
• Маил Отварање писмоносне картице
• Маил Пренесите писмо у фасциклу
• Маил Кретање кроз фасцикле

Наш систем мери више од 150 индикатора XNUMX сата дневно, али се сви не могу брзо пратити. Можда ће вам касније, у некој историјској перспективи, добро доћи, а ви се можете фокусирати на оне најважније за посао.

У једној од имплементација, на пример, одабрано је само 5 индикатора. Купац је поставио циљ да креира минималан скуп индикатора, али у исто време такав да покрива главне сценарије рада. Било би неоправдано укључити 150 индикатора у потврду о пријему, јер је чак и унутар предузећа тешко договорити који индикатори се сматрају прихватљивим. И они су знали за ових 5 индикатора и већ су их представили систему пре почетка пројекта имплементације, укључујући их у конкурсну документацију: време за отварање картице не више од 3 секунде, време за завршетак задатка са фајлом бр. више од 5 секунди итд. У нашим филијалама смо имали метрику која је веома јасно одражавала првобитни захтев из техничких спецификација купца.

Такође имамо анализу профила мерења перформанси. Индикатори учинка су запис трајања сваке операције која је у току (писање писма бази података, слање писма серверу поште итд.). Ово користе искључиво техничари. У нашем програму акумулирамо много индикатора учинка. Тренутно меримо око 1500 кључних операција које су подељене у профиле.

Један од најважнијих профила за нас је „Листа кључних индикатора поште из перспективе потрошача“. Овај профил укључује, на пример, следеће индикаторе:

• Извршавање команде: Одабери по ознаци
• Отварање обрасца: Образац листе
• Извршавање команде: Изаберите по фолдеру
• Приказивање слова у области за читање
• Чување писма у вашој омиљеној фасцикли
• Тражи слова по детаљима
• Креирање писма

Ако видимо да је метрика за неки пословни индикатор постала превелика (на пример, писма од одређеног корисника су почела да стижу већ дуже време), почињемо да то схватамо и прелазимо на мерење времена техничких операција. Имамо техничку операцију „Архивирање писама на серверу поште“ - видимо да је време за ову операцију премашено за последњи период. Ова операција се, заузврат, разлаже на друге операције - на пример, успостављање везе са сервером поште. Видимо да је из неког разлога одједном постала веома велика (имамо сва мерења за месец дана - можемо упоредити да је прошле недеље било 10 милисекунди, а сада је 1000 милисекунди). И разумемо да је овде нешто покварено - то треба да поправимо.

Како да одржавамо тако велику базу података?

Наш интерни ДО је пример заиста функционалног пројекта високог оптерећења. Хајде да причамо о техничким карактеристикама његове базе података.

Колико времена је потребно за реструктурирање великих табела базе података?

СКЛ сервер захтева периодично одржавање, доводећи табеле у ред. На добар начин, ово би требало да се ради бар једном дневно, а још чешће за столове велике потражње. Али ако је база података велика (а наш број записа је већ премашио 11 милијарди), онда брига о њој није лака.

Урадили смо реструктурирање стола пре 6 година, али је тада почело да траје толико времена да се више не уклапамо у ноћне интервале. А пошто ове операције јако оптерећују СКЛ сервер, он не може ефикасно да служи другим корисницима.

Стога, сада морамо да користимо разне трикове. На пример, не можемо да извршимо ове процедуре на комплетним скуповима података. Морате да прибегнете процедури ажурирања узорка 500000 редова - ово траје 14 минута. Не ажурира статистику о свим подацима у табели, већ бира пола милиона редова и користи их за израчунавање статистике које користи за целу табелу. Ово је нека претпоставка, али смо принуђени да то учинимо, јер ће за конкретну табелу прикупљање статистике о читавој милијарду записа трајати недопустиво дуго.

Такође смо оптимизовали друге операције одржавања тако што смо их учинили делимичним.

Одржавање ДБМС-а је генерално тежак задатак. У случају активне интеракције између запослених, база података расте брзо, а администраторима постаје све теже да је одржавају – ажурирање статистике, дефрагментацију, индексирање. Овде треба применити различите стратегије, добро знамо како се то ради, имамо искуство, можемо га поделити.

Како се резервна копија имплементира са таквим волуменима?

Потпуна резервна копија ДБМС-а се врши једном дневно ноћу, а инкрементална – сваких сат времена. Такође, директоријум датотека се креира сваки дан, и то је део инкременталне резервне копије складишта датотека.

Колико времена је потребно да се заврши потпуна резервна копија?

Потпуна резервна копија на чврстом диску је завршена за три сата, а делимична за сат. Записивање на траку траје дуже (посебан уређај који прави резервну копију на специјалну касету која се чува ван канцеларије; преносива копија се прави на траку, која ће бити сачувана ако, на пример, изгори сервер соба). Резервна копија се прави на потпуно истом серверу, чији су параметри били виши - СКЛ сервер са 20% оптерећења процесора. У време прављења резервне копије, наравно, систем постаје много лошији, али је и даље функционалан.

Постоји ли дедупликација?

Дедупликација Постоје датотеке, тестираћемо их на себи, а ускоро ће бити укључене у нову верзију управљања документима. Такође тестирамо механизам дедупликације друге стране. Не постоји дедупликација записа на нивоу ДБМС, јер то није неопходно. Платформа 1Ц:Ентерприсе складишти објекте у ДБМС и само платформа може бити одговорна за њихову доследност.

Да ли постоје чворови само за читање?

Не постоје чворови за читање (намјенски системски чворови који служе онима који требају да приме било какве податке за читање). ДО није рачуноводствени систем који треба ставити на посебан БИ чвор, али постоји посебан чвор за развојно одељење, са којим се поруке размењују у ЈСОН формату, а типично време репликације је јединице и десетине секунди. Чвор је и даље мали, има око 800 милиона записа, али брзо расте.

Да ли се мејлови означени за брисање уопште не бришу?

Још није. Немамо задатак да подлогу учинимо лакшом. Било је неколико прилично озбиљних случајева када је било потребно позвати се на писма означена за брисање, укључујући и 2009. годину. Зато смо одлучили да за сада све задржимо. Али када трошак овога постане неоправдан, размислићемо о уклањању. Али, ако морате потпуно уклонити засебно писмо из базе података тако да нема трагова, онда се то може учинити посебним захтевом.

Зашто га чувати? Да ли имате статистику приступа старим документима?

Нема статистике. Тачније, у облику је корисничког дневника, али се не чува дуго. Уноси старији од годину дана бришу се из протокола.

Било је ситуација када је било потребно повратити стару преписку од пре пет или чак десет година. И то се увек радило не из празне радозналости, већ ради доношења сложених пословних одлука. Постојао је случај када би, без историје преписке, донета погрешна пословна одлука.

Како се процењује и уништава вредност докумената према роковима складиштења?

За папирна документа то се ради на уобичајени традиционални начин, као и сви остали. Не радимо то за електронске – нека их задрже за себе. Седиште је овде. Има користи. Сви су добро.

Какви су изгледи за развој?

Сада наш ДО решава око 30 унутрашњих проблема, од којих смо неке навели на почетку чланка. ДЛ служи и за припрему конференција које одржавамо два пута годишње за наше партнере: цео програм, сви извештаји, све паралелне секције, сале – све се то откуцава у ДЛ, а затим преузима са њега и штампа програм је направљен.

За ДО је на путу још неколико задатака, поред оних које већ решава. Постоје задаци за целу компанију, а постоје јединствени и ретки, потребни само одређеном одељењу. Неопходно је помоћи им, што значи проширити „географију“ коришћења система у оквиру 1Ц - проширити обим примене, решити проблеме свих одељења. Ово би био најбољи тест за перформансе и поузданост. Волео бих да систем ради на трилионима записа, петабајта информација.

Извор: ввв.хабр.цом