Рушди саноатии системаҳои нармафзор таваҷҷӯҳи зиёдро ба таҳаммулпазирии хатогиҳои маҳсулоти ниҳоӣ, инчунин вокуниши зуд ба нокомиҳо ва нокомиҳо дар сурати рух додани онҳо талаб мекунад. Мониторинг, албатта, кӯмак мекунад, ки ба нокомиҳо ва нокомиҳо зудтар ва зудтар ҷавоб дода шавад, аммо кофӣ нест. Аввалан, пайгирӣ кардани шумораи зиёди серверҳо хеле душвор аст - шумораи зиёди одамон лозиманд. Дуюм, шумо бояд фаҳмиши хубе дошта бошед, ки барнома чӣ гуна кор мекунад, то ҳолати онро пешгӯӣ кунед. Аз ин рӯ, ба мо бисёр одамон лозиманд, ки дар бораи системаҳое, ки мо таҳия карда истодаем, кор ва хусусиятҳои онҳоро хуб фаҳманд. Фарз мекунем, ки ҳатто агар шумо одамони кофӣ пайдо кунед, ки ба ин кор омодаанд, барои таълим додани онҳо вақти зиёд лозим аст.
Чӣ бояд кард? Дар ин ҷо зеҳни сунъӣ ба кӯмаки мо меояд. Дар мақола сухан меравад (нигоҳдории пешгӯишаванда). Ин усул фаъолона маъруфият пайдо мекунад. Шумораи зиёди мақолаҳо навишта шудаанд, аз ҷумла дар бораи Habre. Ширкатҳои калон ин равишро барои нигоҳ доштани кори серверҳои худ пурра истифода мебаранд. Пас аз омӯзиши шумораи зиёди мақолаҳо, мо тасмим гирифтем, ки ин усулро санҷем. Аз он чӣ омад?
Муқаддима
Системаи нармафзори таҳияшуда дер ё зуд ба кор медарояд. Барои корбар муҳим аст, ки система бе хато кор кунад. Агар ҳолати фавқулодда рӯй диҳад, он бояд бо таъхири ҳадди аққал ҳал карда шавад.
Барои содда кардани дастгирии техникии системаи нармафзор, хусусан агар серверҳои зиёд вуҷуд дошта бошанд, одатан барномаҳои назоратӣ истифода мешаванд, ки аз системаи нармафзори амалкунанда ченакҳоро гирифта, ташхиси ҳолати онро имконпазир мегардонанд ва дар муайян кардани он, ки маҳз сабаби нокомӣ чист. Ин раванд мониторинги системаи нармафзор номида мешавад.
Тасвири 1. Интерфейси мониторинги Grafana
Метрикҳо нишондиҳандаҳои гуногуни системаи нармафзор, муҳити иҷрои он ё компютери физикӣ мебошанд, ки дар он система бо тамғаи лаҳзаи қабули ченакҳо кор мекунад. Дар таҳлили статикӣ ин нишондиҳандаҳо силсилаи вақт номида мешаванд. Барои назорати ҳолати системаи нармафзор, ченакҳо дар шакли графикҳо нишон дода мешаванд: вақт дар меҳвари X ва арзишҳо дар меҳвари Y ҷойгиранд (расми 1). Якчанд ҳазор метрикаро аз системаи нармафзори коркунанда (аз ҳар як гиреҳ) гирифтан мумкин аст. Онҳо фазои метрикаро ташкил медиҳанд (қаторҳои бисёрченака).
Азбаски миқдори зиёди ченакҳо барои системаҳои мураккаби нармафзор ҷамъоварӣ карда мешаванд, мониторинги дастӣ кори душвор мегардад. Барои кам кардани миқдори маълумоте, ки аз ҷониби мудир таҳлил карда мешавад, воситаҳои мониторинг дорои асбобҳое мебошанд, ки ба таври худкор мушкилоти эҳтимолиро муайян мекунанд. Масалан, шумо метавонед триггерро барои оташгиранда танзим кунед, вақте ки фазои озоди диск аз ҳадди муайян поёнтар аст. Шумо инчунин метавонед ба таври худкор қатъ шудани сервер ё сустшавии шадиди суръати хидматро ташхис кунед. Дар амал, воситаҳои мониторинг кори хуберо барои ошкор кардани нокомиҳо, ки аллакай рух дода буданд ё муайян кардани аломатҳои оддии нокомиҳои оянда иҷро мекунанд, аммо дар маҷмӯъ, пешгӯии нокомии эҳтимолӣ як чормағзи душвор барои шикастани онҳо боқӣ мемонад. Пешгӯӣ тавассути таҳлили дастӣ метрика ҷалби мутахассисони соҳибихтисос талаб мекунад. Хосилнокии он паст аст. Аксари нокомиҳои эҳтимолӣ метавонанд нодида гирифта шаванд.
Ба наздикӣ, хидматрасонии ба истилоҳ пешгӯии системаҳои нармафзор дар байни ширкатҳои бузурги таҳияи нармафзори IT маъмул гаштааст. Моҳияти ин бархӯрд аз он иборат аст, ки бо истифода аз зеҳни сунъӣ мушкилотеро, ки ба таназзули система оварда мерасонанд, дар марҳилаҳои аввал, пеш аз он ки он ноком шавад, пайдо кунад. Ин равиш назорати дастии системаро комилан истисно намекунад. Он ба раванди мониторинг дар маҷмӯъ ёрирасон аст.
Воситаи асосии татбиқи нигоҳдории пешгӯишаванда вазифаи ҷустуҷӯи аномалияҳо дар силсилаи вақт мебошад, зеро вақте ки аномалия ба амал меояд дар маълумот эҳтимолияти зиёд вуҷуд дорад, ки пас аз чанд вақт нокомй ё нокомй мешавад. Аномалия ин тафовути муайян дар кори системаи нармафзор аст, ба монанди муайян кардани таназзули суръати иҷрои як намуди дархост ё кам шудани шумораи миёнаи дархостҳои хидматрасонӣ дар сатҳи доимии ҷаласаҳои муштарӣ.
Вазифаи чустучуи аномалияхо барои системахои нармафзор хусусияти хоси худро дорад. Дар назария, барои ҳар як системаи нармафзор усулҳои мавҷударо таҳия ё такмил додан лозим аст, зеро ҷустуҷӯи аномалия аз маълумоте, ки дар он иҷро карда мешавад, вобаста аст ва маълумоти системаҳои нармафзор вобаста ба асбобҳои татбиқи система хеле фарқ мекунанд. , то дар кадом компютер кор мекунад.
Усулҳои ҷустуҷӯи аномалияҳо ҳангоми пешгӯии нокомии системаҳои нармафзор
Пеш аз ҳама, бояд гуфт, ки идеяи пешгӯии нокомиҳо аз мақола илҳом гирифта шудааст . Барои санҷидани самаранокии равиш бо ҷустуҷӯи автоматии аномалияҳо системаи нармафзори Web-Consolidation интихоб карда шуд, ки он яке аз лоиҳаҳои ширкати NPO Krista мебошад. Пештар барои он дар асоси ченакҳои гирифташуда мониторинги дастӣ сурат мегирифт. Азбаски система хеле мураккаб аст, барои он миқдори зиёди ченакҳо гирифта мешаванд: нишондиҳандаҳои JVM (бори коллекторҳои партов), нишондиҳандаҳои ОС, ки дар он код иҷро карда мешавад (хотираи виртуалӣ, % сарбории CPU OS), нишондиҳандаҳои шабака (сарбории шабака). ), худи сервер (боркунии CPU, хотира), ченакҳои wildfly ва ченакҳои худи барнома барои ҳамаи зерсистемаҳои муҳим.
Ҳама ченакҳо аз система бо истифода аз графит гирифта мешаванд. Дар аввал, пойгоҳи додаҳои пичиррос ҳамчун як ҳалли стандартӣ барои графана истифода мешуд, аммо бо зиёд шудани пойгоҳи муштарӣ, графит қобилияти зерсистемаи диски DC-ро тамом карда натавонист. Пас аз ин тасмим гирифта шуд, ки роҳи ҳалли самараноктар пайдо шавад. Интихоб ба нафъи он сурат гирифт , ки ин имкон дод, ки сарбории зерсистемаи диск бо тартиби калон кам карда, фазои ишголшудаи диск аз 2 то шаш маротиба кам карда шавад. Дар зер диаграммаи механизми ҷамъоварии ченакҳо бо истифода аз graphite+clickhouse оварда шудааст (Расми XNUMX).
Расми 2. Нақшаи ҷамъоварии метрика
Диаграмма аз ҳуҷҷатҳои дохилӣ гирифта шудааст. Он иртиботи байни графана (UI мониторинги мо истифода мебарад) ва графитро нишон медиҳад. Хориҷ кардани нишондиҳандаҳо аз барнома тавассути нармафзори алоҳида анҷом дода мешавад - . Ӯ онҳоро дар графит мегузорад.
Системаи Web Consolidation як қатор хусусиятҳоро дорад, ки барои пешгӯии нокомиҳо мушкилот эҷод мекунанд:
- Тамоюл аксар вақт тағир меёбад. Барои ин системаи нармафзор версияҳои гуногун мавҷуданд. Ҳар яки онҳо ба қисми нармафзори система тағйирот ворид мекунанд. Ҳамин тариқ, таҳиягарон мустақиман ба ченакҳои системаи додашуда таъсир мерасонанд ва метавонанд тағирёбии тамоюлро ба вуҷуд оранд;
- хусусияти татбиқ, инчунин мақсадҳое, ки муштариён ин системаро истифода мебаранд, аксар вақт бе таназзули қаблӣ аномалияҳоро ба вуҷуд меоранд;
- фоизи аномалия нисбат ба тамоми маҷмӯи маълумот хурд аст (<5%);
- Дар кабули нишондихандахо аз система камбудихо мавчуданд. Дар баъзе муддатҳои кӯтоҳ, системаи мониторинг ченакҳоро гирифта наметавонад. Масалан, агар сервер аз ҳад зиёд бор карда шавад. Ин барои омӯзиши шабакаи нейрон муҳим аст. Зарур аст, ки холигоҳҳоро ба таври синтетикӣ пур кунед;
- Ҳодисаҳои дорои аномалия аксар вақт танҳо барои сана/моҳ/вақти мушаххас (мавсимӣ) алоқаманданд. Ин система дорои қоидаҳои равшани истифодаи он аз ҷониби корбарон мебошад. Мувофиқи он, нишондиҳандаҳо танҳо барои вақти муайян мувофиқанд. Системаро доимо истифода бурдан мумкин нест, балки дар баъзе моххо: ба таври интихобй вобаста ба сол. Вазъиятҳое ба миён меоянд, ки ҳамон як рафтори ченакҳо дар як ҳолат метавонад ба нокомии системаи нармафзор оварда расонад, аммо дар дигараш не.
Барои оғоз, усулҳои ошкор кардани аномалияҳо дар мониторинги маълумоти системаҳои нармафзор таҳлил карда шуданд. Дар мақолаҳо дар ин мавзӯъ, вақте ки фоизи аномалияҳо нисбат ба боқимондаи маҷмӯи маълумот хурд аст, аксар вақт истифодаи шабакаҳои нейронӣ пешниҳод карда мешавад.
Мантиқи асосии ҷустуҷӯи аномалияҳо бо истифода аз маълумоти шабакаи нейронӣ дар расми 3 нишон дода шудааст:
Расми 3. Ҷустуҷӯи аномалияҳо бо истифода аз шабакаи нейрон
Дар асоси натиҷаи пешгӯӣ ё барқароркунии равзанаи ҷараёни ҷорӣи метрика, инҳироф аз он чизе, ки аз системаи нармафзори амалкунанда гирифта шудааст, ҳисоб карда мешавад. Агар байни ченакҳое, ки аз системаи нармафзор ва шабакаи нейронӣ гирифта шудаанд, фарқияти калон вуҷуд дошта бошад, мо метавонем хулоса барорем, ки сегменти ҳозираи додаҳо аномалист. Барои истифодаи шабакаҳои нейрон силсилаи мушкилоти зерин ба миён меоянд:
- барои дуруст кор кардан дар реҷаи ҷараён, маълумот барои омӯзиши моделҳои шабакаи нейронӣ бояд танҳо маълумоти "муқаррарӣ" дошта бошад;
- барои дуруст ошкор кардан модели замонавй доштан лозим аст. Тағйир додани тамоюлҳо ва мавсимӣ дар метрика метавонад боиси шумораи зиёди мусбатҳои бардурӯғ дар модел гардад. Барои нав кардани он, вақти кӯҳна шудани моделро дақиқ муайян кардан лозим аст. Агар шумо моделро дертар ё пештар навсозӣ кунед, пас эҳтимоли зиёд шумораи зиёди мусбатҳои бардурӯғ пайдо мешаванд.
Мо инчунин набояд дар бораи ҷустуҷӯ ва пешгирии зуд-зуд пайдо шудани мусбатҳои бардурӯғ фаромӯш кунем. Тахмин меравад, ки онҳо бештар дар ҳолатҳои фавқулодда рух медиҳанд. Аммо, онҳо инчунин метавонанд натиҷаи хатогии шабакаи нейронӣ аз сабаби омӯзиши нокифоя бошанд. Шумораи мусбатҳои бардурӯғи моделро кам кардан лозим аст. Дар акси ҳол, пешгӯиҳои бардурӯғ вақти зиёди маъмурро, ки барои тафтиши система пешбинӣ шудаанд, беҳуда сарф мекунанд. Дер ё зуд администратор танҳо посух додан ба системаи мониторинги "параноид" -ро қатъ мекунад.
Шабакаи нейронии такрорӣ
Барои ошкор кардани аномалияҳо дар силсилаи вақт, шумо метавонед истифода баред бо хотираи LSTM. Ягона мушкилот дар он аст, ки он метавонад танҳо барои силсилаи пешгӯии вақт истифода шавад. Дар ҳолати мо, на ҳама нишондиҳандаҳоро пешгӯӣ кардан мумкин аст. Кӯшиши татбиқи RNN LSTM ба силсилаи вақт дар расми 4 нишон дода шудааст.
Расми 4. Намунаи шабакаи нейронҳои такрорӣ бо ҳуҷайраҳои хотираи LSTM
Тавре ки аз расми 4 дида мешавад, RNN LSTM тавонист дар ин давра бо ҷустуҷӯи аномалияҳо мубориза барад. Дар он ҷое, ки натиҷа дорои хатогии баланди пешгӯӣ (хатои миёна) аст, аномалия дар нишондиҳандаҳо воқеан рух додааст. Истифодаи як RNN LSTM бешубҳа кифоя нахоҳад буд, зеро он ба миқдори ками ченакҳо татбиқ мешавад. Онро ҳамчун усули ёрирасон барои ҷустуҷӯи аномалия истифода бурдан мумкин аст.
Автокодер барои пешгӯии ноком
- аслан як шабакаи нейронҳои сунъӣ. Қабати вуруд рамзгузор, қабати баромад декодер аст. Камбудии ҳамаи шабакаҳои нейронии ин намуд дар он аст, ки онҳо аномалияҳоро хуб локализатсия намекунанд. Меъмории автоматии синхронӣ интихоб карда шуд.
Расми 5. Намунаи амалиёти автоматӣ
Автокодерҳо дар бораи маълумоти муқаррарӣ омӯзонида мешаванд ва сипас дар маълумоти ба модел додашуда чизи аномалӣ пайдо мекунанд. Танҳо он чизе ки ба шумо барои ин вазифа лозим аст. Танҳо он чизе, ки боқимонда аст, интихоби автоматикодер барои ин вазифа мувофиқ аст. Соддатарин шакли меъмории автоматӣ шабакаи нейронии пешбарнашаванда мебошад, ки ба он хеле монанд аст. (перцептрони чандқабата, MLP), бо қабати воридотӣ, қабати баромад ва як ё якчанд қабатҳои пинҳон, ки онҳоро мепайвандад.
Аммо, фарқияти байни автоинкодерҳо ва MLPҳо дар он аст, ки дар автоинкодер қабати баромад ҳамон шумораи гиреҳҳо бо қабати воридотӣ дорад ва ба ҷои он ки барои пешгӯии арзиши ҳадафи Y аз ҷониби вуруди X додашуда таълим дода шавад, автоинкодер омӯзонида мешавад. барои аз нав сохтани X-и худ. Аз ин рӯ, Автокодерҳо моделҳои омӯзишии беназорат мебошанд.
Вазифаи автоинкодер аз пайдо кардани индексҳои вақт r0 ... rn ба унсурҳои аномалии вектори вуруди X мебошад. Ин таъсир тавассути ҷустуҷӯи хатои квадратӣ ба даст меояд.
Расми 6. Автокодери синхронӣ
Барои autoencoder интихоб карда шуд . Афзалиятҳои он: қобилияти истифодаи реҷаи коркарди ҷараён ва шумораи нисбатан камтари параметрҳои шабакаи нейронӣ дар муқоиса бо дигар меъморӣ.
Механизм барои кам кардани мусбатҳои бардурӯғ
Аз сабаби он, ки ҳолатҳои гуногуни ғайримуқаррарӣ ба вуҷуд меоянд, инчунин вазъияти эҳтимолии омодагии нокифояи шабакаи нейрон, барои модели кашфи аномалия таҳия карда мешавад, зарур аст, ки механизми кам кардани мусбатҳои бардурӯғ таҳия карда шавад. Ин механизм ба пойгоҳи шаблон асос ёфтааст, ки аз ҷониби маъмур тасниф шудааст.
(Алгоритм DTW, аз забони англисӣ dynamic time warping) ба шумо имкон медиҳад, ки мувофиқати оптималии байни пайдарпайии вақтро пайдо кунед. Бори аввал дар шинохти нутқ истифода мешавад: барои муайян кардани он, ки чӣ гуна ду сигнали нутқ як ибораи аслии гуфтугӯиро ифода мекунад, истифода мешавад. Баъдан, барои он дар дигар соҳаҳо дархост пайдо шуд.
Принсипи асосии кам кардани мусбатҳои бардурӯғ ҷамъоварии пойгоҳи додаҳои стандартҳо бо ёрии операторест, ки ҳолатҳои шубҳанокро бо истифода аз шабакаҳои нейронӣ тасниф мекунад. Баъдан, стандарти таснифшуда бо парвандае, ки система ошкор кардааст, муқоиса карда мешавад ва дар бораи он, ки парванда дурӯғ аст ё ба нокомӣ оварда мерасонад, хулоса бароварда мешавад. Алгоритми DTW барои муқоисаи ду силсилаи вақт дақиқ истифода мешавад. Воситаи асосии минимизатсия ҳанӯз ҳам гурӯҳбандӣ мебошад. Интизор меравад, ки пас аз ҷамъоварии шумораи зиёди парвандаҳои истинод, система аз оператор камтар аз сабаби шабоҳати аксари парвандаҳо ва пайдо шудани ҳолатҳои шабеҳ мепурсад.
Дар натиҷа, дар асоси усулҳои шабакаҳои нейронии дар боло тавсифшуда, барномаи таҷрибавӣ барои пешгӯии нокомии системаи "Web-Consolidation" сохта шуд. Ҳадафи ин барнома бо истифода аз бойгонии мавҷудаи маълумоти мониторинг ва маълумот дар бораи нокомиҳои қаблӣ арзёбии салоҳияти ин равиш барои системаҳои нармафзори мо буд. Нақшаи барнома дар зер дар расми 7 оварда шудааст.
Расми 7. Нақшаи пешгӯии нокомӣ дар асоси таҳлили фазои метрӣ
Дар диаграмма ду блоки асосиро метавон ҷудо кард: ҷустуҷӯи давраҳои аномалии вақт дар ҷараёни маълумотҳои мониторинг (метрика) ва механизми кам кардани мусбатҳои бардурӯғ. Эзоҳ: Барои мақсадҳои таҷрибавӣ, маълумот тавассути пайвасти JDBC аз пойгоҳи додаҳо гирифта мешавад, ки дар он графит онро захира мекунад.
Дар зер интерфейси системаи мониторинг, ки дар натиҷаи таҳия ба даст оварда шудааст, оварда шудааст (расми 8).
Расми 8. Интерфейси системаи мониторинги таҷрибавӣ
Интерфейс фоизи аномалияро дар асоси ченакҳои гирифташуда нишон медиҳад. Дар ҳолати мо, квитансия симулятсия карда мешавад. Мо аллакай тамоми маълумотро дар тӯли якчанд ҳафта дорем ва тадриҷан онро бор карда истодаем, то ҳолати аномалияро, ки ба нокомӣ оварда мерасонад, тафтиш кунем. Сатри ҳолати поёнӣ фоизи умумии аномалияи маълумотро дар вақти муайян нишон медиҳад, ки он бо истифода аз автоматикодер муайян карда мешавад. Инчунин, барои ченакҳои пешбинишуда, ки аз ҷониби RNN LSTM ҳисоб карда мешавад, фоизи алоҳида нишон дода мешавад.
Намунаи ошкор кардани аномалия дар асоси иҷрои CPU бо истифода аз шабакаи нейронии RNN LSTM (Расми 9).
Расми 9. Кашфи RNN LSTM
Ҳолати хеле содда, аслан як нишондиҳандаи муқаррарӣ, вале ба нокомии система оварда мерасонад, бо истифода аз RNN LSTM бомуваффақият ҳисоб карда шуд. Нишондиҳандаи аномалия дар ин давра 85-95% -ро ташкил медиҳад; ҳама чизе, ки аз 80% зиёдтар аст (ҳадди таҷрибавӣ муайян карда шудааст) аномалия ҳисобида мешавад.
Намунаи ошкор кардани аномалия, вақте ки система пас аз навсозӣ қодир набуд, пурбор шавад. Ин вазъиятро автоматикодер муайян мекунад (расми 10).
Расми 10. Намунаи муайянкунии автоматикодер
Тавре ки шумо аз расм мебинед, PermGen дар як сатҳ часпидааст. Автокодер ин аҷибро пайдо кард, зеро он ҳеҷ гоҳ чунин чизеро надида буд. Дар ин ҷо аномалия 100% боқӣ мемонад, то даме ки система ба ҳолати корӣ баргардад. Барои ҳама нишондиҳандаҳо аномалия нишон дода мешавад. Тавре ки қаблан зикр гардид, автоматӣ кодгузор наметавонад аномалияҳоро локализатсия кунад. Оператор даъват карда мешавад, ки ин вазифаро дар ин ҳолатҳо иҷро кунад.
хулоса
Компютери "Web-Consolidation" чанд сол боз дар таҳия аст. Система дар ҳолати хеле устувор қарор дорад ва шумораи ҳодисаҳои сабтшуда кам аст. Бо вуҷуди ин, 5-10 дақиқа пеш аз сар задани нокомӣ пайдо кардани аномалияҳо имконпазир буд. Дар баъзе мавридхо пешакй хабар додан дар бораи нуксонхо ба сарфаи вакти пешбинишуда, ки барои ичрои корхои «таъмир» чудо карда шудааст, ёрй мерасонад.
Дар асоси таҷрибаҳои гузаронидашуда, барои баровардани хулосаҳои ниҳоӣ ҳанӯз барвақт аст. То ба ҳол, натиҷаҳо мухолифанд. Аз як тараф, равшан аст, ки алгоритмҳое, ки ба шабакаҳои нейрон асос ёфтаанд, қодиранд аномалияҳои "фоида" -ро пайдо кунанд. Аз тарафи дигар, фоизи зиёди мусбатҳои бардурӯғ боқӣ мемонад ва на ҳама аномалияҳое, ки аз ҷониби мутахассиси соҳибихтисос дар шабакаи нейрон ошкор карда мешаванд, ошкор карда мешаванд. Камбудиҳо аз он иборатанд, ки ҳоло шабакаи нейрон барои кори муқаррарӣ омӯзишро бо муаллим талаб мекунад.
Барои рушди минбаъдаи системаи пешгӯии нокомӣ ва ба ҳолати қаноатбахш расондани он, якчанд роҳҳоро пешбинӣ кардан мумкин аст. Ин таҳлили муфассали ҳолатҳои аномалияҳоест, ки ба нокомӣ оварда мерасонанд, бинобар ин илова ба рӯйхати ченакҳои муҳим, ки ба ҳолати система таъсири калон мерасонанд ва партофтани чизҳои нолозим, ки ба он таъсир намерасонанд. Инчунин, агар мо дар ин самт ҳаракат кунем, мо метавонем кӯшиш кунем, ки алгоритмҳоро махсус барои ҳолатҳои мо бо аномалияҳое, ки ба нокомиҳо оварда мерасонанд, махсус гардонем. Роҳи дигаре ҳаст. Ин беҳбуди меъмории шабакаи нейрон аст ва ба ин васила дақиқии кашфро бо коҳиши вақти омӯзиш афзоиш медиҳад.
Ман ба ҳамкасбони худ, ки дар навиштан ва нигоҳ доштани аҳамияти ин мақола ба ман кумак кардаанд, изҳори сипос мекунам: ва Сергей Финогенов.
Манбаъ: will.com