{"id":39133,"date":"2019-10-31T22:28:01","date_gmt":"2019-10-31T19:28:01","guid":{"rendered":"https:\/\/prohoster.info\/blog\/monitoring-nagruzochnoe-testirovanie-prognozirovanie-i-otsutstvie-sboev\/"},"modified":"2019-10-31T22:28:01","modified_gmt":"2019-10-31T19:28:01","slug":"monitoring-nagruzochnoe-testirovanie-prognozirovanie-i-otsutstvie-sboev","status":"publish","type":"post","link":"https:\/\/prohoster.info\/sv\/blog\/administrirovanie\/monitoring-nagruzochnoe-testirovanie-prognozirovanie-i-otsutstvie-sboev","title":{"rendered":"\u00d6vervakning + belastningstestning = prognos och ingen nedtid","gt_translate_keys":[{"key":"rendered","format":"text"}]},"content":{"rendered":"

IT-avdelningen p\u00e5 VTB har flera g\u00e5nger st\u00f6tt p\u00e5 of\u00f6rutsedda situationer i systemens arbete, n\u00e4r belastningen p\u00e5 dem har \u00f6kat kraftigt. D\u00e4rf\u00f6r blev det n\u00f6dv\u00e4ndigt att utveckla och testa en modell som skulle kunna f\u00f6ruts\u00e4ga den h\u00f6gsta belastningen p\u00e5 kritiska system. F\u00f6r detta har bankens IT-specialister st\u00e4llt in \u00f6vervakningen, analyserat data och l\u00e4rt sig att automatisera prognoser. Vilka verktyg hj\u00e4lpte till att f\u00f6ruts\u00e4ga belastningen och lyckades vi optimera arbetet med hj\u00e4lp av dem? Det kommer vi att ber\u00e4tta om i en kort artikel.<\/p>\n

\"\u00d6vervakning
\n<\/a><\/noindex>
\nProblem med h\u00f6gbelastade tj\u00e4nster uppst\u00e5r praktiskt taget i alla branscher, men f\u00f6r den finansiella sektorn \u00e4r de kritiska. Vid klockan X m\u00e5ste alla milit\u00e4ra enheter vara redo, och d\u00e4rf\u00f6r beh\u00f6vdes en f\u00f6rhandskunskap om vad som kan intr\u00e4ffa, till och med att best\u00e4mma dagen d\u00e5 belastningen kommer att \u00f6ka och vilka system som kommer att m\u00f6ta den. Med avbrott m\u00e5ste man k\u00e4mpa emot och f\u00f6rhindra dem, d\u00e4rf\u00f6r diskuterades inte behovet av att inf\u00f6ra ett system f\u00f6r prognostisk analys. Det var n\u00f6dv\u00e4ndigt att modernisera systemen baserat p\u00e5 \u00f6vervakningsdata.<\/p>\n

Analys p\u00e5 kn\u00e4et<\/h2>\n

\nL\u00f6neprojektet \u00e4r ett av de mest k\u00e4nsliga vid avbrott. Det \u00e4r ocks\u00e5 det mest begripliga f\u00f6r prognostisering, s\u00e5 vi best\u00e4mde oss f\u00f6r att b\u00f6rja med det. P\u00e5 grund av den h\u00f6ga kopplingen kunde \u00e4ven andra delsystem, inklusive distansbanktj\u00e4nst (DBO), uppleva problem i h\u00f6gbelastningsmoment. Till exempel b\u00f6rjade kunder som fick SMS om pengar, anv\u00e4nda dem aktivt. Belastningen kunde d\u00e5 \u00f6ka mer \u00e4n en storleksordning.\u00a0<\/p>\n

Den f\u00f6rsta modellen f\u00f6r prognosen skapades manuellt. Vi tog ut data f\u00f6r det senaste \u00e5ret och ber\u00e4knade vilka dagar som f\u00f6rv\u00e4ntades ha maximal belastning: till exempel den 1:a, den 15:e och den 25:e dagen, samt under de sista dagarna i m\u00e5naden. Denna modell kr\u00e4vde stora arbetsinsatser och gav ingen exakt prognos. \u00c4nd\u00e5 identifierade den flaskhalsar d\u00e4r mer \u2018h\u00e5rdvara\u2019 beh\u00f6vdes och m\u00f6jliggjorde optimering av penga\u00f6verf\u00f6ringsprocessen genom att avtala med nyckelkunder: ist\u00e4llet f\u00f6r att ge ut l\u00f6nen i ett svep, f\u00f6rdelade vi transaktioner fr\u00e5n olika regioner \u00f6ver tid. Nu behandlar vi dem i delar som bankens IT-infrastruktur kan \u2018sm\u00e4lta\u2019 utan avbrott.<\/p>\n

Efter att ha erh\u00e5llit det f\u00f6rsta positiva resultatet gick vi vidare med automatiseringen av prognoser. Ett tiotal kritiska omr\u00e5den stod kvar p\u00e5 tur.<\/p>\n

Helhetsperspektiv<\/h2>\n

\nI VTB har vi implementerat ett \u00f6vervakningssystem fr\u00e5n MicroFocus. D\u00e4rifr\u00e5n tog vi datainsamlingen f\u00f6r prognostisering, lagringssystemet och rapporteringssystemet. I grund och botten fanns \u00f6vervakningen redan, vi beh\u00f6vde bara l\u00e4gga till m\u00e4tv\u00e4rden, en f\u00f6ruts\u00e4gelsemodul och skapa nya rapporter. Detta l\u00f6sning st\u00f6ds av den externa entrepren\u00f6ren \"Tekhnoserv\", s\u00e5 de huvudsakliga arbetsuppgifterna f\u00f6r projektets genomf\u00f6rande f\u00f6ll p\u00e5 deras specialister, men vi byggde modellen sj\u00e4lva. Prognossystemet skapades med hj\u00e4lp av Prophet \u2014 denna \u00f6ppna produkt har utvecklats av Facebook. Den \u00e4r enkel att anv\u00e4nda och integreras l\u00e4tt med de verktyg f\u00f6r \u00f6vergripande \u00f6vervakning och Vertica som vi redan har. Grovt uttryckt analyserar systemet belastningsgrafen och g\u00f6r en extrapolering baserat p\u00e5 Fourier-serier. Det finns ocks\u00e5 m\u00f6jlighet att l\u00e4gga till vissa koefficienter per dagar baserat p\u00e5 v\u00e5r modell. M\u00e4tv\u00e4rdena registreras utan m\u00e4nsklig medverkan, en g\u00e5ng i veckan uppdateras prognosen automatiskt och nya rapporter skickas till mottagarna.\u00a0<\/p>\n

Ett s\u00e5dant tillv\u00e4gag\u00e5ngss\u00e4tt avsl\u00f6jar huvudsakliga cykler, till exempel \u00e5rliga, m\u00e5natliga, kvartalsvisa och veckovisa. L\u00f6ne- och f\u00f6rskottsutbetalningar, semesterperioder, helgdagar och reor \u2014 allt detta p\u00e5verkar antalet f\u00f6rfr\u00e5gningar till systemen. Det visade sig till exempel att vissa cykler \u00f6verlappar varandra, och den st\u00f6rsta belastningen (75%) p\u00e5 systemen kommer fr\u00e5n den Centrala federala distriktet. Juridiska och fysiska personer beter sig olika. Medan belastningen fr\u00e5n \"fysiska personer\" \u00e4r relativt j\u00e4mnt f\u00f6rdelad \u00f6ver veckodagarna (det \u00e4r v\u00e4ldigt m\u00e5nga sm\u00e5 transaktioner), s\u00e5 st\u00e5r f\u00f6retag f\u00f6r 99,9 % av belastningen under arbetstid, och transaktionerna kan vara korta eller ta flera minuter och till och med timmar att behandla.<\/p>\n

\"\u00d6vervakning
\n
\nUtifr\u00e5n de insamlade uppgifterna definieras l\u00e5ngsiktiga trender. Det nya systemet har visat att m\u00e4nniskor i stor utstr\u00e4ckning g\u00e5r \u00f6ver till digitala banktj\u00e4nster. Detta \u00e4r allm\u00e4nt k\u00e4nt, men vi f\u00f6rv\u00e4ntade oss inte en s\u00e5dan skala och trodde det inte i b\u00f6rjan: antalet bes\u00f6k p\u00e5 bankkontor minskar extremt snabbt, samtidigt som antalet distans\u00f6verf\u00f6ringar \u00f6kar i samma omfattning. D\u00e4rmed \u00f6kar ocks\u00e5 belastningen p\u00e5 systemen och kommer att forts\u00e4tta \u00f6ka. Just nu prognostiserar vi belastningen fram till februari 2020. F\u00f6r normala dagar kan vi f\u00f6rutse med en noggrannhet p\u00e5 3%, och f\u00f6r toppar med en noggrannhet p\u00e5 10%. Detta \u00e4r ett bra resultat.<\/p>\n

F\u00e4llor<\/h2>\n

\nUtan sv\u00e5righeter gick det som vanligt inte. Extrapoleringsmekanismen med hj\u00e4lp av Fourier-serier \u00f6verg\u00e5r d\u00e5ligt genom noll \u2014 vi vet att f\u00f6retag genererar f\u00e5 transaktioner under helger, men prediktionsmodulen ger v\u00e4rden l\u00e5ngt ifr\u00e5n noll. Man skulle kunna justera dem tvingat, men det \u00e4r inte v\u00e5r metod. Dessutom fick vi l\u00f6sa problemet med att oskadligt h\u00e4mta data fr\u00e5n k\u00e4llsystem. Regelbunden insamling av information kr\u00e4ver betydande ber\u00e4kningsresurser, s\u00e5 vi byggde snabba cachar med hj\u00e4lp av replikering, och vi h\u00e4mtar aff\u00e4rsdata direkt fr\u00e5n replikorna. Avsaknaden av ytterligare belastning p\u00e5 master-systemen i s\u00e5dana fall \u00e4r ett avg\u00f6rande krav.<\/p>\n

Nya utmaningar<\/h2>\n

\nDen uppsatta uppgiften att f\u00f6ruts\u00e4ga toppar har l\u00f6sts: det har inte f\u00f6rekommit n\u00e5gra fel kopplade till \u00f6verbelastning i banken sedan i maj i \u00e5r, och det nya prognossystemet har spelat en betydande roll i detta. Ja, det visade sig vara otillr\u00e4ckligt, och nu vill banken f\u00f6rst\u00e5 hur farliga topparna \u00e4r f\u00f6r dem. Vi beh\u00f6ver prognoser som anv\u00e4nder metrik fr\u00e5n belastningstestning, och f\u00f6r cirka 30% av de kritiska systemen fungerar detta redan, medan resten \u00e4r i processen av att f\u00e5 prognoser. I n\u00e4sta steg planerar vi att prognostisera belastningen p\u00e5 systemen inte i aff\u00e4rstransaktioner, utan i termer av IT-infrastruktur, det vill s\u00e4ga vi kommer att g\u00e5 ner ett lager. Dessutom beh\u00f6ver vi helt automatisera insamlingen av metrik och uppbyggnaden av prognoser baserat p\u00e5 dem, s\u00e5 att vi inte beh\u00f6ver hantera export. Det finns inget extraordin\u00e4rt med detta \u2014 vi korsbefruktar helt enkelt \u00f6vervakning och belastningstestning i enlighet med b\u00e4sta globala praxis.
\n
K\u00e4lla: habr.com<\/a><\/p>","protected":false,"gt_translate_keys":[{"key":"rendered","format":"html"}]},"excerpt":{"rendered":"

IT-\u0434\u0435\u043f\u0430\u0440\u0442\u0430\u043c\u0435\u043d\u0442\u0443 \u0412\u0422\u0411 \u043d\u0435\u0441\u043a\u043e\u043b\u044c\u043a\u043e \u0440\u0430\u0437 \u043f\u0440\u0438\u0445\u043e\u0434\u0438\u043b\u043e\u0441\u044c \u0441\u0442\u0430\u043b\u043a\u0438\u0432\u0430\u0442\u044c\u0441\u044f \u0441 \u043d\u0435\u0448\u0442\u0430\u0442\u043d\u044b\u043c\u0438 \u0441\u0438\u0442\u0443\u0430\u0446\u0438\u044f\u043c\u0438 \u0432 \u0440\u0430\u0431\u043e\u0442\u0435 \u0441\u0438\u0441\u0442\u0435\u043c, \u043a\u043e\u0433\u0434\u0430 \u043d\u0430\u0433\u0440\u0443\u0437\u043a\u0430 \u043d\u0430 \u043d\u0438\u0445 \u043c\u043d\u043e\u0433\u043e\u043a\u0440\u0430\u0442\u043d\u043e \u0432\u043e\u0437\u0440\u0430\u0441\u0442\u0430\u043b\u0430. \u041f\u043e\u044d\u0442\u043e\u043c\u0443 \u043f\u043e\u044f\u0432\u0438\u043b\u0430\u0441\u044c \u043d\u0435\u043e\u0431\u0445\u043e\u0434\u0438\u043c\u043e\u0441\u0442\u044c \u0440\u0430\u0437\u0440\u0430\u0431\u043e\u0442\u0430\u0442\u044c \u0438 \u043e\u043f\u0440\u043e\u0431\u043e\u0432\u0430\u0442\u044c \u043c\u043e\u0434\u0435\u043b\u044c, \u043a\u043e\u0442\u043e\u0440\u0430\u044f \u043f\u0440\u0435\u0434\u0441\u043a\u0430\u0437\u044b\u0432\u0430\u043b\u0430 \u0431\u044b \u043f\u0438\u043a\u043e\u0432\u0443\u044e \u043d\u0430\u0433\u0440\u0443\u0437\u043a\u0443 \u043d\u0430 \u043a\u0440\u0438\u0442\u0438\u0447\u043d\u044b\u0435 \u0441\u0438\u0441\u0442\u0435\u043c\u044b. \u0414\u043b\u044f \u044d\u0442\u043e\u0433\u043e IT-\u0441\u043f\u0435\u0446\u0438\u0430\u043b\u0438\u0441\u0442\u044b \u0431\u0430\u043d\u043a\u0430 \u043d\u0430\u0441\u0442\u0440\u043e\u0438\u043b\u0438 \u043c\u043e\u043d\u0438\u0442\u043e\u0440\u0438\u043d\u0433, \u043f\u0440\u043e\u0430\u043d\u0430\u043b\u0438\u0437\u0438\u0440\u043e\u0432\u0430\u043b\u0438 \u0434\u0430\u043d\u043d\u044b\u0435 \u0438 \u043d\u0430\u0443\u0447\u0438\u043b\u0438\u0441\u044c \u0430\u0432\u0442\u043e\u043c\u0430\u0442\u0438\u0437\u0438\u0440\u043e\u0432\u0430\u0442\u044c \u043f\u0440\u043e\u0433\u043d\u043e\u0437\u044b. \u041a\u0430\u043a\u0438\u0435 \u0438\u043d\u0441\u0442\u0440\u0443\u043c\u0435\u043d\u0442\u044b \u043f\u043e\u043c\u043e\u0433\u043b\u0438 \u0441\u043f\u0440\u043e\u0433\u043d\u043e\u0437\u0438\u0440\u043e\u0432\u0430\u0442\u044c \u043d\u0430\u0433\u0440\u0443\u0437\u043a\u0443 \u0438 \u043f\u043e\u043b\u0443\u0447\u0438\u043b\u043e\u0441\u044c \u043b\u0438 \u0441 \u0438\u0445 […]<\/p>\n","protected":false,"gt_translate_keys":[{"key":"rendered","format":"html"}]},"author":1,"featured_media":29368,"comment_status":"open","ping_status":"open","sticky":false,"template":"","format":"standard","meta":{"footnotes":""},"categories":[688],"tags":[],"class_list":["post-39133","post","type-post","status-publish","format-standard","has-post-thumbnail","hentry","category-administrirovanie"],"aioseo_notices":[],"aioseo_head":"\n\t\t\n\t\n\t\n\t\n\t\n\t\t\n\t\t\n\t\t\n\t\t\n\t\t\n\t\t\n\t\t\n\t\t\n\t\t\n\t\t\n\t\t\n\t\t\n\t\t\n\t\t\n\t\t\n\t\t\n\n","aioseo_head_json":{"title":"\ud83e\udd47\u00d6vervakning + belastningstestning = prognos och fr\u00e5nvaro av st\u00f6rningar | ProHoster","description":"IT-avdelningen p\u00e5 VTB har flera g\u00e5nger tvingats hantera n\u00f6dsituationer i systemens arbete n\u00e4r belastningen p\u00e5 dem \u00f6kat kraftigt.","canonical_url":"https:\/\/prohoster.info\/sv\/blog\/administrirovanie\/monitoring-nagruzochnoe-testirovanie-prognozirovanie-i-otsutstvie-sboev","robots":"max-image-preview:large","keywords":"","webmasterTools":{"miscellaneous":""},"schema":null,"og:locale":"sv_SE","og:site_name":"ProHoster | \u041a\u0443\u043f\u0438\u0442\u044c \u043d\u0430\u0434\u0435\u0436\u043d\u044b\u0439 \u0445\u043e\u0441\u0442\u0438\u043d\u0433 \u0434\u043b\u044f \u0441\u0430\u0439\u0442\u043e\u0432 \u0441 \u0437\u0430\u0449\u0438\u0442\u043e\u0439 \u043e\u0442 DDoS, VPS VDS \u0441\u0435\u0440\u0432\u0435\u0440\u044b","og:type":"article","og:title":"\ud83e\udd47\u041c\u043e\u043d\u0438\u0442\u043e\u0440\u0438\u043d\u0433 + \u043d\u0430\u0433\u0440\u0443\u0437\u043e\u0447\u043d\u043e\u0435 \u0442\u0435\u0441\u0442\u0438\u0440\u043e\u0432\u0430\u043d\u0438\u0435 = \u043f\u0440\u043e\u0433\u043d\u043e\u0437\u0438\u0440\u043e\u0432\u0430\u043d\u0438\u0435 \u0438 \u043e\u0442\u0441\u0443\u0442\u0441\u0442\u0432\u0438\u0435 \u0441\u0431\u043e\u0435\u0432 | ProHoster","og:description":"IT-\u0434\u0435\u043f\u0430\u0440\u0442\u0430\u043c\u0435\u043d\u0442\u0443 \u0412\u0422\u0411 \u043d\u0435\u0441\u043a\u043e\u043b\u044c\u043a\u043e \u0440\u0430\u0437 \u043f\u0440\u0438\u0445\u043e\u0434\u0438\u043b\u043e\u0441\u044c \u0441\u0442\u0430\u043b\u043a\u0438\u0432\u0430\u0442\u044c\u0441\u044f \u0441 \u043d\u0435\u0448\u0442\u0430\u0442\u043d\u044b\u043c\u0438 \u0441\u0438\u0442\u0443\u0430\u0446\u0438\u044f\u043c\u0438 \u0432 \u0440\u0430\u0431\u043e\u0442\u0435 \u0441\u0438\u0441\u0442\u0435\u043c, \u043a\u043e\u0433\u0434\u0430 \u043d\u0430\u0433\u0440\u0443\u0437\u043a\u0430 \u043d\u0430 \u043d\u0438\u0445 \u043c\u043d\u043e\u0433\u043e\u043a\u0440\u0430\u0442\u043d\u043e \u0432\u043e\u0437\u0440\u0430\u0441\u0442\u0430\u043b\u0430.","og:url":"https:\/\/prohoster.info\/sv\/blog\/administrirovanie\/monitoring-nagruzochnoe-testirovanie-prognozirovanie-i-otsutstvie-sboev","og:image":"https:\/\/prohoster.info\/wp-content\/uploads\/2021\/11\/logo-350.jpg","og:image:secure_url":"https:\/\/prohoster.info\/wp-content\/uploads\/2021\/11\/logo-350.jpg","og:image:width":350,"og:image:height":350,"article:published_time":"2019-10-31T19:28:01+00:00","article:modified_time":"2019-10-31T19:28:01+00:00","article:publisher":"https:\/\/www.facebook.com\/prohoster","article:author":"https:\/\/www.facebook.com\/prohoster"},"aioseo_meta_data":{"post_id":"39133","title":null,"description":null,"keywords":null,"keyphrases":null,"primary_term":null,"canonical_url":null,"og_title":null,"og_description":null,"og_object_type":"default","og_image_type":"default","og_image_url":null,"og_image_width":null,"og_image_height":null,"og_image_custom_url":null,"og_image_custom_fields":null,"og_video":null,"og_custom_url":null,"og_article_section":null,"og_article_tags":null,"twitter_use_og":false,"twitter_card":"default","twitter_image_type":"default","twitter_image_url":null,"twitter_image_custom_url":null,"twitter_image_custom_fields":null,"twitter_title":null,"twitter_description":null,"schema":{"blockGraphs":[],"customGraphs":[],"default":{"data":{"Article":[],"Course":[],"Dataset":[],"FAQPage":[],"Movie":[],"Person":[],"Product":[],"ProductReview":[],"Car":[],"Recipe":[],"Service":[],"SoftwareApplication":[],"WebPage":[]},"graphName":"","isEnabled":true},"graphs":[]},"schema_type":null,"schema_type_options":null,"pillar_content":false,"robots_default":true,"robots_noindex":false,"robots_noarchive":false,"robots_nosnippet":false,"robots_nofollow":false,"robots_noimageindex":false,"robots_noodp":false,"robots_notranslate":false,"robots_max_snippet":null,"robots_max_videopreview":null,"robots_max_imagepreview":"large","priority":null,"frequency":null,"local_seo":null,"seo_analyzer_scan_date":"2026-01-24 00:53:19","breadcrumb_settings":null,"limit_modified_date":false,"reviewed_by":null,"ai":null,"created":"2021-03-01 00:55:36","updated":"2026-01-24 00:53:19","focus_keyword":null,"additional_keywords":null,"truseo_locale":null},"gt_translate_keys":[{"key":"link","format":"url"}],"_links":{"self":[{"href":"https:\/\/prohoster.info\/sv\/wp-json\/wp\/v2\/posts\/39133","targetHints":{"allow":["GET"]}}],"collection":[{"href":"https:\/\/prohoster.info\/sv\/wp-json\/wp\/v2\/posts"}],"about":[{"href":"https:\/\/prohoster.info\/sv\/wp-json\/wp\/v2\/types\/post"}],"author":[{"embeddable":true,"href":"https:\/\/prohoster.info\/sv\/wp-json\/wp\/v2\/users\/1"}],"replies":[{"embeddable":true,"href":"https:\/\/prohoster.info\/sv\/wp-json\/wp\/v2\/comments?post=39133"}],"version-history":[{"count":0,"href":"https:\/\/prohoster.info\/sv\/wp-json\/wp\/v2\/posts\/39133\/revisions"}],"wp:featuredmedia":[{"embeddable":true,"href":"https:\/\/prohoster.info\/sv\/wp-json\/wp\/v2\/media\/29368"}],"wp:attachment":[{"href":"https:\/\/prohoster.info\/sv\/wp-json\/wp\/v2\/media?parent=39133"}],"wp:term":[{"taxonomy":"category","embeddable":true,"href":"https:\/\/prohoster.info\/sv\/wp-json\/wp\/v2\/categories?post=39133"},{"taxonomy":"post_tag","embeddable":true,"href":"https:\/\/prohoster.info\/sv\/wp-json\/wp\/v2\/tags?post=39133"}],"curies":[{"name":"wp","href":"https:\/\/api.w.org\/{rel}","templated":true}]}}