Π—Π°Ρ‡Π΅ΠΌ AIOps ΠΈ Π·ΠΎΠ½Ρ‚ΠΈΡ‡Π½Ρ‹ΠΉ ΠΌΠΎΠ½ΠΈΡ‚ΠΎΡ€ΠΈΠ½Π³ Π±Π°Π½ΠΊΡƒ, ΠΈΠ»ΠΈ Π½Π° Ρ‡Π΅ΠΌ строятся ΠΎΡ‚Π½ΠΎΡˆΠ΅Π½ΠΈΡ с ΠΊΠ»ΠΈΠ΅Π½Ρ‚ΠΎΠΌ

Π’ публикациях Π½Π° Π₯Π°Π±Ρ€Π΅ я ΡƒΠΆΠ΅ писал ΠΎ своСм ΠΎΠΏΡ‹Ρ‚Π΅ построСния партнСрских ΠΎΡ‚Π½ΠΎΡˆΠ΅Π½ΠΈΠΉ со своСй ΠΊΠΎΠΌΠ°Π½Π΄ΠΎΠΉ (здСсь рассказываСтся ΠΎ Ρ‚ΠΎΠΌ, ΠΊΠ°ΠΊ ΡΠΎΡΡ‚Π°Π²ΠΈΡ‚ΡŒ партнСрскоС соглашСниС ΠΏΡ€ΠΈ стартС Π½ΠΎΠ²ΠΎΠ³ΠΎ бизнСса, Ρ‡Ρ‚ΠΎΠ±Ρ‹ бизнСс Π½Π΅ развалился). А сСйчас я Π±Ρ‹ Ρ…ΠΎΡ‚Π΅Π» Ρ€Π°ΡΡΠΊΠ°Π·Π°Ρ‚ΡŒ ΠΎ Ρ‚ΠΎΠΌ, ΠΊΠ°ΠΊ ΡΡ‚Ρ€ΠΎΠΈΡ‚ΡŒ партнСрскиС ΠΎΡ‚Π½ΠΎΡˆΠ΅Π½ΠΈΡ с ΠΊΠ»ΠΈΠ΅Π½Ρ‚Π°ΠΌΠΈ, Ρ‚Π°ΠΊ ΠΊΠ°ΠΊ Π±Π΅Π· Π½ΠΈΡ… Ρ€Π°Π·Π²Π°Π»ΠΈΠ²Π°Ρ‚ΡŒΡΡ Π±ΡƒΠ΄Π΅Ρ‚ Π½Π΅Ρ‡Π΅ΠΌΡƒ. Π― надСюсь эта ΡΡ‚Π°Ρ‚ΡŒΡ Π±ΡƒΠ΄Π΅Ρ‚ ΠΏΠΎΠ»Π΅Π·Π½Π° стартапам, Π½Π°Ρ‡ΠΈΠ½Π°ΡŽΡ‰ΠΈΠΌ ΠΏΡ€ΠΎΠ΄Π°ΠΆΠΈ своСго ΠΏΡ€ΠΎΠ΄ΡƒΠΊΡ‚Π° ΠΊΡ€ΡƒΠΏΠ½ΠΎΠΌΡƒ бизнСсу.

Π― сСйчас ΠΊΠ°ΠΊ Ρ€Π°Π· возглавляю Ρ‚Π°ΠΊΠΎΠΉ стартап MONQ Digital lab, Π³Π΄Π΅ ΠΌΡ‹ с ΠΊΠΎΠΌΠ°Π½Π΄ΠΎΠΉ Ρ€Π°Π·Ρ€Π°Π±Π°Ρ‚Ρ‹Π²Π°Π΅ΠΌ ΠΏΡ€ΠΎΠ΄ΡƒΠΊΡ‚ ΠΏΠΎ Π°Π²Ρ‚ΠΎΠΌΠ°Ρ‚ΠΈΠ·Π°Ρ†ΠΈΠΈ процСссов ΠΏΠΎΠ΄Π΄Π΅Ρ€ΠΆΠΊΠΈ ΠΈ эксплуатации ΠΊΠΎΡ€ΠΏΠΎΡ€Π°Ρ‚ΠΈΠ²Π½ΠΎΠ³ΠΎ ИВ. Π’Ρ‹Ρ…ΠΎΠ΄ Π½Π° Ρ€Ρ‹Π½ΠΎΠΊ ΠΎΡ‡Π΅Π½ΡŒ Π½Π΅ простая Π·Π°Π΄Π°Ρ‡Π° ΠΈ ΠΌΡ‹ Π½Π°Ρ‡Π°Π»ΠΈ с нСбольшой домашнСй Ρ€Π°Π±ΠΎΡ‚Ρ‹, ΠΏΡ€ΠΎΡˆΠ»ΠΈ ΠΏΠΎ экспСртам Ρ€Ρ‹Π½ΠΊΠ°, нашим ΠΏΠ°Ρ€Ρ‚Π½Π΅Ρ€Π°ΠΌ ΠΈ ΠΏΡ€ΠΎΠ²Π΅Π»ΠΈ ΡΠ΅Π³ΠΌΠ΅Π½Ρ‚Π°Ρ†ΠΈΡŽ Ρ€Ρ‹Π½ΠΊΠ°. ΠžΡΠ½ΠΎΠ²Π½Ρ‹ΠΌ вопросом Π±Ρ‹Π»ΠΎ ΠΏΠΎΠ½ΡΡ‚ΡŒ β€œΡ‡ΡŒΠΈ Π±ΠΎΠ»ΠΈ ΠΌΡ‹ Π»ΡƒΡ‡ΡˆΠ΅ всСго ΠΌΠΎΠΆΠ΅ΠΌ ΠΈΠ·Π»Π΅Ρ‡ΠΈΡ‚ΡŒ?”

Π’ ВОП3 сСгмСнтов ΠΏΠΎΠΏΠ°Π»ΠΈ Π±Π°Π½ΠΊΠΈ. И ΠΊΠΎΠ½Π΅Ρ‡Π½ΠΎ ΠΆΠ΅ ΠΏΠ΅Ρ€Π²Ρ‹ΠΌ Π² спискС Π±Ρ‹Π»ΠΈ Π’ΠΈΠ½ΡŒΠΊΠΎΡ„Ρ„ ΠΈ Π‘Π±Π΅Ρ€Π±Π°Π½ΠΊ. Когда ΠΌΡ‹ Ρ…ΠΎΠ΄ΠΈΠ»ΠΈ ΠΏΠΎ экспСртам банковского Ρ€Ρ‹Π½ΠΊΠ° ΠΎΠ½ΠΈ Π³ΠΎΠ²ΠΎΡ€ΠΈΠ»ΠΈ: Π²Π½Π΅Π΄Ρ€ΠΈΡ‚Π΅ свой ΠΏΡ€ΠΎΠ΄ΡƒΠΊΡ‚ Ρ‚ΡƒΠ΄Π°, ΠΈ ΠΏΡƒΡ‚ΡŒ Π½Π° Ρ€Ρ‹Π½ΠΎΠΊ Π±Π°Π½ΠΊΠΎΠ² Π±ΡƒΠ΄Π΅Ρ‚ ΠΎΡ‚ΠΊΡ€Ρ‹Ρ‚. ΠœΡ‹ ΠΏΠΎΠΏΡ€ΠΎΠ±ΠΎΠ²Π°Π»ΠΈ Π²ΠΎΠΉΡ‚ΠΈ ΠΈ Ρ‚ΡƒΠ΄Π°, ΠΈ Ρ‚ΡƒΠ΄Π°, Π½ΠΎ Π² Π‘Π±Π΅Ρ€Π±Π°Π½ΠΊΠ΅ нас ΠΆΠ΄Π°Π» ΠΏΡ€ΠΎΠ²Π°Π», Π° рСбята ΠΈΠ· Π’ΠΈΠ½ΡŒΠΊΠΎΡ„Ρ„ оказались Π½Π° порядок Π±ΠΎΠ»Π΅Π΅ ΠΎΡ‚ΠΊΡ€Ρ‹Ρ‚Ρ‹ΠΌΠΈ ΠΊ ΠΏΡ€ΠΎΠ΄ΡƒΠΊΡ‚ΠΈΠ²Π½ΠΎΠΌΡƒ ΠΎΠ±Ρ‰Π΅Π½ΠΈΡŽ с российскими стартапами (ΠΌΠΎΠΆΠ΅Ρ‚ Π±Ρ‹Ρ‚ΡŒ ΠΈΠ·-Π·Π° Ρ‚ΠΎΠ³ΠΎ, Ρ‡Ρ‚ΠΎ Π‘Π±Π΅Ρ€ Π² это врСмя ΠΏΠΎΠΊΡƒΠΏΠ°Π» ΠΏΠΎΡ‡Ρ‚ΠΈ Π·Π° ΠΌΠΈΠ»Π»ΠΈΠ°Ρ€Π΄ Π½Π°ΡˆΠΈΡ… Π·Π°ΠΏΠ°Π΄Π½Ρ‹Ρ… ΠΊΠΎΠ½ΠΊΡƒΡ€Π΅Π½Ρ‚ΠΎΠ²). Π£ΠΆΠ΅ Ρ‡Π΅Ρ€Π΅Π· мСсяц ΠΌΡ‹ Π½Π°Ρ‡Π°Π»ΠΈ ΠΏΠΈΠ»ΠΎΡ‚Π½Ρ‹ΠΉ ΠΏΡ€ΠΎΠ΅ΠΊΡ‚. Как это Π±Ρ‹Π»ΠΎ, Ρ‡ΠΈΡ‚Π°ΠΉΡ‚Π΅ дальшС.

ΠœΡ‹ ΠΌΠ½ΠΎΠ³ΠΎ Π»Π΅Ρ‚ занимаСмся вопросами эксплуатации ΠΈ ΠΌΠΎΠ½ΠΈΡ‚ΠΎΡ€ΠΈΠ½Π³Π°, сСйчас внСдряСм наш ΠΏΡ€ΠΎΠ΄ΡƒΠΊΡ‚ Π² госсСкторС, Π² страховании, Π² Π±Π°Π½ΠΊΠ°Ρ…, Π² Ρ‚Π΅Π»Π΅ΠΊΠΎΠΌ-компаниях, ΠΎΠ΄Π½ΠΎ Π²Π½Π΅Π΄Ρ€Π΅Π½ΠΈΠ΅ Π±Ρ‹Π»ΠΎ Ρƒ Π°Π²ΠΈΠ°ΠΊΠΎΠΌΠΏΠ°Π½ΠΈΠΈ (ΠΏΠ΅Ρ€Π΅Π΄ ΠΏΡ€ΠΎΠ΅ΠΊΡ‚ΠΎΠΌ, ΠΌΡ‹ ΠΈ Π½Π΅ Π΄ΡƒΠΌΠ°Π»ΠΈ, Ρ‡Ρ‚ΠΎ авиация Π½Π°ΡΡ‚ΠΎΠ»ΡŒΠΊΠΎ ИВ-зависимая ΠΎΡ‚Ρ€Π°ΡΠ»ΡŒ, ΠΈ сСйчас ΠΎΡ‡Π΅Π½ΡŒ надССмся, нСсмотря Π½Π° COVID, Ρ‡Ρ‚ΠΎ компания Π²Ρ‹ΠΏΠ»Ρ‹Π²Π΅Ρ‚ ΠΈ ΠΏΠΎΠΉΠ΄Π΅Ρ‚ Π½Π° Π²Π·Π»Π΅Ρ‚).

Π’ΠΎΡ‚ ΠΏΡ€ΠΎΠ΄ΡƒΠΊΡ‚, ΠΊΠΎΡ‚ΠΎΡ€Ρ‹ΠΉ ΠΌΡ‹ Π΄Π΅Π»Π°Π΅ΠΌ относится ΠΊ ΠΊΠΎΡ€ΠΏΠΎΡ€Π°Ρ‚ΠΈΠ²Π½ΠΎΠΌΡƒ ПО, сСгмСнту AIOps (Artificial Intelligence for IT Operations, ΠΈΠ»ΠΈ ITOps). ΠžΡΠ½ΠΎΠ²Π½Ρ‹Π΅ Ρ†Π΅Π»ΠΈ внСдрСния Ρ‚Π°ΠΊΠΈΡ… систСм ΠΏΠΎ ΠΌΠ΅Ρ€Π΅ ΠΏΠΎΠ²Ρ‹ΡˆΠ΅Π½ΠΈΡ уровня зрСлости процСссов Π² ΠΊΠΎΠΌΠΏΠ°Π½ΠΈΠΈ:

  1. ΠŸΠΎΡ‚ΡƒΡˆΠΈΡ‚ΡŒ ΠΏΠΎΠΆΠ°Ρ€Ρ‹: Π²Ρ‹ΡΠ²ΠΈΡ‚ΡŒ сбои, ΠΎΡ‡ΠΈΡΡ‚ΠΈΡ‚ΡŒ ΠΏΠΎΡ‚ΠΎΠΊ Π°Π»Π΅Ρ€Ρ‚ΠΎΠ² ΠΎΡ‚ мусора, ΠΏΠΎΡΡ‚Π°Π²ΠΈΡ‚ΡŒ таски ΠΈ ΠΈΠ½Ρ†ΠΈΠ΄Π΅Π½Ρ‚Ρ‹ Π½Π° отвСтствСнных;
  2. ΠŸΠΎΠ²Ρ‹ΡΠΈΡ‚ΡŒ ΡΡ„Ρ„Π΅ΠΊΡ‚ΠΈΠ²Π½ΠΎΡΡ‚ΡŒ Ρ€Π°Π±ΠΎΡ‚Ρ‹ ИВ-слуТбы: ΡΠ½ΠΈΠ·ΠΈΡ‚ΡŒ врСмя Ρ€Π΅ΡˆΠ΅Π½ΠΈΡ ΠΈΠ½Ρ†ΠΈΠ΄Π΅Π½Ρ‚ΠΎΠ², ΡƒΠΊΠ°Π·Π°Ρ‚ΡŒ Π½Π° ΠΏΡ€ΠΈΡ‡ΠΈΠ½Ρ‹ сбоСв, ΠΏΠΎΠ²Ρ‹ΡΠΈΡ‚ΡŒ ΠΏΡ€ΠΎΠ·Ρ€Π°Ρ‡Π½ΠΎΡΡ‚ΡŒ состояния ИВ;
  3. ΠŸΠΎΠ²Ρ‹ΡΠΈΡ‚ΡŒ ΡΡ„Ρ„Π΅ΠΊΡ‚ΠΈΠ²Π½ΠΎΡΡ‚ΡŒ бизнСса: ΡΠΎΠΊΡ€Π°Ρ‚ΠΈΡ‚ΡŒ объСм Ρ€ΡƒΡ‡Π½ΠΎΠ³ΠΎ Ρ‚Ρ€ΡƒΠ΄Π°, ΡΠ½ΠΈΠ·ΠΈΡ‚ΡŒ риски, ΠΏΠΎΠ²Ρ‹ΡΠΈΡ‚ΡŒ Π»ΠΎΡΠ»ΡŒΠ½ΠΎΡΡ‚ΡŒ ΠΊΠ»ΠΈΠ΅Π½Ρ‚ΠΎΠ².

По Π½Π°ΡˆΠ΅ΠΌΡƒ ΠΎΠΏΡ‹Ρ‚Ρƒ, Ρƒ Π±Π°Π½ΠΊΠΎΠ² ΠΎΠ±Ρ‰ΠΈΠ΅ со всСми ΠΊΡ€ΡƒΠΏΠ½Ρ‹ΠΌΠΈ IT-инфраструктурами β€œΠ±ΠΎΠ»ΠΈβ€ с ΠΌΠΎΠ½ΠΈΡ‚ΠΎΡ€ΠΈΠ½Π³ΠΎΠΌ ΡΠ»Π΅Π΄ΡƒΡŽΡ‰ΠΈΠ΅:

  • β€œΠΊΡ‚ΠΎ Π²ΠΎ Ρ‡Ρ‚ΠΎ горазд”: Ρ‚Π΅Ρ…ΠΎΡ‚Π΄Π΅Π»ΠΎΠ² ΠΌΠ½ΠΎΠ³ΠΎ, практичСски Ρƒ ΠΊΠ°ΠΆΠ΄ΠΎΠ³ΠΎ ΠΊΠ°ΠΊ ΠΌΠΈΠ½ΠΈΠΌΡƒΠΌ ΠΎΠ΄Π½Π° своя систСма ΠΌΠΎΠ½ΠΈΡ‚ΠΎΡ€ΠΈΠ½Π³Π°, Π° Ρƒ Π±ΠΎΠ»ΡŒΡˆΠΈΠ½ΡΡ‚Π²Π° β€” большС ΠΎΠ΄Π½ΠΎΠΉ;
  • β€œΠΊΠΎΠΌΠ°Ρ€ΠΈΠ½Ρ‹ΠΉ рой” Π°Π»Π΅Ρ€Ρ‚ΠΎΠ²: каТдая систСма Π³Π΅Π½Π΅Ρ€ΠΈΡ€ΡƒΠ΅Ρ‚ сотни ΠΈ Π±ΠΎΠΌΠ±ΠΈΡ‚ ΠΈΠΌΠΈ всСх отвСтствСнных (ΠΈΠ½ΠΎΠ³Π΄Π° Π΅Ρ‰Π΅ ΠΈ ΠΌΠ΅ΠΆΠ΄Ρƒ ΠΎΡ‚Π΄Π΅Π»Π°ΠΌΠΈ). ΠŸΠΎΡΡ‚ΠΎΡΠ½Π½ΠΎ Π΄Π΅Ρ€ΠΆΠ°Ρ‚ΡŒ фокус контроля Π½Π° ΠΊΠ°ΠΆΠ΄ΠΎΠΌ ΡƒΠ²Π΅Π΄ΠΎΠΌΠ»Π΅Π½ΠΈΠΈ слоТно, ΠΈΡ… ΡΡ€ΠΎΡ‡Π½ΠΎΡΡ‚ΡŒ ΠΈ Π²Π°ΠΆΠ½ΠΎΡΡ‚ΡŒ нивСлируСтся ΠΈΠ·-Π·Π° большого количСства;
  • ΠΊΡ€ΡƒΠΏΠ½Ρ‹Π΅ Π±Π°Π½ΠΊΠΈ β€” Π»ΠΈΠ΄Π΅Ρ€Ρ‹ сСктора хотят Π½Π΅ просто Π½Π΅ΠΏΡ€Π΅Ρ€Ρ‹Π²Π½ΠΎ ΠΌΠΎΠ½ΠΈΡ‚ΠΎΡ€ΠΈΡ‚ΡŒ свои систСмы, Π·Π½Π°Ρ‚ΡŒ, Π³Π΄Π΅ Π΅ΡΡ‚ΡŒ сбои, Π½ΠΎ ΠΈ настоящСй ΠΌΠ°Π³ΠΈΠΈ AI β€” ΡΠ΄Π΅Π»Π°Ρ‚ΡŒ Ρ‚Π°ΠΊ, Ρ‡Ρ‚ΠΎΠ±Ρ‹ систСмы ΡΠ°ΠΌΠΎΠΌΠΎΠ½ΠΈΡ‚ΠΎΡ€ΠΈΠ»ΠΈΡΡŒ, самопрогнозировали ΠΈ ΡΠ°ΠΌΠΎΠΈΡΠΏΡ€Π°Π²Π»ΡΠ»ΠΈΡΡŒ.

Когда ΠΌΡ‹ ΠΏΡ€ΠΈΡˆΠ»ΠΈ Π½Π° ΠΏΠ΅Ρ€Π²ΡƒΡŽ встрСчу Π² Π’ΠΈΠ½ΡŒΠΊΠΎΡ„Ρ„, Π½Π°ΠΌ сразу сказали, Ρ‡Ρ‚ΠΎ Ρƒ Π½ΠΈΡ… Π½Π΅Ρ‚ ΠΏΡ€ΠΎΠ±Π»Π΅ΠΌ с ΠΌΠΎΠ½ΠΈΡ‚ΠΎΡ€ΠΈΠ½Π³ΠΎΠΌ ΠΈ Ρƒ Π½ΠΈΡ… Π½ΠΈΡ‡Π΅Π³ΠΎ Π½Π΅ Π±ΠΎΠ»ΠΈΡ‚, ΠΈ основным вопросом Π±Ρ‹Π»ΠΎ: β€œΠ§Ρ‚ΠΎ ΠΌΡ‹ ΠΌΠΎΠΆΠ΅ΠΌ ΠΏΡ€Π΅Π΄Π»ΠΎΠΆΠΈΡ‚ΡŒ для Ρ‚Π΅Ρ…, Ρƒ ΠΊΠΎΡ‚ΠΎΡ€Ρ‹Ρ… ΠΈ Ρ‚Π°ΠΊ всС Ρ…ΠΎΡ€ΠΎΡˆΠΎ?”

Π Π°Π·Π³ΠΎΠ²ΠΎΡ€ Π±Ρ‹Π» Π΄Π»ΠΈΠ½Π½Ρ‹ΠΉ, ΠΌΡ‹ обсудили ΠΊΠ°ΠΊ построСны ΠΈΡ… микросСрвисы, ΠΊΠ°ΠΊ Ρ€Π°Π±ΠΎΡ‚Π°ΡŽΡ‚ подраздСлСния, ΠΊΠ°ΠΊΠΈΠ΅ ΠΏΡ€ΠΎΠ±Π»Π΅ΠΌΡ‹ инфраструктуры Π±ΠΎΠ»Π΅Π΅ Ρ‡ΡƒΠ²ΡΡ‚Π²ΠΈΡ‚Π΅Π»ΡŒΠ½Ρ‹, ΠΊΠ°ΠΊΠΈΠ΅ ΠΌΠ΅Π½Π΅Π΅ Ρ‡ΡƒΠ²ΡΡ‚Π²ΠΈΡ‚Π΅Π»ΡŒΠ½Ρ‹ для ΠΏΠΎΠ»ΡŒΠ·ΠΎΠ²Π°Ρ‚Π΅Π»Π΅ΠΉ, Π³Π΄Π΅ β€œΠ±Π΅Π»Ρ‹Π΅ пятна”, ΠΈ ΠΊΠ°ΠΊΠΈΠ΅ Ρƒ Π½ΠΈΡ… Ρ†Π΅Π»ΠΈ ΠΈ SLA.

ΠšΡΡ‚Π°Ρ‚ΠΈ, SLA Ρƒ Π±Π°Π½ΠΊΠ° Π΄Π΅ΠΉΡΡ‚Π²ΠΈΡ‚Π΅Π»ΡŒΠ½ΠΎ Π²ΠΏΠ΅Ρ‡Π°Ρ‚Π»ΡΡŽΡ‚. НапримСр, Π½Π° устранСниС ΠΈΠ½Ρ†ΠΈΠ΄Π΅Π½Ρ‚Π° ΠΏΠ΅Ρ€Π²ΠΎΠ³ΠΎ ΠΏΡ€ΠΈΠΎΡ€ΠΈΡ‚Π΅Ρ‚Π°, связанного с сСтСвой Π΄ΠΎΡΡ‚ΡƒΠΏΠ½ΠΎΡΡ‚ΡŒΡŽ, даСтся всСго нСсколько ΠΌΠΈΠ½ΡƒΡ‚. Π¦Π΅Π½Π° ошибки ΠΈ простоя Ρ‚ΡƒΡ‚, ΠΊΠΎΠ½Π΅Ρ‡Π½ΠΎ, Π²Π½ΡƒΡˆΠΈΡ‚Π΅Π»ΡŒΠ½Π°Ρ.

Π’ ΠΈΡ‚ΠΎΠ³Π΅ ΠΌΡ‹ выявили нСсколько Π½Π°ΠΏΡ€Π°Π²Π»Π΅Π½ΠΈΠΉ сотрудничСства:

  1. ΠΏΠ΅Ρ€Π²Ρ‹ΠΉ этап β€” Π·ΠΎΠ½Ρ‚ΠΈΡ‡Π½Ρ‹ΠΉ ΠΌΠΎΠ½ΠΈΡ‚ΠΎΡ€ΠΈΠ½Π³, для ΠΏΠΎΠ²Ρ‹ΡˆΠ΅Π½ΠΈΡ скорости Ρ€Π΅ΡˆΠ΅Π½ΠΈΡ ΠΈΠ½Ρ†ΠΈΠ΄Π΅Π½Ρ‚ΠΎΠ²
  2. Π²Ρ‚ΠΎΡ€ΠΎΠΉ этап β€” автоматизация процСссов для сниТСния рисков ΠΈ сниТСниС Π·Π°Ρ‚Ρ€Π°Ρ‚ Π½Π° ΠΌΠ°ΡΡˆΡ‚Π°Π±ΠΈΡ€ΠΎΠ²Π°Π½ΠΈΠ΅ ИВ-подраздСлСния.

НСсколько β€œΠ±Π΅Π»Ρ‹Ρ… пятСн” ΠΌΠΎΠΆΠ½ΠΎ Π±Ρ‹Π»ΠΎ Ρ€Π°ΡΠΊΡ€Π°ΡΠΈΡ‚ΡŒ Π² яркиС Ρ†Π²Π΅Ρ‚Π° Π°Π»Π΅Ρ€Ρ‚ΠΎΠ², Ρ‚ΠΎΠ»ΡŒΠΊΠΎ ΠΎΠ±Ρ€Π°Π±ΠΎΡ‚Π°Π² ΠΈΠ½Ρ„ΠΎΡ€ΠΌΠ°Ρ†ΠΈΡŽ ΠΈΠ· Π½Π΅ΡΠΊΠΎΠ»ΡŒΠΊΠΈΡ… систСм ΠΌΠΎΠ½ΠΈΡ‚ΠΎΡ€ΠΈΠ½Π³Π°, Ρ‚Π°ΠΊ ΠΊΠ°ΠΊ Π½Π°ΠΏΡ€ΡΠΌΡƒΡŽ ΡΠ½ΡΡ‚ΡŒ ΠΌΠ΅Ρ‚Ρ€ΠΈΠΊΠΈ Π±Ρ‹Π»ΠΎ нСльзя, Ρ‚Π°ΠΊΠΆΠ΅ Π½ΡƒΠΆΠ½Π° Π±Ρ‹Π»Π° цСнтрализация Π΄Π°Π½Π½Ρ‹Ρ… ΠΈΠ· Ρ€Π°Π·Π½Ρ‹Ρ… систСм ΠΌΠΎΠ½ΠΈΡ‚ΠΎΡ€ΠΈΠ½Π³Π° Π½Π° β€œΠΎΠ΄ΠΈΠ½ экран”, Ρ‡Ρ‚ΠΎΠ±Ρ‹ ΠΏΠΎΠ½ΠΈΠΌΠ°Ρ‚ΡŒ ΠΎΠ±Ρ‰ΡƒΡŽ ΠΊΠ°Ρ€Ρ‚ΠΈΠ½Ρƒ происходящСго. Для этой Π·Π°Π΄Π°Ρ‡ΠΈ подходят β€œΠ·ΠΎΠ½Ρ‚ΠΈΠΊΠΈβ€ ΠΈ ΠΌΡ‹ удовлСтворяли Ρ‚ΠΎΠ³Π΄Π° этим трСбованиям.

ΠžΡ‡Π΅Π½ΡŒ ваТная ΡˆΡ‚ΡƒΠΊΠ°, Π½Π° наш взгляд, Π²ΠΎ Π²Π·Π°ΠΈΠΌΠΎΠΎΡ‚Π½ΠΎΡˆΠ΅Π½ΠΈΡΡ… с ΠΊΠ»ΠΈΠ΅Π½Ρ‚Π°ΠΌΠΈ β€” это Ρ‡Π΅ΡΡ‚Π½ΠΎΡΡ‚ΡŒ. ПослС ΠΏΠ΅Ρ€Π²ΠΎΠ³ΠΎ Ρ€Π°Π·Π³ΠΎΠ²ΠΎΡ€Π° ΠΈ расчСта стоимости Π»ΠΈΡ†Π΅Π½Π·ΠΈΠΈ Π±Ρ‹Π»ΠΎ сказано, Ρ€Π°Π· ΡΡ‚ΠΎΠΈΠΌΠΎΡΡ‚ΡŒ такая нСвысокая, ΠΌΠΎΠΆΠ΅Ρ‚ сразу стоит ΠΊΡƒΠΏΠΈΡ‚ΡŒ Π»ΠΈΡ†Π΅Π½Π·ΠΈΡŽ (ΠΏΠΎ ΡΡ€Π°Π²Π½Π΅Π½ΠΈΡŽ с Dynatrace ΠšΠ»ΡŽΡ‡-Астром ΠΈΠ· ΡΡ‚Π°Ρ‚ΡŒΠΈ Π²Ρ‹ΡˆΠ΅ ΠΏΡ€ΠΎ Π·Π΅Π»Π΅Π½Ρ‹ΠΉ Π±Π°Π½ΠΊ, наша лицСнзия стоит Π½Π΅ Ρ‚Ρ€Π΅Ρ‚ΡŒ ΠΎΡ‚ ΠΌΠΈΠ»Π»ΠΈΠ°Ρ€Π΄Π°, Π° 12 тысяч Ρ€ΡƒΠ±Π»Π΅ΠΉ Π² мСсяц Π·Π° 1 Π³ΠΈΠ³Π°Π±Π°ΠΉΡ‚, для Π‘Π±Π΅Ρ€Π° ΠΎΠ½Π° обошлась Π±Ρ‹ Π² Ρ€Π°Π·Ρ‹ дСшСвлС). Но ΠΌΡ‹ сразу сказали ΠΈΠΌ, Ρ‡Ρ‚ΠΎ Ρƒ нас Π΅ΡΡ‚ΡŒ ΠΈ Ρ‡Ρ‚ΠΎ Π½Π΅Ρ‚. Π‘Ρ‹Ρ‚ΡŒ ΠΌΠΎΠΆΠ΅Ρ‚ сСйл ΠΈΠ· ΠΊΡ€ΡƒΠΏΠ½ΠΎΠ³ΠΎ ΠΈΠ½Ρ‚Π΅Π³Ρ€Π°Ρ‚ΠΎΡ€Π° ΠΌΠΎΠ³ Π±Ρ‹ ΡΠΊΠ°Π·Π°Ρ‚ΡŒ β€œΠ΄Π° ΠΌΡ‹ всС ΠΌΠΎΠΆΠ΅ΠΌ, ΠΊΠΎΠ½Π΅Ρ‡Π½ΠΎ ΠΊΡƒΠΏΠΈΡ‚Π΅ Π½Π°ΡˆΡƒ Π»ΠΈΡ†Π΅Π½Π·ΠΈΡŽβ€, Π½ΠΎ ΠΌΡ‹ Ρ€Π΅ΡˆΠΈΠ»ΠΈ Π²Ρ‹Π»ΠΎΠΆΠΈΡ‚ΡŒ всС ΠΊΠ°Ρ€Ρ‚Ρ‹ Π½Π° стол. Π’ нашСй ΠΊΠΎΡ€ΠΎΠ±ΠΊΠ΅ Π½Π° ΠΌΠΎΠΌΠ΅Π½Ρ‚ старта Π½Π΅ Π±Ρ‹Π»ΠΎ ΠΈΠ½Ρ‚Π΅Π³Ρ€Π°Ρ†ΠΈΠΈ с Prometheus, Π° Ρ‚Π°ΠΊΠΆΠ΅ новая вСрсия с подсистСмой Π°Π²Ρ‚ΠΎΠΌΠ°Ρ‚ΠΈΠ·Π°Ρ†ΠΈΠΈ Π΄ΠΎΠ»ΠΆΠ½Π° Π±Ρ‹Π»Π° Π²ΠΎΡ‚-Π²ΠΎΡ‚ Π²Ρ‹ΠΉΡ‚ΠΈ, Π½ΠΎ ΠΊΠ»ΠΈΠ΅Π½Ρ‚Π°ΠΌ ΠΌΡ‹ Π΅Π΅ Π΅Ρ‰Π΅ Π½Π΅ ΠΎΡ‚Π³Ρ€ΡƒΠΆΠ°Π»ΠΈ.

Начался ΠΏΠΈΠ»ΠΎΡ‚Π½Ρ‹ΠΉ ΠΏΡ€ΠΎΠ΅ΠΊΡ‚, Π±Ρ‹Π»ΠΈ ΠΎΠΏΡ€Π΅Π΄Π΅Π»Π΅Π½Ρ‹ Π΅Π³ΠΎ Π³Ρ€Π°Π½ΠΈΡ†Ρ‹ ΠΈ Π½Π°ΠΌ Π΄Π°Π»ΠΈ 2 мСсяца. ΠžΡΠ½ΠΎΠ²Π½Ρ‹Π΅ Π·Π°Π΄Π°Ρ‡ΠΈ Π±Ρ‹Π»ΠΈ:

  • ΠΏΠΎΠ΄Π³ΠΎΡ‚ΠΎΠ²ΠΈΡ‚ΡŒ Π½ΠΎΠ²ΡƒΡŽ Π²Π΅Ρ€ΡΠΈΡŽ ΠΏΠ»Π°Ρ‚Ρ„ΠΎΡ€ΠΌΡ‹ ΠΈ Ρ€Π°Π·Π²Π΅Ρ€Π½ΡƒΡ‚ΡŒ Π΅Π΅ Π² инфраструктурС Π±Π°Π½ΠΊΠ°
  • ΠΏΠΎΠ΄ΠΊΠ»ΡŽΡ‡ΠΈΡ‚ΡŒ 2 систСмы ΠΌΠΎΠ½ΠΈΡ‚ΠΎΡ€ΠΈΠ½Π³Π° (Zabbix ΠΈ Prometheus);
  • ΠΎΡ‚ΠΏΡ€Π°Π²Π»ΡΡ‚ΡŒ оповСщСния отвСтствСнным Π² Slack ΠΈ ΠΏΠΎ БМБ;
  • Π·Π°ΠΏΡƒΡΠΊΠ°Ρ‚ΡŒ скрипты Π°Π²Ρ‚ΠΎΡ…ΠΈΠ»ΠΈΠ½Π³Π°.

ΠŸΠ΅Ρ€Π²Ρ‹ΠΉ мСсяц ΠΏΠΈΠ»ΠΎΡ‚Π½ΠΎΠ³ΠΎ ΠΏΡ€ΠΎΠ΅ΠΊΡ‚Π° Ρƒ нас ΡƒΡˆΠ΅Π» Π½Π° ΠΏΠΎΠ΄Π³ΠΎΡ‚ΠΎΠ²ΠΊΡƒ Π½ΠΎΠ²ΠΎΠΉ вСрсии ΠΏΠ»Π°Ρ‚Ρ„ΠΎΡ€ΠΌΡ‹ Π² супСрбыстром Ρ€Π΅ΠΆΠΈΠΌΠ΅ для Π½ΡƒΠΆΠ΄ ΠΏΠΈΠ»ΠΎΡ‚Π½ΠΎΠ³ΠΎ ΠΏΡ€ΠΎΠ΅ΠΊΡ‚Π°. Π’ Π½ΠΎΠ²ΡƒΡŽ Π²Π΅Ρ€ΡΠΈΡŽ сразу вошла интСграция с Prometheus ΠΈ Π°Π²Ρ‚ΠΎΡ…ΠΈΠ»ΠΈΠ½Π³. Бпасибо нашСй ΠΊΠΎΠΌΠ°Π½Π΄Π΅ Ρ€Π°Π·Ρ€Π°Π±ΠΎΡ‚ΠΊΠΈ, ΠΎΠ½ΠΈ Π½Π΅ спали нСсколько Π½ΠΎΡ‡Π΅ΠΉ, Π½ΠΎ выпустили ΠΎΠ±Π΅Ρ‰Π°Π½Π½ΠΎΠ΅ Π±Π΅Π· срыва сроков ΠΏΠΎ Π΄Ρ€ΡƒΠ³ΠΈΠΌ взятым Ρ€Π°Π½Π΅Π΅ ΠΎΠ±ΡΠ·Π°Ρ‚Π΅Π»ΡŒΡΡ‚Π²Π°ΠΌ.

Пока настраивали ΠΏΠΈΠ»ΠΎΡ‚ ΡΡ‚ΠΎΠ»ΠΊΠ½ΡƒΠ»ΠΈΡΡŒ с Π½ΠΎΠ²ΠΎΠΉ ΠΏΡ€ΠΎΠ±Π»Π΅ΠΌΠΎΠΉ, которая ΠΌΠΎΠ³Π»Π° Π·Π°ΠΊΡ€Ρ‹Ρ‚ΡŒ ΠΏΡ€ΠΎΠ΅ΠΊΡ‚ досрочно: для ΠΎΡ‚ΠΏΡ€Π°Π²ΠΊΠΈ ΠΎΠΏΠΎΠ²Π΅Ρ‰Π΅Π½ΠΈΠΉ Π² мСссСндТСры ΠΈ ΠΏΠΎ БМБ Π½Π°ΠΌ Π½ΡƒΠΆΠ½Ρ‹ входящиС ΠΈ исходящиС соСдинСния с сСрвСрами Microsoft Azure (Π½Π° Ρ‚ΠΎΡ‚ ΠΌΠΎΠΌΠ΅Π½Ρ‚ ΠΌΡ‹ использовали Π΄Π°Π½Π½ΡƒΡŽ ΠΏΠ»Π°Ρ‚Ρ„ΠΎΡ€ΠΌΡƒ для отсылки ΠΎΠΏΠΎΠ²Π΅Ρ‰Π΅Π½ΠΈΠΉ Π² Slack) ΠΈ внСшним сСрвисом ΠΎΡ‚ΠΏΡ€Π°Π²ΠΊΠΈ БМБ. Но Π² этом ΠΏΡ€ΠΎΠ΅ΠΊΡ‚Π΅ Π±Π΅Π·ΠΎΠΏΠ°ΡΠ½ΠΎΡΡ‚ΡŒ Π±Ρ‹Π»Π° Π² особом фокусС внимания. Π’ соотвСтствия с ΠΏΠΎΠ»ΠΈΡ‚ΠΈΠΊΠΎΠΉ Π±Π°Π½ΠΊΠ° Ρ‚Π°ΠΊΠΈΠ΅ β€œΠ΄Ρ‹Ρ€ΠΊΠΈβ€ Π½Π΅ ΠΌΠΎΠ³Π»ΠΈ Π±Ρ‹Ρ‚ΡŒ ΠΎΡ‚ΠΊΡ€Ρ‹Ρ‚Ρ‹ Π½ΠΈ ΠΏΡ€ΠΈ ΠΊΠ°ΠΊΠΈΡ… условиях. ВсС Π΄ΠΎΠ»ΠΆΠ½ΠΎ Π±Ρ‹Π»ΠΎ Ρ€Π°Π±ΠΎΡ‚Π°Ρ‚ΡŒ ΠΈΠ· Π·Π°ΠΊΡ€Ρ‹Ρ‚ΠΎΠ³ΠΎ ΠΊΠΎΠ½Ρ‚ΡƒΡ€Π°. Нам ΠΏΡ€Π΅Π΄Π»ΠΎΠΆΠΈΠ»ΠΈ ΠΈΡΠΏΠΎΠ»ΡŒΠ·ΠΎΠ²Π°Ρ‚ΡŒ API собствСнных Π²Π½ΡƒΡ‚Ρ€Π΅Π½Π½ΠΈΡ… сСрвисов, ΠΊΠΎΡ‚ΠΎΡ€Ρ‹Π΅ ΠΎΡ‚ΠΏΡ€Π°Π²Π»ΡΡŽΡ‚ оповСщСния Π² Slack ΠΈ ΠΏΠΎ БМБ, Π½ΠΎ Ρƒ нас Π½Π΅ Π±Ρ‹Π»ΠΎ возмоТности ΠΏΠΎΠ΄ΠΊΠ»ΡŽΡ‡ΠΈΡ‚ΡŒ Ρ‚Π°ΠΊΠΈΠ΅ сСрвисы ΠΈΠ· ΠΊΠΎΡ€ΠΎΠ±ΠΊΠΈ.

Π’Π΅Ρ‡Π΅Ρ€ Π΄Π΅Π±Π°Ρ‚ΠΎΠ² с ΠΊΠΎΠΌΠ°Π½Π΄ΠΎΠΉ Ρ€Π°Π·Ρ€Π°Π±ΠΎΡ‚ΠΊΠΈ закончился ΡƒΡΠΏΠ΅ΡˆΠ½Ρ‹ΠΌ поиском Ρ€Π΅ΡˆΠ΅Π½ΠΈΡ. ΠŸΠΎΠΊΠΎΠ²Ρ‹Ρ€ΡΠ² бэклог ΠΌΡ‹ нашли ΠΎΠ΄Π½Ρƒ Π·Π°Π΄Π°Ρ‡Ρƒ, Π½Π° ΠΊΠΎΡ‚ΠΎΡ€ΡƒΡŽ Π½ΠΈΠΊΠΎΠ³Π΄Π° Π½Π΅ Ρ…Π²Π°Ρ‚Π°Π»ΠΎ Π²Ρ€Π΅ΠΌΠ΅Π½ΠΈ ΠΈ ΠΏΡ€ΠΈΠΎΡ€ΠΈΡ‚Π΅Ρ‚Π° β€” ΡΠ΄Π΅Π»Π°Ρ‚ΡŒ ΠΏΠ»Π°Π³ΠΈΠ½Π½ΡƒΡŽ систСму, Ρ‡Ρ‚ΠΎΠ±Ρ‹ ΠΊΠΎΠΌΠ°Π½Π΄Ρ‹ внСдрСния ΠΈΠ»ΠΈ ΠΊΠ»ΠΈΠ΅Π½Ρ‚ сами ΠΌΠΎΠ³Π»ΠΈ ΠΏΠΈΡΠ°Ρ‚ΡŒ дополнСния, Ρ€Π°ΡΡˆΠΈΡ€ΡΡ возмоТности ΠΏΠ»Π°Ρ‚Ρ„ΠΎΡ€ΠΌΡ‹.

Но Ρƒ нас оставался Ρ€ΠΎΠ²Π½ΠΎ мСсяц, Π·Π° ΠΊΠΎΡ‚ΠΎΡ€Ρ‹ΠΉ Π½Π°Π΄ΠΎ Π±Ρ‹Π»ΠΎ всС ΡƒΡΡ‚Π°Π½ΠΎΠ²ΠΈΡ‚ΡŒ, Π½Π°ΡΡ‚Ρ€ΠΎΠΈΡ‚ΡŒ ΠΈ Ρ€Π°Π·Π²Π΅Ρ€Π½ΡƒΡ‚ΡŒ Π°Π²Ρ‚ΠΎΠΌΠ°Ρ‚ΠΈΠ·Π°Ρ†ΠΈΡŽ.

По ΠΎΡ†Π΅Π½ΠΊΠ΅ БСргСя, нашСго Π³Π»Π°Π²Π½ΠΎΠ³ΠΎ Π°Ρ€Ρ…ΠΈΡ‚Π΅ΠΊΡ‚ΠΎΡ€Π°, Π½Π° Π²Π½Π΅Π΄Ρ€Π΅Π½ΠΈΠ΅ ΠΏΠ»Π°Π³ΠΈΠ½Π½ΠΎΠΉ систСмы Π½ΡƒΠΆΠ΅Π½ ΠΌΠΈΠ½ΠΈΠΌΡƒΠΌ мСсяц.

ΠœΡ‹ Π½Π΅ успСвали…

РСшСниС Π±Ρ‹Π»ΠΎ ΠΎΠ΄Π½ΠΎ β€” ΠΈΠ΄Ρ‚ΠΈ ΠΊ ΠΊΠ»ΠΈΠ΅Π½Ρ‚Ρƒ ΠΈ всС Ρ€Π°ΡΡΠΊΠ°Π·Ρ‹Π²Π°Ρ‚ΡŒ, ΠΊΠ°ΠΊ Π΅ΡΡ‚ΡŒ. ВмСстС ΠΎΠ±ΡΡƒΠΆΠ΄Π°Ρ‚ΡŒ сдвиг сроков. И это сработало. Нам Π΄Π°Π»ΠΈ Π΄ΠΎΠΏΠΎΠ»Π½ΠΈΡ‚Π΅Π»ΡŒΠ½ΠΎ 2 Π½Π΅Π΄Π΅Π»ΠΈ. Π£ Π½ΠΈΡ… Ρ‚ΠΎΠΆΠ΅ Π±Ρ‹Π»ΠΈ свои сроки ΠΈ Π²Π½ΡƒΡ‚Ρ€Π΅Π½Π½ΠΈΠ΅ ΠΎΠ±ΡΠ·Π°Ρ‚Π΅Π»ΡŒΡΡ‚Π²Π° ΠΏΠΎΠΊΠ°Π·Π°Ρ‚ΡŒ Ρ€Π΅Π·ΡƒΠ»ΡŒΡ‚Π°Ρ‚Ρ‹, Π½ΠΎ Π±Ρ‹Π»ΠΈ 2 Π½Π΅Π΄Π΅Π»ΠΈ Ρ€Π΅Π·Π΅Ρ€Π²Π½Ρ‹Π΅. Π’ ΠΈΡ‚ΠΎΠ³Π΅ ΠΌΡ‹ всС поставили Π½Π° ΠΊΠ°Ρ€Ρ‚Ρƒ. НСльзя Π±Ρ‹Π»ΠΎ ΠΎΠΏΡ€ΠΎΡΡ‚ΠΎΠ²ΠΎΠ»ΠΎΡΠΈΡ‚ΡŒΡΡ. Π§Π΅ΡΡ‚Π½ΠΎΡΡ‚ΡŒ ΠΈ партнСрский ΠΏΠΎΠ΄Ρ…ΠΎΠ΄ ΠΎΠΏΡΡ‚ΡŒ Π΄Π°Π» свои ΠΏΠ»ΠΎΠ΄Ρ‹.

Π’ Ρ€Π΅Π·ΡƒΠ»ΡŒΡ‚Π°Ρ‚Π΅ ΠΏΠΈΠ»ΠΎΡ‚Π° ΠΏΠΎΠ»ΡƒΡ‡ΠΈΠ»ΠΈ нСсколько Π²Π°ΠΆΠ½Ρ‹Ρ… тСхничСских Ρ€Π΅Π·ΡƒΠ»ΡŒΡ‚Π°Ρ‚ΠΎΠ² ΠΈ Π²Ρ‹Π²ΠΎΠ΄ΠΎΠ²:

ΠžΠΏΡ€ΠΎΠ±ΠΎΠ²Π°Π»ΠΈ Π½ΠΎΠ²Ρ‹ΠΉ Ρ„ΡƒΠ½ΠΊΡ†ΠΈΠΎΠ½Π°Π» ΠΎΠ±Ρ€Π°Π±ΠΎΡ‚ΠΊΠΈ Π°Π»Π΅Ρ€Ρ‚ΠΎΠ²

РазвСрнутая систСма Π½Π°Ρ‡Π°Π»Π° ΠΏΡ€Π°Π²ΠΈΠ»ΡŒΠ½ΠΎ ΠΏΡ€ΠΈΠ½ΠΈΠΌΠ°Ρ‚ΡŒ Π°Π»Π΅Ρ€Ρ‚Ρ‹ ΠΈΠ· Prometheus ΠΈ ΠΏΡ€ΠΎΠΈΠ·Π²ΠΎΠ΄ΠΈΡ‚ΡŒ ΠΈΡ… Π³Ρ€ΡƒΠΏΠΏΠΈΡ€ΠΎΠ²ΠΊΡƒ. АлСрты ΠΏΠΎ ΠΏΡ€ΠΎΠ±Π»Π΅ΠΌΠ΅ ΠΈΠ· Prometheus ΠΊΠ»ΠΈΠ΅Π½Ρ‚Π° Π»Π΅Ρ‚Π΅Π»ΠΈ ΠΊΠ°ΠΆΠ΄Ρ‹Π΅ 30 сСкунд (Π½Π΅ Π²ΠΊΠ»ΡŽΡ‡Π΅Π½Π° Π³Ρ€ΡƒΠΏΠΏΠΈΡ€ΠΎΠ²ΠΊΠ° ΠΏΠΎ Π²Ρ€Π΅ΠΌΠ΅Π½ΠΈ), ΠΈ Π½Π°ΠΌ Π±Ρ‹Π»ΠΎ интСрСсно, ΠΌΠΎΠΆΠ½ΠΎ Π»ΠΈ ΠΈΡ… Π±ΡƒΠ΄Π΅Ρ‚ Π³Ρ€ΡƒΠΏΠΏΠΈΡ€ΠΎΠ²Π°Ρ‚ΡŒ Π² самом β€œΠ·ΠΎΠ½Ρ‚ΠΈΠΊΠ΅β€. Оказалось, Ρ‡Ρ‚ΠΎ ΠΌΠΎΠΆΠ½ΠΎ β€” настройка ΠΎΠ±Ρ€Π°Π±ΠΎΡ‚ΠΊΠΈ Π°Π»Π΅Ρ€Ρ‚ΠΎΠ² Π² ΠΏΠ»Π°Ρ‚Ρ„ΠΎΡ€ΠΌΠ΅ Ρ€Π΅Π°Π»ΠΈΠ·ΠΎΠ²Π°Π½Π° скриптом. Π­Ρ‚ΠΎ Π΄Π°Π΅Ρ‚ Π²ΠΎΠ·ΠΌΠΎΠΆΠ½ΠΎΡΡ‚ΡŒ Ρ€Π΅Π°Π»ΠΈΠ·Π°Ρ†ΠΈΠΈ практичСски любой Π»ΠΎΠ³ΠΈΠΊΠΈ ΠΈΡ… ΠΎΠ±Ρ€Π°Π±ΠΎΡ‚ΠΊΠΈ. Π‘Ρ‚Π°Π½Π΄Π°Ρ€Ρ‚Π½ΡƒΡŽ Π»ΠΎΠ³ΠΈΠΊΡƒ ΠΌΡ‹ ΡƒΠΆΠ΅ Ρ€Π΅Π°Π»ΠΈΠ·ΠΎΠ²Π°Π»ΠΈ Π² ΠΏΠ»Π°Ρ‚Ρ„ΠΎΡ€ΠΌΠ΅ Π² Π²ΠΈΠ΄Π΅ шаблонов β€” Ссли Π½Π΅Ρ‚ ТСлания ΠΏΡ€ΠΈΠ΄ΡƒΠΌΡ‹Π²Π°Ρ‚ΡŒ Ρ‡Ρ‚ΠΎ-Ρ‚ΠΎ своС, ΠΌΠΎΠΆΠ½ΠΎ Π²ΠΎΡΠΏΠΎΠ»ΡŒΠ·ΠΎΠ²Π°Ρ‚ΡŒΡΡ Π³ΠΎΡ‚ΠΎΠ²Ρ‹ΠΌ.

Π—Π°Ρ‡Π΅ΠΌ AIOps ΠΈ Π·ΠΎΠ½Ρ‚ΠΈΡ‡Π½Ρ‹ΠΉ ΠΌΠΎΠ½ΠΈΡ‚ΠΎΡ€ΠΈΠ½Π³ Π±Π°Π½ΠΊΡƒ, ΠΈΠ»ΠΈ Π½Π° Ρ‡Π΅ΠΌ строятся ΠΎΡ‚Π½ΠΎΡˆΠ΅Π½ΠΈΡ с ΠΊΠ»ΠΈΠ΅Π½Ρ‚ΠΎΠΌ

Π˜Π½Ρ‚Π΅Ρ€Ρ„Π΅ΠΉΡ β€œΡΠΈΠ½Ρ‚Π΅Ρ‚ΠΈΡ‡Π΅ΡΠΊΠΎΠ³ΠΎ триггСра”. Настройка ΠΎΠ±Ρ€Π°Π±ΠΎΡ‚ΠΊΠΈ Π°Π»Π΅Ρ€Ρ‚ΠΎΠ² ΠΈΠ· ΠΏΠΎΠ΄ΠΊΠ»ΡŽΡ‡Π΅Π½Π½Ρ‹Ρ… систСм ΠΌΠΎΠ½ΠΈΡ‚ΠΎΡ€ΠΈΠ½Π³Π°

ΠŸΠΎΡΡ‚Ρ€ΠΎΠΈΠ»ΠΈ состояниС Β«Π·Π΄ΠΎΡ€ΠΎΠ²ΡŒΡΒ» систСмы

По Π°Π»Π΅Ρ€Ρ‚Π°ΠΌ создавались события ΠΌΠΎΠ½ΠΈΡ‚ΠΎΡ€ΠΈΠ½Π³Π°, Π²Π»ΠΈΡΡŽΡ‰ΠΈΠ΅ Π½Π° Π·Π΄ΠΎΡ€ΠΎΠ²ΡŒΠ΅ ΠΊΠΎΠ½Ρ„ΠΈΠ³ΡƒΡ€Π°Ρ†ΠΈΠΎΠ½Π½Ρ‹Ρ… Π΅Π΄ΠΈΠ½ΠΈΡ† (ΠšΠ•). ΠœΡ‹ Ρ€Π΅Π°Π»ΠΈΠ·ΡƒΠ΅ΠΌ рСсурсно-ΡΠ΅Ρ€Π²ΠΈΡΠ½ΡƒΡŽ модСль (РБМ), которая ΠΌΠΎΠΆΠ΅Ρ‚ ΠΈΡΠΏΠΎΠ»ΡŒΠ·ΠΎΠ²Π°Ρ‚ΡŒ Π»ΠΈΠ±ΠΎ Π²Π½ΡƒΡ‚Ρ€Π΅Π½Π½ΡŽΡŽ CMDB, Π»ΠΈΠ±ΠΎ ΠΏΠΎΠ΄ΠΊΠ»ΡŽΡ‡ΠΈΡ‚ΡŒ внСшнюю β€” Π½Π° ΠΏΠΈΠ»ΠΎΡ‚Π½ΠΎΠΌ ΠΏΡ€ΠΎΠ΅ΠΊΡ‚Π΅ ΠΊΠ»ΠΈΠ΅Π½Ρ‚ свою CMDB Π½Π΅ ΠΏΠΎΠ΄ΠΊΠ»ΡŽΡ‡Π°Π».

Π—Π°Ρ‡Π΅ΠΌ AIOps ΠΈ Π·ΠΎΠ½Ρ‚ΠΈΡ‡Π½Ρ‹ΠΉ ΠΌΠΎΠ½ΠΈΡ‚ΠΎΡ€ΠΈΠ½Π³ Π±Π°Π½ΠΊΡƒ, ΠΈΠ»ΠΈ Π½Π° Ρ‡Π΅ΠΌ строятся ΠΎΡ‚Π½ΠΎΡˆΠ΅Π½ΠΈΡ с ΠΊΠ»ΠΈΠ΅Π½Ρ‚ΠΎΠΌ

Π˜Π½Ρ‚Π΅Ρ€Ρ„Π΅ΠΉΡ Ρ€Π°Π±ΠΎΡ‚Ρ‹ с рСсурсно-сСрвисной модСлью. ΠŸΠΈΠ»ΠΎΡ‚Π½Π°Ρ РБМ.

Ну ΠΈ, собствСнно, Ρƒ ΠΊΠ»ΠΈΠ΅Π½Ρ‚Π° появился, Π½Π°ΠΊΠΎΠ½Π΅Ρ†, Π΅Π΄ΠΈΠ½Ρ‹ΠΉ экран ΠΌΠΎΠ½ΠΈΡ‚ΠΎΡ€ΠΈΠ½Π³Π°, Π³Π΄Π΅ Π²ΠΈΠ΄Π½ΠΎ события ΠΈΠ· Ρ€Π°Π·Π½Ρ‹Ρ… систСм. На Ρ‚Π΅ΠΊΡƒΡ‰ΠΈΠΉ ΠΌΠΎΠΌΠ΅Π½Ρ‚ ΠΊ β€œΠ·ΠΎΠ½Ρ‚ΠΈΠΊΡƒβ€ ΠΏΠΎΠ΄ΠΊΠ»ΡŽΡ‡Π΅Π½ΠΎ Π΄Π²Π΅ систСмы β€” Zabbix ΠΈ Prometheus, ΠΈ внутрСнняя систСма ΠΌΠΎΠ½ΠΈΡ‚ΠΎΡ€ΠΈΠ½Π³Π° самой ΠΏΠ»Π°Ρ‚Ρ„ΠΎΡ€ΠΌΡ‹.

Π—Π°Ρ‡Π΅ΠΌ AIOps ΠΈ Π·ΠΎΠ½Ρ‚ΠΈΡ‡Π½Ρ‹ΠΉ ΠΌΠΎΠ½ΠΈΡ‚ΠΎΡ€ΠΈΠ½Π³ Π±Π°Π½ΠΊΡƒ, ΠΈΠ»ΠΈ Π½Π° Ρ‡Π΅ΠΌ строятся ΠΎΡ‚Π½ΠΎΡˆΠ΅Π½ΠΈΡ с ΠΊΠ»ΠΈΠ΅Π½Ρ‚ΠΎΠΌ

Π˜Π½Ρ‚Π΅Ρ€Ρ„Π΅ΠΉΡ Π°Π½Π°Π»ΠΈΡ‚ΠΈΠΊΠΈ. Π•Π΄ΠΈΠ½Ρ‹ΠΉ экран ΠΌΠΎΠ½ΠΈΡ‚ΠΎΡ€ΠΈΠ½Π³Π°.

Запустили Π°Π²Ρ‚ΠΎΠΌΠ°Ρ‚ΠΈΠ·Π°Ρ†ΠΈΡŽ процСссов

Бобытия ΠΌΠΎΠ½ΠΈΡ‚ΠΎΡ€ΠΈΠ½Π³Π° ΠΈΠ½ΠΈΡ†ΠΈΠΈΡ€ΠΎΠ²Π°Π»ΠΈ запуск прСднастроСнных дСйствий β€” ΠΎΡ‚ΠΏΡ€Π°Π²ΠΊΡƒ ΠΎΠΏΠΎΠ²Π΅Ρ‰Π΅Π½ΠΈΠΉ, запуск скриптов, Ρ€Π΅Π³ΠΈΡΡ‚Ρ€Π°Ρ†ΠΈΡŽ/ΠΎΠ±ΠΎΠ³Π°Ρ‰Π΅Π½ΠΈΠ΅ ΠΈΠ½Ρ†ΠΈΠ΄Π΅Π½Ρ‚ΠΎΠ² β€” послСднСС Π½Π΅ ΠΏΠΎΠΏΡ€ΠΎΠ±ΠΎΠ²Π°Π»ΠΈ ΠΈΠΌΠ΅Π½Π½ΠΎ с этим ΠΊΠ»ΠΈΠ΅Π½Ρ‚ΠΎΠΌ, Ρ‚.ΠΊ. Π² ΠΏΠΈΠ»ΠΎΡ‚Π½ΠΎΠΌ ΠΏΡ€ΠΎΠ΅ΠΊΡ‚Π΅ Π½Π΅ Π±Ρ‹Π»ΠΎ ΠΈΠ½Ρ‚Π΅Π³Ρ€Π°Ρ†ΠΈΠΈ с сСрвисдСском.

Π—Π°Ρ‡Π΅ΠΌ AIOps ΠΈ Π·ΠΎΠ½Ρ‚ΠΈΡ‡Π½Ρ‹ΠΉ ΠΌΠΎΠ½ΠΈΡ‚ΠΎΡ€ΠΈΠ½Π³ Π±Π°Π½ΠΊΡƒ, ΠΈΠ»ΠΈ Π½Π° Ρ‡Π΅ΠΌ строятся ΠΎΡ‚Π½ΠΎΡˆΠ΅Π½ΠΈΡ с ΠΊΠ»ΠΈΠ΅Π½Ρ‚ΠΎΠΌ

Π˜Π½Ρ‚Π΅Ρ€Ρ„Π΅ΠΉΡ настройки дСйствий. ΠžΡ‚ΠΏΡ€Π°Π²ΠΊΠ° ΠΎΠΏΠΎΠ²Π΅Ρ‰Π΅Π½ΠΈΠΉ Π² Slack ΠΈ ΠΏΠ΅Ρ€Π΅Π·Π°Π³Ρ€ΡƒΠ·ΠΊΠ° сСрвСра.

Π Π°ΡΡˆΠΈΡ€ΠΈΠ»ΠΈ Ρ„ΡƒΠ½ΠΊΡ†ΠΈΠΎΠ½Π°Π» ΠΏΡ€ΠΎΠ΄ΡƒΠΊΡ‚Π°

ΠŸΡ€ΠΈ обсуТдСнии скриптов Π°Π²Ρ‚ΠΎΠΌΠ°Ρ‚ΠΈΠ·Π°Ρ†ΠΈΠΈ ΠΊΠ»ΠΈΠ΅Π½Ρ‚ просил ΠΏΠΎΠ΄Π΄Π΅Ρ€ΠΆΠΊΡƒ bΠ°sh ΠΈ интСрфСйс, Π² ΠΊΠΎΡ‚ΠΎΡ€ΠΎΠΌ эти скрипты ΠΌΠΎΠΆΠ½ΠΎ Π±Ρ‹Π»ΠΎ Π±Ρ‹ ΡƒΠ΄ΠΎΠ±Π½ΠΎ Π½Π°ΡΡ‚Ρ€Π°ΠΈΠ²Π°Ρ‚ΡŒ. Π’ Π½ΠΎΠ²ΠΎΠΉ вСрсии Π±Ρ‹Π»ΠΎ сдСлано Ρ‡ΡƒΡ‚ΡŒ большС (Π²ΠΎΠ·ΠΌΠΎΠΆΠ½ΠΎΡΡ‚ΡŒ написания ΠΏΠΎΠ»Π½ΠΎΡ†Π΅Π½Π½Ρ‹Ρ… логичСских конструкций Π½Π° Lua с ΠΏΠΎΠ΄Π΄Π΅Ρ€ΠΆΠΊΠΎΠΉ cURL, SSH ΠΈ SNMP) ΠΈ Ρ€Π΅Π°Π»ΠΈΠ·ΠΎΠ²Π°Π½ Ρ„ΡƒΠ½ΠΊΡ†ΠΈΠΎΠ½Π°Π», ΠΏΠΎΠ·Π²ΠΎΠ»ΡΡŽΡ‰ΠΈΠΉ ΡƒΠΏΡ€Π°Π²Π»ΡΡ‚ΡŒ ΠΆΠΈΠ·Π½Π΅Π½Π½Ρ‹ΠΌ Ρ†ΠΈΠΊΠ»ΠΎΠΌ скрипта (ΡΠΎΠ·Π΄Π°Π²Π°Ρ‚ΡŒ, Ρ€Π΅Π΄Π°ΠΊΡ‚ΠΈΡ€ΠΎΠ²Π°Ρ‚ΡŒ, ΡƒΠΏΡ€Π°Π²Π»ΡΡ‚ΡŒ вСрсиями, ΡƒΠ΄Π°Π»ΡΡ‚ΡŒ ΠΈ Π°Ρ€Ρ…ΠΈΠ²ΠΈΡ€ΠΎΠ²Π°Ρ‚ΡŒ).

Π—Π°Ρ‡Π΅ΠΌ AIOps ΠΈ Π·ΠΎΠ½Ρ‚ΠΈΡ‡Π½Ρ‹ΠΉ ΠΌΠΎΠ½ΠΈΡ‚ΠΎΡ€ΠΈΠ½Π³ Π±Π°Π½ΠΊΡƒ, ΠΈΠ»ΠΈ Π½Π° Ρ‡Π΅ΠΌ строятся ΠΎΡ‚Π½ΠΎΡˆΠ΅Π½ΠΈΡ с ΠΊΠ»ΠΈΠ΅Π½Ρ‚ΠΎΠΌ

Π˜Π½Ρ‚Π΅Ρ€Ρ„Π΅ΠΉΡ Ρ€Π°Π±ΠΎΡ‚Ρ‹ со скриптами Π°Π²Ρ‚ΠΎΡ…ΠΈΠ»ΠΈΠ½Π³Π°. Π‘ΠΊΡ€ΠΈΠΏΡ‚ ΠΏΠ΅Ρ€Π΅Π·Π°Π³Ρ€ΡƒΠ·ΠΊΠΈ сСрвСра ΠΏΠΎ SSH.

ΠžΡΠ½ΠΎΠ²Π½Ρ‹Π΅ Π²Ρ‹Π²ΠΎΠ΄Ρ‹

Π’ΠΎ врСмя ΠΏΠΈΠ»ΠΎΡ‚Π° Ρ‚Π°ΠΊΠΆΠ΅ Π±Ρ‹Π»ΠΈ сформированы ΡŽΠ·Π΅Ρ€ΡΡ‚ΠΎΡ€ΠΈΡ, ΠΊΠΎΡ‚ΠΎΡ€Ρ‹Π΅ ΡƒΠ»ΡƒΡ‡ΡˆΠ°ΡŽΡ‚ Ρ‚Π΅ΠΊΡƒΡ‰ΠΈΠΉ Ρ„ΡƒΠ½ΠΊΡ†ΠΈΠΎΠ½Π°Π» ΠΈ ΠΏΠΎΠ²Ρ‹ΡˆΠ°ΡŽΡ‚ Ρ†Π΅Π½Π½ΠΎΡΡ‚ΡŒ для ΠΊΠ»ΠΈΠ΅Π½Ρ‚Π°, Π²ΠΎΡ‚ Π½Π΅ΠΊΠΎΡ‚ΠΎΡ€Ρ‹Π΅ ΠΈΠ· Π½ΠΈΡ…:

  • Ρ€Π΅Π°Π»ΠΈΠ·ΠΎΠ²Π°Ρ‚ΡŒ Π²ΠΎΠ·ΠΌΠΎΠΆΠ½ΠΎΡΡ‚ΡŒ проброса ΠΏΠ΅Ρ€Π΅ΠΌΠ΅Π½Π½Ρ‹Ρ… нСпосрСдствСнно ΠΈΠ· Π°Π»Π»Π΅Ρ€Ρ‚Π° Π² скрипт Π°Π²Ρ‚ΠΎΡ…ΠΈΠ»ΠΈΠ½Π³Π°;
  • Π΄ΠΎΠ±Π°Π²ΠΈΡ‚ΡŒ Π½Π° ΠΏΠ»Π°Ρ‚Ρ„ΠΎΡ€ΠΌΠ΅ Π°Π²Ρ‚ΠΎΡ€ΠΈΠ·Π°Ρ†ΠΈΡŽ Ρ‡Π΅Ρ€Π΅Π· Active Directory.

И ΠΏΠΎΠ»ΡƒΡ‡ΠΈΠ»ΠΈ Π±ΠΎΠ»Π΅Π΅ Π³Π»ΠΎΠ±Π°Π»ΡŒΠ½Ρ‹Π΅ Π²Ρ‹Π·ΠΎΠ²Ρ‹ для нас β€” β€œΠ½Π°Ρ€Π°ΡΡ‚ΠΈΡ‚ΡŒβ€ ΠΏΡ€ΠΎΠ΄ΡƒΠΊΡ‚ Π΄Ρ€ΡƒΠ³ΠΈΠΌΠΈ возмоТностями:

  • автопостроСниСм рСсурсно-сСрвисной ΠΌΠΎΠ΄Π΅Π»ΠΈ Π½Π° основС ML, Π° Π½Π΅ ΠΏΡ€Π°Π²ΠΈΠ» ΠΈ Π°Π³Π΅Π½Ρ‚ΠΎΠ² (Π½Π°Π²Π΅Ρ€Π½ΠΎΠ΅, Π³Π»Π°Π²Π½Ρ‹ΠΉ Π²Ρ‹Π·ΠΎΠ² сСйчас);
  • ΠΏΠΎΠ΄Π΄Π΅Ρ€ΠΆΠΊΠΎΠΉ Π΄ΠΎΠΏΠΎΠ»Π½ΠΈΡ‚Π΅Π»ΡŒΠ½Ρ‹Ρ… языков скриптования ΠΈ Π»ΠΎΠ³ΠΈΠΊΠΈ (ΠΈ это Π±ΡƒΠ΄Π΅Ρ‚ JavaScript).

На ΠΌΠΎΠΉ взгляд, самоС Π³Π»Π°Π²Π½ΠΎΠ΅, Ρ‡Ρ‚ΠΎ ΠΏΠΎΠΊΠ°Π·Ρ‹Π²Π°Π΅Ρ‚ Π΄Π°Π½Π½Ρ‹ΠΉ ΠΏΠΈΠ»ΠΎΡ‚, это Π΄Π²Π΅ Π²Π΅Ρ‰ΠΈ:

  1. ΠŸΠ°Ρ€Ρ‚Π½Π΅Ρ€ΡΠΊΠΈΠ΅ ΠΎΡ‚Π½ΠΎΡˆΠ΅Π½ΠΈΡ с ΠΊΠ»ΠΈΠ΅Π½Ρ‚ΠΎΠΌ β€” Π·Π°Π»ΠΎΠ³ эффСктивности, ΠΊΠΎΠ³Π΄Π° Π½Π° Π±Π°Π·Π΅ чСстности ΠΈ открытости строится эффСктивная коммуникация, ΠΈ ΠΊΠ»ΠΈΠ΅Π½Ρ‚ становится Ρ‡Π°ΡΡ‚ΡŒΡŽ ΠΊΠΎΠΌΠ°Π½Π΄Ρ‹, которая Π·Π° ΠΊΠΎΡ€ΠΎΡ‚ΠΊΠΈΠ΅ сроки добиваСтся Π·Π½Π°Ρ‡ΠΈΡ‚Π΅Π»ΡŒΠ½Ρ‹Ρ… Ρ€Π΅Π·ΡƒΠ»ΡŒΡ‚Π°Ρ‚ΠΎΠ².
  2. Ни ΠΏΡ€ΠΈ ΠΊΠ°ΠΊΠΈΡ… условиях Π½Π΅ Π½Π°Π΄ΠΎ β€œΠΊΠ°ΡΡ‚ΠΎΠΌΠΈΡ‚ΡŒβ€ ΠΈ ΡΡ‚Ρ€ΠΎΠΈΡ‚ΡŒ β€œΠΊΠΎΡΡ‚Ρ‹Π»ΠΈβ€ β€” Ρ‚ΠΎΠ»ΡŒΠΊΠΎ систСмныС Ρ€Π΅ΡˆΠ΅Π½ΠΈΡ. Π›ΡƒΡ‡ΡˆΠ΅ ΠΏΠΎΡ‚Ρ€Π°Ρ‚ΠΈΡ‚ΡŒ Ρ‡ΡƒΡ‚ΡŒ большС Π²Ρ€Π΅ΠΌΠ΅Π½ΠΈ, Π½ΠΎ ΡΠ΄Π΅Π»Π°Ρ‚ΡŒ систСмноС Ρ€Π΅ΡˆΠ΅Π½ΠΈΠ΅, ΠΊΠΎΡ‚ΠΎΡ€ΠΎΠ΅ Π±ΡƒΠ΄Π΅Ρ‚ ΠΈΡΠΏΠΎΠ»ΡŒΠ·ΠΎΠ²Π°Ρ‚ΡŒΡΡ ΠΈ Ρƒ Π΄Ρ€ΡƒΠ³ΠΈΡ… ΠΊΠ»ΠΈΠ΅Π½Ρ‚ΠΎΠ². ΠšΡΡ‚Π°Ρ‚ΠΈ, Ρ‚Π°ΠΊ ΠΈ Π²Ρ‹ΡˆΠ»ΠΎ, плагинная систСма ΠΈ ΠΎΡ‚ΠΊΠ°Π· ΠΎΡ‚ зависимости с Azure, Π΄Π°Π»ΠΈ Π΄ΠΎΠΏΠΎΠ»Π½ΠΈΡ‚Π΅Π»ΡŒΠ½ΡƒΡŽ Ρ†Π΅Π½Π½ΠΎΡΡ‚ΡŒ ΠΈ Π΄Ρ€ΡƒΠ³ΠΈΠΌ ΠΊΠ»ΠΈΠ΅Π½Ρ‚Π°ΠΌ (ΠΏΡ€ΠΈΠ²Π΅Ρ‚, 152ΠΎΠΉ Π€Π—).

Π˜ΡΡ‚ΠΎΡ‡Π½ΠΈΠΊ: habr.com