勤務体制の整理とアラートのルーティングを行うシステム、IncidentRelay 2.0をリリースしました。

オンコール管理、アラートルーティング、インシデント対応のためのオープンソースシステムであるIncidentRelay 2.0がリリースされました。オンプレミスのサーバーにデプロイ可能です。このプロジェクトは、クラウドベースのオンコール管理プラットフォームに代わるオンプレミスソリューションを求めるSRE、DevOps、インフラストラクチャチームを対象としています。コードはPythonで記述されており、MITライセンスで配布されています。

IncidentRelayは、Prometheus Alertmanager、Grafana Alerting、Zabbix、Sentry、LibreNMS、RMON、AWS SNS/CloudWatch、Datadog、Uptime Kuma、およびカスタムWebhookハンドラーからのイベントを受け入れます。イベントは正規化後、サービス、チーム、およびローテーションに関連付けられ、ルーティングルールとエスカレーションポリシーが適用され、現在担当中のハンドラーに通知が送信されます。サポートされている配信方法には、Mattermost、Slack、Telegram、Discord、Microsoft Teams、メール、Webhook、ブラウザ/PWAプッシュ、および音声通話プロバイダーが含まれます。

バージョン2.0の主な革新点は、イベントオーケストレーションメカニズムです。これにより、受信する統合とアラートライフサイクルの間に、独立したイベント処理レイヤーが提供されます。主な変更点は以下のとおりです。

• 視覚的なオーケストレーションルールエディタが追加されました。ルールはグローバルに適用することも、特定のサービスに適用することもでき、ネストされた条件グループにグループ化し、優先度、重要度レベル、ラベル、コマンド、ルート、グループ化方法、通知ポリシー、エスカレーションなどを順次変更できます。
• イベント処理の抑制、破棄、一時停止、正規表現とJSONパスを使用した値の抽出、文字列の分割、変数の作成、値の変換などのアクションを実装しました。
• オーケストレーション構成は、編集可能なドラフトと変更不可能な公開バージョンに分けられます。構成のレビュー、公開、以前のバージョンへの復元、変更へのコメントの追加がサポートされています。
• 無効モード、シャドウモード、アクティブモードが利用可能です。シャドウモードでは、ルール実行結果は分析のために保存されますが、実際のルーティングには影響しません。レガシーモード、ハイブリッドモード、オーケストレーション互換モードは、移行期間中利用可能です。
• イベントシミュレーションおよびリプレイツールが追加されました。これらのツールを使用すると、実際のアラートを生成することなく、正規化されたイベントまたは元の統合ペイロードに対してルールをテストできます。実行トレース、説明データ、およびシャドウモードのメトリックが提供され、結果を分析できます。
• 再利用可能なWebhookアクションが実装されており、イベント処理後に非同期で実行されます。ヘッダーは暗号化されて保存され、シークレットはAPIとログに隠蔽され、プライベートネットワークへのアクセスはデフォルトで禁止されています。タイムアウト、再試行、および許可された内部アドレスのリストを設定できます。
• 監視ステータスに関する標準的なウェブフックメッセージを受け入れるUptime Kumaとの連携機能を追加しました。稼働状況の正規化、重要度検出、タグ処理、および新しい受信ルートタイプであるuptime_kumaが実装されています。
• apply_to_existing および reactivate_on_end パラメータが、サイレンスとスケジュールされた作業ウィンドウに追加されました。前者は既に開いているアラートに抑制を適用し、後者は抑制期間終了後に処理を再開するかどうかを決定します。通知、リマインダー、エスカレーションチェーンは一時停止および復元されます。
• 個人用APIトークンについては、グループ、チーム、ユーザー、ルート、チャネル、サービス、ローテーション、ポリシー、メンテナンスウィンドウ、ハートビートチェック、SSO、オーケストレーションごとに、読み取り権限と変更権限が個別に導入されました。以前の集約型リソース:読み取り、リソース:書き込み、および*権限は、下位互換性のために保持されています。
• フィルタリングとページネーション機能を備えた監査ログインターフェースが追加されました。このログには、オーケストレーション、Webhook、サイレンス、スケジュールされた作業ウィンドウに関連する操作が記録され、表示されるデータから機密性の高い値は削除されます。
• ウェブインターフェースにダークテーマが追加され、ユーザー定義の言語およびデザイン設定が可能になりました。フランス語のローカライズが追加され、オーケストレーションおよびメンテナンスセクションの翻訳が拡充され、SSOグループのマッチングルールの編集機能が改善されました。
• ハートビートチェックの改善：期限切れイベントの繰り返し作成を排除し、信号回復時にアラートを正しく閉じ、問題が解決されたことを通知し、タイムスタンプの表示を標準化しました。
• Helm を使用した Kubernetes デプロイメントに関するドキュメントが作成されました。インシデントの対話型確認ボタンとクローズボタンに必要な、専用の Slack ソケットモードハンドラーが Helm チャートに追加されました。
• 送信HTTPリクエスト、正規表現、機密データのセキュリティを強化し、UTCとタイムゾーンの処理を一元化し、ローテーションスケジュールの計算方法を見直し、自動テストの対象範囲を拡大しました。

アップグレードを行う前に、データベースのバックアップを作成することをお勧めします。必要なスキーマ変更は、IncidentRelayに組み込まれている移行メカニズムを使用して実行されます。イベントオーケストレーションを段階的に導入するには、まずシャドウモードとハイブリッドモードを使用し、ルール実行トレースを確認してから、アクティブモードに切り替えることを開発者は推奨しています。

出所： オープンネット.ru