IncidentRelay — ein offenes System zur Organisation von Diensten und zur Routing von Benachrichtigungen

Das Projekt IncidentRelay wurde veröffentlicht, das ein offenes System zur Organisation von Bereitschaften, der Routenplanung von Benachrichtigungen und der Bearbeitung von Vorfällen entwickelt, das auf einem eigenen Server (self-hosted) betrieben wird. Das Projekt richtet sich an SRE-, DevOps- und Infrastrukturteams, die eine lokal einsetzbare Alternative zu SaaS-Diensten für das Management von Bereitschaften (on-call management), die Anwendung von Eskalationsrichtlinien und das Incident-Response benötigen. Der Code des Projekts ist in Python geschrieben und wird unter der MIT-Lizenz verbreitet.

IncidentRelay empfängt Ereignisse aus Überwachungssystemen, vergleicht sie mit Routenregel und leitet Benachrichtigungen an die verantwortlichen Bereitschaften oder Teams weiter. Das System unterstützt Dienstpläne, Rotationen, Überstellungen von Schichten, die Bestätigung des Erhalts eines Vorfalls, die Übergabe eines Vorfalls an resolved, Erinnerungen, Eskalationen und Silences zur Unterdrückung bekannter oder geplanter Auslösungen.

Es wird die Empfang von Ereignissen aus Prometheus Alertmanager, Zabbix und beliebigen Webhooks unterstützt. Um Benachrichtigungen zu senden, gibt es Kanäle wie Mattermost, Telegram, E-Mail, Webhook und Sprachprovider. In Mattermost und Telegram können die Benachrichtigungen Aktionen zur Bestätigung und Lösung des Problems enthalten, was es ermöglicht, einen Vorfall zu bearbeiten, ohne in eine separate Benutzeroberfläche wechseln zu müssen.

In IncidentRelay ist ein Modell zur Trennung des Zugangs nach Gruppen und Teams vorgesehen. Dies ermöglicht es, die Sichtbarkeit von Dienstplänen, Routen, Benachrichtigungskanälen und Alarmen zwischen verschiedenen Teams zu unterteilen. Für die Automatisierung steht eine HTTP-API zur Verfügung, und für Integrationen werden Bearer-Tokens und Route-Tokens verwendet.

Das Projekt kann als Zwischenschicht zwischen Überwachungssystemen und Benachrichtigungskanälen verwendet werden: Alertmanager oder Zabbix sendet ein Ereignis an IncidentRelay, nach dem das System das Team, den aktuellen Bereitschaftsleiter bestimmt, die Routenregel anwendet und die Benachrichtigung an den richtigen Kanal sendet. Für nicht bestätigte Vorfälle können Erinnerungen und Eskalationen an den nächsten Teilnehmer der Rotation durchgeführt werden.

Quelle: opennet.ru