IncidentRelay — avatud süsteem valvekeikade korraldamiseks ja teavituste suunamiseks

Avaldatud on projekt IncidentRelay, mis arendab avatud süsteemi vahetustega, häirete suunamise ja juhtumite käsitlemise korraldamiseks, mida saab haldada oma serveris (self-hosted). Projekt on suunatud SRE, DevOps ja infrastruktuuri meeskondadele, kes vajavad kohapealset alternatiivi SaaS-teenustele vahetuste korraldamiseks (on-call management), eskaleerimisreeglite rakendamiseks ja juhtumite reageerimiseks. Projekti kood on kirjutatud Pythonis ja jaotatakse MIT litsentsi alusel.

IncidentRelay võtab vastu teateid jälgimissüsteemidest, seondab need suunamisreeglitega ja edastab teated vastutavatele vahetusliikmetele või meeskondadele. Süsteemis on rakendatud vahetuste ajakavad, rotatsioonid, vahetuste ülekirjutamine, juhtumi vastuvõtmise kinnitamine, juhtumi muutmine olekusse resolved, meenutused, eskaleerimine ja silenced'i funktsioon tuntud või planeeritud sündmuste summutamiseks.

Toetatakse sündmuste vastuvõtmist Prometheuse Alertmanagerist, Zabbixist ja suvalistest webhook'idest. Teadete saatmiseks on ette nähtud kanalid Mattermost, Telegram, e-post, webhook ja hääleteenuse pakkujad. Mattermostis ja Telegramis võivad teated sisaldada toimingute kinnitusi, mis võimaldavad probleemiga tegeleda ilma eraldi liidesesse minemata.

IncidentRelay's on nahaldus mudel rühmade ja meeskondade põhjal. See võimaldab piirata ajakavad, marsruudid, teavitamiskanaleid ja häireid erinevate meeskondade vahel. Automaatika jaoks on saadaval HTTP API, integreerimiste jaoks kasutatakse bearer-token'e ja marsruudi token'e.

Projekt võib toimida vahekihina jälgimissüsteemide ja teavitamiskanali vahel: Alertmanager või Zabbix saadab sündmuse IncidentRelay'sse, mille järel süsteem määrab meeskonna, praeguse vahetusliikme, rakendab suunamisreegleid ja edastab teate õigesse kanalisse. Kinnitamata juhtumite puhul võivad toimuda korduvad meenutused ja eskaleerimine järgmisele rotatsiooni osalejale.

Allikas: opennet.ru