જટિલ ચેતવણીઓ સાથે સરળ કાર્ય. અથવા બેલેર્ટરની રચનાનો ઇતિહાસ

દરેક વ્યક્તિને ચેતવણીઓ પસંદ છે.

અલબત્ત, બેસીને આલેખ જોવા અને વિસંગતતાઓ જોવા કરતાં કંઈક બન્યું હોય (અથવા નિશ્ચિત કરવામાં આવ્યું હોય) ત્યારે જાણ કરવી વધુ સારું છે.

અને આ માટે ઘણા સાધનો બનાવવામાં આવ્યા છે. પ્રોમિથિયસ ઇકોસિસ્ટમ તરફથી ચેતવણી વ્યવસ્થાપક અને VictoriaMetrics ઉત્પાદન જૂથમાંથી vmalert. Grafana માં Zabbix સૂચનાઓ અને ચેતવણીઓ. બેશ અને ટેલિગ્રામ બૉટોમાં સ્વ-લિખિત સ્ક્રિપ્ટો જે સમયાંતરે અમુક URL ખેંચે છે અને તમને જણાવે છે કે શું કંઈક ખોટું છે. ઘણું બધું.

અમે, અમારી કંપનીમાં, જ્યાં સુધી અમે જટિલતા, અથવા તેના બદલે, જટિલ, સંયુક્ત ચેતવણીઓ બનાવવાની અશક્યતામાં ન પહોંચીએ ત્યાં સુધી વિવિધ ઉકેલોનો પણ ઉપયોગ કર્યો. અમે શું ઇચ્છતા હતા અને અમે શું કરવાનું સમાપ્ત કર્યું તે કટની નીચે છે. TLDR: ઓપન સોર્સ પ્રોજેક્ટ આ રીતે દેખાયો બેલેર્ટર

ઘણા લાંબા સમય સુધી અમે Grafana માં ગોઠવેલ ચેતવણીઓ સાથે સારી રીતે જીવ્યા. હા, આ શ્રેષ્ઠ માર્ગ નથી. હંમેશા કેટલાક વિશિષ્ટ ઉકેલોનો ઉપયોગ કરવાની ભલામણ કરવામાં આવે છે, જેમ કે Alertmanager. અને અમે પણ એક કરતા વધુ વાર આગળ વધવા તરફ જોયું. અને પછી, ધીમે ધીમે, અમે વધુ ઇચ્છતા હતા.

કહો કે જ્યારે ચોક્કસ ચાર્ટમાં XX% નો ઘટાડો/વધારો થયો હોય અને M કલાકના અગાઉના સમયગાળાની સરખામણીમાં N મિનિટ સુધી રહ્યો હોય? એવું લાગે છે કે તમે Grafana અથવા Alertmanager સાથે આને અમલમાં મૂકવાનો પ્રયાસ કરી શકો છો, પરંતુ તે એકદમ સરળ નથી. (અથવા કદાચ તે શક્ય નથી, હું હવે કહીશ નહીં)

જ્યારે ચેતવણીનો નિર્ણય વિવિધ સ્ત્રોતોના ડેટાના આધારે લેવો જોઈએ ત્યારે વસ્તુઓ વધુ જટિલ બને છે. જીવંત ઉદાહરણ:

અમે બે ક્લિકહાઉસ ડેટાબેસેસમાંથી ડેટા તપાસીએ છીએ, પછી પોસ્ટગ્રેસના કેટલાક ડેટા સાથે તેની તુલના કરીએ છીએ અને ચેતવણી નક્કી કરીએ છીએ. સિગ્નલ અથવા રદ કરો

અમે અમારા નિર્ણય વિશે વિચારવા માટે ઘણી બધી સમાન ઇચ્છાઓ એકઠી કરી છે. અને પછી અમે આ સેવાની આવશ્યકતાઓ/ક્ષમતાઓની પ્રથમ સૂચિ સંકલિત કરવાનો પ્રયાસ કર્યો, જે હજી સુધી બનાવવામાં આવી નથી.

• વિવિધ ડેટા સ્ત્રોતોને ઍક્સેસ કરો. ઉદાહરણ તરીકે, પ્રોમિથિયસ, ક્લિકહાઉસ, પોસ્ટગ્રેસ

• વિવિધ ચેનલો પર ચેતવણીઓ મોકલો - ટેલિગ્રામ, સ્લેક, વગેરે.

• વિચારવાની પ્રક્રિયામાં, તે સ્પષ્ટ થઈ ગયું કે મારે ઘોષણાત્મક વર્ણન નથી જોઈતું, પરંતુ સ્ક્રિપ્ટો લખવાની ક્ષમતા જોઈએ છે

• શેડ્યૂલ પર સ્ક્રિપ્ટો ચલાવવી

• સેવાને પુનઃપ્રારંભ કર્યા વિના સ્ક્રિપ્ટનું સરળ અપડેટ

• સ્ત્રોત કોડ્સમાંથી સેવાને પુનઃનિર્માણ કર્યા વિના કોઈક રીતે કાર્યક્ષમતાને વિસ્તૃત કરવાની ક્ષમતા

આ સૂચિ અંદાજિત છે અને સંભવતઃ ખૂબ સચોટ નથી. કેટલાક મુદ્દા બદલાયા, કેટલાક મૃત્યુ પામ્યા. બધું રાબેતા મુજબ છે.

વાસ્તવમાં, બેલેર્ટરનો ઇતિહાસ આ રીતે શરૂ થયો.

હું અંતમાં શું થયું અને તે કેવી રીતે કાર્ય કરે છે તેનું ટૂંકમાં વર્ણન કરવાનો પ્રયાસ કરીશ. (હા, અલબત્ત, આ અંત નથી. પ્રોડક્ટ ડેવલપમેન્ટ માટે ઘણી યોજનાઓ છે. હું આજે જ રોકાઈશ)

તે કેવી રીતે કામ કરે છે?

તમે લુઆમાં એક સ્ક્રિપ્ટ લખો છો જ્યાં તમે સ્પષ્ટપણે વિનંતીઓ મોકલો છો (પ્રોમિથિયસ, ક્લિકહાઉસ, વગેરેને). તમે જવાબો પ્રાપ્ત કરો છો અને કોઈક રીતે પ્રક્રિયા કરો છો અને તેમની તુલના કરો છો. પછી અમુક પ્રકારની ચેતવણી ચાલુ/બંધ કરો. તમે કન્ફિગર કરેલ ચેનલો (ઈમેલ, ટેલિગ્રામ, સ્લેક, વગેરે) પર બેલેર્ટર પોતે જ એક સૂચના મોકલશે. સ્ક્રિપ્ટ નિર્દિષ્ટ અંતરાલો પર ચલાવવામાં આવે છે. અને... સામાન્ય રીતે, બસ એટલું જ)

ઉદાહરણ સાથે બતાવવાનું શ્રેષ્ઠ છે:

-- @interval 10s
-- @name script1

local minRequestsRPS = 100

local log = require("log")
local ch1 = require("datasource.clickhouse.ch1")

local res, err = ch1.query("SELECT sum(requests) AS rps FROM some_table WHERE date = now()")
if err ~= nil then
    log.error("clickhouse 'ch1' query error: " .. err)
    return
end

local resultRPS = res[1].rps

if resultRPS < minResultRPS then
    alert.error("rps-min-limit", "Requests RPS are very small: " .. tostring(resultRPS))
else
    alert.success("rps-min-limit", "Requests RPS ok")
end 

અહિયાં શું થઇ રહ્યું છે:

• અમે સૂચવીએ છીએ કે આ સ્ક્રિપ્ટ દર 10 સેકન્ડે એક્ઝિક્યુટ થવી જોઈએ

• સ્ક્રિપ્ટનું નામ સૂચવો (એપીઆઈ માટે, લોગમાં પ્રદર્શન માટે, પરીક્ષણોમાં ઉપયોગ માટે)

• આઉટપુટ લોગ માટે મોડ્યુલને જોડો

• નામ સાથે ક્લિકહાઉસને ઍક્સેસ કરવા માટે મોડ્યુલને જોડો ch1 (કનેક્શન પોતે રૂપરેખાંકનમાં ગોઠવેલ છે)

• ક્લિકહાઉસને વિનંતી મોકલો

• ભૂલના કિસ્સામાં, અમે લોગમાં એક સંદેશ પ્રદર્શિત કરીએ છીએ અને બહાર નીકળો

• ક્વેરી પરિણામની તુલના સતત સાથે કરો (જીવંત ઉદાહરણમાં, અમે આ મૂલ્ય મેળવી શકીએ છીએ, ઉદાહરણ તરીકે, પોસ્ટગ્રેસ ડેટાબેઝમાંથી)

• ID સાથે ચેતવણીને સક્ષમ અથવા અક્ષમ કરો rps-min-limit

• જો ચેતવણીની સ્થિતિ બદલાઈ ગઈ હોય તો તમને એક સૂચના પ્રાપ્ત થશે

ઉદાહરણ એકદમ સરળ અને સમજી શકાય તેવું છે. જો કે, અલબત્ત, વાસ્તવિક જીવનમાં સ્ક્રિપ્ટો ખૂબ લાંબી અને જટિલ હોઈ શકે છે. મૂંઝવણમાં પડવું અને ભૂલો કરવી સરળ છે.

તેથી, તાર્કિક ઇચ્છા પરિપક્વ થઈ ગઈ છે - તમારી સ્ક્રિપ્ટો માટે પરીક્ષણો લખવામાં સમર્થ થવા માટે. અને સંસ્કરણ v0.4.0 માં આ દેખાયું.

પરીક્ષણ સ્ક્રિપ્ટો

ઉપરના ઉદાહરણમાંથી અમારી સ્ક્રિપ્ટ માટેનું ઉદાહરણ પરીક્ષણ:

-- @test script1
-- @name script1-test

test = require('test')

local resp = {
    {
        rps = 10
    }
} 

test.datasource('clickhouse.ch1').on('query', 'SELECT sum(requests) AS rps FROM some_table WHERE date = now()').response(resp)

test.alert().assertCalled('error', 'rps-min-limit', 'Requests RPS are very small: 10')
test.alert().assertNotCalled('success', 'rps-min-limit', 'Requests RPS ok')

પગલાંઓ:

• સ્ક્રિપ્ટનું નામ સૂચવો કે જેના માટે પરીક્ષણ લખવામાં આવ્યું છે

• પરીક્ષણ નામ (લોગ માટે)

• પરીક્ષણ મોડ્યુલ જોડો

• અમે કહીએ છીએ કે ક્લિકહાઉસને ચોક્કસ વિનંતી માટે કયું પરિણામ આપવું જોઈએ ch1

• અમે તપાસીએ છીએ કે ઉલ્લેખિત સંદેશ સાથે ચેતવણી (ભૂલ) rps-min-limit કૉલ કરવામાં આવી હતી

• તપાસો કે rps-min-limit ચેતવણી અક્ષમ નથી (સફળતા)

બેલર્ટર બીજું શું કરી શકે?

હું સૌથી મહત્વપૂર્ણ, મારા મતે, બેલેર્ટર કુશળતાને સ્પર્શ કરવાનો પ્રયાસ કરીશ. તમે સત્તાવાર વેબસાઇટ પર બધું વિગતવાર જોઈ શકો છો https://balerter.com

• પાસેથી ડેટા મેળવો

  • ક્લિકહાઉસ

  • પોસ્ટગ્રેસ

  • MySQL

  • પ્રોમિથિયસ

  • લોકી

• ચેનલોને સૂચનાઓ મોકલો

  • શાંત

  • ટેલિગ્રામ

  • syslog

  • સૂચિત કરો (તમારા કમ્પ્યુટર પર UI સૂચનાઓ)

  • ઇમેઇલ

  • મતભેદ

• તમારા ડેટાના આધારે ગ્રાફ બનાવો, S3 સુસંગત સ્ટોરેજ પર છબી અપલોડ કરો અને તેને સૂચનાઓ સાથે જોડો (ચિત્રો સાથે ઉદાહરણ)

• તમને સ્ક્રિપ્ટો વચ્ચે ડેટાનું વિનિમય કરવાની મંજૂરી આપે છે - વૈશ્વિક કી/મૂલ્ય સંગ્રહ

• લુઆમાં તમારી પોતાની લાઇબ્રેરીઓ લખો અને તેનો ઉપયોગ સ્ક્રિપ્ટમાં કરો (ડિફૉલ્ટ રૂપે, લુઆ લાઇબ્રેરીઓ json, csv સાથે કામ કરવા માટે પૂરી પાડવામાં આવે છે)

• તમારી સ્ક્રિપ્ટ્સમાંથી HTTP વિનંતીઓ મોકલો (અને અલબત્ત, પ્રતિસાદો પ્રાપ્ત કરો)

• API પ્રદાન કરે છે (અમે ઈચ્છીએ છીએ તેટલું કાર્યાત્મક નથી)

• પ્રોમિથિયસ ફોર્મેટમાં મેટ્રિક્સ નિકાસ કરે છે

તમે બીજું શું કરવા સક્ષમ બનવા માંગો છો?

તે પહેલાથી જ સ્પષ્ટ છે કે વપરાશકર્તાઓ અને અમે સિન્ટેક્સનો ઉપયોગ કરીને સ્ક્રિપ્ટના લોન્ચને નિયંત્રિત કરવાની ક્ષમતા ઇચ્છીએ છીએ ક્રોન. આ વર્ઝન v1.0.0 પહેલા કરવામાં આવશે

હું વધુ ડેટા સ્ત્રોતો અને સૂચના વિતરણ ચેનલોને સમર્થન આપવા માંગુ છું. ઉદાહરણ તરીકે, કોઈ ચોક્કસપણે MongoDB ચૂકી જશે. કેટલાક માટે સ્થિતિસ્થાપક શોધ. તમારા મોબાઇલ ફોન પર SMS મોકલો અને/અથવા કૉલ કરો. અમે ફક્ત ફાઇલોમાંથી જ નહીં, પણ, ઉદાહરણ તરીકે, ડેટાબેઝમાંથી પણ સ્ક્રિપ્ટો પ્રાપ્ત કરવા સક્ષમ બનવા માંગીએ છીએ. અંતે, અમે પ્રોજેક્ટ માટે વધુ વપરાશકર્તા મૈત્રીપૂર્ણ વેબસાઇટ અને વધુ સારા દસ્તાવેજો ઇચ્છીએ છીએ.

કોઈને હંમેશા કંઈક ખૂટે છે) અહીં અમે પ્રાથમિકતાઓને યોગ્ય રીતે સેટ કરવા માટે સમુદાયની વિનંતી પર આધાર રાખીએ છીએ. અને દરેક વસ્તુને સમજવા માટે સમુદાયની મદદ માટે

અંતમા

અમે ઉપયોગ કરીએ છીએ બેલેર્ટર મારી પાસે તે છેલ્લા ઘણા સમયથી છે. ડઝનબંધ સ્ક્રિપ્ટો આપણી માનસિક શાંતિનું રક્ષણ કરે છે. હું આશા રાખું છું કે આ કાર્ય બીજા કોઈને ઉપયોગી થશે.

અને તમારા અંક અને પીઆર સાથે સ્વાગત છે.

સોર્સ: www.habr.com